欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

SPXY樣本集劃分:聯(lián)合距離、KS對(duì)比與評(píng)估避坑指南

SPXY樣本集劃分:聯(lián)合距離、KS對(duì)比與評(píng)估避坑指南 簡(jiǎn)介面向近紅外光譜建模與機(jī)器學(xué)習(xí)入門的樣本集劃分實(shí)踐材料聚焦SPXY樣本劃分法及其與蒙特卡羅交叉驗(yàn)證結(jié)合時(shí)的模型優(yōu)化思路適合需要處理訓(xùn)練集、驗(yàn)證集與測(cè)試集劃分并評(píng)估模型泛化能力的高年級(jí)本科生、研究生和算法初學(xué)者。壓縮包共4個(gè)文件約291KB以3個(gè)MATLAB腳本和1份PDF文獻(xiàn)為主腳本覆蓋SPXY劃分、隨機(jī)劃分與KS檢驗(yàn)等環(huán)節(jié)文獻(xiàn)結(jié)合橘葉中橙皮苷含量測(cè)定案例說(shuō)明光譜數(shù)據(jù)預(yù)處理、樣本選擇及交叉驗(yàn)證的完整流程。已有1827人學(xué)習(xí)反映該主題在光譜定量分析與模型驗(yàn)證中關(guān)注度較高。讀者可據(jù)此理解SPXY如何兼顧特征空間與濃度分布比較不同劃分策略對(duì)預(yù)測(cè)精度的影響并借助KS檢驗(yàn)判斷預(yù)測(cè)分布與真實(shí)分布的差異為參數(shù)調(diào)優(yōu)和最終評(píng)估提供可復(fù)用的腳本與實(shí)驗(yàn)參照。1. 一份「自己出題自己考」的成績(jī)單樣本集劃分到底在分什么小時(shí)候都干過(guò)這種事把練習(xí)冊(cè)的答案抄一遍再把同一套題當(dāng)考試做分?jǐn)?shù)當(dāng)然漂亮可換一套題就原形畢露。模型也是這個(gè)毛病——喂給它見過(guò)的樣本它答得又快又準(zhǔn)真正要看的是它面對(duì)沒見過(guò)的樣本還能不能站住。樣本集劃分要解決的正是這個(gè)問(wèn)題把有限的樣本切成幾份一份用來(lái)“學(xué)”一份藏起來(lái)“考”。SPXY 是其中比較講究的一種做法全稱叫“基于 X 與 Y 聯(lián)合距離的樣本集劃分”。名字唬人說(shuō)白了它只是在決定“哪些樣本去當(dāng)練習(xí)題、哪些去當(dāng)考卷”時(shí)比隨機(jī)抓鬮多考慮了一件事——樣本的標(biāo)簽值也得分布均勻。搞懂它你才能判斷自己那份模型成績(jī)單到底是真本事還是背答案。2. 為什么不能隨手一劃KS 與 SPXY 差在「看不看 Y」這一刀很多人第一次做劃分直接train_test_split一下比例 8:2跑完指標(biāo) 0.98開心得不行。等換一批新樣本進(jìn)來(lái)誤差翻了三倍才發(fā)現(xiàn)當(dāng)初那份成績(jī)單是摻了水的。問(wèn)題往往不在模型而在“分”這一步就已經(jīng)埋下了雷。2.1 隨機(jī)劃分翻車的三個(gè)典型場(chǎng)景第一個(gè)場(chǎng)景是濃度斷層。一批樣本的參考值集中在中間某個(gè)窄區(qū)間只有零星幾個(gè)落在兩端。隨機(jī)切 20% 做測(cè)試集很可能低端那幾個(gè)樣本一個(gè)都沒被抽中于是模型在低濃度段的表現(xiàn)完全無(wú)從驗(yàn)證。指標(biāo)好看是因?yàn)榭季砝飰焊鶝]有難題。第二個(gè)場(chǎng)景是批次漂移。樣本按時(shí)間順序采集儀器上午和下午的狀態(tài)有細(xì)微差別。如果直接按順序切前 80% 訓(xùn)練、后 20% 測(cè)試測(cè)試集就整段落在“下午”測(cè)出來(lái)的其實(shí)是跨批次泛化能力。這未必是錯(cuò)但你得清楚自己在測(cè)什么而不是把結(jié)果當(dāng)成“模型精度”四個(gè)字貼到報(bào)告上。第三個(gè)場(chǎng)景是平行樣泄漏。同一樣品測(cè)了三次或者為了擴(kuò)樣本量做了輕微擾動(dòng)這些“親戚樣本”被隨機(jī)分到不同集合里。測(cè)試集里坐著一堆訓(xùn)練集的近親指標(biāo)自然虛高。這類翻車最隱蔽因?yàn)榱鞒躺厦恳徊蕉己弦?guī)只有把樣本的來(lái)源捋一遍才會(huì)發(fā)現(xiàn)。隨機(jī)劃分的問(wèn)題在于它不保證任何事。它只保證每個(gè)樣本有固定概率落進(jìn)某一側(cè)至于落完之后兩邊的分布像不像它不管。樣本量上千、分布本身就均勻的時(shí)候這種“不管”影響不大樣本量只有一百出頭、標(biāo)簽范圍又拉得很開的時(shí)候一次不走運(yùn)的隨機(jī)就足以讓整篇結(jié)論作廢。2.2 KS 方法只看 X 距離的均勻撒點(diǎn)KS 全稱 Kennard-Stone比 SPXY 早出現(xiàn)很多年思路樸素得很樣本在特征空間里鋪得越開模型見到的情況就越全。它只關(guān)心 X也就是光譜、圖像特征、工藝參數(shù)這一側(cè)。做法是這樣的先算出所有樣本兩兩之間的 X 距離挑出距離最遠(yuǎn)的那一對(duì)作為種子然后每一輪對(duì)每個(gè)還沒入選的樣本算出它到“已選集合”里所有樣本的距離取其中最小的那個(gè)再?gòu)乃泻蜻x里挑出這個(gè)最小值最大的樣本加入已選集合。重復(fù)到訓(xùn)練集湊夠數(shù)為止。這套“最大最小距離”的邏輯效果是讓選出來(lái)的樣本彼此盡量疏遠(yuǎn)像往一張地圖上撒點(diǎn)先撒最邊上的再往中間填空。好處是確定性算法沒有隨機(jī)種子同一個(gè)數(shù)據(jù)集跑一百遍結(jié)果都一樣可復(fù)現(xiàn)壞處是它眼里只有 X。如果兩個(gè)樣本在 X 空間離得很遠(yuǎn)但標(biāo)簽值幾乎相同KS 會(huì)優(yōu)先把它們都選進(jìn)訓(xùn)練集白白占掉名額。更麻煩的情況是 X 和 Y 的關(guān)系不單調(diào)。比如某段光譜區(qū)間對(duì)濃度不敏感兩個(gè)濃度差很多的樣本光譜卻長(zhǎng)得幾乎一樣。KS 看不出這個(gè)差別它按 X 距離挑很可能把一整段濃度區(qū)間的樣本全漏掉。等到測(cè)試集里冒出一個(gè)該區(qū)間的樣本模型只能靠外推硬猜。2.3 SPXY 方法把 Y 也拉進(jìn)距離公式SPXY 的關(guān)鍵改動(dòng)只有一處距離不再只算 X而是把 Y 也算一份各自歸一化后相加。$$d_{xy}(p,q)\frac{d_x(p,q)}{\max d_x}\frac{d_y(p,q)}{\max d_y}$$$d_x$ 是樣本 $p$、$q$ 在特征矩陣上的歐氏距離$d_y$ 是它們?cè)趨⒖贾瞪系臍W氏距離。單變量時(shí) $d_y$ 就是兩個(gè)數(shù)值之差的絕對(duì)值多變量時(shí)按歐氏距離算。分母上的兩個(gè) $\max$ 是整套方法里最容易被忽略、也最不能省的一步。原始光譜的強(qiáng)度動(dòng)輒幾千算出來(lái)的 $d_x$ 可能是幾百上千而參考值如果是含量百分比$d_y$ 可能只有零點(diǎn)幾。不歸一化直接相加Y 的貢獻(xiàn)會(huì)被 X 徹底淹沒SPXY 就退化成了 KS。除以各自的最大值之后兩項(xiàng)都被壓進(jìn) 0 到 1 之間權(quán)重才對(duì)等。換個(gè)說(shuō)法KS 挑樣本時(shí)只問(wèn)“這兩個(gè)樣本長(zhǎng)得像不像”SPXY 還要多問(wèn)一句“它們的答案差多少”。長(zhǎng)得不像、答案又差得多的樣本SPXY 會(huì)優(yōu)先送進(jìn)訓(xùn)練集因?yàn)檫@類樣本信息量最大。2.4 一個(gè)公式看清兩者的分水嶺把三種常見做法擺在一起差別一目了然。維度隨機(jī)劃分KSSPXY挑選依據(jù)無(wú)純概率僅 X 距離X 與 Y 聯(lián)合距離結(jié)果是否可復(fù)現(xiàn)需固定隨機(jī)種子是是訓(xùn)練集覆蓋 Y 范圍不保證不保證更容易覆蓋兩端額外計(jì)算開銷幾乎沒有一個(gè) X 距離矩陣兩個(gè)距離矩陣適合的場(chǎng)面樣本量大、分布本身均勻只關(guān)心特征空間覆蓋樣本少、參考值跨度大分水嶺就在中間那一列。KS 和 SPXY 的流程幾乎一模一樣代碼改一行就能互換但選出來(lái)的樣本集合可能差得很遠(yuǎn)。判斷該用哪個(gè)看的不是哪個(gè)名字更時(shí)髦而是你的 Y 分布是不是均勻——Y 本來(lái)就均勻KS 夠用Y 有明顯斷層或者兩端樣本稀少SPXY 那額外一份距離就算得值。3. SPXY 走一遍從距離矩陣到挑出第一批樣本公式看懂了落到操作上還有幾步容易踩坑的地方。這一章把流程拆開走一遍順便說(shuō)清楚每個(gè)參數(shù)改動(dòng)的后果。3.1 第一步永遠(yuǎn)是看數(shù)據(jù)不是算距離拿到一份樣本集先做三件事看樣本量、看 Y 的分布、看有沒有重復(fù)或近似重復(fù)的樣本。這三件事決定了后面所有參數(shù)怎么定。樣本量決定測(cè)試集能有多大??偣?60 個(gè)樣本按 8:2 分測(cè)試集只有 12 個(gè)任何一個(gè)樣本預(yù)測(cè)偏了指標(biāo)就大幅波動(dòng)。這時(shí)候更合理的比例是 2:1 甚至 3:1把測(cè)試集撐到 20 個(gè)以上。樣本量上千比例反倒可以放松因?yàn)榻y(tǒng)計(jì)量本身已經(jīng)穩(wěn)了。Y 的分布決定要不要用 SPXY。把 Y 畫成直方圖如果兩端稀稀拉拉、中間堆成一座山隨機(jī)劃分和 KS 都有較大概率漏掉兩端SPXY 值得上。如果 Y 近似均勻分布那 KS 省一半計(jì)算量效果差不多。重復(fù)樣本要在劃分之前處理掉。同一樣品測(cè)三次這三條記錄必須分進(jìn)同一個(gè)集合否則就是前面說(shuō)的泄漏。做法很簡(jiǎn)單給每個(gè)原始樣品編一個(gè)組號(hào)劃分時(shí)按組號(hào)分而不是按行號(hào)分。還有一步常被跳過(guò)X 的各列要不要標(biāo)準(zhǔn)化。如果特征里既有光譜強(qiáng)度量級(jí)上千又有溫度量級(jí)幾十直接算歐氏距離光譜會(huì)獨(dú)占話語(yǔ)權(quán)溫度等于沒參與。用歐氏距離之前把 X 各列標(biāo)準(zhǔn)化到同一量級(jí)這個(gè)距離才有意義。SPXY 公式里那層歸一化解決的是“X 距離和 Y 距離之間”的量級(jí)差解決不了“X 內(nèi)部各列之間”的量級(jí)差兩件事不能混。3.2 選出起手的那一對(duì)最遠(yuǎn)樣本算完聯(lián)合距離矩陣第一步是在整個(gè)矩陣?yán)镎易畲笾?。這一對(duì)樣本就是種子直接進(jìn)訓(xùn)練集。為什么從最遠(yuǎn)的一對(duì)開始因?yàn)樗鼈兇砹诉@個(gè)數(shù)據(jù)集能覆蓋的邊界。先把邊界占住后面的樣本才是在邊界之間填空整個(gè)訓(xùn)練集的覆蓋范圍從第一輪就定下了基調(diào)。這里有個(gè)細(xì)節(jié)如果數(shù)據(jù)里存在測(cè)量錯(cuò)誤的離群樣本它很可能就是那個(gè)“最遠(yuǎn)點(diǎn)”第一輪就被選進(jìn)訓(xùn)練集。這是好事還是壞事取決于那個(gè)離群點(diǎn)是真實(shí)極端情況還是錄入錯(cuò)誤。真實(shí)極端情況該進(jìn)訓(xùn)練集模型得見過(guò)錄入錯(cuò)誤進(jìn)了訓(xùn)練集等于往模型嘴里塞了一口沙子。所以劃分之前先看一眼最遠(yuǎn)的那幾對(duì)是誰(shuí)值不值得信任這一步花不了五分鐘能省掉后面很多返工。3.3 逐輪挑選誰(shuí)離已選集合最遠(yuǎn)就選誰(shuí)種子定下之后進(jìn)入循環(huán)。每一輪做三件事算每個(gè)未選樣本到已選集合里所有樣本的距離、取最小值、在所有候選里挑這個(gè)最小值最大的那個(gè)。注意這里是“最小距離的最大值”不是“最大距離的最大值”。區(qū)別在于如果只看最大距離一個(gè)離某個(gè)已選樣本很遠(yuǎn)的樣本會(huì)被優(yōu)先選中但它可能同時(shí)離另一個(gè)已選樣本很近選進(jìn)來(lái)等于在密集區(qū)又添了一個(gè)點(diǎn)沒有增加覆蓋。取最小距離意思是“這個(gè)候選離已選集合最近的那個(gè)點(diǎn)有多遠(yuǎn)”這個(gè)值越大說(shuō)明它離整個(gè)已選集合越疏遠(yuǎn)選它才真正擴(kuò)大覆蓋。這個(gè)機(jī)制帶來(lái)一個(gè)隱含后果值得單獨(dú)說(shuō)一句SPXY 選出的順序本質(zhì)上是“從邊緣往中間收”。排在前面的樣本偏邊緣越往后越靠近密集區(qū)。如果你的訓(xùn)練集取前 70%測(cè)試集就是剩下的 30%那測(cè)試集大概率集中在密集區(qū)幾乎不含極端樣本。這意味著模型的外推能力沒有被檢驗(yàn)測(cè)出來(lái)的指標(biāo)反映的是內(nèi)插表現(xiàn)。這不是 SPXY 的缺陷是它的特性但你得知道。如果業(yè)務(wù)上關(guān)心的是“超出歷史范圍的新樣本能不能預(yù)測(cè)準(zhǔn)”那測(cè)試集里必須人為保留幾個(gè)極端樣本不能全交給算法去分。做法是從兩端各留一兩個(gè)樣本不參與劃分直接塞進(jìn)測(cè)試集剩下的再走 SPXY。這一手有點(diǎn)土但管用。3.4 完整實(shí)現(xiàn)與參數(shù)逐個(gè)拆開看下面這段是標(biāo)準(zhǔn)實(shí)現(xiàn)把前面幾節(jié)的邏輯落成代碼。import numpy as np def spxy(X, y, n_train): 基于 X-Y 聯(lián)合距離的樣本集劃分 X: 特征矩陣形狀 (n_samples, n_features) y: 參考值形狀 (n_samples,) 或 (n_samples, n_targets) n_train: 訓(xùn)練集樣本數(shù) 返回: (訓(xùn)練集下標(biāo), 測(cè)試集下標(biāo)) X np.asarray(X, dtypefloat) y np.asarray(y, dtypefloat).reshape(len(X), -1) # 1. 分別計(jì)算 X 空間與 Y 空間的歐氏距離矩陣 dx np.sqrt(((X[:, None, :] - X[None, :, :]) ** 2).sum(axis-1)) dy np.sqrt(((y[:, None, :] - y[None, :, :]) ** 2).sum(axis-1)) # 2. 各自除以本矩陣最大值壓到 0~1讓兩項(xiàng)權(quán)重對(duì)等 d dx / dx.max() dy / dy.max() n len(X) # 3. 起手聯(lián)合距離最大的一對(duì)樣本 i, j np.unravel_index(np.argmax(d), d.shape) selected [int(i), int(j)] # 4. 循環(huán)每輪選“到已選集合最小距離”最大的候選 while len(selected) n_train: rest [k for k in range(n) if k not in selected] # d[np.ix_(rest, selected)] 取出候選行 × 已選列的子矩陣 min_to_selected d[np.ix_(rest, selected)].min(axis1) selected.append(rest[int(np.argmax(min_to_selected))]) test [k for k in range(n) if k not in selected] return np.array(selected), np.array(test)幾個(gè)參數(shù)的含義和改動(dòng)后果n_train決定訓(xùn)練集大小。它和測(cè)試集大小是互補(bǔ)的設(shè)成 0.7 倍樣本數(shù)就是 7:3。改這個(gè)值會(huì)直接改變訓(xùn)練集覆蓋的疏密程度n_train 越小訓(xùn)練集越偏向邊緣模型見到的中段樣本越少。dy的算法對(duì)單變量和多變量不一樣。單變量時(shí)用絕對(duì)差也行多變量時(shí)必須用歐氏距離否則多個(gè)目標(biāo)值之間沒法合成一個(gè)標(biāo)量。如果你的 y 是多列輸出reshape(len(X), -1)那一步不能省否則廣播會(huì)出錯(cuò)。dx.max()和dy.max()這兩個(gè)分母如果某個(gè)矩陣全零所有樣本特征完全一致會(huì)除零報(bào)錯(cuò)。實(shí)際數(shù)據(jù)里很難出現(xiàn)但做小規(guī)模試驗(yàn)時(shí)可能碰到加個(gè)判斷更穩(wěn)妥。整個(gè)函數(shù)返回的是下標(biāo)不是數(shù)據(jù)本身。這個(gè)設(shè)計(jì)是為了讓原始數(shù)據(jù)保持不動(dòng)訓(xùn)練集和測(cè)試集在需要的時(shí)候按下標(biāo)取避免復(fù)制帶來(lái)的內(nèi)存開銷也避免改動(dòng)順序后對(duì)不上號(hào)。跑完之后別急著建模先把兩組樣本的 Y 值分布畫出來(lái)對(duì)比一眼。理想狀態(tài)下訓(xùn)練集的 Y 覆蓋整個(gè)范圍測(cè)試集的 Y 落在范圍之內(nèi)且分布均勻。如果測(cè)試集某一段完全空白說(shuō)明劃分還有問(wèn)題得回去調(diào) n_train 或者手動(dòng)補(bǔ)樣本。4. 易混與誤區(qū)SPXY、KS、交叉驗(yàn)證別攪成一鍋這三個(gè)詞經(jīng)常在同一段話里出現(xiàn)功能卻完全不在一個(gè)層面上。把它們分開比記住公式更重要。4.1 誤區(qū)一SPXY 是一種建模算法易混點(diǎn)名字里沒有“劃分”二字看起來(lái)和 PLS、SVR 這些算法是并列關(guān)系很多資料里也確實(shí)把它們排在一起講。為什么混SPXY 總是出現(xiàn)在建模流程的上下文里前后文都在聊模型精度很容易被當(dāng)成“又一種建模方法”。怎么區(qū)分看它的輸出。SPXY 輸出的是兩組下標(biāo)——訓(xùn)練集是哪幾行、測(cè)試集是哪幾行它不產(chǎn)生任何預(yù)測(cè)值也不擬合任何參數(shù)。建模算法吃的是數(shù)據(jù)吐的是預(yù)測(cè)SPXY 吃的是數(shù)據(jù)吐的是“怎么分”。它跑完之后模型還是那個(gè)模型只是喂進(jìn)去的樣本換了。所以 SPXY 的效果不能單獨(dú)評(píng)價(jià)只能通過(guò)“用了它之后模型在測(cè)試集上的表現(xiàn)”間接體現(xiàn)。順帶提一句拼寫。有些資料里寫成sxpy其實(shí)就是 SPXY 的手誤兩者指的是同一個(gè)東西。搜索的時(shí)候兩種寫法都試一下能多找到一些材料。4.2 誤區(qū)二KS 和 SPXY 只差一個(gè)字母可以隨便換易混點(diǎn)流程一模一樣代碼只改一行距離矩陣結(jié)果看起來(lái)也差不多于是很多人默認(rèn)兩者等價(jià)。為什么混在 Y 分布本來(lái)就均勻的數(shù)據(jù)集上兩者的選擇結(jié)果確實(shí)高度重合跑出來(lái)的模型精度也相差無(wú)幾。這時(shí)候換不換指標(biāo)上看不出來(lái)。怎么區(qū)分把兩份劃分結(jié)果各自的 Y 直方圖拉出來(lái)比。如果 Y 分布均勻兩者幾乎一樣用 KS 更省事如果 Y 有兩端稀薄、中間堆積的情況SPXY 的訓(xùn)練集會(huì)明顯更均衡地覆蓋兩端KS 則可能在中段扎堆。判斷標(biāo)準(zhǔn)不在算法本身在你的數(shù)據(jù)長(zhǎng)什么樣。另外KS 的計(jì)算量少一個(gè)距離矩陣樣本上萬(wàn)時(shí)這個(gè)差別不小值得納入考慮。4.3 誤區(qū)三做了交叉驗(yàn)證就不用留測(cè)試集易混點(diǎn)k 折交叉驗(yàn)證給出的分?jǐn)?shù)看起來(lái)很嚴(yán)謹(jǐn)每一折都當(dāng)過(guò)驗(yàn)證集感覺已經(jīng)把泛化能力測(cè)透了。為什么混兩者測(cè)的都是“模型在沒見過(guò)的樣本上表現(xiàn)如何”聽起來(lái)像同一件事的兩種叫法。怎么區(qū)分交叉驗(yàn)證發(fā)生在訓(xùn)練集內(nèi)部用途是選超參數(shù)、比模型結(jié)構(gòu)測(cè)試集是完全不參與任何決策的一批樣本只在最后用一次。區(qū)別在“用了幾次”。交叉驗(yàn)證會(huì)被反復(fù)用——試十組參數(shù)每組都跑一遍交叉驗(yàn)證取分?jǐn)?shù)最高的那組。這個(gè)過(guò)程里驗(yàn)證集的信息已經(jīng)通過(guò)你的選擇滲進(jìn)了模型。測(cè)試集如果也這么用它就不再是獨(dú)立的考卷而是變成了第二個(gè)驗(yàn)證集指標(biāo)會(huì)越來(lái)越樂(lè)觀越來(lái)越不真實(shí)。正確的順序是訓(xùn)練集內(nèi)部做交叉驗(yàn)證定參數(shù)模型定死之后測(cè)試集只跑一次跑完就封存。4.4 誤區(qū)四測(cè)試集指標(biāo)不好看調(diào)一調(diào)再測(cè)一次易混點(diǎn)第一次測(cè)出來(lái)誤差偏大回去改了改特征再測(cè)一遍好多了于是認(rèn)為模型進(jìn)步了。為什么混這個(gè)操作在流程上完全跑得通代碼也不會(huì)報(bào)錯(cuò)結(jié)果也確實(shí)變好了看不出問(wèn)題。怎么區(qū)分問(wèn)題在于“變好”的原因。你看到了測(cè)試集的結(jié)果然后根據(jù)這個(gè)結(jié)果改了模型——這一步之后測(cè)試集的信息就已經(jīng)泄漏進(jìn)模型了。第二次的指標(biāo)不再是無(wú)偏估計(jì)而是“針對(duì)這份考卷調(diào)過(guò)參”的成績(jī)。改一次還能接受改十次之后那個(gè)指標(biāo)基本沒什么參考價(jià)值了。真要做這一步就把原測(cè)試集降級(jí)成驗(yàn)證集另外再劃一批從來(lái)沒碰過(guò)的樣本當(dāng)新測(cè)試集。樣本不夠劃怎么辦那就別調(diào)接受第一次的結(jié)果或者承認(rèn)這份數(shù)據(jù)的結(jié)論強(qiáng)度有限。4.5 誤區(qū)五比例照著 7:3 抄就不會(huì)錯(cuò)易混點(diǎn)到處都在寫 7:3、8:2仿佛這是某種標(biāo)準(zhǔn)答案。為什么混大多數(shù)教程的示例數(shù)據(jù)樣本量都在幾百上千那個(gè)量級(jí)下比例怎么定影響都不大于是比例被當(dāng)成了固定參數(shù)。怎么區(qū)分比例的本質(zhì)是“測(cè)試集要裝多少個(gè)樣本才夠支撐一個(gè)可信的判斷”。樣本量 50 的時(shí)候7:3 意味著測(cè)試集 15 個(gè)一個(gè)樣本預(yù)測(cè)偏了指標(biāo)就跳一大截這時(shí)候 2:1 讓測(cè)試集到 17 個(gè)也沒什么本質(zhì)改善反而訓(xùn)練集更緊張。樣本量 50 這種小數(shù)據(jù)集更實(shí)際的做法是留一交叉驗(yàn)證或者重復(fù)多次隨機(jī)劃分取平均而不是糾結(jié)一個(gè)固定比例。反過(guò)來(lái)樣本量上萬(wàn)的時(shí)候測(cè)試集留 10% 就是一千個(gè)統(tǒng)計(jì)上足夠穩(wěn)多留純屬浪費(fèi)訓(xùn)練數(shù)據(jù)。比例跟著樣本量和任務(wù)難度走不跟著教程走。5. 什么時(shí)候該用 SPXY什么時(shí)候該收手把前面幾章的意思收成一句話SPXY 是解決“Y 分布不均、樣本又少”這個(gè)組合問(wèn)題的工具脫離這個(gè)前提它的優(yōu)勢(shì)就不成立。下面這張表可以直接對(duì)著自己的數(shù)據(jù)比。你的情況建議做法樣本量一百出頭參考值跨度大、兩端樣本稀少SPXY訓(xùn)練集比例放寬到 2:1 或 3:1樣本量幾百以上Y 分布本身均勻KS 或隨機(jī)劃分都行省計(jì)算樣本按批次、按時(shí)間采集存在系統(tǒng)漂移先按批次分層再在每層內(nèi)部用 SPXY存在同一樣品的多次測(cè)量按樣品分組劃分絕不按行號(hào)隨機(jī)關(guān)心的是超出歷史范圍的外推能力SPXY 劃分后手動(dòng)從兩端各抽樣本補(bǔ)進(jìn)測(cè)試集樣本量不到 30別硬分測(cè)試集用留一交叉驗(yàn)證Y 是多列輸出且量綱差異大先對(duì)每列 y 標(biāo)準(zhǔn)化再算聯(lián)合距離需要收手的場(chǎng)面主要有兩類。一類是數(shù)據(jù)量本來(lái)就撐不起劃分。樣本二三十個(gè)硬切出 20% 做測(cè)試集測(cè)試集只有五六個(gè)樣本任何一個(gè)偏了誤差就翻倍。這時(shí)候與其糾結(jié) SPXY 還是 KS不如老老實(shí)實(shí)做留一交叉驗(yàn)證把每一個(gè)樣本都當(dāng)過(guò)一次驗(yàn)證樣本雖然計(jì)算量大一點(diǎn)但結(jié)論穩(wěn)得多。劃分方法的價(jià)值建立在“測(cè)試集樣本數(shù)夠多”這個(gè)前提上前提不成立方法再精巧也白搭。另一類是 Y 分布本身很均勻。這時(shí)候 SPXY 多算的那份 Y 距離幾乎不會(huì)改變選擇結(jié)果付出的計(jì)算成本換不來(lái)對(duì)應(yīng)的收益。樣本量上千的時(shí)候兩個(gè)距離矩陣的內(nèi)存占用也不是小數(shù)目。用 KS甚至用固定種子的隨機(jī)劃分效果一樣代碼還短。還有一個(gè)需要主動(dòng)放棄的場(chǎng)景如果數(shù)據(jù)里存在大量測(cè)量錯(cuò)誤、標(biāo)簽可疑的樣本SPXY 會(huì)把它們優(yōu)先挑出來(lái)塞進(jìn)訓(xùn)練集——因?yàn)樗暨x的依據(jù)就是“最遠(yuǎn)”而錯(cuò)誤樣本往往正好最遠(yuǎn)。這時(shí)候該先做的是數(shù)據(jù)清洗而不是換劃分方法。劃分解決的是“怎么分得公平”解決不了“數(shù)據(jù)本身靠不靠得住”。具體到一個(gè)例子某次做近紅外光譜的定量模型樣本 80 個(gè)參考值從低到高分三段中間一段樣本占了七成。第一次用隨機(jī)劃分測(cè)試集里一個(gè)高值樣本都沒有交叉驗(yàn)證的分?jǐn)?shù)漂亮但模型一上真實(shí)樣品就系統(tǒng)性偏低。換成 SPXY 之后訓(xùn)練集的 Y 覆蓋了全段測(cè)試集也落在合理范圍內(nèi)指標(biāo)從 0.98 掉到了 0.87——數(shù)字變難看了但這次的 0.87 是可信的。如果當(dāng)時(shí)只看那個(gè) 0.98 就交付后面踩的坑只會(huì)更深。從那以后我每次分完樣本集都會(huì)先把兩組樣本的 Y 分布畫出來(lái)并排比一眼確認(rèn)測(cè)試集不是一片空白才動(dòng)手建模。這個(gè)動(dòng)作花不了兩分鐘能擋掉大部分看起來(lái)很美的假成績(jī)。希望幫到你。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
天天色综网| 久久性爰视频这里只有精品| 少妇高潮呻吟A片免费看软件| 婷婷丁香激情五月| 久久性操| 黄色短视频在线观看| 久热 91| 日本本土色网第一区| 99色视频| 九月丁香婷婷综合| 激情六月婷婷| 精品成人a v无码内射| 色五月激情网| 国产精女同一区二区三区久| 久久曰曰| 综合久久婷婷| 五月丁香好婷婷A片网| 五月婷免费视频久久久| 1024日韩| 亚洲AV综合在线观看 | 亚洲视频一区| 久久99网| 在线播放成人网站| 伊人网啪啪| 深爱激情九九五月天 | 色五月婷婷大| 99成人精品六| 激情av| 人妻在线观看视频| 婷婷五月丁香青青草在线| 中文在线成人| 香焦网五月天| 人妻少妇色综合| 黄色99视频| 久久99免费视频| 午夜少妇在线观看视频| 五月婷婷六月丁香| 五月天激情网站| 国产精品久久久海的味道| 男人综合网| 五月天堂婷婷| 9色视频在线| 久久月天堂| 婷婷五月激情综合| 国产精品人人做人人爽人人添| 色婷婷五月在线| 九九热视频思思| 狼人久草| 伊人五月天综合网| 99久久久| 色色色色区| 亚洲国产黄色电影| 97AV人人插人人操| 五月天天综合| 亚洲综合99| 色老久久| 九九色色网| 97婷婷在线视频| aaaa久久| 久久99精品久久久久久三级| 91九色熟女| 94干大香蕉| 日韩AC在线免费观看| 99国产精品白浆在线观看免费| 色婷婷电影| 妻久久人久久| 亚洲免费观看高清完整版AV线| 有哪些A片网站| 六月丁香婷婷网| 欧美性猛交 XXXX 乱大交| 久久六月天| 99久精品视频| 五月色网| 九九九九九九热| 青青草免费公开视频| 国产67194| 99无码| 婷婷五月成人| 久久综合9| 久久五月丁香综合| 九九热re99re6在线精品| 美女精品一级不卡视频| 婷婷丁香五月亚洲欧美| 狠狠色五月激情| 亚洲精品久久久久久久久久吃药| 国产视频色色色色色色色| 久久精品99国产精品日本| 无码人妻少妇色欲AV一区二区 | 色婷婷丁香综合中文字幕| 色情五月天。| 六月婷婷深深爱| 久久AAAA片一区二区| 五月丁香六月婷婷中合网| 另类综合激情| 色婷婷狠狠| 日本丁香五月| 996er热| www.狠狠操| 丁香网五月天| 日韩久久色| jiujiu热在线视频| 色婷婷久综合久久一本国产AV| 激情婷婷人妻| 婷婷五月天网址| 97超碰综合| 中字幕视频在线永久在线观看免费| 嫩草AV久久伊人妇女超级A| 桃色五月婷婷| 国产激情综合五月久久| 草婷婷在线| 涩婷婷五月天| 日日夜夜天天| 情一色一乱一伦一91A| 大香蕉五月丁香| 亚洲激情高潮| 超碰在线人妻| 天天干天天干天天干| 思思干精品| 伊人色综合久久久| 激情综合网,婷婷五月天| 五月丁香成人视频| 中文字幕乱码亚洲精品一区| 久操福利| 十月色综合| 99操逼视频| 日韩av一区二区在线/日产精品久久久 | 色 色 色综合com| 久久三级视频| 9热在线视频| 99亚色色色| 可以免费看的av网站| 色婷婷大香蕉| 91色五月在线观看| 蜘蛛女免费观看完整版高清电影| 色五月亚洲| 亚洲乱码日产精品BD| 五月婷婷日| 伊人超碰| www.黄色片-久久成人国产精品在线播放-999AV| 91久久久久久| 亚洲超碰在线| 九九婷婷综合| 中文不卡av| 91精品久久久久久| 综合XX网| 操日本99| 人人操超踫| 丁香激情久久| 99综合熟女| 深爱婷婷色| 另类专区在线| 99热线观看9| 久99久热只有精品国产99| 久久激情五月| 五月天婷婷香蕉狠狠超碰综合| 婷婷丁香亚洲五月天| www.99日本| 夜色热久| 六月婷婷亚洲| yazhoujiqingav| 丁香综合婷婷开心激情网| 九九婷婷网五月天| 婷婷激情97| 精品九九视频| 日99网站| 伍月婷丁香花全集| 日韩欧美成人一区二区三区| 亚洲色情激情丁香五月| 强辱丰满人妻HD中文字幕| 久久久久婷婷| 婷婷精品视频| 欧美极品999| 99超级碰碰| 日韩成人电泉AV| 欧美综合五月丁香五月天| 五月天婷婷综合网| 思思久久精品视频| 激情文学综合婷婷五月天丁香花| 天天日天天摸天天| ..真实国产乱子伦对白在线_欧| 91狠狠综合久久久| 婷婷网五月天| 天天摸天天爽| 香蕉久日夜| 婷婷玉月丁香五月在线视频| 激情综合色五月丁香| 亚洲天堂AV免费片| 综合色在线| 夜夜爽日日躁| www.婷婷五月.com| 久久久无码精品成人A片小说| 色婷婷五月天无码视频| 视频一二区| 97精品自拍视频| 婷婷丁香六月天| 五月停停色| 播四月婷婷六月丁香| 99精品九九| 俺也高清无码高清视频| 色婷婷AⅤ| 五月花免费视频| 91热手机在线| 五月婷婷激情五月| 激情五月五月婷婷| 久久婷综| 天天综合天综合| 婷婷色片| 五月天社区婷婷| 停停五月色宗合| 亚洲激情色色| 亚州激情在线视频| 亚洲小视频免费播放| #NAME?| 一本久道综合色婷婷五月| 草榴视频网| 粉嫩AV久久一区二区三区| 丁香五月天婷婷激情| 国产一级婬片毛片| 综合五月丁香久久| 中文无码婷婷| 97狠狠色| 久久丝丝热| 天天日夜夜欢| 人人综合久| 激情五月丁香五月色| 五月天丁香| 夜夜天天天天天干天天爽| 激情婷婷丁香五月天| 欧美三级A做爰在线观看| 久久五月天激情| 六月综合在线| 五月婷婷婷婷婷婷艺术| 五月天激情影院| 婷婷五月在线| 淫视馆av三区| 丁香五月成人| 欧美人妻一区二区| 久久婷婷五月综合色奶水99啪| 丁香六月激| 在线观看欧美| 97婷婷狠狠| 激情综合婷婷久久| 热婷婷av| 97超碰99热99| 综合激情在线观看| 91久久色| 99热99在线| 亚洲图色五月天| 成功精品影院| 亚洲精品久久久久AV无码| 色色国产| 人妻丰满精品一区二区A片| 97久人人| 狠狠做婷婷| 色婷婷激情| 五月天伊人| 超碰9| 色吧综合网| 东京热免费视频| 六月婷婷色综合| 亚洲中文字幕av| 五月丁香综合激情网| www.99精品在线| 婷婷丁香五月天在线视频| 夜夜天天天天天干天天爽| 五月天综合| 五月综合视频| 色亭亭五月天丁香综合AV - 百度 - 百度| 99这里只有精| 激情久久久| 97久久综合网| 丁香五月色五月| 超碰9| 婷婷伊人综合中文字幕| 色五月婷婷久久大| 精品一二三区久久AAA片| 狠狠色婷婷色| 色亚洲中文| 五月久久婷婷天堂视频| 九九婷婷激情综合网| 色综合中文色综合网| 伊人婷婷色激情丁香| 婷婷综合色| 伊人五月婷婷| 青青草Avb在线| 天天噜天天爱| 99久久婷婷| 久久九九思思| 伊人婷婷青青cao| www,五月天激情| 五月香六月婷| 激情www| 久久婷婷啪啪视频| 成人五月丁香社区| Www.狠狠| 国产99久久久国产精品免费看| 婷婷六月激情综合| 婷婷国产综合| 99ri国产| 全部老头和老太XXXXX| 久久久久这里只有精品| 97婷婷狠狠久久综合9色| www.五月天色色.com| 日本五月天一页| 久久R激情| 五月丁香亚洲校园欧美| 久婷五月| 九色无码| 九月av| 九月av在线| 九九99一区| 韩日AV片| 亚洲另类视频| 丝袜激情网| 五月激情婷婷国产精品久久久久久 | 五月天激情网图片| 拍真实国产伦偷精品| 色婷婷久久综合| 性色播| 我爱宗和色| 国产成人亚洲综合A∨婷婷| 婷久久久| 久久AV电影| 久久视网36| 色都都狠狠色都都色综合色| 九九视屏| 五六月婷婷| 2017狠狠干| 天天骑天天操| 超碰日日操| 人妻久久久久久久久妻久久久久久久久| 五月天婷婷丁香| 久久婷丁香五月| 夜夜撸天天操| 青青草原99热| 五月天久久www| 在线观看玖玖资源免费观看| 婷婷五月天电影在线| 超碰在线国产9| 国产乱人偷精品人妻A片| 婷婷激情小说网| 人妻五月天激情开心网| 久草热久草在线视频| 色七色九九| 色偷偷色婷婷| 美女黄频aⅴ视频| 色情五月婷婷| 五月婷婷久草在线视频综合| 天天综合 99久久婷婷| 久久色情| 丁香五月激情无码视频| 91操在线视频| 丁香五月婷婷啪啪视频| 五月停停色色丁香| 99 色色吧| 久操热| 婷婷六月啪啪| 夜夜资源站| 狠狠干在线| 五月天婷婷爱| 五月丁香色综合| 五月五婷婷网| 99精品国产在热久久| 97在线干| 人妻av在线| 日本色色网站| www.婷婷五月| 性爱网五月天| 久久视频这里99| 色五月婷婷综合| 婷婷干五月综合在线播放| 色色五月丁香| 丰满少妇猛烈A片免费看观看| 色视五月天婷婷| 久热欧美| 操操日韩| 超爽内射| 天天综合网色欲香| 亚洲中文字幕在线观看| AV性爱在线| 超碰成人电影| 婷婷伊人中文字幕| 亚洲激情av| 一区二区三区视频| 亚洲激情婷婷| 熟女网站久久| 五月婷在线观看| 五月天狠狠色| xxxx五月| 久九九热| 欧美私人家庭影院| 六月丁香啪啪| 五月婷婷在线免费观看 | 国产精品色婷婷AV综合色色| 九色综合五月天婷五月| 婷婷成人视频| 五月丁香六月婷婷免费视频| 综合www色| 亚洲综合视频天天精品| av国产精品| 99这里都是精品6| 色五月婷婷综合| 五月丁香色色网| 国产精品色婷婷99久久精品| 五月丁香婷婷五月色| 色五月激情综合| 9有码中文| 国产成人网站在线观看| 久久婷婷色| 超碰A V在线| 色碰97| 丁香操逼| 2017人人操| www.激情五月天.com| 激情综合网,五月| 终合激情网| 亚洲99热| 久久婷.com| 久久婷婷五月天蜜桃| 久碰婷婷视频| 少妇做爰免费视看片| 五月丁香六月婷婷国产视频| \\五月天婷婷激情| 国产99热在线看| 五月婷婷婷综合网| 五月丁香婷久久| 五月丁香另类网| 秋霞少妇AV网站| 激情综合五月| 亚洲区视频| 中文字幕簧片| a色色片| 色天使色综合| 久久成人天| 婷婷五月丁香四射| 青996青| 99视频精品全部免费看| 99re在线精品视频| 9色91视频| 91久女| 大香蕉av在线| 亚洲操b| 国产亚洲精品久久久久久牛牛| 精品一二三区久久AAA片| 亚洲成人高清在线| 丁香五月天激情视频| 亚洲精品久久久久AV无码| 丁香九月综合| 人妻久久久久久| 五月激情四射网站| 五月丁香拍拍激情综合| 九热视频| 五月丁香影院| 久久新地址| 爱超碰性| A片女女女女女女BBBB| 成人做爰黄A片免费看直播室男男| 亚洲天堂婷婷丁香| 丁香五夜激情四射夜夜夜| 色婷婷狠狠18yy| 色婷婷影| 色五月激情网| 久久久思思热| 婷婷色日本| 五月婷在线| 五月天婷综合| 伊人五月天久久| 国产做爰视频免费播放| 欧美激情综合色综合啪啪五月| 日韩日比视频在线| 天天日日夜夜爽| 亚洲激情婷婷| 久久综合色五月| 免费看片在线观看| 色婷婷亚洲婷婷| 奇米四色五月天| 777久久综合视频 | 十月丁香九月婷婷综合| 色综合久久88色综合天天| 九九视频热| 天啪天啪天啪天啪| 丁香婷婷六月天| 99热这是里只有精品| 丁香六月婷婷色XXXX| 五月婷婷六月综合| 玖玖在线| 欧美五月婷婷| 激情精品久久| 国产精品国产| 一区二区免费看| 婷婷五月天无码熟女| 九九热这里| 欧美色色日韩| 天天操天天爱天天日| 色狠狠六月| 五月天另类图片| 九九激情| 99久久喉9| 久久3p| www.五月婷婷久久.com| 丁香五月人妻熟女| 综合激情五月综合激情五月激情1| 五月婷婷六月色| 九九色影院| 狠狠干综合| 亚洲永远av在线播放| 影音先锋91资源站| 激情 五月 婷婷 丁香| 九一九九黄色| 极品少妇高潮啪啪AV无码| 婷婷六月丁香五月| 激情五月综合| 99热久久日本| 大香蕉 婷婷| 激情五月天网站| 丁香五月天婷婷中文字幕| 二人电影免费版在线观看| 婷婷在线日韩综合| 四虎成人精品永久免费AV九九| 激情网婷婷婷| 婷婷射丁香| 啪精品| www.99热视频| 丁香五月1页| 777精品久无码人妻蜜桃| 九九热在线观看6| 国产VA亚洲VA96| 国产成人网站在线观看| 色就是色婷婷五月亚洲激情| 久久久久亚洲AV成人无码电影| 99五月婷| 久久狼人天堂| 亚洲精久久| 日韩在线99| 91狠狠综合久久久| 妇激情基地| 丁香五月播播| 久99久在线| 九热视频在线精品15| 国熟女视频| ri电影在线| 激情五月婷婷网在线观看| 99热精品少| 亚洲激情淫网| oVV4WIB3vFi8D| 森林影视大全,最好看的2019年视频 | 五月天婷婷丁香视频| 开心五月六月婷婷| 五月婷婷开心亚洲无| 五月天婷婷久久日| A久久| 色停停香蕉视频| 伊人日日干| 综合亚洲色色| 大香蕉人人网| 99色爱| 婷婷性爱无码视频| 国产五月视频| 亚洲第一综合| 99视频久久| 这里只有精品视频99| 婷婷,五月天,丁香,第一| 色射婷婷五月天| 大香蕉520| www.色婷婷| www.zbzhongsen.com| 天天日天天干天天爱| 色99视| 日逼免费视频 | 丁香五月影视| 天堂在线观看视频| 丁香婷婷婷五月综合色情| 亚洲色婷婷久久99精品91| 99热8在线| 亚洲AV第二区国产精品| 五月丁香婷草| 丁香香五月激情免费视频| 97人人超| 思思热在线免费视频| 丁香五月激情网| 丁香六月婷婷综合| 国产肥白大熟妇BBBB视频| 色色色色色色色色色色色色色五月天| 狠狠色97| 三十路磁力链接| 五月丁香六月婷综合成人综合| 天天做好综合色| 91天天操天天干天天射| www.wuyuetian啪啪| 91互操| 五月天色婷婷av| 日本一级特黄大片AAAAA级| 欧美成人精品A片免费一区99| 亚洲AV永久无码影院黑人 | 狠狠色 综合色区| 欧美人妻一区二区| 五月丁香黄色| rr天天操| 91人人人人人人人| 天天操天天日天天爽| 婷婷五月婷婷| 影院久久久| 激情五月婷婷伊人| 丁香五月久久| 国产一级片| 久久久精品AV| 亚洲AV无码影院| 午夜做爱影院| 7777久久亚洲中文字幕| 激情五月六月婷婷综合啪啪| 色五月五月婷婷| 婷婷丁香五月综合| www.久久久.com| 99九九玖玖| www.日本91| 狠狠色婷| 激情深爱综合网| 97超碰99热99| 国产精品色| 欧美激情中文字幕| 4438激情网| 日本一级特黄大片AAAAA级| 综合网啪| 日本99色| 久色网| 久久这里只精品66| 欧美性色A片免费免费观看的| 在线VA视频| 少妇水多A片太爽了| 亚洲五月天狠狠| 久久婷婷网址| 91操熟女| 亚洲五月婷天天操| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 综合激情视频| 人妻AV在线观看| 国外亚洲成AV人片在线观看| 日韩色情亚洲五月天婷婷| 激情五月综合久久| 99精品无码| 玖玖综合网| 亚洲电影在线观看| 久久人妻视频| 国产五月丁香在线| 久久五月婷综合网| 99色精品| 深爱五月最新网址| 成人五月丁香社区| www,超碰| 俺去也在线www色官网| 97碰碰人人| 六月丁香啪啪| 色婷婷在线视频| 久久亚洲色导航| 91色干| 成人做爰黄A片免费看直播室男男| 91精品久久久久久综合五月天| 色5月婷婷色| AV在线免费观看不卡| 粉嫩av蜜桃av蜜臀av| 色婷婷色情| 亚洲午夜av| 九色porny在线观看激情四射| 婷婷激情社区| 天天爽天天| 婷婷综合五月色播| 第四色色六月色综合| 天天操五月天| 日本操B片| 天天爽夜夜操| 99熟女| 国产精品日韩十五区| 中文字幕丰满乱孑伦无码专区| 欧美、日韩、中文、制服、人妻| 日本欧美成人片AAAA| 激情网五月| a在线观看| 免费不卡狠操美女视频网| VA国产在线综合网站| 欧美色色色| 婷婷九月丁香| 免费亚洲婷婷中文字幕| 丁香六月婷婷久久高清| 色色色97| 九月影院義母在线播放| 97伦乱| 免费一区二区三区| 人人操人人妻| 人妻中文av| 亚洲精品又粗又大又爽A片| 日欧一片内射VA在线影院| 欧美搡BBBBB摔BBBBB| 国産精品| 五月天堂色| 九九aV| 五月婷婷婷丁香播| 夜夜爽天天爽| 国产精品人成A片一区二区| 五月激情六月宗合| 亚洲亚洲人成综合网络| 久久久婷婷五月天| 去色色五月天| 婷婷久久网| 久色视频首页| 啄木鸟丝袜美女福利视频| 色丁香五月| 超级碰碰91| 六月丁香啪啪啪| 欧美成人猛片AAAAAAA| 国产精产国品一二三在观看| 91打屁股免费看| 激情久久综合网| 婷婷色播婷婷| 婷婷五月综合色中文字幕| 激情丰满熟妇五月| 五月天婷婷色综合| 久久婷婷影院| 久久久av久av久片一区二区| 久久五月天丁香| 久操婷婷| 婷婷五月天影视| 色天五月天在线观看视频| 深爱激情综合| 99人人爽| 色色无码日韩| 丁五月激情视频免费| 婷婷五月激情小说| 老妇操B| 国产丁香五月天婷婷| 色爱综合网| 国产偷人爽久久久久久老妇APP| 91免费试看| 18av天堂| 99热在线免费| 开心五月天激情网| 色综合色色色色| 亚洲综合色丁香婷婷六月| 色噜综| 久久婷婷国产| 国产毛片精品一区二区色欲黄A片| 九月av在线| 欧洲日韩一区二区三区| 久久久99视频| 91久久网站| 天天色情站| 亚洲综合视频在线| 九月丁香八月婷婷久久综合久97| 天天拍夜夜爽| AV操操操| 成人短视频在线观看| 波多野结衣AV无码Porn| 七月婷婷色香综合网| 激情涩涩网| 一区二区免费看| 99九九中文字幕视频| 女人露出p毛视频www网站| 俺去也综合| 久久性都花花世界成人免费视频 | Www.se.久久| 狠狠色综合久久| www久视频com| 激情五月婷婷色综合| 婷婷在线网| 在线观看玖玖资源免费观看| 91男同视频| 五月激情婷婷开心| 婷婷五月欧美AA片免费| 婷婷十月丁香| 天天射天天操天天干| 婷婷色五月丁香六月欧美啪| 丁香五月首页| 精品久久99码| 天天肏夜夜肏| 人妻尝试久久久久久久久久久久| 人妻无码视频网| 一级黄色尤物综合视频手机在线观看| 熟妇无码乱子成人精品| 激情九九这里只有精品| 激情骚五月| 色五月丁香婷婷| 97av在线视频| 激情五月黄色| 精品久久这里热66| 99精品在线播放| 免费黄网不卡AV| 成人色图情色成人网 www.5b5b5bcom 五月天| 99视频在线观看网址| 大香伊人久色| 可以免费观看的av网址| 伊人狠狠综合| 91碰九色| 丁香五月 无码| 99re在线这里只有精品视频首页| 色之综合网| 三男玩一女三A片| 六月丁香婷婷色综合| 激情久久综合网| 欧美日综合| 亚洲成人在线五月天| 久久久久8888| 日本久久色| 婷婷五月激情网| 亚洲99热| 97超碰人人操| 99精品偷自拍| 99精品久久久久久久婷婷| 热热久久久久久久久| 4399亚洲视频| 亚洲视频久久| 久久人妻熟女一区二区| 久久婷婷综| 婷婷五月天AV| 99精品22| 99综合99| 伊人影音无码一区二区三区| 狠狠色丁香婷婷久久综合| 欧美五月婷婷综合| 综合久久99| 99久99热| 激情五月天婷婷| 在线观看亚洲视频影院| 777.色色| 五月婷婷亚洲色视频| 婷婷五月天亚洲| 久热久操久热久草国产91| 久久久久久丁香五月| 国外亚洲成AV人片在线观看| 狠狠情色| 四月婷婷丁香| 五月丁香六月婷综合成人综合| 五月丁香婷色| 另类激情中文| 久久99免费视屏| 夜夜操,天天撸| 激情久久五月天| 91紱請| 久久大香蕉视频| 婷婷五月天堂| 中国女人做爰A片| 亚洲成人电影在线免费观看| 日本三级日本三级三级人妇四虎| 久久久婷丁香五月天激情综合| AV伊人青草丁香六月| 激情爱爱网站| 色色色色色色五月婷婷| www99精品| 五月丁香亚洲婷婷| www.主妇. com| 狠狠干五码| 狠狠五月综合在线| 一二三区视频韩国| 91se在线观看| 9热网站| 六月 丁香 视频| 人人操AV| 婷婷综合性爱网| 99久久久| 欧美成人无码一区二区三区| 九九99九九精品免费| 另类五月激情| 熟女91九色| 成人精品一区二区三区四区五区| 婷婷亚洲丁香五月| 天天爱天天做天天操| 婷婷五月伦理网站| 五月婷婷69| 91蜜桃婷婷狠狠久久综合9色| 欧亚成人A片一区二区| 中文字幕免费高清电视剧| 中文字幕天天干| 色婷婷电影| 欧美综合激情五月天| 亚洲成人免费在线| 色婷婷在线视频| 九九99男女视频在线观看| 操操操www.com| 五月婷婷亚洲色视频| 国产精品99久久久久久久女警| 色五月婷婷激情基地| 久久996re热这里只有精品无码| 婷婷六月丁香欧美视频在线| 久久婷五月天| 五月婷婷七月丁香| 99色在线观看| 欧美性爱五月天| 天天干,噜噜色,狠狠色| 六月丁香开心婷婷欧美| 日韩操人| 99久视频| 99免费视频网| sisi热国产| 久99热在线观看| 色婷婷香蕉| 日日操日日干| 成人在线日韩| 任你爽在线视频| 综合性爱网| 丁香五月天之婷婷影院| 激情五月色婷婷| 久久婷婷综合五月| 欧美日韩成人| 五月丁香性| 狠狠第四色| 久久久久久欧美精品se一二三四| 五月婷精品| 五月天激情啪啪| 99啪啪| 玖玖综合网| 久久 这里只有精品1| 可以直接看的AV| WwW色婷婷| 91久久九九| 丁香婷婷色| 婷婷五月天美女21p| 开心五月婷婷综合在线精品素人| 久久这里有精品视频| 激情五月婷婷色色| www,com,五月色色| 久久婷视频| 久久性视频| 干婷婷五月天| 丁香五月天堂| 亚洲 精品 综合 精品| 久爱综合| 俺去也综合| 色婷婷AV在线| 五月丁香六月在线| 激情WWW| 97人人干。| 操操碰| 99免费热在线精品| 婷婷五月丁香激情| 99视频网址| 激情五月丁香色婷婷| 91视频久久久| 亚洲另类在线观看| 狠狠狠狠狠操| 无码动漫av| 狠狠综合久久| 就去涩涩丁香五月天| 亚洲AV成人一区二区在线观看| 能看的av网站| 久久久天堂国产精品女人| 久久婷综| 亚洲精品第一国产综合亚AV | 伊人啪啪网| 69热在线| 99久在线精品| 婷婷九月色| 99热国内精品| 丁香婷婷久久| 思思99精品视频在线观看| 丁香五月综合高清在线| 激情综合网址| 亚洲色情一区二区三区四区| 欧美99热| 六月婷伊人| 五月丁香黄色视频| 人人综合久| 五月丁香影院| 97超级碰人人| 丁香五月网站| 色婷视频| 香蕉久久国产AV一区二区| 国产婷婷色综合AV蜜臀AV | 九九色插| 国产97色在线 | 日韩| 五月丁香婷婷综合| 丁香五月区| 国产无人区大片| 天天射影院| 色婷婷五月影院| 99这里只有精品视频在线| 人妻VideOssS人妻| 色人久久| 久久五月天丁香| 日日日日做夜夜夜夜无码| 婷婷视频在线| 日本三级日本三级99| 日韩AV一区二区三区| 成人 在线 日韩| 色播五月丁香| 久久综合婷婷| 精品网站:999WWW| 影音先锋激情网| 丁香九月久久| 亚洲最大成人综合网720P| 免费在线a| 99热这里只有精品13| 国产精品国产| 99五丁香月| 9九热视频| 大香蕉久久婷婷精品综合| 九九九激情网| 九九99视频精品| 色综合综合色| 97超碰欧美中文字幕| 婷婷激情蜜桃玖玖丁香| 欧美国产一区二区三区| 日本二级毛片二级毛片| 婷婷丁香射射| 色婷婷五月天综合网| 天天影院色| 日韩色久| 欧美一级操逼视频| 亚洲亚洲人成综合网络| 99爱视频精品在线观看| 久久视频婷婷| www.色欲丁香婷婷| 激情都市五月天| 婷婷五月天成人| 伊人色综合影院视频| 五月婷婷 激情五月| 亚洲在线免费成人| 超碰免费大香蕉| 五月婷婷69| 亚洲天堂碰碰婷婷| 亚洲色色色色| 国产毛片精品一区二区色欲黄A片| 五月丁香六月激情综合| 婷婷性爱无码视频| 少妇高潮A片无套内谢麻豆传| 九九热这里有精品视频| 99热最新| 狠狠大香婷婷爱| 婷婷97| 97碰碰电影| 开心五月婷婷婷美女| 日本97人人| 婷婷色情五月| 激情五月天色色色| 久久丝丝热| 色婷婷五月天偷拍| 26uuu国自产精品| 99操| 在线观看熟女少妇| 国产成人+综合亚洲+天堂| 国产熟女大叫受不了| 色婷婷在线视频| 六月婷婷久久| 爱婷婷五月| 奇米影视在线视频| 骚货艹网站视频| 中文字幕av久久爽| 婷婷成人视频| www婷婷| av在线观看免费| 综合久久久| 5月丁香啪啪啪| 日本美女天天日天天爽| 大伊香蕉精品视频在线| 五月丁香六月激情啪| 色婷丁香91| 五月香六月婷| 色婷婷91| 五月天色社区| 五月激情综合激情五月| 91re色综合视频| www夜夜操comwww| 欧美天堂久久| 五月亭亭开心网| 狠狠干激情五月| 伊人激情网| 天天操夜夜操| 538午夜激情| 玖玖色综合色| 亚洲色热| 亚洲成片在线观看| 99久久网站| 欧美综合在线五月天色婷婷| 五月婷婷亚洲综合在线| 大香蕉天堂| 久久综合网免费视频| 人人操婷婷| 五月丁香精品| 婷婷色色播五月天| 久久久久人妻网址| 婷婷97狠狠干| 大香蕉久久久久久久久| 激情婷婷五月天| 婷婷激情五月天天天开心| 婷婷五月丁香五月基地| 天天摸.天天mo| 色天使色综合| 新97人人上人人| 伊人网欧美在线男人天堂五月丁香| 日本一级一级一级一级| 五月色俺婷婷| 久久综合爱| 九色99视频| 天天干天天干天天干天天干天| 天天摸天天舔在线视频| 色情婷婷| 婷婷 色 丁香 夜| 99小视频在线| 97偷拍在线视频| 91精品综合久久久久久五月丁香| 九九这里都是精品| 青草性爱视频| 日韩在线观看亚洲| 丰满少妇猛烈A片免费看观看| 五月天婷婷久久| 丁香五月首页| 亚洲无码猫咪| 99色视频| 日夜夜天天| www.99色| 亚洲色综久久五月| 色色欧美色色色| 99热这里只有精品2| 五月婷婷六月丁香综合在线| 性 色 婷婷| 婷婷色色欧美| 色婷婷视频| 久久婷婷六月综合综合| 色区域网站视频| 五月丁香怕怕综合| 丁香九色不卡aaa| 婷婷五月情| 久久久性爱视频| 深爱激情综合网| 激情综合区| 日韩一级网站| 日本三级日本黄色| 艳妇野外情欲放荡HD| 第五色婷婷| 天天色噜| 婷婷爱五月天人人爱| 五月婷婷这里都是精品| 久久免费操| 欧美操我| 色色色com| 九九色色| 99ri精品| 开心激情婷婷| AAA久久久| 天天射影院| 26uuu亚洲| 久热网在线视频| 人人爽人人爽人人爽人人爽| 五月丁香美女| 五月婷婷免费在线| 日韩另类| 九九香蕉网| 日韩欧洲亚洲| 五月色亭丁香| 亚洲成av人影院| 中文字幕成人| 三级三久久线久久99久目本WW| 这里只有精品久久| 99热精品无码| 五月婷婷九| 九九热只有精品| 五月天黄色激情小说| 玖玖精品视频99| 5月丁香综合网| 天天色天天搡| 六月丁香视频网站| 丁香午月AV中文字幕| 久9视频| 色婷婷久久综| 色久九| 女人露出p毛视频www网站| 久久久久9| 日韩99视频| www.99在线| 激情综合啪啪啪| 26UUU欧美激情一区二区| 成人版视频在线观看| 久久大香蕉伊人| 久热超碰91| 99视频自拍| 99热热九九| 色五月xxx| 色婷婷五月天激情综合| 国产中文亚洲欧美日韩性交| 99r久久这里只有精品| 丁香六月婷婷色播| 色婷婷五月综合| 五月丁香六月婷婷综合免| 丁香婷婷六月激情综合| av性爱在线| 色五月婷婷在线观看| 久久五月婷婷丁香| 狠狠综合网| 国产精品99久久久久久久女警| 清纯唯美 激情四射| 99玖玖视频| 激情久久综合| aaaaa黄色| 色噜噜婷婷| 超碰在线观看9| 在线99热| 婷婷伊人久久无码色五月| 亚洲亚洲人成综合网络| 天堂在线婷婷| 另类视频在线| 色五月激情综合| 丁香五月在线播放| 99人人干| 久久成人亚洲欧美电影| 色色丁香五月天社区| 久久五月天精品视频| 五月丁香天堂网婷婷| 日本色婷婷| 婷婷爱五月天| 激情五月天。| 91色综合| 久热A| 狠狠色色| 超碰在线观看成人视| 色噜噜狠狠色综合伊人| 五月丁香六月婷婷综合| 玖玖热视频| 色九九九综合| 婷婷色五月开心五月| 色九网| 日日狠狠久久偷偷四色综合免费| 91九色精品女同系列| 中字幕视频在线永久在线观看免费 | 婷婷五月天中文字幕| oumeisesewang| 色五月激情网| 五月香婷婷| 大香蕉福利导航| 99这里只有精品视频免费| 色五月激情五月天| 色婷婷狠狠爱| 奇米影视在线视频| 婷久看人爽| 午夜激情综合| 五月婷婷综合在线视频| 婷婷激情五月天网站| 五月婷色激情五月| 超碰免费人妻| 超碰无码老师| 五月天色婷伊人| 超碰在线观看9| 色情网综合| 日日色五月天| 亚洲色网络| WWW色色色COm| 婷婷五月丁香五月| 九月性爱网| 九九精品99久久久| 日本va网站| 操一区| 噜噜色五月| 日日综合网| 日韩美一级毛卡片| 99精品爱| 国产精产国品一二三在观看| 六月婷婷激情图片| 九九亚洲| 亚洲婷婷综合视频| 激情婷婷五月天在线观看| 久久九九99| 99精品在线观看| 日日夜夜狠狠| 久久精99| 五月丁香婷庭在线| 2018夜夜草| 色五月婷婷大| 欧美性猛交99久久久久99按摩| 日日噜人人人做人| 丁香六月激情|