欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

PSO-Kmeans聚類優(yōu)化:居民用電負(fù)荷曲線用戶行為分析實(shí)戰(zhàn)

PSO-Kmeans聚類優(yōu)化:居民用電負(fù)荷曲線用戶行為分析實(shí)戰(zhàn) 做居民用電行為分析最頭疼的往往不是算法本身而是數(shù)據(jù)背后的規(guī)律看不到。你拿到的是一堆負(fù)荷曲線怎么告訴別人這小區(qū)里哪些用戶是上班族、哪些是全天在家、哪些可能偷偷搞生產(chǎn)經(jīng)營(yíng)聚類就是個(gè)好幫手。但真去用Kmeans的時(shí)候那個(gè)初始質(zhì)心的選擇問(wèn)題足夠讓人抓狂——同一個(gè)數(shù)據(jù)集換一次初始值跑出來(lái)就是另一種分法。我這段時(shí)間正好在Matlab里把粒子群算法和Kmeans拼在一起拿居民用電負(fù)荷數(shù)據(jù)做行為分析整個(gè)過(guò)程踩了不少坑也把關(guān)鍵細(xì)節(jié)理清楚了。這篇就把PSO-Kmeans聚類的思路、代碼實(shí)現(xiàn)和實(shí)戰(zhàn)經(jīng)驗(yàn)完整走一遍適合正在做負(fù)荷分析、用戶畫像或者剛接觸聚類優(yōu)化的朋友參考。1. 為什么居民用電分析繞不開聚類優(yōu)化1.1 負(fù)荷曲線背后的用戶行為差異先看數(shù)據(jù)。居民用戶的用電行為最直觀的載體就是日負(fù)荷曲線。把一天24小時(shí)或者96個(gè)采樣點(diǎn)的功率值串聯(lián)起來(lái)就構(gòu)成一條代表用戶當(dāng)天用電習(xí)慣的曲線。正常來(lái)說(shuō)上班族用戶的工作日負(fù)荷曲線會(huì)出現(xiàn)明顯的兩峰一谷——早高峰可能是7點(diǎn)到9點(diǎn)晚高峰是18點(diǎn)到22點(diǎn)白天和夜晚則相對(duì)平緩而老人家庭、待業(yè)在家的用戶白天的負(fù)荷往往比上班族高出一截曲線形態(tài)更平穩(wěn)家里有電動(dòng)汽車的用戶可能晚上會(huì)出現(xiàn)一個(gè)持續(xù)的充電功率平臺(tái)。不同行為模式之間的差異在負(fù)荷曲線上是有跡可循的。但問(wèn)題在于一個(gè)城市或一個(gè)臺(tái)區(qū)往往有幾千幾萬(wàn)個(gè)用戶靠人工去看曲線分門別類根本不現(xiàn)實(shí)。聚類就是用來(lái)做這件事的——它能把相似形態(tài)的負(fù)荷曲線自動(dòng)歸到同一組讓有相同用電習(xí)慣的用戶自然聚到一起。只要聚類方法靠譜分出來(lái)的每一類用戶你都能倒推出一套對(duì)應(yīng)的行為描述這對(duì)接下來(lái)的需求響應(yīng)、分時(shí)電價(jià)策略、臺(tái)區(qū)負(fù)荷預(yù)測(cè)都特別有價(jià)值。1.2 標(biāo)準(zhǔn)Kmeans的天然短板在負(fù)荷聚類這個(gè)場(chǎng)景里最常用的是Kmeans算法。原理其實(shí)特別直白先在樣本空間里挑K個(gè)點(diǎn)當(dāng)初始質(zhì)心然后把每個(gè)樣本分配給離它最近的質(zhì)心分完以后再重新計(jì)算每個(gè)簇的中心點(diǎn)反復(fù)迭代直到結(jié)果穩(wěn)定。整個(gè)過(guò)程就是分配—更新—再分配—再更新很符合直覺(jué)代碼也簡(jiǎn)單。但它有個(gè)致命問(wèn)題——Kmeans對(duì)初始質(zhì)心的選擇極度敏感。初始質(zhì)心選偏了迭代多少次都可能停留在某個(gè)局部最優(yōu)解上。比如有兩類用戶一類是白天用電一類是晚上用電如果你的初始質(zhì)心都落在白天那堆數(shù)據(jù)里晚上那一類很可能被硬生生拆散最終聚類結(jié)果從業(yè)務(wù)角度怎么解釋都不合理。而且Kmeans迭代過(guò)程中一旦某個(gè)簇被分配為空算法還會(huì)出現(xiàn)質(zhì)心失效的異常情況。實(shí)際處理負(fù)荷數(shù)據(jù)時(shí)樣本量大、曲線波動(dòng)多Kmeans跑出來(lái)的結(jié)果經(jīng)常不穩(wěn)定同一份數(shù)據(jù)跑十次能有七八種分法。這就是我要引入粒子群算法的直接原因。粒子群優(yōu)化算法PSO是一種全局尋優(yōu)方法它的思路是模擬鳥群覓食——每個(gè)粒子代表一個(gè)候選解靠個(gè)體經(jīng)驗(yàn)個(gè)體最優(yōu)和群體經(jīng)驗(yàn)全局最優(yōu)不斷調(diào)整自己的位置逐步逼近全局最優(yōu)解。把PSO和Kmeans結(jié)合簡(jiǎn)單說(shuō)就是用PSO先把Kmeans的初始質(zhì)心這個(gè)老大難問(wèn)題解決掉讓聚類從一個(gè)好的起點(diǎn)開始跑。這樣既保留了Kmeans計(jì)算快的優(yōu)點(diǎn)又顯著降低了落入局部最優(yōu)的概率。下面我把這套組合方案的原理和代碼一步步拆開講。2. PSO和Kmeans是怎么配合的2.1 先從Kmeans的目標(biāo)說(shuō)起要理解PSO-Kmeans的配合邏輯得先把Kmeans在做什么看透。Kmeans本質(zhì)上是求解一個(gè)最小化問(wèn)題把n個(gè)樣本分到K個(gè)簇中讓所有樣本到所屬簇質(zhì)心的距離平方和也就是簇內(nèi)誤差平方和SSE最小。公式寫出來(lái)是[ SSE \sum_{i1}^{K}\sum_{x \in C_i} |x - \mu_i|^2 ]其中(C_i)是第i個(gè)簇(\mu_i)是這個(gè)簇的質(zhì)心。聚類結(jié)果好不好直接看SSE——SSE越小說(shuō)明簇內(nèi)樣本越緊湊同類用戶之間的相似度越高。但Kmeans采用的是一種貪心式的交替優(yōu)化先固定質(zhì)心分配樣本再固定分配更新質(zhì)心。這種方式求解速度快卻很依賴初始質(zhì)心給得怎么樣。初始質(zhì)心離全局最優(yōu)解太遠(yuǎn)交替優(yōu)化就可能收斂到SSE較大的局部最優(yōu)解。怎么跳出這個(gè)坑我在項(xiàng)目里采用的思路是把Kmeans的初始質(zhì)心當(dāng)作粒子群優(yōu)化算法中的決策變量用PSO去全局搜索一組好的質(zhì)心位置再把搜到的結(jié)果作為Kmeans的起點(diǎn)。換句話說(shuō)Kmeans負(fù)責(zé)局部精修PSO負(fù)責(zé)全局尋優(yōu)兩者分工合作。這里有一個(gè)技術(shù)路線選擇問(wèn)題。有些人會(huì)把PSO直接作為聚類工具來(lái)用讓每個(gè)樣本以一定概率歸屬某個(gè)簇最后按隸屬度劃分。這個(gè)方案在高維負(fù)荷數(shù)據(jù)上計(jì)算量非常大而且解釋性不如Kmeans清晰。我更推薦的是把PSO定位成質(zhì)心初始化優(yōu)化器后面照常跟Kmeans迭代。實(shí)測(cè)下來(lái)這種方式既快又穩(wěn)結(jié)果還好用業(yè)務(wù)語(yǔ)言解釋。2.2 粒子編碼方式與適應(yīng)度函數(shù)設(shè)計(jì)要把PSO用于優(yōu)化Kmeans的初始質(zhì)心第一個(gè)要解決的是粒子怎么編碼的問(wèn)題。假設(shè)負(fù)荷數(shù)據(jù)經(jīng)過(guò)特征處理后每個(gè)樣本是一個(gè)D維向量最簡(jiǎn)單的做法就是24維對(duì)應(yīng)24小時(shí)負(fù)荷值我實(shí)驗(yàn)里也用過(guò)96維對(duì)應(yīng)96個(gè)采樣點(diǎn)聚類數(shù)設(shè)為K。那么一組完整的初始質(zhì)心就是K個(gè)D維向量把它們按順序拼接成一個(gè)長(zhǎng)向量這個(gè)長(zhǎng)向量就是一個(gè)粒子的位置。粒子的維度就是(K \times D)。舉個(gè)例子K4D24粒子維度就是96。在Matlab里我習(xí)慣用矩陣來(lái)組織蜂群——一個(gè)粒子用一個(gè)(K \times D)的矩陣表示整個(gè)粒子群用一個(gè)三維數(shù)組存儲(chǔ)這樣在計(jì)算距離時(shí)可以避免頻繁的reshape操作。適應(yīng)度函數(shù)的設(shè)計(jì)是整個(gè)算法的靈魂。PSO的迭代方向完全靠適應(yīng)度值牽引。我這里使用的適應(yīng)度函數(shù)就是Kmeans的SSE[ fitness(x) \sum_{j1}^{K}\sum_{x_n \in C_j} |x_n - z_j|^2 ]其中(z_j)是粒子的第j個(gè)質(zhì)心位置。計(jì)算時(shí)先按每個(gè)樣本到各質(zhì)心的歐氏距離做最近鄰分配再累加出SSE。適應(yīng)度值越小代表該粒子對(duì)應(yīng)的質(zhì)心組合越好。有人會(huì)問(wèn)PSO時(shí)代里的好到底是全局最優(yōu)還是局部最優(yōu)這正是PSO的價(jià)值所在——粒子群中的每個(gè)粒子都在自己的位置附近搜索同時(shí)向全局最優(yōu)粒子靠攏這種信息共享機(jī)制讓種群不容易卡死在單個(gè)局部區(qū)域。配合慣性權(quán)重和學(xué)習(xí)因子PSO能在搜索前期保持較強(qiáng)的全局探索能力后期逐漸收斂到精細(xì)區(qū)域。這比隨機(jī)撒點(diǎn)選初始質(zhì)心要靠譜得多。2.3 算法流程梳理我實(shí)際跑通的PSO-Kmeans完整流程如下讀取并預(yù)處理負(fù)荷數(shù)據(jù)缺失值處理、歸一化。確定聚類數(shù)K用輪廓系數(shù)或肘部法則輔助判斷后面細(xì)說(shuō)。初始化粒子群體。每個(gè)粒子的位置為K個(gè)隨機(jī)的樣本點(diǎn)速度為全零或小隨機(jī)數(shù)。對(duì)每個(gè)粒子計(jì)算適應(yīng)度SSE更新個(gè)體最優(yōu)pbest和群體最優(yōu)gbest。按標(biāo)準(zhǔn)PSO公式更新粒子速度和位置。速度更新公式為 [ v_{t1} w \cdot v_t c_1 r_1 (pbest - x_t) c_2 r_2 (gbest - x_t) ] 位置更新為簡(jiǎn)單累加。這里w是慣性權(quán)重c1和c2是學(xué)習(xí)因子r1和r2是0到1之間的隨機(jī)數(shù)。檢查是否達(dá)到最大迭代次數(shù)否則返回第4步。將gbest還原為(K \times D)的質(zhì)心矩陣作為Kmeans的初始質(zhì)心。執(zhí)行標(biāo)準(zhǔn)Kmeans迭代分配樣本、更新質(zhì)心直到收斂。輸出聚類標(biāo)簽、質(zhì)心、SSE并做可視化。整個(gè)流程里PSO階段其實(shí)相當(dāng)于在做全局熱身Kmeans階段在做局部沖刺。我用這個(gè)方案對(duì)比過(guò)純Kmeans在典型居民負(fù)荷數(shù)據(jù)上SSE能降低15%到25%而且多次運(yùn)行的結(jié)果穩(wěn)定性明顯提升。3. Matlab代碼實(shí)現(xiàn)與參數(shù)配置3.1 數(shù)據(jù)準(zhǔn)備與特征構(gòu)建代碼實(shí)現(xiàn)上我建議先把特征工程做成獨(dú)立腳本不要把數(shù)據(jù)處理和聚類算法混在一起。原始用電數(shù)據(jù)通常是這樣的每15分鐘一個(gè)采樣點(diǎn)一天96個(gè)點(diǎn)連續(xù)若干天。但如果直接用96維做聚類維度較高PSO粒子搜索空間的體積會(huì)指數(shù)增長(zhǎng)不僅慢而且效果不一定好。我的做法是折中做日負(fù)荷曲線特征壓縮。常用的壓縮方式有幾種我列個(gè)表對(duì)比一下特征方案維度優(yōu)點(diǎn)缺點(diǎn)24小時(shí)均值負(fù)荷24直觀、計(jì)算快能保留峰谷形態(tài)丟失了日內(nèi)變化細(xì)節(jié)96點(diǎn)原始負(fù)荷96信息完整維度高PSO粒子維度過(guò)大易過(guò)擬合峰谷特征峰時(shí)負(fù)荷、谷時(shí)負(fù)荷、峰谷差、日用電量等5-8業(yè)務(wù)解釋性強(qiáng)維度低需要按當(dāng)?shù)胤骞葧r(shí)段定義有一定主觀性統(tǒng)計(jì)特征均值、方差、峰度、偏度、最大負(fù)荷時(shí)間5-8壓縮程度高形態(tài)信息流失多我在項(xiàng)目里最終選的是24小時(shí)均值負(fù)荷幾個(gè)統(tǒng)計(jì)特征的組合總維度約28。折中的原因有兩個(gè)一是24小時(shí)曲線能讓聚類結(jié)果直接畫圖解釋生成工作族居家型這種標(biāo)簽二是維度控制在30以內(nèi)PSO搜索效率高很多。作為補(bǔ)充我也做了96維的對(duì)照實(shí)驗(yàn)后面在問(wèn)題排查部分會(huì)講這個(gè)方案踩了什么坑。數(shù)據(jù)清洗這一步很關(guān)鍵。居民負(fù)荷數(shù)據(jù)里常見(jiàn)的問(wèn)題是采集終端偶爾掉線導(dǎo)致整天數(shù)據(jù)是0或者個(gè)別時(shí)段出現(xiàn)異常尖峰。我的處理規(guī)則是連續(xù)3小時(shí)以上全為0的用戶直接剔除非零時(shí)段中超過(guò)99.5%分位的數(shù)值視為異常尖峰用前后時(shí)刻的均值替換。這些規(guī)則比單純用是否大于某閾值判斷更魯棒。歸一化也要特別注意。如果不做歸一化用電量大的用戶比如冬夏開空調(diào)日電量幾十度甚至上百度會(huì)在歐氏距離計(jì)算中占據(jù)絕對(duì)主導(dǎo)聚類結(jié)果基本就變成了按用電量分等級(jí)而不是按行為模式分類。我的做法是按特征列做Z-score標(biāo)準(zhǔn)化也就是每列減去均值再除以標(biāo)準(zhǔn)差這樣每個(gè)特征對(duì)距離的貢獻(xiàn)平等。在Matlab里一行代碼就能搞定data_norm zscore(data_raw);處理完以后記得保存一份標(biāo)準(zhǔn)化參數(shù)后面做新用戶分類或者畫原尺度曲線時(shí)要用。3.2 PSO-Kmeans主程序編寫主程序我分了三個(gè)函數(shù)塊粒子初始化、適應(yīng)度計(jì)算、PSO迭代主循環(huán)。這種模塊化寫法方便調(diào)試也便于替換不同的適應(yīng)度函數(shù)或數(shù)據(jù)集。先看粒子初始化% 輸入data為標(biāo)準(zhǔn)化后的樣本矩陣(nxD)K為聚類數(shù)N為種群規(guī)模 % 輸出particle為(N, K, D)的三維數(shù)組 n size(data, 1); D size(data, 2); particle zeros(N, K, D); velocity zeros(N, K, D); for i 1:N idx randperm(n, K); % 隨機(jī)選K個(gè)樣本作為初始質(zhì)心 particle(i, :, :) data(idx, :); velocity(i, :, :) 0.02 * randn(K, D); end初始化方式選擇隨機(jī)取樣本點(diǎn)而不是在整個(gè)搜索空間隨機(jī)撒點(diǎn)。原因是負(fù)荷數(shù)據(jù)做完Z-score標(biāo)準(zhǔn)化后雖然有少數(shù)離群點(diǎn)但絕大多數(shù)樣本都集中在可行區(qū)域內(nèi)。從樣本中選初始質(zhì)心相當(dāng)于一開始就沒(méi)有偏離合理區(qū)域能明顯加快收斂。這個(gè)細(xì)節(jié)我建議一定保留。適應(yīng)度函數(shù)我單獨(dú)寫核心邏輯如下function fitness calcFitness(data, particle_i, K) n size(data, 1); distMat zeros(n, K); for j 1:K centroid squeeze(particle_i(j, :)); diff data - centroid; % n x D distMat(:, j) sqrt(sum(diff.^2, 2)); end [~, assign] min(distMat, [], 2); fitness 0; for j 1:K clusterData data(assign j, :); if ~isempty(clusterData) centroid mean(clusterData, 1); fitness fitness sum(sum((clusterData - centroid).^2, 2)); end end end注意這里我在適應(yīng)度計(jì)算中不是用粒子自帶質(zhì)心算SSE而是按分配結(jié)果重新計(jì)算實(shí)際質(zhì)心再算SSE。為什么不直接用粒子里的質(zhì)心因?yàn)榱W釉赑SO迭代中可能移動(dòng)到遠(yuǎn)離任何樣本的位置用空簇質(zhì)心算距離會(huì)產(chǎn)生虛低的SSE誤導(dǎo)搜索方向。重新計(jì)算簇質(zhì)心相當(dāng)于做了局部投影適應(yīng)度值更真實(shí)。這個(gè)細(xì)節(jié)是我調(diào)試過(guò)程中對(duì)比了幾種方案后確定的效果確實(shí)更穩(wěn)。主迭代循環(huán)采用標(biāo)準(zhǔn)的PSO公式慣性權(quán)重w隨迭代次數(shù)線性遞減maxIter 50; N 30; K 4; c1 1.5; c2 1.5; wMax 0.9; wMin 0.4; pbestScore inf(N, 1); pbestParticle particle; gbestScore inf; gbestParticle squeeze(particle(1, :, :)); for t 1:maxIter w wMax - (wMax - wMin) * t / maxIter; for i 1:N fitness calcFitness(data, squeeze(particle(i, :, :)), K); if fitness pbestScore(i) pbestScore(i) fitness; pbestParticle(i, :, :) particle(i, :, :); end if fitness gbestScore gbestScore fitness; gbestParticle squeeze(particle(i, :, :)); end end for i 1:N r1 rand(K, D); r2 rand(K, D); velocity(i, :, :) w * velocity(i, :, :) ... c1 * r1 .* (squeeze(pbestParticle(i, :, :)) - squeeze(particle(i, :, :))) ... c2 * r2 .* (gbestParticle - squeeze(particle(i, :, :))); particle(i, :, :) particle(i, :, :) velocity(i, :, :); end end最后把gbestParticle作為初始質(zhì)心送給Kmeans[clusterIdx, centroid] kmeans(data, K, Start, gbestParticle, MaxIter, 1000);如果Matlab版本較老不支持Start參數(shù)直接傳入矩陣可以先調(diào)用類的靜態(tài)方法設(shè)置選項(xiàng)再執(zhí)行聚類或者自己手寫10-20輪Kmeans迭代。老版本其實(shí)也完全可以用我后面遇到過(guò)一次版本兼容問(wèn)題在常見(jiàn)問(wèn)題部分會(huì)展開說(shuō)明。3.3 關(guān)鍵參數(shù)的選擇依據(jù)與調(diào)試建議PSO-Kmeans涉及到的參數(shù)不少我把我實(shí)測(cè)下來(lái)比較合適的配置整理一下。種群規(guī)模N我建議取20到40之間。太小了全局搜索能力不足太大了計(jì)算量明顯上升。負(fù)荷曲線的樣本數(shù)通常在幾千到幾萬(wàn)之間每次適應(yīng)度計(jì)算都要遍歷所有樣本做距離計(jì)算N取30不算大但加上50次迭代在幾千樣本量下Matlab要跑幾十秒可以接受。如果樣本量超過(guò)5萬(wàn)建議先把訓(xùn)練集采樣到1萬(wàn)規(guī)模做粒子搜索再用跑出來(lái)的質(zhì)心初始化全量Kmeans。最大迭代次數(shù)maxIter50次通常夠了。我在調(diào)試時(shí)觀察過(guò)適應(yīng)度收斂曲線大約在30次以后下降曲線就趨于平緩50次屬于留有余量。如果追求速度25到30次也能得到差不多的結(jié)果差別在2%以內(nèi)。但首次實(shí)驗(yàn)我建議還是跑到50次先把算法的穩(wěn)定基線摸清楚。慣性權(quán)重w采用0.9到0.4線性遞減。前期w大粒子飛得快、探索范圍廣不容易陷進(jìn)局部最優(yōu)后期w小粒子精細(xì)琢磨加速收斂。這個(gè)區(qū)間是粒子群算法的經(jīng)典經(jīng)驗(yàn)值實(shí)測(cè)在聚類問(wèn)題上效果穩(wěn)定。學(xué)習(xí)因子c1和c2取1.5是比較均衡的組合。也有文獻(xiàn)推薦c1c22我試過(guò)收斂快一些但偶爾會(huì)跳過(guò)好的質(zhì)心區(qū)域。1.5加上0.9到0.4的慣性權(quán)重搭配探索和開發(fā)平衡得更舒服。如果你發(fā)現(xiàn)結(jié)果波動(dòng)大可以嘗試把c1降到1.2、c2提到1.8增強(qiáng)向群體最優(yōu)靠攏的趨勢(shì)。聚類數(shù)K用輪廓系數(shù)輔助判斷。輪廓系數(shù)綜合考慮了簇內(nèi)緊密度和簇間分離度取值范圍-1到1越大代表聚類效果越好。我在項(xiàng)目里對(duì)K2到K8分別跑PSO-Kmeans計(jì)算每個(gè)K下的平均輪廓系數(shù)選峰值對(duì)應(yīng)的K。實(shí)際業(yè)務(wù)上K取4或5比較常見(jiàn)這樣每一類用戶都有足夠明確的畫像不會(huì)分得過(guò)細(xì)而失去解釋力。4. 實(shí)驗(yàn)效果分析與聚類結(jié)果解讀4.1 與標(biāo)準(zhǔn)Kmeans的對(duì)比實(shí)驗(yàn)我拿來(lái)驗(yàn)證的數(shù)據(jù)是某市一個(gè)臺(tái)區(qū)3000戶居民用戶30天的用電記錄按前文方法清洗和特征化后得到3000×28的特征矩陣聚類目標(biāo)K4PSO種群取30迭代50次。為了控制變量標(biāo)準(zhǔn)Kmeans我用Matlab自帶的kmeans函數(shù)跑100次隨機(jī)初始化取SSE最小的一次作為參照這種多次隨機(jī)取最優(yōu)本身就是實(shí)踐中應(yīng)對(duì)Kmeans不穩(wěn)定的常見(jiàn)手段但計(jì)算開銷遠(yuǎn)高于PSO輔助。最終實(shí)驗(yàn)數(shù)據(jù)如下表方案平均SSE最優(yōu)SSE波動(dòng)范圍SSE單次運(yùn)行耗時(shí)標(biāo)準(zhǔn)Kmeans單次1846.71752.3160.40.8秒標(biāo)準(zhǔn)Kmeans100次取最優(yōu)1635.21635.2024秒PSO-Kmeans單次1658.11641.533.218秒PSO-Kmeans3次取最優(yōu)1642.01641.53.254秒幾個(gè)結(jié)論很直觀。PSO-Kmeans單次結(jié)果明顯優(yōu)于Kmeans單次SSE從1846.7降到1658.1下降了大約10.2%即使對(duì)比Kmeans跑100次取最優(yōu)的1635.2PSO-Kmeans的最優(yōu)SSE 1641.5也非常接近差了不到0.4%。更關(guān)鍵的是穩(wěn)定性——PSO-Kmeans三次運(yùn)行的最優(yōu)與最差只差33.2幾乎都在同一水平線上這說(shuō)明算法已經(jīng)不太受隨機(jī)初始化的影響而標(biāo)準(zhǔn)Kmeans單次運(yùn)行的波動(dòng)范圍高達(dá)160以上這在工程上非常致命。當(dāng)然PSO-Kmeans也不是免費(fèi)的午餐18秒的處理時(shí)間比標(biāo)準(zhǔn)Kmeans單次0.8秒慢得多。但對(duì)離線用戶畫像分析這種場(chǎng)景18秒完全可接受。4.2 聚類結(jié)果如何映射到用電行為聚類跑完只是第一步更重要的工作是把每一類用戶的行為模式描述出來(lái)。我是這樣做的拿到聚類標(biāo)簽后把原始負(fù)荷數(shù)據(jù)未標(biāo)準(zhǔn)化按類分組計(jì)算每類用戶的平均24小時(shí)負(fù)荷曲線然后結(jié)合日用電量、峰谷比等業(yè)務(wù)指標(biāo)做解讀。在我的實(shí)驗(yàn)里K4時(shí)的四類用戶畫像如下第一類工作日早、晚雙峰特別突出白天負(fù)荷很低午間有小幅回落周末曲線相對(duì)平緩。結(jié)合日用電量處于中低水平可以判定為典型的上班族家庭工作日只有早晚在家用電。第二類白天負(fù)荷較高曲線全天相對(duì)平穩(wěn)夜晚略降但不會(huì)降到很低日用電量處于中上水平。這是全天居家型用戶可能是老人、家庭主婦或自由職業(yè)者。第三類夜間和凌晨負(fù)荷異常偏高白天反而較低日用電量也比較大。結(jié)合當(dāng)?shù)仉妰r(jià)政策這類用戶很可能是有意將洗衣機(jī)、熱水器等大功率設(shè)備挪到夜間使用甚至可能有電動(dòng)汽車充電行為。第四類整體負(fù)荷水平低曲線平緩無(wú)峰長(zhǎng)時(shí)間維持很小的用電功率。這種通常是空心戶或者出租率較高的房屋用電行為不活躍。每類用戶對(duì)應(yīng)的策略建議也不一樣第一類適合宣傳分時(shí)電價(jià)引導(dǎo)削峰填谷第二類可以推薦節(jié)能設(shè)備第三類可以作為需求響應(yīng)的重點(diǎn)對(duì)象第四類則需要在臺(tái)區(qū)管理上排查是否有空置房或者表計(jì)異常。這些業(yè)務(wù)層面的延伸才是分析工作真正產(chǎn)生價(jià)值的地方。4.3 可視化技巧如何把聚類結(jié)果畫得讓業(yè)務(wù)方看懂聚類結(jié)果可視化我踩過(guò)不少坑。最開始我直接用plot畫所有用戶的原始曲線3000條線疊在一起密密麻麻根本看不出差異。后來(lái)改成每個(gè)類畫一條平均曲線標(biāo)準(zhǔn)差帶效果立刻不一樣。Matlab里用fill可以畫帶meanCurve mean(clusterData, 1); stdCurve std(clusterData, 1); t 1:24; fill([t fliplr(t)], [meanCurvestdCurve fliplr(meanCurve-stdCurve)], ... [0.9 0.9 0.9], FaceAlpha, 0.4, EdgeColor, none); hold on; plot(t, meanCurve, LineWidth, 2);標(biāo)準(zhǔn)差帶能夠直觀表達(dá)這一類用戶內(nèi)部的波動(dòng)程度。如果某類的帶很窄說(shuō)明這類用戶的負(fù)荷形態(tài)高度一致聚類可信度高帶很寬則說(shuō)明這一類內(nèi)部還存在細(xì)分可以考慮是否增加K值。另外一個(gè)可視化技巧是降維散點(diǎn)圖。高維特征矩陣不好直接展示可以用t-SNE或者PCA降到2維再按聚類標(biāo)簽著色。不過(guò)我要提醒一句降維后再看聚類是否分得開只能作為輔助參考因?yàn)榻稻S過(guò)程會(huì)扭曲真實(shí)距離關(guān)系。業(yè)務(wù)匯報(bào)時(shí)這東西很好看內(nèi)部驗(yàn)證時(shí)別太當(dāng)真。5. 常見(jiàn)問(wèn)題與排查技巧實(shí)錄5.1 粒子維度爆炸和計(jì)算速度慢怎么辦我在96維特征上嘗試過(guò)直接跑PSO-Kmeans粒子維度是(K \times 96)K取4就是384維。粒子群優(yōu)化在這么高的維度上進(jìn)行搜索效果非常差——適應(yīng)度收斂慢、粒子群容易散開、結(jié)果還不穩(wěn)定。因?yàn)楦呔S空間里距離度量變得稀疏隨機(jī)初始化的粒子互相之間差異很小PSO很難通過(guò)對(duì)比分辨哪個(gè)方向更好。解決思路有兩個(gè)。第一是在特征層面降維比如用24小時(shí)均值替代96點(diǎn)數(shù)據(jù)或者先用PCA把特征壓到15到20維再做聚類。第二是改變PSO的搜索策略比如將速度初始化設(shè)置為0限制粒子的搜索半徑但這樣又會(huì)犧牲全局搜索能力。我的建議是優(yōu)先做特征降維因?yàn)榫用褙?fù)荷數(shù)據(jù)本身的冗余度很高96個(gè)采樣點(diǎn)之間存在很強(qiáng)的時(shí)序相關(guān)性強(qiáng)行保留全部維度得不償失。計(jì)算速度問(wèn)題還有另一層來(lái)源適應(yīng)度函數(shù)里頻繁的矩陣運(yùn)算。如果循環(huán)寫的效率低幾千樣本都?jí)蜃孧atlab卡上幾分鐘。我把計(jì)算距離的代碼從for循環(huán)改成矩陣廣播后原來(lái)45秒一次迭代縮到3秒左右。Matlab效率的關(guān)鍵就是不要讓循環(huán)套循環(huán)多用維度廣播和矩陣運(yùn)算如果還想更快可以把calcFitness寫成mex函數(shù)或者用parfor并行計(jì)算粒子群中不同粒子的適應(yīng)度。5.2 陷入局部最優(yōu)的判斷與處理有一種情況PSO迭代結(jié)束后gbest對(duì)應(yīng)的質(zhì)心組其實(shí)還不是理想解Kmeans再迭代也跳不出來(lái)。怎么判斷我會(huì)把PSO-Kmeans的SSE和多次隨機(jī)初始化的Kmeans最優(yōu)SSE做對(duì)比如果前者顯著大于后者基本可以斷定PSO階段早收斂了。處理辦法有這么幾種。一是檢查粒子群初始化如果初始粒子全都擠在樣本集中的區(qū)域多樣性不夠PSO很容易早熟。初始化時(shí)除了隨機(jī)采樣樣本點(diǎn)我還會(huì)刻意加幾個(gè)遠(yuǎn)離中心的點(diǎn)。二是增大慣性權(quán)重或者調(diào)節(jié)學(xué)習(xí)因子如果w從0.9降到0.4太快個(gè)體經(jīng)驗(yàn)權(quán)重過(guò)大可以在實(shí)驗(yàn)中把wMax提到1.0wMin提到0.5讓粒子飛得更激進(jìn)一點(diǎn)。三是重啟策略如果一個(gè)粒子連續(xù)N代都沒(méi)有改進(jìn)自己的pbest給它重新初始化到隨機(jī)位置這是個(gè)簡(jiǎn)單但很有效的辦法。我再?gòu)?qiáng)調(diào)一次PSO-Kmeans不是銀彈它只能顯著降低落入局部最優(yōu)的概率不能完全消除。所以在項(xiàng)目落地時(shí)我通常跑3次PSO-Kmeans取SSE最小的那次。由于單次已經(jīng)很穩(wěn)定3次取最優(yōu)帶來(lái)的額外收益也有限更多是買個(gè)心理保險(xiǎn)。5.3 K值怎么選最合理選擇K值最常見(jiàn)的是肘部法則畫SSE隨K變化的折線圖找那個(gè)拐點(diǎn)。但實(shí)際數(shù)據(jù)里肘部往往不明顯SSE下降曲線保持平滑你很難說(shuō)出3和4哪個(gè)是肘。我用輪廓系數(shù)配合業(yè)務(wù)可解釋性一起判斷。輪廓系數(shù)對(duì)第i個(gè)樣本的定義是[ s_i \frac{b_i - a_i}{\max(a_i, b_i)} ]其中(a_i)是樣本i與同簇其他樣本的平均距離(b_i)是樣本i與最近其他簇的平均距離。把全部樣本的輪廓系數(shù)平均就是總體輪廓系數(shù)。我一般要求總體輪廓系數(shù)大于等于0.5如果某個(gè)K下只有0.3說(shuō)明簇內(nèi)不夠緊湊或者簇間分得不清楚這個(gè)K值基本不可用。但我也要說(shuō)業(yè)務(wù)可解釋性有時(shí)候比數(shù)值指標(biāo)更關(guān)鍵。比如K5時(shí)輪廓系數(shù)最高但其中有一類用戶曲線形態(tài)和另一類非常接近業(yè)務(wù)上完全無(wú)法區(qū)分和應(yīng)對(duì)那K5就沒(méi)有實(shí)際意義。我的習(xí)慣是先選2到3個(gè)候選K輪廓系數(shù)比較高的然后把這幾個(gè)K下的聚類結(jié)果拿給業(yè)務(wù)同事看問(wèn)哪一版最容易講故事通常答案很明確。5.4 版本兼容和Matlab環(huán)境的坑我在實(shí)驗(yàn)過(guò)程中遇到過(guò)一次運(yùn)行環(huán)境導(dǎo)致的怪問(wèn)題在Matlab R2021b上能正常運(yùn)行的腳本換到老版本后kmeans的Start參數(shù)傳矩陣就報(bào)錯(cuò)。Matlab每個(gè)版本對(duì)聚類函數(shù)輸入?yún)?shù)的校驗(yàn)機(jī)制不一樣如果公司或?qū)嶒?yàn)室的Matlab版本不統(tǒng)一建議不要依賴版本較新的參數(shù)特性。我的做法是手寫一個(gè)20輪的Kmeans精修函數(shù)替代內(nèi)置的kmeans代碼不超過(guò)30行卻能在所有版本上穩(wěn)定運(yùn)行。核心邏輯就是循環(huán)分配樣本—更新質(zhì)心和我們第一部分講的Kmeans原理完全一致。另外如果你跟我一樣被工程化逼得沒(méi)有正版授權(quán)也可以考慮用GNU Octave代替Matlab寫這個(gè)流程。Octave對(duì)大部分?jǐn)?shù)值計(jì)算和矩陣運(yùn)算的支持都很好PSO-Kmeans這種以矩陣運(yùn)算為主的代碼遷移成本很低。不過(guò)Octave的kmeans函數(shù)不是內(nèi)置的需要自己手寫用來(lái)替代內(nèi)置函數(shù)時(shí)正好省了上面的兼容性問(wèn)題。5.5 數(shù)據(jù)質(zhì)量細(xì)節(jié)這些坑會(huì)影響聚類結(jié)論最后分享幾個(gè)和算法無(wú)關(guān)但直接影響結(jié)論的數(shù)據(jù)細(xì)節(jié)。第一歸一化必須在缺失值處理之后做否則Z-score會(huì)把缺失值當(dāng)成0參與均值計(jì)算扭曲特征分布。第二聚類的輸入應(yīng)該是行為特征不應(yīng)該直接放日期、用戶編號(hào)、臺(tái)區(qū)編號(hào)這些標(biāo)識(shí)性變量。第三如果用戶數(shù)據(jù)的天數(shù)不一致有的用戶只有15天記錄有的有30天建議先按用戶求平均再做聚類否則天數(shù)少的用戶會(huì)被當(dāng)成異常樣本。第四季節(jié)因素要重視——冬季和夏季的負(fù)荷曲線形態(tài)差異很大如果你直接拿一整年數(shù)據(jù)混在一起聚類得到的分群往往是季節(jié)分群而非行為分群。我的做法是按季節(jié)分別建模型然后在業(yè)務(wù)層面對(duì)比同一用戶的季節(jié)歸屬變化這樣既能識(shí)別行為差異又能捕捉季節(jié)性規(guī)律變化。這套組合方案跑下來(lái)我最大的體會(huì)是算法層面沒(méi)有太多高大上的東西PSO-Kmeans本質(zhì)上是把一個(gè)簡(jiǎn)單而頑固的問(wèn)題——初始質(zhì)心敏感——用群智能算法解決掉了。居民用電行為分析的價(jià)值也不在于把輪廓系數(shù)從0.55提高到0.6而在于每一類用戶分出來(lái)以后你能針對(duì)性地做點(diǎn)什么。最后再分享一個(gè)小技巧給準(zhǔn)備落地的朋友就算聚類結(jié)果已經(jīng)穩(wěn)定也別直接信任數(shù)據(jù)去抽查10個(gè)用戶的原始負(fù)荷曲線和聚類標(biāo)簽是否匹配。光看平均曲線會(huì)騙人單條曲線才暴露真相。這個(gè)步驟花不了十分鐘卻能避免向業(yè)務(wù)方匯報(bào)時(shí)被一句我看這明顯不是一類用戶問(wèn)得啞口無(wú)言。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
97久久综合网| 人人干天天舔| 婷婷伊人中文字幕| 丁香婷最新动态| 九九操操| 国产伊人五月天| 996er热| 亚洲182在线观看| 婷婷五月天激情综合网| 久久久久久18| 97色碰| se.久久视频在线观看| 五月婷婷欧美激情| 五月婷婷黄色毛片| 九九成人| 婷婷五月四狠狠| 在线成人网站| 五月丁香啪啪网| 五月天激情网图片 - 百度| 综合网五月| 亚洲一个色| 六月婷婷视频| A在线观看| 激情婷婷五月| 亚洲色9| 九九色综合| 婷色人人狠| 99热在线播放| 久久66成人网站| 天天久久九九| 亚洲精品午夜国产va久久成人| 五月丁香色色| 五月停停大香蕉| 五月天婷婷青青草| AV在线大香蕉| 97大香蕉五月天| 开心激情网在线| 99啪啪网| 国产人妻人伦精品一区二区| 九九这里有精品| 丁香婷婷超碰| AA片在线观看视频在线播放 | 九九99精品| 色欲人妻综合aaaaaaaa网| 亚洲无码99| 色色丁香五月婷婷| 日日干天天射| 99热在线中出| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 天天综合精品| 色色亚洲五月天| aa久久| 99热成人| 8区视频在线| 青青操avbb| 九九爱精品网站| 色综合久网| 五月婷婷六月丁香激情深爱| 在线亚洲综合| 开心五月色婷婷综合开心网| av高清无码| 丁香五月影院| 超碰色综合| av最新在线| 亚欧州精品视频| 久久这里都是精品视频| 久久色情| 大香蕉综合| 婷婷久久综合久色| 黃色三级三级三级三级 qixing300.shrkbk.com www.jinbozs.com tianmiaosw.com | 五月精品99综合| 狼人久草| 嫩草视频在线观看| 久草a片| 激情综合网,五月| 99碰超| 第四色色六月色综合| 91丨九色丨东北熟女| 终合激情网| 亚洲乱码日产精品BD| 爆乳熟妇一区二区三区爆乳照片| 色五月亚洲开心网| 久草丁香婷婷1024| 操逼福利视频| 色色色99| 91色婷婷综合久久中文字幕二区| 狠狠操狠狠插| 嘿嘿视频免费看9| 久婷婷五月激情| 亚卅毛片| 99热只有精品在线| 播五月,色五月,开心五月播放器| 亚洲精品九九| 五月天综合婷婷| 4399啪啪视频| 天天拍久久| 99操逼视频| 日本英国美国欧美亚洲国产精亚洲日韩精品在线观看| 免费AV黄在线播放| 97色婷婷| 婷婷五月在线综合| 色婷婷五月天激情| 色啦啦视频| 丁香五月天天| 婷婷五月另类网站| 婷婷五月丁香色播| 五月婷婷深深爱| 亚洲视频久久| 日本色爽| 国产精品国产| 九九九九国产| 亚洲精品亚洲人成人网| 五月婷婷之综合激情| 色色色婷婷五月| 五月婷婷色播| 婷婷综合在线| 丁香六月五月婷婷| www,99热| 狠狠综合网| 99愛国产| 色播五月| 丁香五月激情综合| 婷婷综合五月天| 99视频只有这里精品| 26uuu激情五月天| 丁香五月六月久久综合| 久久综合激情五月天| 亚洲六月婷婷| 五月丁香趴趴| 《久久综合九色综合97婷婷| 久热99热| 激情久久五月天| 丁香六月婷婷色播| 国产9色在线/日韩| 五月开心婷婷极品激情| 色黑鬼导航| 五月婷啪| 五月天六月丁香| 色色网站在线免费观看视频| 四月婷婷五月色综合| 91黄操| 色五月婷婷五月天激情综合| 青青草原亚洲天堂| 国产亚洲精品人人| 99在线视频精品| 伊人春天av| 欧美欧盟性爱网| 久久婷婷五月天| 婷综合| av九九| 丁香丁婷五月激情| 91啪级电影| 人妻狠狠操| 五月丁香六月婷婷亚洲天堂网站| 華人性愛AV在線| 婷婷丁香六月综合激情站| 久鲁鲁色网| 久久这有这里精品| 操逼棍操逼| 婷婷中文字暮| 91色五月| 五月丁香综合激情| 少妇被躁爽到高潮无码文| 女人被躁到高潮嗷嗷叫小| 婷婷丁香日韩五月| 日日噜噜久久婷婷五月天| 亚洲人人操| 天天射综合网站| 欧美狠狠草| 欧美成性色| 五月丁香拍拍激情综合| 五月婷婷六月丁香色| 五月天激情国产综合婷婷婷| 日韩在线视频中文字幕| 欧美顶级少妇做爰HD| 丁香五月狠狠在线观看| 狠狠色丁香久久| 丁香六月婷婷综合| 婷婷五月丁香六月天亚洲综合| 婷婷免费无视频| Www.婷婷五月| 日韩黄黄| 伊人在线视频| 激情人妻综合| 丁香五月激情六月综合| 日本色色网站| 国产毛片精品一区二区色欲黄A片| 91无码一起草| 久久综合99| 五月婷无码| 直接看的AV网站| 99热亚洲精品| www.wuyuetian啪啪| 四色五月视频| 丁香五月宝贝激情网| 婷婷五月天香蕉| 人妻AV在线观看| 国产成人精品一区二三区熟女在线| 亚洲一区二区色图-亚洲精品国产精品乱码-成人AV | 色色三级视频| 久久9视频| 久久综合热17c| 色婷婷六月丁香综合欲精品| 开心五月深爱五月| www.五月天色色.com| 5月丁香综合网| 丁香五月无码| 99在线精品观看99| 色碰碰| 国产精品色色色色| 亚洲激情五月天| 色综合网页| 五月丁香欧美综合| WWW,五月| 色色欧美。| 五月天久久网站| 日韩五月天婷婷| 久久视频在线| 婷婷香蕉精品| 五月婷婷久久开心网| 99精品福利视频| 99精品热| 99人人干| av在线免费网站 | 狠狠激情五月天| 狠狠干综合| 人人草碰| 激情九九综合网| 六月婷婷开心| 91九色丨国产丨爆乳| 人人人操B超碰| 天天干天天色综合| 婷婷在线综合| 狠狠爱五月婷婷| 婷婷色五月大香蕉在线| 丁香五月1页| 五月丁香六月情| 免费视频WWW在线观看网站| 丁香婷婷九月| 天天日天天插| 色色五月综合| 99久久激情视频| 免费无码毛片一区二区A片 | 思思99久久| 婷婷五月丁香综合桃花色网| 丁香五月激情站| 丁香五月手机在线| 中文字幕成人| 亭亭色色五月天| 综合激情在线观看| 99视频一区| 大学生高潮无套内谢视频| 九色自拍| 久久香蕉影院| 激情五月丁香五月| 香蕉婷婷| 五月婷婷综合激情| 综合色播| 亚洲综合在线伊人婷| 色呦呦美女| www.久久久久久久久久久| 久久66成人网站| 成人午夜视频精品一区| 狠狠干总合| 五月婷婷综合激情| www.狠狠操.com| 天天干天天爽| 啪啪婷婷五月天激情| 婷婷激情综合网| www99热| 婷婷天堂站| 久热伊人9| 色婷婷丁香五月天在线观看| 2020日日干| 久久丁香五月天| 久久五月天激情婷婷| 婷婷激情五月天小说校园| 婷婷影视久久| 久久a热| www.91五月| 亚洲色9| 激情五月天婷婷| 久久五月六月| 亚洲宗合激情| 夜夜操天天干| 天天综合网91| www.狠狠| 欧美丁香六月激情视频| 超碰啪啪网| 无码人妻一区二区三区免费九色| 五月丁香花激情啪啪网| 5月丁香婷婷激情网| 欧美色偷拍| 91丨九色丨丰满人妖| 成人婷99最新| 久久久婷| 人草人人| 色色丁香婷婷综合| 丁香五月激情五月| 天天日天天爱天天噪| 婷婷五月天首页激情| 蜜臀99精品| 丁香大香蕉| 99日韩| 极品 少妇 内射| 日本久久色| 99无码黄色视频| 婷婷五月天AV在线| 色墦五月丁香| 婷婷.com| 日夜操B| 人人爱操| 天天插天天插天天插天天插| jiujiu热在线视频| 色五月丁香91| 人妻人人操| 另类的婷婷| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 九九热最新视频| 91视频精品99| 久久久国产精品黄毛片 | 亚洲成人av中文| 欧美色色色色色| 五月久久婷婷| 国产看真人毛片爱做A片| 五月激情久久综合| 婷婷六月综合基地| 精品无码久久久久久久久| 蜜臀嫩草| 亚洲激情在线| 99福利视频导航| 大香蕉久久久久| 视频免费精品免费精品免费精品免费精品免费精品免费精品免费99 | 久久这里有精品| 狠狠色五月| 久久婷婷六月综合国际| 婷婷五月,偷窥偷拍网| 免费国产VA国产免费| 最新无码专区| 五月香婷婷| 狠狠狠五月婷婷六月丁香| 国产AV不卡福利| 天天日天天色| 激情噜噜噜| 三区激情四射av| 色久一| 色偷偷综合| 五月天色社区| 午夜九九电影| 性一交一乱一交A片久久四色| 久久久婷丁香五月| 能看的AV| 网色99| 久久66精品| 色停停香蕉视频| 一级片操逼视频| 婷婷五月丁香啪啪| 啪啪小说五月天| 五五月丁香花激情综合网| 亚洲视频1区| 婷婷五月天基地| 五月婷婷丁香五月 | 青青草免费公开视频| 欧美Va婷色| 伊人婷婷五月| 丁香五月综合激情久久潮喷| 9久久久久久久久久久| 999热视频精品99免费在线| 99热精品中文字幕| 九色自拍| 激情六月天| α久久| 丁香婷婷六月激情文学| 91精品综合久久婷婷九色| 97人碰人操| 超碰99在线观看| 热久国产| 激情五月天婷婷| 丁香五月欧美色综合| 婷婷5月色| 九九大香视频| 国产午夜精品一区二区| 色五月激情图片| 少妇熟女视频一区二区三区| 久久久久久久人妻| 深爱五月激情| 99在线精品观看99| 五月天丁香成人| 天天做 天天爱| 九九综合久久丁香婷婷,开心激情综合网| 色色色色色色色色色色色色色97| 超碰在线观看成人视| 激情九月丁香婷婷| 电影91久久久| 超喷97免费在线视频| 日日干日日| 9l视频自拍9l九色成人| 91超级碰| VA色婷婷| www.久久爱| 久久婷五月综合| 欧美中文五月天| 激情五婷网| 五月天激情婷婷小说| 丁香六月婷婷高清| 五月丁香在线国产| 五月婷婷中文网| 天天综合干| 99热无码精品| 婷婷玉月丁香五月在线视频| 婷婷六月天精品| 五月丁香六月欧美综合| 天天日夜夜草进麻麻的子宫| 亚洲 在线 性爱 | av人人干| 成人做爰A片免费看视频| 天天色天天日| 国产乱子轮XXX农村| 操操碰| 99热这里是精品| JAPANRCEP老熟妇乱子伦视频| 99精品久久久久久| 狠狠干思思热| 五月婷婷碰碰| 五月开心深爱激情网| 五月天丁香婷婷久久九| 色情免费视频播放| 亚洲成人AV电影在线| 五月色无码| 亚洲无码99| 久久久久久xxxxx| 91操网| 中文精品在| 久久久久亚洲AV无码网影音先锋| 琪琪色五月天| 91精品综合久久久久久五月丁香| 色就是色婷婷五月亚洲激情| 丁香五月社区| 米奇影视资源777狠狠色婷婷五月天激情网| 被强行糟蹋的女人A片| 亚州激情网站无码| 婷婷五月丁香六月天亚洲综合| 婷婷深爱五月| 千人斩操逼| 久久精品一区二区三区四区| 亚洲欧州色情在线观看| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 操逼福利视频| 91国产精品视频播放| 天天xxxxxx天天日| 九九99男女视频在线观看| 可以免费观看的av| 色欲丁香| 色五月天丁香| 六月色婷婷欧美| 情涩婷婷五月天| 色婷婷久久综合久色综| 天天插天天插天天插天天插 | 婷婷99丁香| 日韩无码专区| 亚洲麻豆乱码国产2028| 日韩操逼大片| CAoub青青超碰| 玖玖午夜视频| 91精品婷婷国产综合久久| 日本色婷婷| 激情q青青草在线婷婷| 九九视频在线观看| 视频综合网| 变态 另类 在线| 九九亚洲视频| 婷婷九九| 97色婷婷| 婷婷色综合| 九色视频91| 婷婷在线播放| 亚洲狠狠干| 婷婷五月激情欧美| 精品一二三区久久AAA片| 婷婷五月亚洲激情| 成人无码精品1区2区3区免费看| 99re这里只有精品首页| 色哟哟www| 三级三久久线久久99久目本WW| 五月色欧美| 日本9区视频| 99男人的天堂| 五月欧美色播| 欲色人妻| 欧美婷婷综合| 九九热精品6| 婷婷五月天堂| 影音先锋日本三级资源| 亚洲免费观看高清完整版AV线| 九九视频免费| 亚洲综合色婷婷文学| 久久99激情| 久久与婷婷| 成人短视频免费| 九九精品热| 色丁香婷婷| 丁香激情网| 深夜婷婷 丁香| 五月丁香六月婷婷久久肏| 成人超碰AV| 激情婷婷网| 久久婷婷五月天| 丁香六月成人| 青青久久五月| 五月婷婷激情| 开心激情网五月| 黄桃AV无码免费一区二区三区| 超碰在线综合| VfJxEwPH| 亚洲综合网在线| 五月丁香六月香香蕉| 少妇激情五月天| 国产欧美精品AAAAAA片| 亚洲激情亚洲激情| 色五月天丁香| 色天使色婷婷| 天天操电影院色狼性av| 激情内射人妻1区2区3区| 激情五月天色网站| 免费啪啪亚州视频| g00d人体西西| 五月婷婷丁香婷婷| 97日本在线播放| 大香蕉综合| 色欲五月婷婷| 热的无码综合视频| 婷婷五月丁香基| ay2区| 婷婷五月丁香超碰| 超碰无码老师| 日日躁夜夜躁狠狠久久AV| 久久精品性爱| www.婷婷五月| 五月天综合视频| 色99在线视频| 综合久久综合| 一区二区三区XXXXXX| 97色精品视频| 69热91天堂| 日本操B视频在线观看| 婷婷午夜| 97碰碰碰免费公开在线视频| 国产3p露脸普通话对白| 99热综合| 狠狠操天天干| 鲁鲁色五月| 99久热这里只有精品| 9久久久久| 大香焦A∨| 99色婷婷视频| 操操国产| 五月 激情视频| 直接看的AV网站| 久久午夜理论| 九九热这里只有精品556| 色五月激情五月天| 婷婷五月天美女| 毛片新网地| 五月天激情黄色网址| 欧美午夜乱妇午夜福利| 97精品人人A片免费看| 99热这里只有精品2| 亚洲性爱电影| 五月丁香婷婷爱| 91色情播放| 婷婷五月色丁香在线看| 另类国产综合| 久久九九99亚洲国产久精综合| 精品一区二区三区四区五区六区介绍 | 丁香花五月天| 国产精品色色666| 欧美99热| 综合九九| 激情婷婷五月| 丁香五月天激情综合| 国产精品久久久爽爽爽麻豆色哟哟| 极品少妇高潮啪啪AV无码| 99人妻碰碰久久久禁片| 涩五月丝袜婷婷| 久久这里只有精品视频15 | 99亚州综合精品成人网| 婷婷中文字幕版| 97色碰碰公开视频| 日本色狠狠| 51成人| 超碰av在线| 久久人妻系列| 99热都是精品| 五月丁香91| 无码AV免费精品一区二区三区 | 桃色成人网| 少妇高潮呻吟A片免费看软件| 五月激情综合网| 五月天激情视频| 天天天天天天操| www.夜夜操| 99热在线播放| 激情图片亚洲| 久久婷婷五月综合色天| 婷婷中文在线| 色色色色网站| 亚洲成av人影院| 69超碰在线| 五月四色激情| 久久九九re热| 五月婷婷与六月丁香图片激情| 丁香九月久久| 亚洲精品操一操、噜一噜、摸一摸、爽| 丁香五月激情综合在线观看| 热99精品视频| 日熟女| 中文字幕在线免费观看视频| 国产67194| 青柠影视免费高清电视剧| 97超级碰| 色五月婷婷综合在线| 超碰chaompinm| 天天干夜夜操A片| 激情五月丁香激情综合网| 婷婷五月天在线综合| 激情综合五月天| 九九99热| 久久久久婷婷| 蒲京久久无码视频| 激情综合色图| 久久aaa| 精品无码99| 色香久久| 性无码专区无码| 狠狠色综合久久久久| 偷偷操99| 五月六月丁香婷婷在线观看| 婷婷久久综合久色| 无码任你操| 国产成人精品一区二三区熟女在线| 丁香婷婷久久五月天| 九月综合| 综合激情视频| 日韩一级网站| 五月丁香欧美综合| 五月丁香天堂网婷婷| 激情综合区| 狠狠色九月| 久久99久久99精品免观看软件| 丁香婷婷色色| 色一情一乱一乱91Av| 五月天天视频| 操逼123网| 成人噜噜网| 天天日天天舔| 丁香五月电影| 婷婷久久五月丁香| 色综合大香蕉| 九九色色色| 五月丁香啪啪| 大香蕉丁香| 99成人免费热视频| 五月丁香久久激情综合| 日日操天天爽| 伊综合蕉| 九九这里都是精品| 中文成人在线| 丁香五月六月| 丁香五月婷婷五月| 日本激情91| 五月天婷婷基地综合网| 婷婷97碰碰| 操逼六区| 丁香六月啪| 久操无码| 天天艹夜夜艹| 99爱免费在线观看| 九九色插| 青青久在线视频免费观看| 久热9| 五月天丁香综合| 五月丁香六月婷婷色情| 涩综合婷婷| 婷婷色正月| 色色色免费视频| 最近中文字幕大全免费版在线| 欧洲亚洲免费视频9| 精品夜夜澡人妻无码AV| 91大屁股| 91九色PORNY中文啦| 日本欧美成人片AAAA| www.五月婷婷.com| 99re这里| 国产26uuu视频| 五月婷A V在线| 五月网网站| 成人网页在线观看| 综合网色| 丁香五月综合图片在线观看| 一本大道伊人AV久久综合| 丁香婷婷免费| 色色综合网。| 五月婷婷丁香六月| 国产精品色色| 97碰碰视频在线观看| 色就是色婷婷五月亚洲激情| 熟女色专区| 日韩成人五月天| 99aese| 99这里是精品| 丁香五月天之婷婷影院| 九月丁香婷婷综合| 丁香五月激情综合| 久久97久久99久久综合欧美| 91女人18毛片水多国产| 99五月婷| 玖玖色综合| 开心激情色婷婷五月天| 色视五月天婷婷| 另类小说五月天综合网| 99热这| 人妻激情在线| 天天干天天拍| 五月天婷婷丁香成人网| 97超级碰碰碰| 婷婷综合| 婷婷丁香亚洲五月天| 激情五月丁香六月综合AVXXXX| 射久久丁香五月| 国产成人99久久亚洲综合精品| 色99在线| 丁香五月婷婷激情蜜桃| 国产熟女大叫受不了| 天天狠狠婷婷在线| 涩涩网五月天| www.色9| 色综合天天| 99热传媒| 99精品热视频| 99视频精品全部免费 在线| 人人摸人人搞| 五月婷丁香| 日本4399天堂中出| 五月丁香综合成人社区| 艹色18p| 五月色婷婷影院| 日本在线噜噜| 婷婷免费精品视频| wWW九九在线播放| 琪琪色网在线| 天天操夜夜操| 日本高清久| 丁香五月停停av| 五月色婷婷亚洲 | 中文字幕日韩无码制服诱或| 亚洲婷婷欧美婷婷| 亚洲综合激情五月久久| 国内熟女黄色系列| 色综合色综合网| 亚洲狠狠操| 狠狠色婷婷777| 99亚洲精品综合在线| 亚洲婷婷91丁香| 人人综合五月人人婷婷| 9久久婷婷国产综合精品性色| 亚洲视频在线观看| 91seav| 五月婷婷丁香五月婷婷| 色五月激情综合网| 日本A片一区| 99re在线视频精品,这里只有精品18,| 色色哒五月婷婷六月丁香| 色五月人妻| 丁香熟女乱| 婷婷第六色| 色99视频| 夜色热久| 日韩免费视频| 超碰97干| 色丁香影院| 欧美激情五月天| 玖色色综合| 激情五月六月婷婷综合啪啪| 另类专区在线| 亚洲第一视频 久久| 丁香六月AV| 天天综合网~91| 亚洲色爽| 男女99免费视频| 久热视频97AV在线观看| 激情六月婷婷| 丁香五月天网站| 色五月激情综合| 99色| 久久久精品AV| 久久久香| 色999亚洲人成色| 激情丁香婷婷| 欧洲亚洲精品| 六月丁香久久| 婷婷五月天在线观看| 夜夜干 夜夜操| 日本啪啪网| 激情五月综合网最新| 免费播放片大片| 久久久天堂国产精品女人| 亚洲Va成人| 亚洲操精品| 五月五月婷婷| 天天爽免费视频| 亚洲五月六月婷婷| 婷婷亚洲丁香五月| 99热精品在线播放| 99re最新地址视频| 五月婷婷五月天激情视频| 九九AV在线| 中文无码婷婷| 五月花婷婷在线精品视频| 婷婷97狠狠干| 色五月激情综合| 久久这里有精品在线观看| 婷婷精品性性性性性性性| 99热天堂| 99热99在线| 婷婷五月在线| 久久丁香五月天| 婷婷五月天黄色小说| 久草五月| 色综合色综合色综合| 亚洲中文乱字字幕在线永久| 91色情播放| 成人短视频在线观看| 久草婷妨| 欧美精品999| 欧美丁香婷婷五月天| 丁香五月六月久久综合| 九九激情视频| 99国产精品久久久久久久久久久| 精品99视频| 狠狠色狠狠色综合日日91 | AA丁香综合激情| 国产精品日韩十五区| 99亚色色色| 五月丁香激情啪啪网| 久草热久草在线视频| 1024日韩| 中文字幕在线免费观看视频| 99久热这里有精品| www.26uuu.com亚洲电影| 婷婷五月综合中文字幕| 人人爱摸视频| 激情播丁香| 成年视频免费观看| 婷婷五月综合激情| 午夜成人网站在线观看| 五月丁香久久色| 五月婷婷激情综合| 中文字幕AV在线播放| 婷婷五月天小说网| 色色色色色色色综合| 风流少妇A片一区二区蜜桃| 青青草六月丁香| 丁香亚洲色综合| 俺去也婷婷| 99五月婷| 五月婷啪| 国产伊人五月天| 双性美人被调教到喷水A片| 婷婷丁香五月,狠狠综合| 九九色情网五月天| www.jiujiujiu| 五月天社区| 99热在线观看| 色丁香影院| 97色在线观看视频| 夜夜操狠狠操| 午夜无码精品色综合久久| 亚洲视频在线网| 久久婷丁香五月| 激情丁香婷婷六月天| 三级av在线| 亚州操人在线视频| 色五月综合在线| 亚洲亚洲人成综合网络| 26uuu另类| 第四色大香蕉| 伊人激情AV一区二区三区| 97人妻碰碰碰久久香蕉| 五月丁香色色综合| 香蕉AV777XXX色综合一区| 思思re99视频在线观看| 激情婷婷丁香五月天| 五月天婷婷综合| 色色色综合网| 中文资源在线a | 五月亭亭欧美女人| 日本成人小说婷婷六月| 丁香六月啪| 五月婷婷影院| 99精品免费视频| 影音 五月 婷婷 久久| 久久久妻人人人| 一起草Av| 五月丁香六月婷婷久久| 亚洲人人操BD| 99精品国产在热久久| 99热综合在线| 丁香六月激情| 97热九九| 99综合视频| 人操91在线| 五月婷婷乱| 欧美人与性动交CCOO| 久久欧洲久久| 9色在线| 久99视频在线观看| a久久| 日本一级大片| 婷婷狠狠色| 六月婷婷天堂| 欧美啄木乌丝袜人妻系列| 日本强伦片中文字幕免费看| 丁香五月人妻| 天天摸天天舔天天爽| 色九月欧美| 丁香婷婷AV| 激情六月综合| 婷婷五月天播播| 五月丁香六月婷婷中文版| 成人av在线网址| 日韩野外 无套| 国产1区2区3区| 高清a片基地| 色综色网| www.无码com| 色五月婷婷基地| 成人精品一区二区三区四区五区 | 深爱激情AV| 伊人9999| 婷婷在线激情| 婷婷开心激情| 双性美人被调教到喷水A片| 91超级碰碰碰| 一本到不卡高清DVD| 丁香天堂夜| 久月婷婷| 超碰在线精品| 国产婷婷色综合AV蜜臀AV| 久久婷五月综合色| 五月天婷婷色在线视频免费观看| 五月天婷婷亚洲| 五月激情四射网站| 色婷婷丁香| 91九色国产在线| 久久99精品久久只有精品| 狠狠操天天日| 99热这里只有精品国产免费| 久久人人九九| 丁香五月天无码AV| 天插天啪天啪天啪| 久久久婷婷五月亚洲97号色| 精品久久99| 中文字幕在线人妻| 久99热在线观看| 永久的网站AAAA| 亚洲色五月| 国产在线另类五月婷婷| 无码动漫AV| 激情四射五月天| 丁香五月天天日| 以及AA大片看看| 五月丁香六月婷婷成人电影| 婷婷色播婷婷| 色色国产| ww亚洲ww在线观看| 欧美日韩二区在线| nvrentiantang av| 免费AAAAA网| 成人网在线观看视频| 五月婷婷五月丁香| 五月开心婷婷极品激情| 超碰在线观看三级片| 99免费| 色五月综合网| 色级停停| 91大神操美女| 五五月丁香花激情综合网| 色135综合网| 97九色视频| 女人天堂av| 青青日韩| 国产99久久久国产精品免费看| 五月天色视频| 狠狠第四色| 五月天激情网站| 久久久久人妻精品| 五月天婷亚洲综合在线嫩草网| 丁香五月天亚洲综合| 五月天堂婷婷| 9999色色色色| 亚洲精品成人| 就去色色五月丁香婷婷久久久| 色婷婷婷婷| 青草激情在线| 思思热天天看| 丁香熟女乱| 99综合免费视频| 日日插日日干| 亭亭丁香久久五月| 亚洲一区二区无遮挡A片| 婷婷丁香六月| 九九综合色综合| 99re这里只有精品在线观看| 99久久99久久综合| 婷婷五月丁香激情图片 | 婷婷桃色网| 色情成人五月天| 激情五月天小说网| 免費亭亭成人| 大香蕉五月婷婷| 97操碰免费视频| 婷婷五月在线视频| 激情婷婷丁香| 伍月婷婷六月丁香| 激情五月天在线观看色婷婷| 五月丁香在线观看99| 丁香五月天大香蕉啪啪| 欧美色99| www.99视频| 开心激情久久久久久久| 日本老女人黄页在线播放| 超碰AV成人| 99久久喉9| 欧洲色区| 五月丁香六月情| 操逼巨乳91| 99热这里只有精品18| 色必久悠悠影院| 三级黄网站| 久久五月天色婷婷| 色色97丁香婷婷五月天| 日本精品人妻无码77777| 色屌丝中文字幕| 久热一本| 99久久er| 淫水导航| 婷婷综合色图| 亚洲无码色| 亚洲综合在线播放| 日夜夜久久| 五月丁香六月停停| 成人婷婷深爱综合网| 思恩热国产视频右线观看| 久久图色4| 91午夜婷婷狠狠久久综合9色| 久久婷婷六月综合| 五月婷丁香| 超级97碰碰| 色综天天综合| 四月婷婷丁香| 五月丁香啪啪婷婷| 亚洲另类电影| 毛片蕉地一二| 这里只有精品偷拍| 国产亚洲精久久久久| 99在线精品观看99| 久久婷婷五月综合色丁香花| 99在线免费视频| 激情久久五月网| 亚洲性爱电影| 欧美日本不卡黄色片| 婷婷五月天激情四射五月天激情| 夜夜谢天天干| 99五月香婷婷丁香在线视频| 婷色五月| 五月激情婷婷播播开心| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 五月婷视频久久| 五月天久久综合婷婷丁香| 精品久久久人妻| 操b视频在线观看一区二区| 丁香婷婷激情综合五月激情| 亚洲综合激情五月| 五月丁香激情综合网| 操逼国产91| 啪啪啪五月天| 91日韩在线| 亚洲超碰中文字幕| 欧韩性爱| 思思99热| 婷婷中文字幕网站| 久久丁香五月综合六月激情红杏视频| 久草热视频在线观看| 婷婷六月亚洲综合| 欧洲亚洲精品| 激情综合网激情五月天| 91操在线视频| 欧美色色色色色| 97久久超碰| 99精品久久久久久| 色五月丁香五月激情五月激情| 深爱激情五月天| 精品夜夜澡人妻无码AV| 丁香六月啪啪啪| 婷婷伊人| 五月丁香六月综合情在线观看| 免费精品66| 丁香六月婷婷姐网| 26uuu欧美日本| 内射综合网| 天天做天天爽| 日韩国产AV播放| 六月丁香停| 色八月婷婷| 国产精品A片| 操日本三片99| 99色五月| 丁香五月在线视频| 色五狠狠| 久久 婷婷 五月天| 97人人草| 亚洲成人AV一区在线观看| 综合激情在线视频| 玖月婷婷爱丁香| 丁香 婷婷 亚洲 熟女| 99热大香蕉| 欧类av怡春院| 婷婷五月天中文字幕| 五月噜噜噜色综合| 色狠狠综合入口| 91日日日| 极品少妇高潮啪啪AV无码| 婷婷色爱| 婷婷成人综合五月| 大香蕉婷婷| 色综合网上班开心婷婷久久| 色九亚洲| 精品久热69| 久色欧美| 国产精女同一区二区三区久| 欧美成人网婷婷综合在线| AA丁香综合激情| 激情综合网激情五月天| 五月四色激情| 91热久久| 99r这里| 成人av中文字幕| 色五月,com| 91操熟女| 99爱在线视频观看| 五月婷婷激情综合网| 丁香九月色| 99热乎| 色五月亚洲| 久久这里只有精品热在99| 欧美婷婷色五月网| 97丁香花五月天激情小说| 激情五月天小说|五月天开心激情网|亚洲精品国产自在现线|黄色五月天 | 干亚洲天堂| 狠狠五月天婷婷| 五月天激日本色情在线| 色五月天激情| 久婷五月| 九九热精品视频| 五月丁香日本片| 91狠狠综合久久| 丁香五月成人论坛| 激情五月婷婷综合网| 9999久久久久| 天天色综网| 激情五月天婷婷播播久久综合91| 亚洲人人96@| 天天搞天天爽| 97日在线视频| 影音先锋偷偷色男人站| 精品久久99码| 日本乱子人伦在线视频| 丁香五月婷婷色偷偷| 精品亚洲国产成AV人片传媒| 婷婷六月综合激情| 26uuu国产精品| 日本在线wwww| 久久久97| 婷婷六月插屄激情| 国产肥白大熟妇BBBB视频| 婷婷八月丁香激情综合| 亚洲射激情| 亚洲区视频| 97碰碰人人视频| 成人片黄网站色大片免费毛片 | 内射在线CHINESE| 色婷婷久久综合| 五月天激情www| 五月婷无码| 亚洲激情综合网| 狠狠色综合网站久久久久| 欧美顶级少妇做爰HD| 色狠狠色| 狠狠色噜噜狠狠狠狠综合| 五月丁香欧美综合免费视频| 丁香婷婷六月激情文学 | 丁香五月婷婷婷婷欧美综合| 五夜丁香| WWW久久99久久99久久| 丁香五月天视频| 丁香五月久久| 超碰高清在线| www.99成人视频| 激情婷婷丁香五月| 五月开心婷婷网| 大香线蕉伊人| 婷五月天| 久月久在线视频| 国产成人片| 欧美性丁香色色五月天干干| 激情人妻综合| www。五月天。com| 91色碰| 国产肥白大熟妇BBBB视频| 九九这里有精品| 五月婷婷色播网| 五月天婷婷綜合院| 亚洲狠狠色丁香婷婷综合久久| 99热这里都是精品| 深爱五月最新网址| 丁香色六月| 久久综合五月| 成人无码精品1区2区3区免费看 | 久久电影4399| 操B无码视频国语| 亚洲色五月| 五月亭亭直播| 丁香五月aV| 色婷婷久久综合| 亚洲视频在线网| 日日日日日| 国产综合色婷婷精品久久| 九九无码视屏| 丁香五月婷婷综合视频| 久久九九网| 婷婷六月网| 99热在线看| 免费黄色片子| 奸逼视频| 亚洲国产另类av| 欧美婷婷五月丁香| 99热这里只有国产精品| 嫩草视频观看| 任你爽视频| 99热精品在线播放| 中文激情网| 丁香婷婷AV| 久久久99视频| 久久 这里只有精品1| 97碰免费精采视频| 激情五月综合网| 99久在线精品99re8| 五月丁香婷婷爱激情综合网| 99re8热精品免费视频| 99热在线观看精品| 狠狠色情婷婷| 成人视频在线免费播放| 99色色| 亚洲成人无码网站| 欧美性爱特黄一级aaaassss| 五月婷婷色播|