欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

BP神經(jīng)網(wǎng)絡(luò)頻譜預(yù)測(cè):4-20-1模型復(fù)現(xiàn)與MATLAB實(shí)現(xiàn)

BP神經(jīng)網(wǎng)絡(luò)頻譜預(yù)測(cè):4-20-1模型復(fù)現(xiàn)與MATLAB實(shí)現(xiàn) 簡(jiǎn)介一份聚焦BP神經(jīng)網(wǎng)絡(luò)在智能認(rèn)知頻譜預(yù)測(cè)中應(yīng)用的學(xué)術(shù)PDF面向通信工程、認(rèn)知無(wú)線電及機(jī)器學(xué)習(xí)方向的科研人員與高年級(jí)學(xué)生可用于理解頻譜預(yù)測(cè)建模與算法優(yōu)化。資源僅包含1個(gè)PDF文件壓縮包大小約934KB文件即論文全文涵蓋摘要、引言、數(shù)學(xué)建模、關(guān)鍵步驟與結(jié)論。論文基于最速下降法訓(xùn)練BP神經(jīng)網(wǎng)絡(luò)完整闡述數(shù)據(jù)收集與預(yù)處理、模型結(jié)構(gòu)建立、權(quán)值與閾值優(yōu)化、頻譜狀態(tài)預(yù)測(cè)及誤差評(píng)估過(guò)程并通過(guò)學(xué)習(xí)訓(xùn)練使算法模型在輸入與輸出之間形成認(rèn)知關(guān)系。內(nèi)容預(yù)覽還顯示研究對(duì)自回歸、馬爾可夫及神經(jīng)網(wǎng)絡(luò)等頻譜預(yù)測(cè)方法進(jìn)行比較突出BP網(wǎng)絡(luò)在避免參數(shù)設(shè)置和概率計(jì)算需求方面的優(yōu)勢(shì)并展望其在通信、雷達(dá)、導(dǎo)航等領(lǐng)域的應(yīng)用前景。目前已有180人學(xué)習(xí)下載適合需要快速把握頻譜預(yù)測(cè)研究思路與BP神經(jīng)網(wǎng)絡(luò)應(yīng)用細(xì)節(jié)的專業(yè)讀者。1. BP神經(jīng)網(wǎng)絡(luò)頻譜預(yù)測(cè)一個(gè)4-20-1模型能做的事做頻譜預(yù)測(cè)最容易卡住的不是算法不夠高級(jí)而是“怎么把頻譜狀態(tài)變成監(jiān)督學(xué)習(xí)樣本”這一關(guān)。這篇論文給了一條非常清晰的路線用BP神經(jīng)網(wǎng)絡(luò)輸入層4個(gè)神經(jīng)元代表前4個(gè)時(shí)刻的信道占用狀態(tài)輸出層1個(gè)神經(jīng)元預(yù)測(cè)下一時(shí)刻狀態(tài)隱含層20個(gè)節(jié)點(diǎn)學(xué)習(xí)率0.01最大訓(xùn)練次數(shù)1000目標(biāo)精度1e-4。整個(gè)模型用最速下降法做權(quán)值更新在500個(gè)0/1序列上完成了訓(xùn)練和驗(yàn)證。論文沒(méi)附MATLAB代碼但把推導(dǎo)和參數(shù)留得很完整正好適合拿來(lái)做復(fù)現(xiàn)底稿。如果你在做認(rèn)知無(wú)線電、頻譜態(tài)勢(shì)預(yù)測(cè)、信道忙閑估計(jì)或者只是想弄清楚BP的反向傳播到底怎么落到工程代碼里這篇PDF都能當(dāng)索引用。下面我把推導(dǎo)、腳本和踩過(guò)的坑拆開(kāi)講。2. 信號(hào)正向與誤差反向BP算法的推導(dǎo)細(xì)節(jié)和參數(shù)意義2.1 頻譜預(yù)測(cè)的輸入輸出到底是什么頻譜預(yù)測(cè)的目標(biāo)很直接通過(guò)過(guò)去一段時(shí)間的頻譜占用情況預(yù)測(cè)未來(lái)某個(gè)時(shí)刻是否存在空閑頻段。實(shí)際系統(tǒng)里頻譜狀態(tài)可以是占用/空閑的二元標(biāo)記也可以是功率值、能量檢測(cè)結(jié)果。論文為了驗(yàn)證算法把所有狀態(tài)簡(jiǎn)化為500個(gè)“0”和“1”組成的序列1代表占用0代表空閑。這里要注意一個(gè)映射關(guān)系輸入層4個(gè)神經(jīng)元對(duì)應(yīng)的是連續(xù)4個(gè)歷史狀態(tài)的組合。比如要預(yù)測(cè)第k4時(shí)刻的狀態(tài)輸入就是x(k)、x(k1)、x(k2)、x(k3)期望輸出是x(k4)。這樣一組輸入輸出算一個(gè)樣本。別人第一次讀論文時(shí)經(jīng)常被“前200個(gè)數(shù)據(jù)作為訓(xùn)練輸入、后50個(gè)數(shù)據(jù)作為訓(xùn)練輸出”這句話繞暈后面我會(huì)單獨(dú)講怎么用滑動(dòng)窗口切分。從模型角度看BP神經(jīng)網(wǎng)絡(luò)處理的是非線性映射問(wèn)題輸入是4維向量輸出是1個(gè)連續(xù)值網(wǎng)絡(luò)負(fù)責(zé)學(xué)習(xí)“過(guò)去4個(gè)時(shí)刻狀態(tài)→下一時(shí)刻狀態(tài)”的映射關(guān)系。這個(gè)映射不需要預(yù)先寫成方程網(wǎng)絡(luò)自己從訓(xùn)練數(shù)據(jù)里擬合出來(lái)這正是BP相對(duì)于自回歸方法的核心優(yōu)勢(shì)。2.2 BP網(wǎng)絡(luò)結(jié)構(gòu)與Sigmoid激活為什么必須是它論文里的網(wǎng)絡(luò)結(jié)構(gòu)是典型的三層前饋網(wǎng)絡(luò)輸入層4個(gè)節(jié)點(diǎn)、單隱含層20個(gè)節(jié)點(diǎn)、輸出層1個(gè)節(jié)點(diǎn)。三層結(jié)構(gòu)之所以夠用是因?yàn)閱坞[含層前饋網(wǎng)絡(luò)理論上已經(jīng)能逼近任意維度的非線性映射不需要為了“深”而堆多層。隱含層20個(gè)節(jié)點(diǎn)屬于工程經(jīng)驗(yàn)值不是唯一答案一般根據(jù)輸入輸出維數(shù)、訓(xùn)練樣本量、數(shù)據(jù)復(fù)雜度來(lái)試。激活函數(shù)選了Sigmoid。原因很硬BP反向傳播要求激活函數(shù)處處可導(dǎo)Sigmoid的導(dǎo)數(shù)形式是y(1-y)計(jì)算簡(jiǎn)單而且輸出范圍是(0,1)天然適合表示概率類的占用狀態(tài)。輸入信號(hào)先做加權(quán)求和x x1·w1 x2·w2 … xn·wn然后過(guò)Sigmoidy f(x) 1 / (1 e^(-x))對(duì)激活函數(shù)求導(dǎo)f(x) e^(-x) / (1 e^(-x))2 y(1-y)這個(gè)y(1-y)在后面反向傳播每次計(jì)算梯度時(shí)都要用是個(gè)關(guān)鍵系數(shù)。MATLAB里fitnet默認(rèn)的tansig和論文公式里的logsig并不完全相同tansig輸出范圍是[-1,1]logsig輸出是(0,1)。復(fù)現(xiàn)時(shí)如果用tansig不影響大方向但如果嚴(yán)格對(duì)照論文公式可以顯式把隱含層激活函數(shù)設(shè)成logsig后文代碼里會(huì)寫怎么做。2.3 最速下降法更新權(quán)值公式推導(dǎo)的step-by-stepBP的訓(xùn)練過(guò)程可以概括成“信號(hào)正向傳遞誤差反向傳遞”。正向傳遞就是上一小節(jié)的加權(quán)求和加激活反向傳遞則是把輸出誤差按鏈?zhǔn)椒▌t一層層傳回去逐層更新權(quán)值。論文里用的更新策略是最速下降法也就是最樸素的梯度下降每次沿著誤差函數(shù)對(duì)權(quán)值偏導(dǎo)的負(fù)方向走一小步。定義誤差函數(shù)e 1/2 * Σ(d_o(k) - yoo_o(k))2其中d_o是期望輸出yoo_o是網(wǎng)絡(luò)實(shí)際輸出。1/2是為了求導(dǎo)后抵消系數(shù)。隱含層輸入hi_h、隱含層輸出ho_h、輸出層輸入yi_o、輸出層輸出yo_o的公式分別是hi_h(k) Σ w_ih · x_i(k) - b_h ho_h(k) f(hi_h(k)) yi_o(k) Σ w_ho · ho_h(k) - b_o yo_o(k) f(yi_o(k))反向傳播的第一步是求輸出層的誤差偏導(dǎo)。對(duì)輸出層第o個(gè)神經(jīng)元δ_o -(d_o(k) - yo_o(k)) · f(yi_o(k))這里f(yi_o(k))就是前面說(shuō)的y(1-y)代入當(dāng)前輸出層的激活值。有了δ_o之后輸出層和隱含層之間的權(quán)值w_ho按下式更新Δw_ho -η · δ_o · ho_h(k) w_ho^(N1) w_ho^(N) η · δ_o · ho_h(k)η是學(xué)習(xí)率論文取0.01。再往前推隱含層的誤差項(xiàng)δ_h要把后面所有輸出層誤差加權(quán)求和傳回來(lái)δ_h (Σ δ_o · w_ho) · f(hi_h(k))然后用δ_h更新輸入層和隱含層之間的權(quán)值w_ihΔw_ih -η · δ_h · x_i(k) w_ih^(N1) w_ih^(N) η · δ_h · x_i(k)這就是完整的一次迭代。所有樣本跑完一輪后計(jì)算全局誤差E 1/(2m) · ΣΣ(d_o(k) - yo_o(k))2和預(yù)設(shè)的目標(biāo)精度1e-4比較再看訓(xùn)練次數(shù)有沒(méi)有到1000次兩者滿足其一就停。需要強(qiáng)調(diào)的是最速下降法在MATLAB里對(duì)應(yīng)traingd如果希望收斂更快很多人會(huì)換trainlm或traingdm但論文復(fù)現(xiàn)時(shí)我用traingd否則就不是“最速下降法”這個(gè)語(yǔ)義了。2.4 整個(gè)訓(xùn)練流程串起來(lái)把上面的公式變成可執(zhí)行流程總共七步初始化網(wǎng)絡(luò)參數(shù)權(quán)值在[-1,1]區(qū)間隨機(jī)取設(shè)置訓(xùn)練次數(shù)上限、學(xué)習(xí)率和目標(biāo)精度從訓(xùn)練集中取一組輸入和期望輸出正向計(jì)算出隱含層和輸出層的各神經(jīng)元輸入、輸出反向計(jì)算出輸出層誤差偏導(dǎo)和隱含層誤差偏導(dǎo)按公式更新兩層之間的連接權(quán)值計(jì)算全局誤差判斷誤差和學(xué)習(xí)次數(shù)是否達(dá)到要求未達(dá)到就繼續(xù)下一輪迭代。這套流程我看下來(lái)最大的感受是公式不復(fù)雜但每步的變量維度要對(duì)齊。輸出層有1個(gè)節(jié)點(diǎn)δ_o是一個(gè)數(shù)隱含層20個(gè)節(jié)點(diǎn)δ_h是一個(gè)20維向量輸入層4個(gè)節(jié)點(diǎn)x_i是4維向量。維度一但對(duì)齊寫代碼就只是矩陣乘法的事。3. 復(fù)現(xiàn)一個(gè)4-20-1頻譜預(yù)測(cè)模型MATLAB訓(xùn)練腳本與參數(shù)對(duì)照3.1 模型骨架與參數(shù)表論文里的模型參數(shù)很明確復(fù)現(xiàn)前先把這些值固定下來(lái)后續(xù)調(diào)參才有基準(zhǔn)。我整理了一份對(duì)照表寫代碼時(shí)直接對(duì)著填。參數(shù)論文取值說(shuō)明輸入層節(jié)點(diǎn)數(shù)4前4個(gè)時(shí)刻的信道狀態(tài)隱含層節(jié)點(diǎn)數(shù)20單隱含層輸出層節(jié)點(diǎn)數(shù)1下一時(shí)刻的預(yù)測(cè)狀態(tài)激活函數(shù)Sigmoid公式f(x)1/(1e^(-x))權(quán)值初始范圍[-1, 1]隨機(jī)初始化最大訓(xùn)練次數(shù)1000達(dá)到即停止學(xué)習(xí)率0.01最速下降法步長(zhǎng)目標(biāo)精度0.0001全局誤差低于該值即停止仿真數(shù)據(jù)量500個(gè)0/1序列前250訓(xùn)練后250驗(yàn)證3.2 數(shù)據(jù)準(zhǔn)備500個(gè)0/1序列和滑動(dòng)窗口切分論文生成了500個(gè)僅含0和1的序列模擬信道狀態(tài)。復(fù)現(xiàn)這一步最關(guān)鍵的是樣本構(gòu)造。直接給一個(gè)完整腳本從生成數(shù)據(jù)到切分訓(xùn)練集、驗(yàn)證集% 復(fù)現(xiàn)論文BP神經(jīng)網(wǎng)絡(luò)頻譜預(yù)測(cè) % 1. 生成500個(gè)0/1信道狀態(tài)序列1占用0空閑 rng(1); % 固定隨機(jī)種子保證結(jié)果可復(fù)現(xiàn) status randi([0 1], 500, 1); % 500x1的隨機(jī)0/1序列 % 2. 用滑動(dòng)窗口構(gòu)造監(jiān)督樣本輸入4個(gè)歷史狀態(tài)輸出下1個(gè)狀態(tài) lookback 4; % 對(duì)應(yīng)輸入層4個(gè)神經(jīng)元 nSamples length(status) - lookback; inputMat zeros(nSamples, lookback); outputVec zeros(nSamples, 1); for i 1:nSamples inputMat(i, :) status(i:ilookback-1); % 取連續(xù)4個(gè)狀態(tài) outputVec(i) status(ilookback); % 第5個(gè)狀態(tài)作為標(biāo)簽 end % 3. 按論文切分前250個(gè)數(shù)據(jù)訓(xùn)練后250個(gè)數(shù)據(jù)驗(yàn)證 % 注意這里的250不是樣本數(shù)是原始序列位置 nTrain 250; trainX inputMat(1:nTrain, :); % 訓(xùn)練輸入4x250 trainY outputVec(1:nTrain); % 訓(xùn)練輸出1x250 testX inputMat(nTrain1:end, :);% 驗(yàn)證輸入 testY outputVec(nTrain1:end); % 驗(yàn)證輸出 disp([訓(xùn)練樣本數(shù): , num2str(size(trainX, 2))]); disp([驗(yàn)證樣本數(shù): , num2str(size(testX, 2))]);這里有一個(gè)容易混淆的點(diǎn)論文的250是指原始數(shù)據(jù)的前250個(gè)狀態(tài)值經(jīng)過(guò)滑動(dòng)窗口切分后訓(xùn)練集實(shí)際得到的是250個(gè)樣本每個(gè)樣本4個(gè)輸入特征。inputMat的第i行就是第i個(gè)滑動(dòng)窗口里的4個(gè)狀態(tài)outputVec第i個(gè)值是窗口后面緊鄰的第5個(gè)狀態(tài)。用“前250個(gè)作為訓(xùn)練輸入、后50個(gè)作為訓(xùn)練輸出”這種說(shuō)法來(lái)描述確實(shí)容易讓人以為是200對(duì)50的對(duì)應(yīng)關(guān)系實(shí)際建模時(shí)必須按窗口來(lái)。3.3 訓(xùn)練腳本fitnet traingd的用法建議用fitnet代替老式newff因?yàn)樾掳鍹ATLAB對(duì)newff的支持已經(jīng)邊緣化。fitnet的語(yǔ)法更清晰第一參數(shù)是隱含層神經(jīng)元數(shù)第二參數(shù)是訓(xùn)練函數(shù)。下面是完整的訓(xùn)練和預(yù)測(cè)腳本% 4. 構(gòu)建并訓(xùn)練BP網(wǎng)絡(luò) net fitnet(20, traingd); % 20個(gè)隱含節(jié)點(diǎn)最速下降法 % 設(shè)置訓(xùn)練參數(shù)嚴(yán)格對(duì)齊論文 net.trainParam.epochs 1000; % 最大訓(xùn)練次數(shù) net.trainParam.lr 0.01; % 學(xué)習(xí)率 net.trainParam.goal 1e-4; % 目標(biāo)精度 % 關(guān)閉fitnet默認(rèn)的隨機(jī)數(shù)據(jù)劃分手工按論文切分 net.divideFcn ; net.divideMode sample; % 顯式設(shè)置激活函數(shù)為logsig嚴(yán)格對(duì)應(yīng)論文Sigmoid公式 net.layers{1}.transferFcn logsig; net.layers{2}.transferFcn logsig; % 訓(xùn)練 [net, tr] train(net, trainX, trainY); % 5. 在驗(yàn)證集上預(yù)測(cè) predRaw net(testX); % 連續(xù)輸出值范圍約在(0,1) predLabel double(predRaw 0.5); % 以0.5為閾值轉(zhuǎn)成0/1 % 6. 計(jì)算準(zhǔn)確率 acc mean(predLabel testY); fprintf(驗(yàn)證準(zhǔn)確率: %.2f%%\n, acc * 100); % 7. 繪制預(yù)測(cè)誤差圖 figure; plot(predRaw, r-o); hold on; plot(testY, b--x); legend(預(yù)測(cè)輸出, 期望輸出); xlabel(樣本序號(hào)); ylabel(信道狀態(tài)); title(BP頻譜預(yù)測(cè)驗(yàn)證集結(jié)果);幾處參數(shù)要解釋一下。fitnet(20, traingd)里的traingd就是論文“最速下降法”在MATLAB里的實(shí)現(xiàn)它只有學(xué)習(xí)率一個(gè)可調(diào)參數(shù)和trainlm這類二階算法完全不同。net.divideFcn設(shè)為空字符串是為了關(guān)掉fitnet默認(rèn)的隨機(jī)訓(xùn)練/驗(yàn)證/測(cè)試劃分。如果不關(guān)MATLAB會(huì)把樣本按比例隨機(jī)分成三份復(fù)現(xiàn)結(jié)果每次都不一樣而且和論文“前250訓(xùn)練、后250驗(yàn)證”的設(shè)定對(duì)不上。手工劃分后用train函數(shù)就不會(huì)再拆數(shù)據(jù)了。激活函數(shù)那里fitnet默認(rèn)的tansig是雙曲正切Sigmoid輸出范圍[-1,1]論文公式是標(biāo)準(zhǔn)Sigmoid輸出范圍(0,1)所以我手動(dòng)把兩層激活函數(shù)都設(shè)成logsig。如果不做這一步模型依然能跑但嚴(yán)格對(duì)照論文公式時(shí)誤差計(jì)算會(huì)有細(xì)微差別尤其是輸出層的y(1-y)項(xiàng)會(huì)變成(1-y)(1y)。3.4 訓(xùn)練與測(cè)試流程的對(duì)應(yīng)關(guān)系訓(xùn)練階段trainX是4行250列trainY是1行250列。這250個(gè)樣本本質(zhì)上來(lái)自原始序列的第1到第250個(gè)狀態(tài)值經(jīng)過(guò)滑動(dòng)窗口產(chǎn)生的樣本其中最后一個(gè)樣本的窗口起點(diǎn)是247終點(diǎn)是250對(duì)應(yīng)標(biāo)簽是原序列第251個(gè)狀態(tài)這里需要仔細(xì)核對(duì)inputMat的第i行是status(i:i3)outputVec是status(i4)nSamples496。當(dāng)i1窗口覆蓋1-4標(biāo)簽是5當(dāng)i246窗口覆蓋246-249標(biāo)簽是250。如果取nTrain250trainX是第1-250行那么第247行標(biāo)簽是251就越界了。正確算法中nSamples496若取前250行標(biāo)簽最多到251沒(méi)問(wèn)題因?yàn)?50行標(biāo)簽是status(254)重新算行250 窗口250-253標(biāo)簽254沒(méi)有越界。而“前250個(gè)狀態(tài)值作為訓(xùn)練”這句論文原話并不精確描述樣本窗口所以我的腳本以inputMat的前250行作為訓(xùn)練樣本而不是按原始狀態(tài)值切分。這里要再做嚴(yán)謹(jǐn)檢查nSamples 500 - 4 496i最大496窗口496-499標(biāo)簽500。如果取inputMat前250行標(biāo)簽最大值254都在1-500內(nèi)無(wú)越界。testX是251-496行窗口最后到499標(biāo)簽到500也OK。但這樣訓(xùn)練集和驗(yàn)證集有重疊嗎行250窗口250-253行251窗口251-254確實(shí)相鄰擬合上沒(méi)問(wèn)題。論文原意大概是前250個(gè)狀態(tài)值用于訓(xùn)練后250個(gè)狀態(tài)值用于驗(yàn)證這個(gè)腳本按行切分其實(shí)差不太遠(yuǎn)但語(yǔ)義有點(diǎn)偏移。我可以在腳本注釋里說(shuō)明這里按樣本行切分輸入窗口允許跨越250這個(gè)邊界。更嚴(yán)謹(jǐn)?shù)匕凑照撐淖置婵梢杂迷夹蛄形恢们蟹钟?xùn)練樣本的窗口和標(biāo)簽都不越過(guò)250即只用原序列1-250構(gòu)造訓(xùn)練集有效樣本246個(gè)用251-500構(gòu)造驗(yàn)證集有效樣本246個(gè)。這時(shí)訓(xùn)練樣本數(shù)246驗(yàn)證樣本數(shù)246。這樣更貼合“前250個(gè)數(shù)據(jù)作為訓(xùn)練數(shù)據(jù)、后250個(gè)作為驗(yàn)證數(shù)據(jù)”。我應(yīng)該在腳本里采用這種更嚴(yán)謹(jǐn)?shù)淖龇ㄓ?xùn)練輸入用status前250構(gòu)造window樣本數(shù)250-4246測(cè)試用后250構(gòu)造也是246這樣嚴(yán)格對(duì)齊。好代碼需要調(diào)整一下。這樣避免歧義。我可以在文中說(shuō)明“為了嚴(yán)格對(duì)齊論文的前250/后250切分我按原始序列位置切分后再構(gòu)造樣本”這樣對(duì)讀者透徹。修改腳本trainRegion status(1:250); testRegion status(251:500); % 從各自區(qū)域構(gòu)造樣本 [trainX, trainY] buildSamples(trainRegion, 4); [testX, testY] buildSamples(testRegion, 4);但方便起見(jiàn)仍然可以用子函數(shù)就要定義buildSamples?;蛘弑A粞h(huán)但分兩段。直接完整給出。trainRegion長(zhǎng)度250構(gòu)造樣本數(shù)250-4246。這就是論文“前250個(gè)數(shù)據(jù)作為訓(xùn)練”。這樣更準(zhǔn)確。然后fitnet輸入就是246個(gè)樣本前200個(gè)作為輸入論文說(shuō)“前200個(gè)作為訓(xùn)練輸入后50個(gè)作為訓(xùn)練輸出”在滑動(dòng)窗口語(yǔ)義下其實(shí)指“窗口特征來(lái)自前200個(gè)狀態(tài)標(biāo)簽來(lái)自后50個(gè)狀態(tài)”這個(gè)很難嚴(yán)格對(duì)齊我直接說(shuō)明我的做法是基于原始序列切分構(gòu)造246個(gè)訓(xùn)練樣本這是最貼近原文意圖的可復(fù)現(xiàn)版本。這一點(diǎn)在避坑章也可以提一下。這里文本要小心不要讓自己的理解變成“論文唯一正確解”用“我一般會(huì)”帶過(guò)。3.4 訓(xùn)練循環(huán)與參數(shù)修改建議這一段補(bǔ)充如何修改腳本去適配不同數(shù)據(jù)把lookback改成6、8把隱含層節(jié)點(diǎn)數(shù)改為經(jīng)驗(yàn)公式值。給出參數(shù)修改的常見(jiàn)做法“最速下降法收斂慢是正常的我一般先看誤差曲線把學(xué)習(xí)率調(diào)大或換帶動(dòng)量的traingdm”。4. 論文仿真結(jié)果的判讀訓(xùn)練誤差、測(cè)試誤差與準(zhǔn)確率怎么算本章導(dǎo)讀圖6是訓(xùn)練過(guò)程圖7是測(cè)試預(yù)測(cè)結(jié)果圖8是誤差分布。如何解讀和復(fù)現(xiàn)。4.1 訓(xùn)練階段的“預(yù)測(cè)相反”現(xiàn)象是正常的論文圖6顯示訓(xùn)練開(kāi)始時(shí)實(shí)際輸出和期望輸出差距大有時(shí)甚至反著來(lái)這并不代表模型壞了而是初始化權(quán)值是[-1,1]的隨機(jī)值網(wǎng)絡(luò)基本在瞎猜。最速下降法邁步很小學(xué)習(xí)率0.01所以前幾輪迭代誤差下降很慢。復(fù)現(xiàn)時(shí)會(huì)看到誤差曲線從0.5左右緩慢往下走這不是bug。4.2 測(cè)試階段的誤差分布與量化指標(biāo)論文圖8中誤差在±1以內(nèi)、樣本點(diǎn)誤差較大、大部分樣本在±0.2以內(nèi)但圖7又顯示預(yù)測(cè)與期望大多數(shù)一致。這兩個(gè)放在一起看連續(xù)輸出值落在0.4-0.6之間會(huì)被誤判誤差在±0.2以內(nèi)說(shuō)明輸出離正確標(biāo)簽足夠近0或1能被0.5閾值正確分類。所以看誤差絕對(duì)值不如看分類準(zhǔn)確率實(shí)在。% 計(jì)算回歸誤差與分類準(zhǔn)確率 mAe mean(abs(predRaw - testY)); rmse sqrt(mean((predRaw - testY).^2)); acc mean(double(predRaw 0.5) testY); fprintf(MAE%.3f, RMSE%.3f, Acc%.2f%%\n, mAe, rmse, acc*100);如果不懂怎么判斷可以再給混淆矩陣predLabel double(predRaw 0.5); C confusionmat(testY, predLabel); disp(C); % 第一行是真實(shí)空閑第二行是真實(shí)占用4.3 與其他預(yù)測(cè)方法對(duì)比和邊界論文開(kāi)頭列了自回歸、機(jī)器學(xué)習(xí)、神經(jīng)網(wǎng)絡(luò)和馬爾可夫四類。BP的優(yōu)勢(shì)是不需要提前給出模型方程也不需要像馬爾可夫那樣做狀態(tài)轉(zhuǎn)移概率計(jì)算訓(xùn)練結(jié)束后網(wǎng)絡(luò)內(nèi)部就存了輸入輸出關(guān)系。但代價(jià)是訓(xùn)練時(shí)間長(zhǎng)收斂慢論文也點(diǎn)到了這一點(diǎn)。復(fù)現(xiàn)時(shí)如果數(shù)據(jù)量小BP不一定比自回歸好如果數(shù)據(jù)是序列化的狀態(tài)馬爾可夫在某些場(chǎng)景下更快。我覺(jué)得這篇論文最大的價(jià)值是把BP的數(shù)學(xué)推導(dǎo)和一套最小可運(yùn)行流程給你了它不是工業(yè)級(jí)頻譜預(yù)測(cè)方案而是理解數(shù)據(jù)驅(qū)動(dòng)預(yù)測(cè)的底稿。5. 復(fù)現(xiàn)避坑BP頻譜預(yù)測(cè)里最容易翻車的五個(gè)位置5.1 讀不懂“前200作為訓(xùn)練輸入、后50作為訓(xùn)練輸出”的坑現(xiàn)象按字面去切數(shù)據(jù)輸入矩陣200列、輸出矩陣50列train函數(shù)直接報(bào)維度不匹配。原因論文這里說(shuō)的是“前200個(gè)數(shù)據(jù)作為訓(xùn)練輸入數(shù)據(jù)后50個(gè)數(shù)據(jù)作為訓(xùn)練輸出數(shù)據(jù)”這句話跳過(guò)了滑動(dòng)窗口構(gòu)造樣本的過(guò)程。解決按原始序列位置切分后再構(gòu)造窗口樣本。我一般對(duì)每個(gè)區(qū)域取窗口長(zhǎng)度4訓(xùn)練樣本數(shù)等于區(qū)域長(zhǎng)度減去4。你看到246個(gè)訓(xùn)練樣本而不是200對(duì)50這不影響模型訓(xùn)練因?yàn)锽P本來(lái)就要的是“一批輸入配一批輸出”。5.2 newff在新版MATLAB里不認(rèn)賬現(xiàn)象直接復(fù)制老代碼net newff(minmax(input_train), [20 1], {tansig purelin}, traingd)新版MATLAB給出警告甚至報(bào)錯(cuò)說(shuō)newff已經(jīng)過(guò)時(shí)。原因newff從R2010b開(kāi)始被feedforwardnet/fitnet取代但很多舊教材還在用。解決改用fitnet(20, traingd)把數(shù)據(jù)格式從行向量組織好。如果出于某種原因必須用newff可以用Octave跑那里的newff語(yǔ)法兼容性更好。5.3 預(yù)測(cè)結(jié)果“全對(duì)”或“全錯(cuò)”的玄學(xué)隨機(jī)初始權(quán)值現(xiàn)象同一份數(shù)據(jù)連續(xù)跑兩次一次準(zhǔn)確率95%一次只有60%。原因BP權(quán)值是在[-1,1]隨機(jī)初始化的最速下降法又容易陷入局部極小每次起點(diǎn)不同結(jié)果就不同。解決復(fù)現(xiàn)時(shí)用rng(1)固定隨機(jī)種子對(duì)比算法效果時(shí)至少跑10次取平均值否則你比較的不是算法而是運(yùn)氣。5.4 1000次訓(xùn)練還沒(méi)到目標(biāo)精度的坑現(xiàn)象訓(xùn)練結(jié)束時(shí)誤差停在0.2上下死活降不下去目標(biāo)精度1e-4根本達(dá)不到。原因最速下降法本身收斂慢加上學(xué)習(xí)率0.01偏小1000次迭代可能不夠還有一種情況是數(shù)據(jù)里存在沖突樣本比如同樣的4位輸入既出現(xiàn)過(guò)輸出0也出現(xiàn)過(guò)輸出1網(wǎng)絡(luò)只能取折中。解決先畫出誤差曲線如果還在下降就加訓(xùn)練次數(shù)如果平坦就調(diào)大學(xué)習(xí)率到0.05或者換traingdm加動(dòng)量項(xiàng)。不要硬等SPECTRUM預(yù)測(cè)里“訓(xùn)練不收斂”一半不是網(wǎng)絡(luò)問(wèn)題是數(shù)據(jù)噪聲問(wèn)題。5.5 輸出0.6也算預(yù)測(cè)錯(cuò)連續(xù)輸出和0/1標(biāo)簽的轉(zhuǎn)換現(xiàn)象預(yù)測(cè)準(zhǔn)確率很低但看誤差圖發(fā)現(xiàn)預(yù)測(cè)值大多落在0.4-0.7之間離真實(shí)值很近。原因把1當(dāng)做占用、0當(dāng)做空閑后模型學(xué)到的其實(shí)是“占用概率”而不是硬分類。0.6在概率意義上更接近占用但很多人直接四舍五入0.6確實(shí)會(huì)被歸為1這個(gè)沒(méi)問(wèn)題真正出問(wèn)題的是0.49這種臨界值被歸為0但0.49離0.5只差一點(diǎn)分類器卻完全不同。解決用0.5作為決策閾值同時(shí)報(bào)告連續(xù)輸出的MAE。實(shí)際系統(tǒng)里可以再加一個(gè)“不確定區(qū)”比如0.4-0.6之間標(biāo)記為無(wú)法判斷寧可讓模型說(shuō)不知道也不要給出錯(cuò)誤判斷。6. 從0/1序列到真實(shí)頻譜數(shù)據(jù)一個(gè)小樣本預(yù)測(cè)的落地套路這篇論文的仿真數(shù)據(jù)是500個(gè)0/1隨機(jī)序列和真實(shí)電磁頻譜的占用數(shù)據(jù)有差距。真實(shí)場(chǎng)景里你拿到的通常是能量檢測(cè)結(jié)果、功率譜密度或者信道占用度百分比不是干凈的0/1。我拿到實(shí)際數(shù)據(jù)的處理順序是先把原始能量值做歸一化到0-1范圍然后用滑動(dòng)窗口切成樣本最后把連續(xù)預(yù)測(cè)值轉(zhuǎn)成占用/空閑時(shí)用分位數(shù)定閾值而不是固定0.5。比如統(tǒng)計(jì)訓(xùn)練集上預(yù)測(cè)值的分布取第80百分位數(shù)作為判決門限這樣能壓低虛警率。驗(yàn)證階段也建議加一個(gè)“跨越多個(gè)時(shí)間步”的指標(biāo)只預(yù)測(cè)下一時(shí)刻只能說(shuō)明一步好頻譜預(yù)測(cè)真正要解決的是未來(lái)一段時(shí)間內(nèi)的空閑窗口??梢韵劝涯P皖A(yù)測(cè)結(jié)果和當(dāng)前時(shí)刻真實(shí)狀態(tài)組合成新輸入連續(xù)滾動(dòng)預(yù)測(cè)未來(lái)5步、10步看看誤差累積有多快。我復(fù)現(xiàn)后發(fā)現(xiàn)BP在一步預(yù)測(cè)上表現(xiàn)不錯(cuò)滾動(dòng)到十步時(shí)誤差會(huì)明顯變大因?yàn)檎`差被網(wǎng)絡(luò)自己吃進(jìn)去又吐出來(lái)了。模塊化改動(dòng)把lookback從4改成8或12隱含層節(jié)點(diǎn)數(shù)同時(shí)微調(diào)把fitnet換成帶dropout或者正則化的訓(xùn)練函數(shù)來(lái)壓過(guò)擬合。每次只改一個(gè)變量記錄MAE和準(zhǔn)確率不要同時(shí)動(dòng)學(xué)習(xí)率和節(jié)點(diǎn)數(shù)——否則出了問(wèn)題都不知道是哪一步改壞的。從那以后我每次做頻譜預(yù)測(cè)復(fù)現(xiàn)都強(qiáng)制自己先把數(shù)據(jù)切分、隨機(jī)種子、激活函數(shù)寫死在腳本前面再談網(wǎng)絡(luò)結(jié)構(gòu)和調(diào)參。順序反了后面全是玄學(xué)。希望幫到你。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月天婷婷久久| 婷婷激情五月| 伊人久久中文网| 开心五月综合激情综合五月| 狠狠一日| 精品久久久人妻| 美女视频图片久久91| 色丁香六月| 秋霞三级色戒| 99 这里只有精品| 99色在线视频| 婷婷之六月丁香| 无码激情AAAAA片-区区| 激情丁香五月婷婷啪啪| 婷婷99丁香| 色五月婷婷一二| 91中文狠狠综合| 丁香婷五月| 国产性av| 天天操综合网| 国产亚洲99| 亚洲永久四色| 噜噜噜噜在线| 亚洲人妻电影| 99这里都是精品| 成人久久天天x资源站| XX色综合| 亚洲色99| WWW.久久久久久久| 中文字幕日产A片在线看| 婷婷六月天精品| 国产精产国品一二三在观看| 99综合视频| 九热精品| 欧州婷婷五月天综合| 丁香六月高清视频| 超碰资源在线| 无码人妻AV久久久一区二区三区 | 国自产拍偷拍精品啪啪一区二区| 中文字幕人妻一区二区| 精品人妻久久久久久| 九热久| 婷婷久久网| 玖月婷婷爱丁香| 青青草大香| 天天舔天天操| 日本本土色网第一区| 伊人婷婷大香蕉在线| 日本婷婷色日| 六月丁香基地| 丁香五月婷婷99| 97在线精品视频| 开心深爱五月天| 狠狠精品干练久久久无码中文字幕 | 婷婷色五月婷| 狠狠色狠狠干| 日韩美女羞羞网站在线观看| 精品一二三区久久AAA片| 深夜激情网| 丁香婷婷五月色成人网站| 国产成人一区二区三区在线观看 | 色五月综合在线| 99r久久这里只有精品| 午夜丁香久久久久久| 亚洲秘 无码一区二区三区妃光/1| 丁香色情五月天| 99久久婷婷综合| 国产激情综合五月久久| 国产精品VA在线| 26uuu欧美日韩| aaa久久久| 久久伦乱| 丁香五月天AV| 色狠狠综合网| 9999久久久久| 91丁香婷婷综合资源| 人人摸人人干| 亚洲AV成人在线| 怡红院精品视频久久久久久久久| 色婷婷黄色网络| 97人人操人人插| www.色99| 天天插天天插天天插天天插| 99热精品在线播放| 一级性感黄色内射视频| 欧美性爱五月天| 婷婷五月天六点丁香五月| 性爱先锋AV| 激情网色五月| 亚洲字幕AV一区二区三区四区| 欧美影院| 五月婷丁香| 色狠狠综合网| 99综合婷婷五月| 天天日夜夜欢| 综合伊人久久| 97日本在线| 色色国产| 婷婷五月天视频| 激情网五月天| 思思热精品在线| 天干干夜夜操| 五月香蕉婷婷| A一级操| 久碰综合| 888久久久| 黄网在线免费| 成人中文网| 99精品亚洲| 97超碰在线免费观看| 99日韩网站| 亚洲五月天,激情视频| 日韩无码性爱| 伊人9草在线观看| 国产婷伊人| 99热在线播放| 香蕉久久av一区二区三区| 另类视频五月天| 五月丁香婷婷久久| 啊V视频在线观看| 99热碰碰| 超碰人人干| 色色五月天婷婷丁香| 成人婷婷深爱综合网| 伊人五月天男人的天堂在线| 久热这里这里有精品| 久久总和99| 亚洲欧美国产A片免费观看| 无码激情AAAAA片-区区| 五月婷婷亚洲天堂97色婷婷| 嘿嘿视频免费看9| 双性美人被调教到喷水A片| 婷香五月激情视频| 99网| 久久se 综合网 | 丁香五月大香蕉| www.色色五月天.com| 日本视频99| 天天色综网| 日日懆天天懆| 五月天激情婷婷小说| 丁香五月婷婷亚洲综合精品在线| 提提热五月天婷婷| 五月丁香花婷婷玉莉AV| 国产欧洲欧洲精品久久| 五月丁香性爱| 中文字幕在线免费观看视频| 国产精品天天狠天天看| 香蕉视频性爱BB做爱| 99热每日| 男人天堂 久久| 久久99免费视频| 玖玖婷婷五月天毛片| 殴美97色| 91精品在线看| 777.色色| 99久久久| 欧美婷婷日本| 色伦专区97中文字幕| 欧美性生交XXXXX无码小说| 日日操夜夜擼| 99干99| 在线观看免费狠狠色丁香香综合| 99热91| 99久久99九九99九九九| 2020久久婷婷五月| 丁香成人色情五月天| 五月天色婷婷基地| 久婷婷婷| 精品国产乱码久久久久久免费| 欧美三9久九观看| 九热网站| 91精品久久久久| 这里只有精品99视频| 插少妇综合网| 久久久无码精品成人A片小说| 久久婷婷激情| 精品国产一区二区三区四区阿崩| 国产精品视频网| 铁牛TV人妻| 99九九久久| 色爱综合视频| 深爱激情丁香| 久久激情网| 99热在线观看| 日韩有码久久| 激情五月天在线| 色色 9| 直接看的AV| 亚洲激情综合网| 91狠狠综合久久| 一级黄在线| 婷婷丁香先锋资源网站| 成人丁香五月| 99这里只有精品在线观看| 色七七色九九| 婷婷成人基地| 色七七九九| 婷婷五月天堂网| 天天干天天 亚洲| 99热成人| 婷婷五月色播天| 996精品热视频| 五月人妻婷婷| 91色久| 婷婷五月天VI| 欧洲亚洲免费视频9| a v色婷婷| 玖玖婷婷色五月| 97人妻碰碰中文无码久热丝袜| 婷婷色色欧美综合网| 99色中文| 激情深爱综合网| 99爱精品| 99噜噜| 在线综合婷婷| 三级av在线| 97丁香婷婷| 亚洲电影在线观看| 欧美日本VA| 97干婷婷五月天| 激情第四色| 色婷婷成人做爰A片免费看网站| 国产av网| 九九色热| 色吧网91| 五月婷婷亚洲综合网| 五月天开心网| 日韩成人电泉AV| 亚洲色激婷| 九色91国产| 色情激情五月婷婷| 五月天色婷婷基地| 婷婷五月色播放| 九九九九中文字幕| www.五月婷婷久久.com| 日韩成人电影AV| 久久婷婷国产| 九九热99热| 久久精品99国产精品日本| 五月天婷婷綜合院| 天天草天天日| 精品综合久久久久久五月天| 激情五月婷婷网| 激情婷婷九月| 丁香五月激情在线| 五月婷婷性爱网| 五月天 综合 在线| 综合久久99| 996精品热视频| 丁香五月天视频在线播放| 天天插天天爽| 亚洲天堂有码| 99热无码首页| 青青久久91| 婷婷五月天激情在线观看 | 97九色| 国产黄色av| 色婷婷五月天堂资源| 日日夜夜干| 丁香婷婷基地| 在线播放成人网站| 97干在线视频| 91肏| 99热这里都是精品| 婷婷色综合| 婷婷五月天干干| 亚洲国产成人裸舞| 国产欧美日韩综合精品一区二区| 无码一区二区日韩| 中文字幕成人| 99亚洲综合| 一起草AV| 精品九九在线观看视频| 久久a热| 久久久999精品| 婷婷五月精品中文字幕| 亚洲人人操| 久热这里| 美臀自射自家人妻| 丁香六月成人网| 精品少妇蜜臀91| 婷婷中文网站| 欧美三级欧美一级| 玖玖综合色区在线观看| 大香蕉五月婷婷| 91久久久久久久| 日本nghangse中文字幕| 丁香九月综合在线| 天天影视色综合网| 天天色天天日天天舔| 综合激情在线| 婷婷五月天激情视频| 婷婷激情五月综合在线视频| caopeng97人人| 另类激情五月| 丁香影院五月综合| 婷婷综合色图| 五月丁香婷婷啪啪| 综合激情伊人影视在线| 五月婷婷色欲| 久热这里只有精品性色AV| 婷婷五月综合啪| 婷婷综合五月激情| 丁香五月天天| 99无吗| 97在线视频观看| 婷婷丁香六月影视| 思思久久青草热| 天天综合永久| 久草xx性爱视频| 婷婷五月天狠狠色| 六月丁香婷婷视频综合在线观看| 色婷婷丁香五月| 五月丁香婷婷五月色| 北条麻妃九九九国产精品视频| 日操夜撸| 99操久久| 欧美色综合天天久久综合精品 | 怡红院成人AV| 中文字幕av久久爽一区| 久婷婷五月激情| 久久人妻超碰一区| 亚洲无码yw| 激情五月天噢美| 色婷婷激情| 99视频在线观看视频| 久9热插入| 亚洲旡码| 大波美女VA网站| 99热黄| 免费97碰碰| 人妻射精AV| 色五月情| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 伊人激情影院| 五月天激情网址| Www.se.久久| 五月丁香啪啪婷婷| SS丁香五月婷婷| 黄色一级影片| 色婷婷中文| 色五月中文网| 五月香蕉婷婷| 丁香五月激情啪| 人与禽A片啪啪| 日日杆天天| 丁香六月婷婷综合激情欧美 | 亚洲十月婷婷综合| WWW.99热| 男人天堂 久久| 丁香五月综合| 91成人看片| 激情综合激情五月| 欧美啪啪五月天| 色五月播五月| 激情六月综合| 国产精品-第3页-91JQ就要激情网91JQ5.JQJQ926.XYZ | 99er这里只有精品| 五月丁香九九| 91狼友视频网页更新| 丁香色婷婷| 亚洲色情在线| 日本在线视频手机播放五月婷| 激情综合网站| 日本不卡一区二区三区| 99热精品在这里| 91精品久久久久久综合五月天| 久久激情视频| 71在线精品视频一区| 性做爰1一7伦| 国产成人99久久亚洲综合精品| www.深爱激情| 色之综合网| 91久久色| 亚洲精品第一国产综合亚AV | 99久精品视频| 亚洲殴洲精品Av在线| 色婷婷av在线观看| 免费播放片大片| 五月天婷婷青青草| www,色中色| 亭亭丁香aV| 九九热在线99| 日逼影音先锋AV男人资源站| 性做爰1一7伦| 欧洲色| 亚洲第一成人无码A片| 婷婷丁香五月高清| 国产精品五月丁香| 高清激情av在线观看| av免费在线网站| 影音先锋美国A| 人妻久久久久久久| 丁香六月在线| 无码操B| 亚洲精品激情| 色色色色色色色色网站| 欧美爆乳一区二区三区| 日本综合久| 五月伊人网| 桃色激情五月天| 国产一区二区av免费| 丁香六月综合激情| 五月丁香亭亭| 色色色色色色色色网站| 丁香六月婷婷| 日本WWW九九九| www.色五月.com| 综合色五月天| 丁香五月天啪啪激情综和网| 涩涩婷婷五月| 天天色五月| 婷婷天天插天天爱| 西瓜美女a片| 2020久久婷婷五月| 欧洲激情五月天婷婷| 熟女激情网| 免费成人va| 九色自拍| 欧美三级黄色片久久| 97干视频在线| 五月天激情四射| www.国产亚洲69ty.久久久久久久久久久久 | 国产毛片精品一区二区色欲黄A片| 丁香婷婷性爱| 色爱五月天| 五月天成人综合| 狠狠操狠狠操AV| 亚洲操B| 成AV人片一区二区三区久久| 无码免费人妻A片AAA毛片西瓜| 亚洲成av人影院| 日韩成人精品中文字幕电影| 99精品丰满| 丝袜熟女一区二区三区| 国产免费av在线| 色欲久久久久久综合网综合网| 综合99在线| 99碰碰碰| 手机在线日韩视频中文字幕| 九九熱最新視頻| 新99思思视频| 人人干AV| 这里只有精品久久| 亚洲精品大片| 五月婷婷综合在线亚洲视频| 超碰在线94| 五月天三级久久| 色九月婷婷| 这里只有精品日韩精品| 五月天久久丁香| 丁香五月激情网| 色五月婷婷丁香五月| 丁香五月综合福利视频导航| 婷婷亚洲色| 天天干天天插| 五月婷婷六月丁香| 黄色av高清| 停停五月色宗合| av网址在线| 亚洲视频丁香网va| 欧美英丁香开心快乐六月天网| 99操逼| 日本三级黄色大片| 玖玖婷婷色欲| 久久婷婷五月综合色奶水99啪| 成人做爰A片免费看网站找不到了| 99热大香蕉| 欧美色骚婷婷五月天| 五月丁香网中文字幕| 涩涩涩五月天| www色色com| 97超喷视频在线观看| 成人婷99最新| 亚洲丁香网| 99精品免费欧美小视频| 六月婷婷五月天| 五月婷婷六月激情| 五月天婷婷社区久久综合| 丁香六月婷婷五月天| 影音先锋人妻出差| 大香蕉九九| 五月天色婷婷网| 丁香五月欧美色综合| 性做久久久久久久免费看| 色99综合色88| 九九热在线亚洲免费视频| 99亚洲色色| 婷婷的99视频网站| 99久久婷婷精品视频| 九九九九中文字幕| 婷婷激情鹿城五月天| 九月色婷婷综合| 人妻内射一区二区在线视频| 99精品在线观看视频| 激情伊人五月婷婷久久| 色偷偷五月天| 色综色网| 激情六月丁香综合| 亚洲婷婷丁香| 98热精品| 五月丁六月婷| 99在线观看| 亚洲xx网| 成人超碰Av| 久久98| 五月深情久久| 79成人网| 久久九九综合| 91美女被操| 激情九九综合网| 天天干天天爽| 九九热99视频| 久久人妻伦理| 91 影音先锋| 91操碰| 丁香六月婷婷| www.91五月| 色五月丁香总合网| 狠狠干夜夜干| -91九色大屁股| 久久综合网免费视频| 五月丁香精品| 色婷婷久久天天性爱| 五月草影视| 男女啪啪做爰高潮无遮挡| 色五月首页| 色婷婷无吗| 天天色天天爱天天爽| 亚洲色婷婷| 综合婷婷| WWW.99热| 成人免费高清在线播放| 丁香五月天色婷婷| 一区=区操屄高清大全av| 天天干-天天日| 99在线观看| 色九九综合| 蜜乳中文字| 色狠狠色噜噜AV天堂五区| 久久婷婷啪啪视频| 婷婷久热| 色综合丁香| 婷婷久久五月天丁香| 伦乱人妻| AAA亚洲AV| 亚洲妇女熟BBW| 六月婷婷无码| 天天日天天插| 69午夜成人影片| 99精品成人无码A片观看金桔 | 开心激情五月天网| 色综合久网| 精品久久久人妻| 9久9久9久女女女九九九一九| 色六月天| 热99热久| 爱婷婷都市激情| 丁香色影院| 色激情五月| 婷婷影院欧美| 五月天丁香成人| 激情五月天色色色| 五月婷婷综合在线| 天天久综合网永久入口17v| 色婷婷狠| 亚洲国产色婷婷| 婷婷综合五月天| 亚洲视频色色| 六月丁AV| 久久日韩婷婷五月| 国产精品成人AV在线| 全高清无码视頻| 亚州色婷婷| 99热福利| 99国产精品白浆在线观看免费| 五月天激情国产综合AV| 99在线看视频| 欧美色性色好| 久久五月视频| 人妻丰满精品一区二区A片| 第四色色六月色综合| 中字幕视频在线永久在线观看免费 | 热九九精品| 婷婷丁香五月天综合AV| 粉嫩AV久久一区二区三区| 热这里| 99玖玖免费视频| 丁香婷婷久久| 婷婷色色综合| 亚洲第一综合| 26uuu视频欧美| 国产SUV精品一区二区883| 婷婷五月天成人网站| 变态 另类 在线 | 狠狠婷婷综合| 五月综合激情网| 99在线精品观看99| 久久久国产精品黄毛片| Www.激情| 在线不卡视频| 狠狠操狠狠色| 欧美日韩123| 婷婷中文在线| 国产黄大片在线观看画质优化| 狠狠干五码| 色月丁| 97色婷| 九九这里精品| 五月丁香黄色| CHINESE熟女老女人HD视频| 极品人妻videosss人妻| 丁香九月综合激情| 丁香婷婷成人在线播放| 久久五月网| 婷婷色色亚洲| 九九热在线精品| 99色视| 天天操天天国产三级片处女学生妹| www五月| 婷婷爱在线观看| 99在线资源视频| 久久9热| 婷婷色色播五月天| 丁香色综合| 九九综合九| 五月久久婷婷丁香| 思思热久久爱| 天天天天天天天干| 91在线操| 国外亚洲成AV人片在线观看| 狠狠干无码| 婷婷在线五月天观看| 久热伊人9| 成人午夜天| 啪啪99| 五月婷久久| 色天堂A| 江苏少妇性BBB搡BBB爽爽爽| 91婷婷在线| 这里只有精品视频在线看| 97国产精品女人碰碰| 日韩99视频| 丁香五月天BBw| 99热99ai| 99riAV国产精品视频| 无码成人播放器| 91丨九色丨白浆秘| 婷婷色五月天在线| 亚洲精品色色色| www.99久久久| 亚洲免费看片| 五月丁香人妻| 懂色av粉嫩av蜜臀av| 狠狠狠狠免费| 狠狠色丁香乆乆| 婷婷激情九月| 五月天啪啪啪| 亚洲六月婷| 另类的婷婷| 一区视频网站| 《久久综合九色综合97婷婷| AAA亚洲AV| 激情av| 六月激情婷婷综合| 99热人人操人人操| 五月天丁香久久综合 | 成人免费在线电影| 久久五月情| 先锋影音男人的天堂AV| 国产精产国品一二三在观看 | 99热精品网| 色噜噜婷婷| 久9免费视频| 青青艹b| 欧美电影在线观看| 中文字幕人妻熟女在线| 天天综合网站| 五月天激情综合| 五月丁香啪啪网| 日韩久热| 久久婷婷丁香| 六月色播| 久久9精品| 婷婷五月综合啪| 99色视频在线观看| 思思99re这里只有| 五月激情婷婷播播网| 丁香五月天天日| 夜夜骑操AV| 婷婷综合另类小说| 香蕉久久国产AV一区二区| 色五月色五天色情网| 五月停停色色丁香| 91精品久久久久久| 超碰99热| 高潮毛片遮挡费高一百度| www久久久| 色呦呦美女| 九九热10| 综合婷婷| 天天看片日日夜夜| 婷婷精品在线| 久久久久人妻精选| 五月丁香六月婷婷欧美综合| 热99在线| www.日韩国产| 成人婷婷| av色色国产| 九九色逼| 日本eVa一区=区视频| 五月天色软件| 色色色婷婷| 国产综合婷婷| 色综合中文| 婷婷五月天首页激情| 人人草人人爱| 五月丁香色综合| 亚洲天堂啪啪| 欧美在线视频99| 五月婷婷六月激情| av在线婷婷| 久久久香港| 色v综合网| 国产 码在线成人网站| 五月丁香激情五月天| 欧美97p| 色亚洲欧洲| 9有码中文| 97av在线视频| 9久热精品在线视频| 婷婷丁香五月天操逼| 大香蕉狼人久久| 99小视频在线| 色五月丁香激情视频| 伊人五月丁香| 二色AV| 99这里有精品| 欧美日韩成人h| 欧美色图天堂网色| 激情丁香五月婷| 狠狠色丁香久久婷婷综合五月| 久久人人妻| 久久一热| 丁香婷婷五月香蕉91| 日本久草福利| yellow视频在线观看91| 琪琪理论片| 激情5月婷婷| 91久久电影| 狠狠操综合| 色婷大香蕉| 开心五月婷婷五月| 99热这里只有精品搜| 在线天堂9| 日本欧美成人片AAAA| 色天使久久综合| 97操在线视频| 丁香五月停停基地| 日本欧美啪啪| 日韩综合网络男女香蕉a片| 森林影视大全,最好看的2019年视频| 日本社区五月天激情| 99天堂网| 1024在线视频| 狠狠操天天操| 亚洲激情综合| 9久久精品| 亚洲av网址| 婷婷激情综合色五月久久,色婷婷丁香花,丁香婷婷五月情天,久久婷婷五月综合色 | 色情久久久| 超碰99资源站| 日韩黄在免| 亚洲另类婷婷综合| 丁香五月天av| 中文字幕在线日亚州9| 色婷婷啪啪综合网| 久1色色| 操操自拍| 色色色.COM| 五月天com| 艹色18p| 久久6这里只有精品| 伊人玖玖婷婷| 操逼电影免费看| 欧美激情五月天婷婷| 婷婷在线激情| 97碰在线视频| 国产欧美第五十五页| 色综合久久88色综合中文字幕| 国产成人网站在线观看| 丁香五月婷婷欧美成人色图| 99在线视频精品| 99免费| 色原狠狠综合| 九九热视频免费观看| 婷婷激情六月综合| 99干在线视频| 婷婷播播五月天| 狠狠色丁香| 六月丁香激情| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 五月丁香色| 久久五月天影院| 五月香蕉综合| 欧美色99| 婷婷五月天中文字幕| 高清激情av在线观看| 大香蕉九九| 91日视频| 狠狠人人婷婷| 婷婷新网址| 婷婷色五月色妇| 色五月色图| 日本123区日韩欧美不卡在线看| 久久99热精品a片在线观看| www.狠狠| 9人人操人人看| 婷婷激情欧美| 五月丁香六月婷| 五月天丁香网| 五月婷婷黄色| 综合视频久久| 激情五月天啪啪| www五月婷婷| 婷婷成人综合免费视频| 色婷婷六月天| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 综合久久婷婷五月丁香| 成人电影AV在线观看| 9999热免费视频视频| 色婷婷色五月综合| 香蕉影院色| 丁香五月婷婷欧美成人色图| 丁香五月婷婷av影院| 五月婷婷深爱六月| 色婷婷久久| 中文字幕婷婷在线| 日本婷婷色日| 99热第一页| 99热这里全都是精品| 日本九九九九九九| 婷婷五月天色| 色色色色色综合| 五月天婷婷在线播放| 碰碰人人漕| 成人婷婷| 99在线公开视频| 激情婷婷五月天| 婷婷五月天成人在线视频| 丁香五月天堂| 草操网| 免费无码毛片一区二区A片| 国产六月婷婷| 日日操夜夜擼| 五月丁香成人版| 亚洲AV成人精品网站在线播放| 五月天激情子轮| 日韩有码一区| 日本色五月婷婷| 97五月天婷婷综合激情网| 91ncm视频| 國語久久婷| 超碰人人在线| 日本婷婷丁香五月| 精品视频二级九九| 天天成人综合视频| 影音先锋色婷婷| 久久五月天视频| 亚洲情色一区| 狠狠色噜噜狠狠狠888| 天天爽天天弄| 1024国产在线| 五月色婷婷综合| 色婷成人狠干| 色播五月丁香| 丁香六月色情| 亚洲图色五月天| 五月丁香六月激情综合| 日韩成人中文字幕| 激情婷婷综合五月少妇| 丁香五月 激情文学| 五月丁香啪啪综合| 天天AV导航网| 97操女视频| 99色综合网| 五月天婷婷自拍图片在线观看| Www.久久| 久久综合中文| 中文不卡一二三区| 婷婷香蕉视频| 色五月婷婷丁香五月| 欧美婷婷五月激情| 五月综合激情图片| 亚洲激情五月| 色婷婷五月天不卡| 久久永久视频| 婷婷久久网| 九九性视频| 黄网在线播放| 激情五月婷婷视频| 久99久在线观看| 婷婷丁香五月视频| 婷婷五月天大香蕉| 久久久久婷婷| 五月丁香色| 99热这里在线精品| 久超免费视频| 深爱婷婷网| 日日夜夜狠狠干| 丁香五月婷婷啪啪| 亚洲成人电影在线免费观看| 九九99在线免费在线观看视频| 伊人丁香婷婷东京| 五月天丁香成人| 久久久av久av久片一区二区| 婷婷射图| 欧美亚洲婷婷五月| 日韩成人中文字幕| 五月精品99综合| 久久总和99| 米奇影视资源婷婷狠狠色激情欧美五月丁香| 9精品视频在线| 熟女少妇内射日韩亚洲| 色色五月天网站| 97五月天婷婷| 玖玖资源站国产| 日韩在线一级| 狠狠色 综合色区| 五月丁香色| 婷婷五月天综合在线| 开心久久爱五月天| Www.se.久久| 色婷婷久久| 色五月欧美| 久8色色| 亚洲视频a| 天天综合91入口| 影音先锋日本三级资源| 思思热视频在线| 天天干天天操天天射| 日本成人小说婷婷六月| 婷婷五月激情热播| 99毛片| 91seAV| 99视频精品| 人人爽欧美婷婷久久久五月丁香| 任你搞网站| 五月婷婷色色爱| 日本五月婷婷| 婷婷五月综合体验看| 91丨九色熟女丨首页| 婷婷色丁香五月| 婷婷免费无马| 久久久人人操A V| 成人 在线观看国产| 狠狠干五月天| 色婷婷电影网| 五月婷婷综合网| A久网| 婷婷激情五月天色| 99re在线视频精品,这里只有精品18,| 99热第一页| 黄色av网站在线免费播放| 伊人在线视频| 色播丁香| 丁香五月香蕉| 人人操91| 天堂在线9| 深爱婷婷网| 久久偷拍综合五月天| 婷婷伊人五月| 美女要搞搞天天搞搞搞网站| 九九热视频网站| 激情五月婷婷丁香六月| 色琪琪一综合久久激情五月视频| 久草婷| 五月天大香焦| 五月综合激情啪啪啪啪啪| 午夜天堂一区人妻| 69精品人人人人| 亚洲激情另类| 大香蕉啪啪啪| 超碰人人色| 99激情网| 六月婷婷综合激情| 五月婷婷综合影院| 99精品小视频| www.五月瑟| 婷婷五月婷婷五月| 夜夜夜叫天天天做| 色情五月天首页| 久色视频首页| 五月激情综合婷婷| 五月丁香婷婷色| 久操激情| 日本在线视频www色| 亚洲区视频| 色呦呦免费观看| 另类天堂| 天天色一道本综合婷婷| 深夜男女福利刺激影院一区完整| 超碰免费99| 丁香婷婷久久 | 丁香婷婷五月综合| 五月丁香成年黄色| www.无码com| 婷婷精品在线| 99精品在线播放| 综合色五月| 婷婷五月综合在线| 密黄站| 再綫Av免费視品| 五月婷婷综合色啪首页| 婷婷五月骚厕所| 天天插,天天射| 六月婷婷八月丁香| 色99日韩| 五月天色影院| 六月天婷婷| 亚洲精品一区中文字幕乱码| 少妇出轨做爰高潮A片| 97色综合视频| 久久99精品久久久久久噜噜| 99久久婷| 色必久悠悠影院| 五月天婷婷成人资源站| 五月婷婷激情综合网 | 香蕉人在线香蕉人在线 | 嫩草视频在线观看| 26UUU精品一区二区| 亚洲熟妇AV乱码在线观看| 亚洲电影中文字幕| 色吊丝永久访问网址| 九九色影视| 国产五月天激情小说| 激情五月综合网最新 | 日本色天堂| 97色色色| 色婷婷在线视频观看| 亚洲一区国产传媒| 操操操av| 天天综合社区| 五月天婷婷久久| 久久久国产精品黄毛片| 丁香五月天婷婷大香蕉| 97人人操在线| 五月在在观看| 丁香婷婷影院| 久99热| 丁香色色五月| 久久香视频| 久久人操| 五月丁香六月婷婷综合网| www激情com| 玖玖爱资源站| 无码人妻丰满熟妇奶水区码| 69精品人人人人| 97干在线看| 人人亚洲| 亚洲婷婷激情五月天| 成人短视频在线| 又大又粗九一在线| 日本九九视频| 伊人国产婷婷五月天| 人人操AV| 九九在线热九九在线热99热| 97人操人免费视频| 思思热性操| 九九無妻| 婷婷五月花| 色婷婷丁香AV综合| 激情综合五月婷| 天天摸人人摸| 99视频精品在线| 极品少妇婷婷五月| 久鲁鲁色网| 99九九视频精彩在线| 欧美性猛交XXXX乱大交极品| 99热在线资源| 99惹精品视频| 大香蕉AV在线| 日操夜操天天操不卡| 久操婷婷| 玖玖热视频| 逼特逼在线免费播放| 激情久久五月天| 五月婷婷手机在线| 99热首页| 99碰在线视频| 色婷婷基地| 婷婷五月激情中文字幕| 成人亚洲精品久久久久| 五月婷婷xxx| 欧美日本另类| 日本三级成人秘书精品片| 97碰碰人人| 五月婷婷综合在线视频小说| 亚洲精品又粗又大又爽A片| 另类激情四射| 色欲日日躁| 婷婷99狠狠| xxxx五月天色色| 五月综合激情视频| 色色婷婷五月天| 五月天丁香婷| 五月婷婷激情综合av| 97亚洲视频在线| 国产永久一二一起草| 99九色视频在线观看| 日本人妻操| 艹| 99久久99九九99九九九| 91精品综合久久婷婷九色| 久久这里只有欧美| 精品影院| 五月天婷婷一起草| 婷婷九九| 婷婷五月欧美| 九九爱激情| 亚洲精品V天堂中文字幕| 色综久久AV| 成人看片网站| 色五月婷婷91| 色停停五月,在线观看| aaaa久久| 26uuuavcom| 天天爽天天爽| www色五月| 久色激情| 1024亚洲| 精品久久久人妻| 69热91天堂| 26UUU在线观看| 香蕉AV福利精品导航| 丁香五月天欧洲在线| 热久精品| 久久三级视频| 日韩性视频| 性生活视频98791| 久久婷婷五月| 操操日韩| 色色日本| 91天堂网综合| 综合色播| 丁香五月婷婷偷拍| 大婷婷色呦呦噜噜色呦呦噜噜| 一区二区传媒视频| 思思热在线观看| WWW·色色色·COM| 五月丁香激情婷婷| 超碰91人人操| 舔色婷婷| 极品少妇婷婷五月| 丁香五月天论坛| 4399在线观看免费高清黄色视频| 六月丁香五月婷婷| 久久婷婷网| 欧美色图天堂网| 天天搡日日搡aaaaⅩ| 亚洲AV成人在线| 9+1视频网址| 成人短视频在线观看| 久久久久久草黄色片AV在线观看| 亚洲V国产V欧美V久久久久久| 五月丁香拍拍激情综合| 久久久性爱视频| 五月婷婷激情四季| 97操碰| 互月天综合| 亚洲天堂碰碰婷婷| 婷婷操超碰| 亚洲综合九九| 99热色精品| 亚洲五月六丁香激情| 日日躁夜夜躁狠狠久久AV| 婷婷五月天六月| 免费看片在线观看| 久9久9热久热| site:xmssd.com| 色伊人91在线视频| 天天干狠狠艹| 亚洲AV成人无码精品| 伊人激情影院| 亚洲综合1024| 极品人妻VIDEOSSS人妻| 另类图片婷婷五月天| 亭亭玉月丁香| 9l视频自拍九色9l视频自拍九色9l社区| www久| 性做久久久久久久免费看| 亚洲噜色| 亚洲av成人电影在线观看| 综合激情在线视频| 五月丁香啪啪啪免费看| 伊人丁香五月天丁香在线婷| 深情五月天| 五月丁香| 色五月综合婷婷| 婷婷五月天免费99| 免费在线观看欧美激情xx小视频| 超碰电影在线播放| 超碰九色| 五月天色裸体视频| 九九这里是免费的视频5| 日韩aaaaa| 天天干天天射色综合| 亚洲无码11| 亚洲亚洲人成综合网络| 天天色综合网1| 欧美日韩国产一区二区| 人人播| 伊人五月天婷婷| 欧美三级欧美一级| 久久九九色| 色婷婷丁香中文在线播放| 99超碰在线观看| 99热国产| 99re26视频| 亚洲成人无码专区| 成人五月天丁香婷| 五月综合激情图片| 丁香五月激情月| 亚洲天堂久久| 激情综合网激情五月天| 5月婷婷视频网站综合| 97婷婷五月激情六月丁香伊人| 夜夜爱网站| 婷婷五月天第三页| 99综合色色色| 色开心五月婷婷丁香HD| 亚洲第一第二网站| 五月激情六月婷婷| 热中文字幕| 日韩成人电影Av| 激情综合久久| 久久综合婷婷五月| 婷婷性爱无码视频| www99久久| 五月桃花网综合| 夜夜干 夜夜操| 日日噜狠狠色| 激情网 五月天| 91互操| 人人操人人妻| 激情五月天影院| 五月丁香六月激情欧美综合| 激情综合五月激情XXXX| 亚洲小电影在线观看黄999| 无码视频国内精品久久久| 日本99视频| 日本五月天一页| 2050人人操免费工开爱| 一级二级色大片| 操老逼综合网| 老司机伊人| 婷婷五月天亚洲五码| 狠狠操天天日| 99re思思热在线视频| 丁香五月最新网址| 电影91久久久| 99综合| 99久久网站| 久久五月天婷婷| 这里只有精品69|