欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

CNN+LSTM在線流量分類:從PCAP預(yù)處理到實時預(yù)測完整指南

CNN+LSTM在線流量分類:從PCAP預(yù)處理到實時預(yù)測完整指南 簡介這是一份面向高校課程設(shè)計或期末大作業(yè)場景的在線流量分類項目整體采用CNN與LSTM相結(jié)合的時空神經(jīng)網(wǎng)絡(luò)可對正常業(yè)務(wù)流量、惡意軟件流量及網(wǎng)絡(luò)攻擊流量進行實時識別與可視化展示。項目已完成全部代碼調(diào)試在導(dǎo)師指導(dǎo)下獲評97分下載后即可直接運行適合計算機、網(wǎng)絡(luò)安全相關(guān)專業(yè)學(xué)生作為從模型構(gòu)建到實驗驗證的完整參考。壓縮包共24個文件涵蓋6個Python源碼包含CNN分類器、LSTM分類器、CNNLSTM混合分類器及數(shù)據(jù)預(yù)處理腳本、3個CSV數(shù)據(jù)文件訓(xùn)練數(shù)據(jù)、測試數(shù)據(jù)與預(yù)測結(jié)果、模型參數(shù)與詞表文件、實驗報告PDF、使用手冊docx以及可視化圖片等整體約23.7MB目錄按功能劃分清晰便于按需調(diào)用與二次開發(fā)。目前已有192人學(xué)習下載。資源中附有解析思博倫官方流量包得到的URL級訓(xùn)練數(shù)據(jù)與測試集可穩(wěn)定復(fù)現(xiàn)93.5%準確率的在線分類結(jié)果同時提供完整的訓(xùn)練、測試流程腳本和模型摘要幫助理解CNN空間特征提取與LSTM時序特征提取的結(jié)合方式。1. 在線流量分類為什么傳統(tǒng)方法接不住現(xiàn)代流量CNNLSTM補上了什么在邊界路由器或安全設(shè)備上每秒鐘要經(jīng)過成千上萬個網(wǎng)絡(luò)流。你要做的是把其中的視頻、網(wǎng)頁、P2P下載以及混在里面的惡意流量一條條認出來。傳統(tǒng)做法靠端口號猜可如今大量服務(wù)走443、隨機端口和QUIC端口早已失去區(qū)分度DPI能看協(xié)議特征但遇到加密流量和高速鏈路性能和隱私都是問題?;贑NNLSTM的時空神經(jīng)網(wǎng)絡(luò)把流量當時空信號來讀CNN抓空間特征即報文載荷的字節(jié)分布LSTM抓時間特征即流內(nèi)報文的先后規(guī)律。這套方案能在流開始的頭幾個報文就給出分類結(jié)果不必等整條流結(jié)束。適合做網(wǎng)絡(luò)運維、安全分析和相關(guān)畢設(shè)的人照著源碼加文檔就能復(fù)現(xiàn)訓(xùn)練與在線分類流程。2. 流量數(shù)據(jù)預(yù)處理把PCAP原始報文變成CNNLSTM張量的三個關(guān)鍵環(huán)節(jié)流量分類項目里真正花時間最多的不是搭模型而是把原始pcap規(guī)整成模型能吃的張量。CNNLSTM分類器的輸入是固定形狀的數(shù)值矩陣可pcap里是長度不一、方向混雜、協(xié)議各異的二進制報文。下面三個環(huán)節(jié)是完整鏈路先做流切分再做報文截斷與填充最后做字節(jié)歸一化。每一步都直接影響模型精度參數(shù)也最容易在這三個環(huán)節(jié)里翻車。源碼包里一般也是按這三個函數(shù)組織數(shù)據(jù)準備腳本拿到手先看這幾個常量對不對得上你的數(shù)據(jù)集。2.1 為什么不能把原始pcap直接喂給神經(jīng)網(wǎng)絡(luò)神經(jīng)網(wǎng)絡(luò)要求定長輸入而一個pcap里從64字節(jié)的TCP心跳包到1500字節(jié)的巨型幀都有。其次IP地址、端口這類頭部字段受采集環(huán)境影響很大同一臺機器換個網(wǎng)段數(shù)值族就會整體變化模型學(xué)到“某個IP屬于某類應(yīng)用”只是捷徑不是泛化能力。再者原始字節(jié)取值0到255不做歸一化就讓卷積層輸入數(shù)值范圍偏大訓(xùn)練初期梯度極易震蕩。所以常見做法是只取傳輸層載荷并且截斷到固定長度。頭部字段在傳統(tǒng)流量分類里能提高不少準確率但換環(huán)境后衰減非常明顯CNNLSTM方案里我更傾向于放棄頭字段純靠載荷字節(jié)分布。底層原因是載荷內(nèi)容直接反映應(yīng)用協(xié)議本身而頭字段反映的是網(wǎng)絡(luò)拓撲和會話狀態(tài)后者與我們要分的目標類別并不穩(wěn)定相關(guān)。2.2 流切分與五元組歸并從混合報文到結(jié)構(gòu)化流序列拿到pcap后第一步是按五元組把報文聚成流。五元組是源IP、源端口、目的IP、目的端口和傳輸協(xié)議。需要特別注意同一個TCP連接正反兩個方向的報文要放進同一條流并全部按時間戳排序這叫雙向流歸并。原因很簡單多數(shù)應(yīng)用是請求-響應(yīng)模式LSTM必須同時看到請求和響應(yīng)兩個方向的報文才能學(xué)到“發(fā)請求、等響應(yīng)、再發(fā)請求”這種時間節(jié)律。如果只取單向模型看到的是一半對話許多對交互敏感的協(xié)議會認錯。下面是一份基于dpkt的流切分代碼處理標準pcap格式。如果你的抓包文件是pcapng格式先轉(zhuǎn)成pcap再跑dpkt只解析經(jīng)典pcap封裝。import dpkt from collections import defaultdict def build_flows(pcap_path, idle_timeout60.0): 按五元組聚合雙向流并按時間戳排序。 idle_timeout: 相鄰報文間隔超過該秒數(shù)切分為新流。 raw defaultdict(list) # key: 規(guī)范化五元組, value: 報文列表 with open(pcap_path, rb) as f: reader dpkt.pcap.Reader(f) for ts, buf in reader: eth dpkt.ethernet.Ethernet(buf) if eth.type ! dpkt.ethernet.ETH_TYPE_IP: continue ip eth.ip if ip.p not in (dpkt.ip.IP_PROTO_TCP, dpkt.ip.IP_PROTO_UDP): continue if ip.p dpkt.ip.IP_PROTO_TCP: l4 ip.tcp else: l4 ip.udp # 雙向流歸并對端點統(tǒng)一排序保證正反方向是同一條流 a (str(ip.src), l4.sport) b (str(ip.dst), l4.dport) key (ip.p, a if a b else b, b if a b else a) raw[key].append((ts, ip, l4)) flows [] for key, packets in raw.items(): packets.sort(keylambda x: x[0]) # 按時間戳升序 seg [packets[0]] for pkt in packets[1:]: if pkt[0] - seg[-1][0] idle_timeout: flows.append(seg) # 超時切分 seg [] seg.append(pkt) if seg: flows.append(seg) return flows這段代碼里有兩個參數(shù)值得解釋。idle_timeout是最常被忽略的TCP長連接可能持續(xù)十幾分鐘如果整條連接算一條流序列過長LSTM在長序列上既慢又難訓(xùn)練。常見取值30到120秒間隔超過就認為會話斷開拆成多條子流。五元組key的排序歸并是雙向流的關(guān)鍵如果直接用原始五元組不排序同一連接的兩個方向會被當成兩條流訓(xùn)練時方向歧義會讓模型時好時壞。另外這個階段要做一次明顯的過濾去掉pure ACK、純控制報文和純重復(fù)報文。它們載荷幾乎為空會稀釋流內(nèi)的有效序列讓CNN在補零區(qū)浪費計算。最好在聚合前根據(jù)TCP標志位過濾只保留帶載荷的報文參與建模。2.3 報文截斷、填充與載荷歸一化變長報文變定長矩陣得到流以后要把流內(nèi)每個報文轉(zhuǎn)成一個定長向量這里的取舍點是取多長。常見做法是取傳輸層載荷的前512字節(jié)。為什么是512TCP報文負載長度分布非常偏斜大量報文只有幾十到幾百字節(jié)512已經(jīng)覆蓋了相當比例的載荷再長CNN計算量明顯上升準確率并不會跟著漲。對明文HTTP、DNS這類流量前幾十字節(jié)往往就是方法名、域名、查詢類型等關(guān)鍵標識512足夠充裕。載荷不足512字節(jié)的報文要做填充最常用的是補零。注意不要用隨機值填充補零能讓CNN把填充區(qū)學(xué)成“恒定的無信息模式”隨機填充只會增加訓(xùn)練噪聲。最后把字節(jié)從uint8歸一化到[0,1]浮點整體除以255即可。這一步在CNN訓(xùn)練里屬于標配不做歸一化時第一層卷積的梯度容易被大數(shù)值主導(dǎo)學(xué)起來特別費勁。import numpy as np import dpkt MAX_PACKET_BYTES 512 # 單報文載荷截斷長度 MAX_PACKETS_PER_FLOW 50 # 單流最多保留報文數(shù) def get_payload(ip): 提取傳輸層載荷兼容部分dpkt版本data屬性解析異常的情況。 try: if ip.p dpkt.ip.IP_PROTO_TCP: return bytes(ip.tcp.data) if ip.p dpkt.ip.IP_PROTO_UDP: return bytes(ip.udp.data) except AttributeError: # 老版本dpkt不自動解析data退回取傳輸層報文整體切片 if ip.p dpkt.ip.IP_PROTO_TCP: return bytes(ip.tcp) if ip.p dpkt.ip.IP_PROTO_UDP: return bytes(ip.udp) return b def flow_to_tensor(flow_packets): 把一條流轉(zhuǎn)成 [T, M] 的float32矩陣T流內(nèi)報文數(shù)M單報文字節(jié)數(shù)。 seq [] for _, ip, _ in flow_packets[:MAX_PACKETS_PER_FLOW]: raw get_payload(ip) if len(raw) MAX_PACKET_BYTES: raw raw[:MAX_PACKET_BYTES] # 截斷 else: raw raw b\x00 * (MAX_PACKET_BYTES - len(raw)) # 補零 arr np.frombuffer(raw, dtypenp.uint8).astype(np.float32) / 255.0 seq.append(arr) while len(seq) MAX_PACKETS_PER_FLOW: seq.append(np.zeros(MAX_PACKET_BYTES, dtypenp.float32)) # 流級補零 return np.stack(seq) # 形狀 [50, 512]MAX_PACKETS_PER_FLOW值得單獨說。流內(nèi)報文數(shù)量差異極大一個HTTP短流可能只有幾個報文一個視頻流可能上萬。LSTM展開步數(shù)太多計算代價和梯度風險同時上升。常見折中是保留前20到100個報文。只保留前50個長流被截斷模型看到的是流的“開頭段”這一點和在線分類場景正好一致因為在線推理本來就不應(yīng)該等整條流結(jié)束。想讓模型更擅長短流決策就把這個值調(diào)到10到20想走長流路線可以調(diào)到100但要接受更長的訓(xùn)練時間。預(yù)處理腳本寫完可以用公開數(shù)據(jù)集省去自己抓包的麻煩。CICIDS2017、UNSW-NB15這類數(shù)據(jù)集是常見起點但每份對“流”定義略有差異CSV字段命名、pcap格式都要微調(diào)。不要指望一份預(yù)處理腳本直接通吃所有數(shù)據(jù)集至少五元組字段和鏈路層封裝得先核對清楚。3. 時空網(wǎng)絡(luò)搭建與訓(xùn)練CNNLSTM的PyTorch實現(xiàn)和參數(shù)設(shè)定預(yù)處理把一條流變成 [T, M] 矩陣之后模型要做的就是從矩陣里同時提取兩類信息單個報文的局部字節(jié)特征以及報文之間的時間依賴。CNNLSTM的組合方式不是隨意拼接。下面先講清結(jié)構(gòu)分工再給一個能直接跑的最小模型。3.1 CNN管空間、LSTM管時間為什么這個結(jié)構(gòu)適合流量流量分類模型的設(shè)計有一個關(guān)鍵矛盾。對單個報文要從字節(jié)序列里提取局部模式比如HTTP方法名、TLS握手字段、DNS查詢類型這些字符串特征這是空間特征對整條流要從報文序列里提取交互規(guī)律比如請求-響應(yīng)的交替節(jié)拍、數(shù)據(jù)包到達的節(jié)奏這是時間特征。純CNN的問題是把所有報文拼成一個長向量做卷積把時間順序當成空間位置很容易丟掉“先請求后響應(yīng)”這樣的順序關(guān)系純LSTM的問題是直接把整條流的所有字節(jié)喂進去LSTM對局部字節(jié)模式的抽象能力遠不如卷積序列邊界的干擾也大。所以常見組合是CNN對每個報文獨立提取特征把空間特征濃縮成一個向量再把一組向量按時間順序交給LSTM由LSTM在流維度上建模時間依賴。單個報文之間沒有卷積關(guān)聯(lián)CNN只管把“一個報文的512字節(jié)”壓成特征報文與報文的關(guān)系全部交給LSTM。這樣模型結(jié)構(gòu)清清爽爽哪個模塊負責什么問題出了問題也好定位。卷積核大小也有講究。kernel_size7意味著一次只看7字節(jié)的局部模式這類模式對應(yīng)的是短協(xié)議串。如果數(shù)據(jù)集里頻繁出現(xiàn)較長的特征串比如某些TLS擴展字段可以考慮加一個kernel_size15的分支做多尺度卷積讓網(wǎng)絡(luò)同時看短模式和長模式。但我建議先跑通默認配置多尺度是后續(xù)優(yōu)化手段不是起步配置。3.2 最小可跑模型CNNLSTM分類器的PyTorch實現(xiàn)下面是一個最小可實現(xiàn)的雙層卷積加單層LSTM分類器。輸入是預(yù)處理階段輸出的 [B, T, M]即一批流每條流里T個報文每個報文M個字節(jié)特征。對新手來說模型定義里最容易出錯的地方是view操作和維度對應(yīng)代碼注釋里我把每一步的形狀變化都標了出來。import torch import torch.nn as nn class CNNLSTMClassifier(nn.Module): def __init__(self, feat_dim512, num_classes8, cnn_out64, lstm_hidden128, num_layers1): super().__init__() # CNN部分對每個報文獨立做空間特征提取 self.cnn nn.Sequential( nn.Conv1d(1, 32, kernel_size7, padding3), nn.ReLU(), nn.MaxPool1d(2), nn.Conv1d(32, 64, kernel_size5, padding2), nn.ReLU(), nn.AdaptiveAvgPool1d(cnn_out), # 輸出 [B*T, 64, cnn_out] ) # LSTM部分對報文特征序列做時間建模 self.lstm nn.LSTM( input_size64 * cnn_out, hidden_sizelstm_hidden, num_layersnum_layers, batch_firstTrue, ) self.dropout nn.Dropout(0.3) self.classifier nn.Linear(lstm_hidden, num_classes) def forward(self, x): # x: [B, T, M]Bbatch_sizeT流內(nèi)報文數(shù)M報文特征維度 B, T, M x.shape x x.view(B * T, 1, M) # 拆開每個報文單獨過CNN cnn_feat self.cnn(x).view(B * T, -1) cnn_feat cnn_feat.view(B, T, -1) # 恢復(fù)序列形狀 [B, T, 64*cnn_out] lstm_out, _ self.lstm(cnn_feat) # [B, T, lstm_hidden] last lstm_out[:, -1, :] # 取最后時間步 return self.classifier(self.dropout(last))forward里的流程可以拆成三步理解。第一步把batch維度乘上序列長度變成B*T個獨立樣本分別過CNNCNN輸出拉平得到的是“每個報文一個稠密特征”第二步把特征重新折疊成[B, T, feature_dim]恢復(fù)序列結(jié)構(gòu)第三步交給LSTM最后取序列末尾的隱狀態(tài)作為整條流的表示接全連接層分類。batch_firstTrue的作用是讓輸入輸出形狀都以batch開頭方便檢查和調(diào)試。參數(shù)對應(yīng)關(guān)系要擺清楚cnn_out控制每個報文被投影成多長的特征向量這個值越大LSTM輸入維度越高模型容量越大但過擬合風險也上升lstm_hidden是LSTM隱狀態(tài)維度一般取64到256。num_layers設(shè)為1時LSTM內(nèi)部dropout參數(shù)不生效這是PyTorch的API限制只有層數(shù)大于等于2才啟用別在這個細節(jié)上多做文章。3.3 訓(xùn)練策略與參數(shù)表讓loss平穩(wěn)下降而不是來回震蕩模型定義好后訓(xùn)練循環(huán)本身沒有特別之處但LSTM模型比純CNN多一個必須寫的操作梯度裁剪。時間步一多反向傳播經(jīng)過展開的LSTM之后梯度范數(shù)很容易超過幾十不裁剪的話loss會在某個batch直接跳到NaN特別是學(xué)習率調(diào)大的時候。max_norm設(shè)成5.0是一個常用起點。def train_one_epoch(model, loader, optimizer, criterion, device): model.train() total_loss, correct, total 0.0, 0, 0 for x, y in loader: x, y x.to(device), y.to(device) optimizer.zero_grad() logits model(x) loss criterion(logits, y) loss.backward() nn.utils.clip_grad_norm_(model.parameters(), max_norm5.0) optimizer.step() total_loss loss.item() * x.size(0) correct (logits.argmax(dim1) y).sum().item() total x.size(0) return total_loss / total, correct / total交叉熵損失加Adam優(yōu)化器是分類任務(wù)的默認組合初始學(xué)習率1e-3。學(xué)習率調(diào)度常見做法是ReduceLROnPlateau或余弦退火我推薦配合早停一起用驗證集loss連續(xù)5個epoch不降就停保存最佳權(quán)重用于后續(xù)在線推理。注意最佳權(quán)重的加載要放在整個訓(xùn)練循環(huán)結(jié)束后統(tǒng)一執(zhí)行不要在每個epoch內(nèi)部反復(fù)讀寫模型文件磁盤IO會拖慢訓(xùn)練好幾倍。下表是我在做同類項目時常用的參數(shù)起點這些值在中小型數(shù)據(jù)集上基本能先跑出一個正常結(jié)果再根據(jù)驗證集表現(xiàn)微調(diào)。參數(shù)推薦值調(diào)整方向MAX_PACKETS_PER_FLOW50短流多調(diào)小到20長流多調(diào)到100MAX_PACKET_BYTES512明文協(xié)議多可減到256加密流量多可加到768cnn_out64過擬合調(diào)小欠擬合調(diào)大lstm_hidden128一般不超過256batch_size64數(shù)據(jù)集小用32內(nèi)存夠大用128learning_rate1e-3loss來回震蕩就降到3e-4max_norm5.0出現(xiàn)NaN降到1.0num_classes按數(shù)據(jù)集標簽類別不平衡時配加權(quán)交叉熵訓(xùn)練中怎么判斷模型狀態(tài)訓(xùn)練集準確率超過97%、驗證集還在85%以下基本是過擬合先加dropout或調(diào)小lstm_hidden驗證集準確率起伏大、訓(xùn)練集loss下不來檢查學(xué)習率和輸入是否做了歸一化驗證loss不降但訓(xùn)練loss在降也是過擬合信號。每輪epoch把準確率、loss、學(xué)習率記下來后面排查問題會非常有用。4. 在線分類落地從離線訓(xùn)練到實時流量預(yù)測的改造要點離線訓(xùn)練完成不代表能直接上線。在線流量分類的關(guān)鍵區(qū)別是模型必須在流還在進行時給出判斷而不是等整條流結(jié)束。這一章的改造要點集中在決策窗口、流緩存和吞吐壓測上。4.1 在線分類與離線評估的區(qū)別決策窗口是關(guān)鍵離線訓(xùn)練時一條流從頭看到尾標簽也是整條流的標簽。在線場景里流是邊發(fā)生邊到達的模型能看到的只有已經(jīng)到達的前K個報文。這個K就是決策窗口。K越小決策越快但對模型要求越高因為信息不完整K越大準確率會接近離線水平但可能流已經(jīng)結(jié)束了分類結(jié)果對實時管控已經(jīng)失去意義。常見做法是K取5到20模型在前10個報文左右給出首個判斷。還有一個和決策窗口配套的問題一條流的方向是動態(tài)的。同一五元組里第一個到達的報文可能是客戶端發(fā)出的SYN也可能是服務(wù)器反向的報文。在線分類器需要在緩存里同時保存兩方向的數(shù)據(jù)按時間戳交錯排列。如果在實現(xiàn)時不做交錯把兩方向分開存放LSTM看到的序列會和訓(xùn)練時不一致推理效果直接打折。4.2 流級緩存與滑窗推理一個可用的在線分類器代碼在線分類器的核心是一個流緩存表。每個活動流對應(yīng)一個緩沖隊列新報文到達時歸一化后入隊累計到?jīng)Q策窗口大小就執(zhí)行推理并清理緩存。還要處理空閑超時一條流如果后續(xù)不再有報文緩存不能一直占內(nèi)存。import numpy as np import torch class OnlineFlowClassifier: def __init__(self, model, decide_after10, max_buffer100, idle_timeout30.0, devicecpu): self.model model.to(device).eval() self.decide_after decide_after # 收集多少個報文后給出分類 self.max_buffer max_buffer # 單流緩存上限防止內(nèi)存膨脹 self.idle_timeout idle_timeout # 空閑超時秒 self.device device self.buffers {} # key: 五元組, value: [arr, last_ts] def classify(self, five_tuple, payload_bytes, ts): key five_tuple if key not in self.buffers: self.buffers[key] [[], ts] buf, last_ts self.buffers[key] # 空閑超時清理 if ts - last_ts self.idle_timeout: del self.buffers[key] self.buffers[key] [[], ts] buf self.buffers[key][0] raw payload_bytes[:512] if len(raw) 512: raw raw b\x00 * (512 - len(raw)) arr np.frombuffer(raw, dtypenp.uint8).astype(np.float32) / 255.0 buf.append(arr) self.buffers[key][1] ts if len(buf) self.max_buffer: buf.pop(0) if len(buf) self.decide_after: x torch.tensor(np.stack(buf), dtypetorch.float32).unsqueeze(0) x x.to(self.device) with torch.no_grad(): logits self.model(x) pred logits.argmax(dim1).item() del self.buffers[key] # 決策后釋放緩存 return pred return None這個類的設(shè)計要點在緩存生命周期。decide_after決定系統(tǒng)在“信息不完整”和“等待成本”之間取哪個平衡點max_buffer防止長流無限增長idle_timeout復(fù)用和離線切流相同的參數(shù)保證在線和離線對流邊界的判定一致。推理時用torch.no_grad()并切到eval()這兩行不能省否則顯存會被梯度圖吃光。在線推理框架的選擇要結(jié)合流量速率。如果每秒只需要處理幾百條新流Python類加GIL足夠如果面對萬兆鏈路建議把預(yù)處理和推理拆成兩個線程池中間用無鎖隊列銜接或者干脆用ONNX Runtime導(dǎo)出再加載省掉PyTorch的框架開銷。先跑通這個最小類再根據(jù)壓測結(jié)果決定要不要換推理后端。4.3 吞吐壓測與延遲調(diào)優(yōu)判斷模型能否追上真實鏈路速度上線前要做一次壓測。把一段標注好的pcap按報文到達順序回放給在線分類器統(tǒng)計兩個指標單報文最大處理耗時以及從流首包到達輸出分類結(jié)果的時延。如果平均單報文耗時超過報文到達間隔說明模型跟不上實時速率需要優(yōu)化。調(diào)優(yōu)方向按成本從低到高排列第一是減小decide_after少等幾個報文單流決策更早但吞吐幾乎不受影響第二是把輸入x直接搬上GPU做batch推理批量處理多個待決策流比一條條推快得多第三是換更小的CNN比如把兩層Conv1d減到一層或者把cnn_out從64降到32最后才是上int8量化或更換推理框架。壓測時注意別把抓包寫盤的開銷算進模型耗時先過濾再計時不然數(shù)據(jù)會誤導(dǎo)你。5. 在線流量分類避坑指南五個讓人翻車的典型問題這一部分是從多個流量分類項目里沉淀下來的踩坑記錄。每條按現(xiàn)象、原因、解決的順序?qū)憣φ兆约旱娜罩竞万炞C指標就能定位。5.1 類別不平衡準確率90%但目標類一個沒抓到現(xiàn)象訓(xùn)練日志顯示驗證集準確率沖到90%以上但調(diào)出混淆矩陣一看某幾類惡意流量全被分成了大類召回率基本為零。原因真實流量里樣本比例嚴重偏斜視頻和網(wǎng)頁可能占八成攻擊流量連1%都不到。交叉熵在多數(shù)類樣本的梯度主導(dǎo)下把決策邊界越推越偏模型只需要押注大類就能刷高準確率。解決訓(xùn)練前統(tǒng)計標簽分布給少數(shù)類設(shè)置更高的類別權(quán)重用nn.CrossEntropyLoss(weightclass_weights)替代默認交叉熵。若數(shù)據(jù)量允許也可以對少數(shù)類做過采樣把每條流的樣本重復(fù)拼進batch。評估時多看宏平均召回率不要只看準確率。5.2 時間泄漏隨機切分訓(xùn)練集導(dǎo)致性能虛高現(xiàn)象從同一個pcap里隨機切出70%做訓(xùn)練、30%做驗證驗證集準確率高達96%。換到另一天新抓的流量準確率直接掉到70%以下。原因同一個時段、同一批主機產(chǎn)生的流量有極強的相關(guān)性報文內(nèi)容、端口特征、時序模式都被同一個網(wǎng)絡(luò)環(huán)境污染。隨機切分讓訓(xùn)練集和驗證集混在同一時段模型等于提前看到了答案。這是時間泄漏比特征泄漏更隱蔽。解決嚴格按時間切分前70%時間的流做訓(xùn)練后30%做驗證。如果pcap跨越多天用前幾天的數(shù)據(jù)訓(xùn)練、最后一天驗證。做在線分類評估時這點尤其重要因為真正上線面對的一定是訓(xùn)練集之后的新流量。5.3 加密流量TLS流上CNN學(xué)到的東西失效了現(xiàn)象明文HTTP流量分類準確率很高把同一套模型搬到TLS流量上類別混淆嚴重很多流被歸到少量幾個大類。原因CNN的卷積核學(xué)到的是明文載荷里的可見關(guān)鍵字比如GET、POST、HTTP/1.1。TLS加密后載荷變成偽隨機字節(jié)這些模式全部消失模型退化成靠報文長度和方向猜。解決對加密流量改用TLS握手階段的明文信息做補充特征比如ClientHello里的SNI、加密套件列表、證書長度序列。常見的做法是讓CNN同時吃“密文載荷”和“握手元數(shù)據(jù)”兩個分支深挖一下可以發(fā)現(xiàn)SNI對視頻、網(wǎng)頁這類域名特征明顯的類別區(qū)分度相當高。別指望純載荷模型在加密流量上交出好答卷。5.4 梯度爆炸loss出現(xiàn)NaN或序列變長后不收斂現(xiàn)象訓(xùn)練到某個epochloss突然變成NaN或者把MAX_PACKETS_PER_FLOW從20調(diào)到100后訓(xùn)練徹底不收斂了。原因LSTM展開步數(shù)增加反向傳播路徑變長梯度范數(shù)指數(shù)級增長。學(xué)習率稍大一點更新步就沖出了正常范圍。如果輸入歸一化沒做好這種爆炸會來得更快。解決訓(xùn)練循環(huán)里加上clip_grad_norm_梯度裁剪max_norm從5.0開始仍不穩(wěn)定就降到1.0。同時確認預(yù)處理已經(jīng)做字節(jié)歸一化并適當調(diào)小學(xué)習率到3e-4。還有一個隱藏點把LSTM的batch_firstTrue確認對不然輸入維度排列不對也會出現(xiàn)不收斂的詭異現(xiàn)象。5.5 設(shè)備指紋污染模型記住設(shè)備而非記住應(yīng)用現(xiàn)象訓(xùn)練集里視頻流量幾乎來自同一臺手機模型驗證集準確率高但換一臺設(shè)備抓包驗證視頻類識別率大幅下跌。原因不同設(shè)備的TCP實現(xiàn)參數(shù)、發(fā)送窗口、TTL值、報文時間分布都有明顯差異。如果訓(xùn)練數(shù)據(jù)來源單一CNN完全可能不學(xué)“視頻內(nèi)容特征”而是學(xué)“這臺設(shè)備的網(wǎng)絡(luò)行為指紋”。這是典型的端到端模型的捷徑學(xué)習。解決數(shù)據(jù)集里盡量混合多種設(shè)備的抓包至少兩三臺不同系統(tǒng)、不同網(wǎng)卡。另一個驗證方法是留出一個設(shè)備的全部流量做驗證集看跨設(shè)備準確率是否還能保住。如果跨設(shè)備掉點明顯說明模型學(xué)偏了要從數(shù)據(jù)側(cè)補而不是從模型側(cè)補。6. 模型驗證與進階準確率會騙人按流評估才知道模型真實水平6.1 按流統(tǒng)計結(jié)果報文級指標會誤導(dǎo)你流量分類評估最容易犯的錯誤是按報文統(tǒng)計準確率。一條長流可能占幾萬個報文如果模型把這條長流分對了報文級準確率就被大幅拉高幾十條短流全錯在報文級上卻看不出什么問題。正確做法是把推理結(jié)果還原到流級別每條流只計一次預(yù)測統(tǒng)計流級混淆矩陣。如果你做的是在線分類還需要把“未決策就斷流的樣本”單獨記一類這些流在真實場景里是漏報的主要來源。6.2 短流與長流分段測試暴露模型短板另一個可靠的驗證手段是按流長度分組看指標。把測試流按報文數(shù)分成三組1到5個報文的短流、6到20個報文的中流、20個以上的長流。短流準確率低是正常的在線場景里如果能保住短流不崩潰說明決策窗口設(shè)計合理如果長流準確率也低問題多半出在線程方向排序或截斷邏輯上。進階做法是畫一條“決策時延與準確率”曲線橫軸是decide_after取值縱軸是流級準確率。用這條曲線去和業(yè)務(wù)方談“等多少個報文再報警”比拍腦袋定參數(shù)有說服力得多。最后分享一個習慣每次改參數(shù)記錄準驗證集結(jié)果時把數(shù)據(jù)集切分seed、流的定義參數(shù)、模型超參全寫進實驗備注。流量分類項目最大的坑不是模型復(fù)雜度不夠而是實驗條件不一致導(dǎo)致兩個結(jié)果沒法對比。我早期就吃過這個虧同一個模型隔三天跑出來的結(jié)果差了五個點最后發(fā)現(xiàn)是idle_timeout被人改過。先把數(shù)據(jù)管線的可復(fù)現(xiàn)性做扎實再談模型優(yōu)化順序不能反。希望這篇整理能讓你少走幾步彎路。本文還有配套的精品資源點擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
国产性爱一级| 性爱AV天堂| 五月花激情网| 成人色图情色成人网 www.5b5b5bcom 五月天| 婷婷五月丁香四射| 97伊人综合婷婷| 久久女人九九| 九九久久精品| 综合久久婷婷| 五月丁香婷婷成人网| 欧美成人精品A片免费一区99| 激情五月激情综合网| 亚洲综合五月| 538在线精品| 国产成人精品亚洲线观看| 秋霞免费视频| 黄色片avv| 色亭亭丁香五月天| 欧美VA视频| 91九色欧美| 91人人妻人人操| 成人资源在线| 97人妻碰碰碰久| 国产欧美日韩性爱| 日本特黄aaaaa| anquye五月| 五月婷AV| 婷婷综合五月| 99网| 久久综合久色欧美综合狠狠| 欧美日韩精品一区二区三区钱| 伊人五月天久久| 精品亚洲国产成AV人片传媒| 亚洲色色色色色色色色色| 99热在线极品极品| 丁香六月婷婷社区| 高清无码.com| 欧美丁香五月天| 99爱在线视频观看| 丁香五月性| 激情五月天网| 九九久99免费视频| 色播六月| 五月婷婷五月天天| 99亚洲视频| 激情五月婷| 人妻操逼视频| 狠狠色综合五月人人| 69久久久| 亚洲AV成人片无码网站| 婷婷精品在线| 天天爱天天操| 97人人干| 日本在线wwww| 久热久色| 九九性视频| 91成人电影| 激情五月天婷婷五月天| 色情成人五月天| 国产91九色| 99色色热热| 丁香五月激情婷婷激情| 思思视频这里是精品| 久久婷婷欧美| 99啪| 九九九九九999999| 色五月婷婷综合| 五月天色婷好好| WWW.开心五月天.COM| 色色色色网| 五月伊人网| 婷婷成人基地| 第五婷婷伊人丁香色| 国产xxxxx在线观看| wwwxxx五月婷婷小说| 天天做天天爽| 人妻体体内射精一区二区| 色色97丁香婷婷五月天| 99热国品免费| 丁香五月天资源网| 免费无码毛片一区二区A片| 丁香婷婷婷| 九九十99视频| 开心五月婷婷在线视频免费观看| 大香蕉伊人99| 伊人99久久| 久久精品综合色| 激情五月综合视频| 天天综合五月天| 91丨九色丨东北熟女| 丁香色情五月综合激情| 五月天色婷婷激情综合| 丁香婷婷月| 婷婷五月色天| 123草逼网| 色噜噜狠狠色综合日日免费| 日韩综合天堂| 日韩野外 无套| 91操网| 天天成人综合视频| 婷香五月激情视频| 91在线视频综合| 蜘蛛女免费观看完整版高清电影 | 色婷婷中文字母五月丁香| 在线可以看的av网址| 婷婷激情在线| 久久丁香婷婷色情综合| 色婷婷五月丁香在线观看| 五月天婷婷综合免费| 99免费在线视频| 天天肏天天肏| 婷婷深爱五月亚洲综合| 91超级碰碰| 蒲京久久无码视频| 99综合婷婷五月| 婷婷丁香18| 成人无码髙潮喷水A片| 亚洲AV无码成人精品区电影网| 思思久ren热| 日本狠狠色| 精品人妻午夜一区二区三区四区| 欧美色五月| 久久综合激情婷婷激情| 亚洲亚洲人成综合网络| 免费AAAAA网| 综合久久99| 久久久天堂国产精品女人| 国产老熟妇亲子乱对白| 狠狠草狠狠草| 丁香五月婷婷激情四射深爱激情| 九热视频| 婷婷五月色惰| www网站在线观看| 五月丁香拍拍激情综合| 99视频内射三四| www.91AV.COM| 激情五月丁香综合网站| 热思思九九| 激情四射五月天| 丁香五月偷拍| 婷婷五月欧美AA片免费| 色五月天视频| 99婷婷精品推荐在线视频| 99re66热这里只有精品| AA久久| 五月婷性爱| 九九热在视频| 五月天激情四射| 色综合中文| 岛国AV网| 婷婷色综合中心站| 人人看人人摸人人| 91狠狠色丁香婷婷综合久久狠丁香综合久久精品 | 五月婷综合性中心| 一本道在线电影| 啪啪91| 91人操人人人操人| 热99精品视频| 久操97| 色爱综合五月| 五月婷婷之综合激情| 丁香五月婷婷免费视频| 五月色丁香激情| 超碰v| 天天爽爽日日做做| 五月天婷婷在线播放| 五月丁香婷草| 棕合影院色色| 97色片| 狠狠99| 69精品人人人人人人| 激情亚洲婷婷六月| 天天爱天天天射AV| 999热成人在线综合网| 无码人妻丰满熟妇奶水区码| 四虎婷婷五月天| www99热| 色色色777| 日本九九九九| 色情五月天小说| 色婷婷综合视频| 丁香五月区| 成人综合AV| 五月婷婷综合性爱噜噜| 91ncm视频| 激情九月天天天天婷婷| 亚州操操| 色色色色综合网| 97视频91| 婷婷五月天堂网| 激情文学久久| 99热99成人| 五月激情站| 国产成人网址| 大香蕉五月天| er99免费视频在线| 99久久国产综合精品五月天喷水\| 五月天激情AAAA| 国产偷人爽久久久久久老妇APP| 亚洲综合网激情小说| 国外亚洲成AV人片在线观看| 开心五月婷婷在线视频免费观看| av婷婷六月丁香社区在线观看| 天天添天天摸天天天天做| 精品久久久91久久影视网| 狠狠狠五月婷婷六月丁香| 综合久久激情久久| 五月婷婷av| 五月天婷婷久草丁香| 九九99久久| 成人丁香五月婷| 天天日日夜夜| 婷婷五月色情天| 欧美色婷婷| 色婷五月婷婷| 色色欧美。| 色欲九区| 五月天六月色| 婷婷激情区| 九九九干精品| 欧美激情综合色综合啪啪五月| 九月av| 色婷婷综合久久久久| 色综合婷婷| 综合网激情| 激情99热| 1769在线观看欧美国产| 99热1| 色噜噜狠狠色综| 99爱精品| 女高怪谈在线观看| 国产操碰| 日本4399天堂中出| 亭亭玉月丁香| 狠狠色噜噜狠狠狠狠狠色综合久久| 日本操逼九九九九58日本操逼| 婷婷丁香五月天大香蕉| 99热偷拍| 巴基斯坦粉嫰无码视频| 欧美婷婷精品激| 色色色国产| 五月天色婷婷激情综合| 91人妻九色大屁股| 久热 91| 很很操96| 奇米影视777在线_在线观看午夜_h小视频在线观看_岛国大片 | 成人丁香五月| 操日本99| 黄网在线免费观看| 79色色免费| 狠狠色婷婷7777久综合| 亚洲色网址| 五月天性色| 婷综合六月| 国产成人av在线播放| 欧美va亚洲va| 亚洲无码免费看| 99re视频在线播放| 亚洲、热| 成人网站免费在线播放| 国产肥白大熟妇BBBB视频| 婷婷深爱五月丁香| 欧美五月丁香啪啪响视频| 婷婷五月花.97| 婷婷五月天美女21p| 99久久9| 日韩AV免费电影在线播放| 99性色| 久久久这里都是精品| 婷婷综合性爱网| 久热免费视频| 99啪视频在线观看| 丁香六月综合激情| 噜噜狠狠色综无码久久合欧美| 97色婷婷| 99色久| 五月婷婷丁香六月| 婷婷深爱五月| 亚洲激情99| 综合久久伊人| 99视频内射三四| 亚洲va在线∨a天堂va欧美va| 色播五月婷婷| 五月丁香婷色| 少妇水多A片太爽了| 五月丁香激情综合网| 99热乎| 丁香九月激情| 99在线小视频| 大香蕉福利导航| 玖玖在线视频| 极品人妻VIDEOSSS人妻| 69精品人人人人| 色色色综合网| 五月丁香色情| 亚洲乱码日产精品BD| 九九热在线精品| 成人亚洲精品| 欧美一级色| 国产成人99久久亚洲综合精品| www.日韩艹| 久久一热免费视频| 丁香五月天激情五月天激情五月天激情网| 中文网AV| 六月婷婷狠狠| 五月激情基地| 丁香五月婷综合网| 久久丁香五月| 色噜噜狠狠色综合成人99| 亚洲色无码| 亚洲aV写真天天综合网久久| 久草五月天| 日韩在线婷婷五月天综合| 五月丁香另类网| 亚洲激情综合五月婷婷啪啪| 五月丁香啪啪综合| 伊久久婷婷| 一区二区乱码视频| 日本天天色| 久操热线| 精品成人在线| 午夜日韩久久久网站| www.激情五月天.con| 三级大香蕉网| 九九国产精视频| 婷婷九月丁香天堂丁香天堂| 婷婷酒色网| 少妇做爰免费视看片| 亚洲精品亚洲人成人网| 婷婷五月色情| 婷婷婷婷婷开心无码播放| 综合在线丁香五月| 亚洲第一色色色色| 婷婷五月天堂网| 婷婷色偷拍| 激情六月婷婷啪啪| 无码激情AAAAA片-区区| 色综合色色| 超碰人人干| 99热只有这里有精品| 小视频一区| 五月天 综合 在线| Av狠狠色丁香婷| 99 re视频一区| bukadeavzaixian| 五月丁香六月| 可似看的AV| 99热精品9| 26uuu四色| 九九色精品| 丁香五月婷婷偷拍| 色玖玖玖| sewuyuetingtingiii| 日韩不卡123| 亚洲精品久久久久久久久久飞鱼 | 九九一综合精品| 久久综合激情五月天| 中文无码婷婷| 色色丁香婷婷| 噼里啪啦完整版中文在线观看 | 综合久久六月| 久久婷婷成人视频| 色五月婷婷九月| 六月丁香五月婷婷| 丁香综合久久| 久久五月丁香六月婷| 六月丁香五月天| 久久99精品久久只有精品| Av狠狠色丁香婷| 99热无码| 青青草原精品久久| 天天操天天草天天草天天| 激情五月天网页| 这里只有精品视频看看| 99精品在线下载| WWW.桔色成人.COM| 这里只有精品视频一区| 亚洲激情精品| 伊人啪啪网| 思思热久久久在线| 五月婷婷人妻| 婷婷六月丁香五月| 五月婷婷日| 亚洲第一综合| 久久亭亭电影| 久久精品性爱| 午夜天堂啪啪| 欧美人与性动交CCOO| 91啪啪视频| 天天爱天天操| 国产人妻人伦精品一区二区| 国产精品美女| 亚洲成人影视在线观看| 五月天天天色| 九九精品热| 一级黄色影片| 1024操逼| 综合99在线| 色婷婷综合电影| 丁香六月av| 丁香五月激情综合婷综| 婷婷的99视频网站| www.婷婷网| 99热6这里之有精品| 深爱激情四射| 亚洲aV写真天天综合网久久| 丁香久月| 伊人久久婷婷| 日韩成人综合网| A片试看50分钟做受视频| 久久精品一区二区三区四区| 色欲色香,www,com| 丁香五月网址| 久热这里只有精品在线观看 | 久久九九色| 玖玖在线| 九热视频| 性爱激情五月| 午夜婷婷久久| 伊人久久五月天| 六月激情久久婷婷| 天天爽天天透天天爱| 久久精品只有这| 丁香婷五月天开心六月| 亚洲综合99| 婷婷五月综合在线| 91丨九色丨国产| 中文字幕第四色.999| 久久婷婷网| 五月丁香综合啪啪啪啪啪| 26UUU在线观看| 天天天天色天天天天天干| 99性爱| 亚洲精品亚洲人成人网| 五月天网址在线刘玥| 丁香五月天社区婷婷| 久久五月天色婷婷| 色色色色色日韩午夜激情 | 襙比视频| 日本狠狠干| 五月色婷婷综合| 国产毛片精品一区二区色欲黄A片| 国产91在线视频| 2017狠狠干| 五月情丁香色| 亚洲日韩欧美综合VA| 最新色色五月天| 久久丁香| 亚洲四色五月| xxxx五月激情| 99热这里只有精品免费观看| 色色A| 99色免费观看全部| 婷婷久久99| 天天在线天天综合网色| 黄色笑话深爱激情网丁香五月婷婷啪啪啪啪啪 | 亚洲婷婷丁香五月视频| 五月天婷婷综合| 丁香五月天激情综合| 69热91天堂| 亚洲婷婷久久综合| 密乳视频| 亚洲不卡| 婷婷伊人欧美| 九九激情网| 五月丁香六月情亚洲| 婷婷久久精品| 日韩AV无码影片| 婷婷成人在线| 婷婷开心青青草| 日本色五月| 激情久久久| 五月情涩综合婷婷| 日韩成人五月天| 久久性爱视频网站| 国产精品色色| 亚洲色激情| 五月丁香花伦理电影| 日本色久| 九九热狼人| 91色在线/日韩| Www.婷婷五月| 伊人婷婷色激情丁香| 综合伊人久久| 我淫我色婷婷五月天激情四射| 五月综合激情| wwwwww.色| 二色av| 丁香五月玖玖| 可以免费看av网站| 五月天啪啪啪| 亚洲乱码日产精品BD| 色婷婷色九月| 99思思热只有在这里看| 亚洲黄色影视| 91人人澡人人爽人人看| 婷婷五月天激情综合网| 操久久网| 欧美久人人| 激情五月综合色婷婷| 激情六月丁香| 五月丁香六月婷婷综合网| 五月婷婷黄| 色播丁香| 激情四射五月天| 色婷婷久久综合丁香五月| 玖玖婷婷五月天| 操逼综合激情网| 色人久久| 日韩另类| 久久婷婷六月综合综合| 激情九九综合网| 五月丁香啪啪啪| 日韩黄色AV无码| 国产午夜精品一区二区三区四区| 国产成人99久久亚洲综合精品| 婷婷丁香五月久久| wWwCom夜操wwW| 操人视频91| OYIWbGcPu8H| 久操婷婷| 婷婷激情小说| 日韩在线视频网站| 综合网啪| 五月久久婷婷成人网| 开心五月丁香婷婷| 激情五月婷婷在线区| 中文字幕在线日亚州9| www:99热视频| 色情成人五月天| 久久久亚洲精品一区二区三区浴池 | 日韩免费乱轮网站| 狠狠爱激情网| 日韩黄色电影| 日韩美女羞羞网站在线观看| 9久热在线精品| www.99riav99| 天天综合网~91| 亚洲第一成人无码A片| 五月丁香六月| 99欧美| 99无码视频| 99操| 久久精彩视频| 久久激情网| 五月丁香啪啪| 99热9| 婷婷五月综合激情| 噜噜在线| 色伊人91在线视频| 日韩丁香涩| 极骚大香蕉伊人| 久在线88综合| 欧美日韩婷婷五月天| 亚洲激情AV| 国产亚洲在线观看| 在线成人va| 欧州婷婷五月天综合| 欧美日韩欧美| 久久久婷丁香五月| 996热re视频在线观看视频| 就爱日五月天| 大香蕉五月| 色五月大| 黄网在线播放| 国产精品久久久99视频| 亚洲激情电影五月天色婷婷丁香一起草| 思思久久网| 丁香婷婷五月天校园春色| 色综合播放| 婷婷激情五月天在线视频| 五月婷婷狠天天色综合| 色婷婷五月天小说| www.婷婷六月天| www.久久爱.com| 婷婷天堂站| 婷婷六月色| 久久AAAA片一区二区| 91九色PORNY肉丝在线| 丁香六月天婷婷| 亚洲熟女乱色综合亚洲网站| 日本va欧美va欧美va精品| 亚洲婷婷月丁香五月| 婷婷开心激情综合五月天| 天天日夜夜拍| 超碰99在线| 亚洲视频一区| 久在线88综合| 九九精品热播| 这里只有精品视频国产| 婷婷五月激情视频| 超碰chaompinm| 五月激情综合网| 啪啪啪丁香五月| 黄色精品五月婷婷| 精品99网站| 久热这里| 激情综合五| 天天天天干| WWW.五月com| 五月丁香啪啪婷婷| 天天操夜夜肏| 99久久99九九九99九他书对| 久久精品国产AV一区二区三区 | 亚洲视频无| 涩五月婷婷| 国际国外精品欧洲南美洲专区无码不卡| 五月天亭亭俺也| 久久538| 日韩av高清| 激情综合网五月婷婷| 性爱在线播放av| 丁香五月激情五月开心五月| 五月丁香网站| A1片久久| www.五月婷婷久久.com| 日本在线99| 人妻内射一区二区在线视频| 免费啪啪亚州视频| 天天舔天天摸视频| 久久狠狠干| 亚洲无码影音| 精品婷婷五| 五月丁香六月婷婷综合伊人| 在线播放中文字幕| 九久久九精品视频| 国产噜一噜天天噜| 丁香五婷婷| 91色色五月天| 欧美天天草人人草| 真实亲子乱子伦高清在线观看| 久久HD| 亚洲另类毛片| www.热99热| 五月天激情视频| 午夜婷婷久久| 激情五月色在线播放| 色色五月婷| 九月婷婷色色| 国产日日操夜夜操的肉棒视频| 狠狠做婷婷| 丁香五月天婷婷91| 五月天六月婷婷电影| 六月丁香五月天| 香蕉大综综综合久久| 五月天婷婷五月| 99热这里只有精品在线| 亚洲在线操| 激情综合丁香五月| 久777| 激情综合五月色在线| www.日日夜夜.com| 超碰91在线| 成人综合AV| 亚洲成人中文字幕| 99热这里只有精品66| 九九色婷婷五月天| 五月丁香六月婷婷不卡免费无码| 欧美婷婷| 精品网站99| 激情综合五月| 5月婷婷综合| 天天爽天天日| 色情五月天小说| 99精品自拍| 激情丁香九九五月综合网| 久久久久久五月天| 综合另类激情| 中文在线视频久1| 亚洲岛国电影| 开心综合激情综合| 国产FREESEXVIDEOS性中国| 激情文学天天| 99热在线观看| 天插天啪天啪天啪| 一本婷婷丁香久久 | 婷色成人| 丰满少妇猛烈A片免费看观看 | 九九热精品视频在线观看| 性爱动图国产麻豆一区二区三区 | 99久久6| 女人露出p毛视频www网站| 亚洲永久四色| site:wpjngj.com| 五月婷婷影院| 狠狠干伊人| 射婷婷中文字幕| 五月丁香六月婷婷亚洲| 亚洲电影中文字幕| 久久久天天啊| 日韩精品一品二区三区的使用体验| 五月天成人免费视频| 成人永久免费视频在线观看| 超碰国产在线| 天天狠狠插| 美女婷婷激情亚洲| 综合图片色色| 五月婷婷六月天| 极品精品一区二区三区在线| 日本三级韩三级99久久| 天天综合中文| 日韩按摩二区| 在线观看五月婷婷网| 狠狠色丁香久久婷婷综合五月| 性按摩玩人妻HD中文字幕| 久综合色| 丁香五月五月婷婷| 五月婷婷深爱六月| 狠狠操天天操| 男女99免费视频| 視频福利乱色| 人妻有码乱操| 无码少妇高潮喷水A片免费 | 天天综合色| 色婷婷888| 亚洲狠狠干| 热久久国产视频| 五月天伊人av| 色色吧综合| 久久在线大香蕉| 伊人超碰在线| 丁香花大香蕉婷婷综合| 亚洲乱码日产精品BD| 久久激情综合| 婷婷色五月开心五月| 日韩色五月| 欧美va亚洲va在线播放| 五月激激网w'w'w| 99色区| 久久五月丁香婷婷| 久久hd| 色婷婷久久综合| 婷婷五月六| 婷婷色成人| 六月丁香婷婷色69| 激情综合网,五月| 激情五月,色五月| 丁香色成人| 婷婷丁香先锋资源网站| 无语停婷丁香网| 国产欧美日韩综合精品一区二区| 九九综合| 色色色com| 26uuu精品国产| 九九re精品视频在线观看| 狠狠狠狠狠干| 深爱激情五月网| 婷婷五月天激情免费在线观看| 国产精品蜜臀99| 性爱电影科技贸易有限公司| 欧美激情 日韩无码 婷婷 五月天| 任你爽视频| 日本久久婷| 91视频五月丁香| 色播五月婷婷| 六月丁香视频网站| 日本久久爽| 日韩无码亚欧无码| 人妻丰满精品一区二区A片| 国产精品日日躁夜夜躁| 草逼大片| www.日韩艹| 色五月激情视频在线综合| 欧美WW在线网| 91狼友视频在线观看| 丁香五月成人| 色噜噜97视频在线观看| 高清无码视频网址| 狠色狠色综合久久| 桃色五月婷婷| 9999三级片| 99热第一页| 丁香五月大香蕉在线99| 99亚洲精品| 婷婷五月色天| 97自拍视频在线| 九九热精品| 激情综合网激情五月丁香| 婷婷五月天777| av大香蕉| 激情综合亚洲| 色综合久久之分久久| 大香蕉啪啪啪| 亚洲天堂久久| 色一情一乱一乱一区91Av| 五月婷婷九| 婷婷激情综合| 天天插天天插天天插| 久久精品永久免费| 开心五月深爱五月婷| 这里只有在线精品| xxxx五月| 亚洲精品五十一区| 开心婷婷中文字慕| 丁香五月激情宗合网| 久久婷婷亚洲| 99热只有精品综合| 色播五月婷婷| 久久亚洲天堂| 婷婷五月激情欧美| 色婷婷电影网| 欧亚成人A片一区二区| 日韩在线视频9色| 亚洲色五月婷婷| 婷婷情色五月天| ay2区| 人妻在线中文字幕久久| 丁香五月婷久久| 丁香激情五月| 青青草五月天| 国产在这里只有精品| 欧美私人家庭影院| 97色一二三| 亚洲色激情| 亚洲色色色色色| www.日日夜夜| 开心激情网五月天| 丁香五月婷婷基地| 另类少妇人与禽zOZZ0性伦| 久久精彩视频18| 久草九九| 亚洲综合视频网| 色色色99韩| dingxiangtingtingliuyue| 五月丁香中文字幕| 大香蕉综合在线| 极品少妇XXXX精品少妇偷拍| 欧美日韩国产一二区| www.91在线观看| 成年AAAA色情| 激情VA视频| 超碰在线9| 婷婷丁香六月天| 久久久婷丁香五月| 六月激情婷婷综合| 日本激情ⅩXX免费视频| 婷婷丁香五月综合激情小说| 久久久大香蕉| 亚洲亚洲人成综合网络| 国产精品视频网| 中文字幕中文有码在线| 国产精品岛国片在线观看免费| www久久99| 婷婷五月丁香成人| 亚洲午夜一区二区| 99热综合| 99人妻碰碰碰久久久久| 久久久久婷婷五月热综合| 五月停停丁香| 国产熟女一区二区三区五月婷| 最近中文字幕在线中文视频| www.99久久久久99| 无码一区二区日韩| 六月丁香综合| 综合久久婷婷| 亚洲成片在线观看| caopeng超碰| 五月婷婷亚洲| 婷婷五月激情综合| 99爱在线| 国产色网站| 丰满人妻一区三区三区| 婷婷五月天AV在线| 日本欧美成人片AAAA| 久9热视频| 激情黄色五月天| 九九热婷婷| 99热精品9| 色五月丁香婷婷| 婷婷丁香五月综合| 九九十99视频| ss99热| 丁香激情网| 91男人资源站| 五月丁香色色综合| 久久多色| 色人妻五月| 色色色综合网| Caoporn公开| 色七色九九| 人人操av| 日韩无码AV电影网站| 九九久久五月天| 国产日韩亚洲欧美在线观看| 色五月AV| 午夜婷婷久久| 五月婷婷少妇之| 色久女| 色综合中文综合网| 99色最新在线视频| 五月丁香成人| 精品婷婷丁香五| 秋霞午夜理论 | www...com黄在线观看| 九九热av| 婷婷色五月在线视频| 久久精品99国产精品日本| 色色色在线| 五月成人综合| 色婷婷狠狠| www.婷婷,com| 亚洲国产色色| 99这里只有精品| 久久3p| 99国产性感视频| 俺去也婷婷| 久久艹网| 六月丁香婷婷色69| 丁香六月在线| 日本色色网站| 99视频在线精品免费观看2| 性做爰1一7伦| 99热99在线| 久久免费操| 四射综合网| 色色色色色色综合| 五月天综合在线观看| 国产亚洲精品AAAAAAA片| 大香蕉五月婷婷| 亚洲视色| 日韩人妻白浆视频系列| 五月婷婷中字在线| 91久久久久久| 99亚洲精品视频| 激情小说视频图片| 东京热五月婷婷| 99久99热| www夜夜| 色情丁香五月婷婷精品| 丁香六月婷婷综合缴| 六六久久黄色| 五月丁香婷婷激情| 午夜丁香婷婷| 99re热视频这里只有综合亚洲| 99丁香五月婷| 激情综合网站| 华人在线免费| 99热 日韩| 99在线观看这里都是精品| 99精品在这里| 精品成人久久久久久久_一二三四视| 天天爽夜夜操| 婷婷色基地在线看 | 9一精品视频观看| 成年人看Va免费视频| 丁香五月久久社区| 99这里有精品| 91丨九色丨熟女|新版| www.色五月.com| AV在线观看网站| 99热在线只有精品| 激情婷婷五六月天| 亚洲视频综合网| 日本久久爱| 久久五月婷天天干| 色五婷婷开心缴| 五月丁香综合在线| 色色a| 久久婷婷五月| 超pen个人视频97| 99热的无码| 99re免费在线视频| 大香蕉九九| 天天插天天插天天日| 色www久视频| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 天天搞夜夜叫| 狠狠干.com| 九九热在线观看视频| 97碰久久| AV九九| 美英法精品无码免费视频| 亚洲av无码精品色午夜| 91丨九色丨熟女|老版| 99色色热| aaaa久久| 99激情网| 五月丁六月香av| 色开心五月丁香| 99亚洲精品视频| 婷婷五月婷婷五月| 五月婷婷深深爱| 亚洲视频在线网站| 99热9999| 91久久久久久久久18| www.婷婷五月| 丁香五月Av| 亚洲国产精品五月天| 色五月婷婷五月天| 日韩欧美四五区| 在线综合亚洲欧美65| 婷婷五月18永久免费视频| 久久五月天丁香花| 99久久久久久www| 波多野结衣AV无码Porn| 色色色国产| 五月婷婷大香蕉| 丁香五月成人| 丁香六月视频| 丁香色色五月| 国产精品久久久海的味道| 国产脫衣舞一区二区三区| 91九色精品女同系列| 69精品人人人人| 久99热| 678五月丁香亚洲综合| www.丁香六月婷婷久久天堂影院.con| 五月天婷婷在线播放免费| 中文字幕性爱视频| 99久久婷婷五月综合| 天天色综合天天| 久久99国产综合精品免费| 亚洲婷婷激情五月天| 亚洲 欧洲 国产 伦综合| 国产精品久久..4399| 婷婷第六色| 麻豆WWWCOM内射软件| 婷婷噜噜| 欧美久久网| 99国产在线| 午夜 外网 精品 在线| 婷婷黄色网| 亚洲熟妇无码乱子AV电影| 色婷婷视频| 欧美情色电影一区二区| 婷婷开心久久| 51XX嘿嘿午夜无码| 色婷婷久久综合| 丁香激惜男女| 久久密臀婷婷| 久久久久人妻| 91中文在线| 午夜少妇在线观看视频| 五月丁香婷婷伊人| 超碰伊人碰婷婷五月| XX色综合| 艹天天射| 色婷婷五月综合| 操熟女成人网| 干一干xxxx| 日韩中文欧美| 99热这里只有精品最新网址| www.色婷婷.com| 久久这里有精品| 亚洲无码九九| 国产免费一区二区三州老师F1F1| 色区久久| 可以直接看的AV网站| 久操干| 性无码专区无码| cc精品国产性传播| 色婷婷婷婷| 天天日中文| 高清无码网址| 色色色99韩| 在线观看视频1区| 色色色婷婷五月| 久久99久久99精品免视看婷婷| 怡红院91a√| 亚洲综合五月天婷婷| 国产另类综合| 99热都是精品| 另类五月激情| 综激情网| 午夜婷婷五月天在线| 碰97久久| 久久综合婷婷激情| 六月婷婷av| 久久五月丁香综合17C| 精品99在线| 亚洲欧洲中文日韩久久AV乱码| 26UUU欧美| 99热这里只有精品98| 特黄三级片| 99熟女| 99 频99热国里只有精品| 综合五月天亚洲婷婷| 天天插天天插天天日| 啪啪干伊人婷婷| 九九热区一区二区三区| 人人草人人视| 激情五月天网站| 9热在线观看| 久久草大香蕉| 丁香婷婷大香蕉| 久久AAAA片一区二区| 五月天社区婷婷| 丁香婷婷影院| 永久热91| 99久久.www| 午夜丁香| 婷婷激情五月天激情在线| 婷婷五六日| 国产成人+亚洲+欧洲| 日本色爽| 婷婷伊人综合中文字幕| 五月天成人综合| 色九月婷婷| 五月天激情亚洲| 九九色院| 久久五月天精品视频| 丁香五月天人体| 丁香狠狠色婷婷久久无码视频| 丁香五月手机在线| 婷婷社区五月天| 激情综合网婷婷五夜| 国产激情在线| 99综合视频在线| 这里只有精品在线免费视频| 色五月中文网| 五月婷网| 婷婷色五月综合| 中文字幕五月久久婷婷| 五月丁香猫咪久久婷婷综合视频激情四射网入口| 婷婷 久综合| 亚洲狠狠操| 五月婷婷中文字幕| 99热思思| 中文久久婷婷| a69在线视频| 99热这里只有精品18| 九九黄色网| 欧美日韩色色| 九九综合网色全集| 婷婷五日b| 久热免费| 欧美人与性动交CCOO| 人人超碰99| 99热网站| 99热这里只有精品1| 狠狠干婷婷| 成人丁香婷婷| 狠狠综合| 五月天 另类图片| 九九Av| 婷婷五月丁香激情图片| 色婷婷a v| 色五月天成人在线| 五月婷色色| 91碰免费视频| 久久九色| 亚洲va欧美va天堂v国产综合| 久久性爱视频网站| 五月天激情综合网| 亚洲丁香五月综合| 99热官网| 91re色综合视频| 91玖玖| 亚洲成人黄色网| 全部老头和老太XXXXX| 偷拍九九五月丁香婷婷| 激情五月天啪啪| 色五月色五天色情网| 免费一区二区三区| 人妻人人操| 91|九色|动漫| 五月综合777| 色欲影香| 97色精品视频 | 亚洲无码 图片区| 97精品综合久久| 亚洲精品永久久久久久| 六月婷婷色色网| 99热在线爱| 99热综合色图| 成人国产网站| 艹| 色色五月婷婷| 久色网址| 久久五月丁香| 99精品视频免费观看近期发布| 操人91| 免费AV在线| 99热久久日本| 亚洲综合在线丁香五月| 亚洲天堂热| 伊人碰碰碰| 色日本网| 国产在线aaa片一区二区99| AAA久久久| 五月婷婷免费看| 欧美久久九九| 天天透天天摸天天舔| 久色激情| 丁香五月中文字幕| 超级碰碰91| 日韩三级高清无码| 99热这里只有精品13| 成人片黄网站色大片免费毛片| 日本久久人人| 五月丁香影视| 久久999久久999久久999久久| 天天激情站| 丰滿爆乳一区二区三区| 婷婷丁香五另类网站| 超碰成人免费| 亚洲成人网站在线观看| 亚洲操操| 殴美日比视频| 五月婷婷激情日本| 五月婷激情影院| 人人爱摸视频| 婷婷九月丁香天堂丁香天堂| 色五月欧美| 天天操天天曰天天射| 五月丁香六月婷婷操操操| 99视频极品在线香蕉| 婷婷狠狠干| 中文字幕不卡视频| 五月丁香五月婷婷在线观看| 丁香五月婷婷欧美成人色图| 华人在线免费| 最新久久99视频网站| 99色性爰网络| 97艹| 丁香五月影视| 亚洲色婷婷| 91热99| 99在线观看亚洲| 熟妇人妻中文字幕无码老熟妇| 天天开心AV色综合婷婷五月天| 色爽干| 婷婷五月丁香伊人| 啪色综合| 丁香五月婷婷AV| 第四色激情网| 欧美性爱五月天| 婷婷深爱五月天在线| av在线免费播放观看| 五月激情六月宗合| 伊人www22综合色| 9久视频| 色噜噜,噜噜色| 思思9久久| 五月天色裸体视频| 天天肏高清在线| 激情五月天婷婷五月天| WWW久久久| 色婷婷电影网| 99热这里只有精品官网| 色色五月丁香婷婷综合| 极品另类| 精品婷婷| 国产毛片精品一区二区色欲黄A片 国产人妻777人伦精品HD | 婷婷的色色五月天| 91碰碰碰| 五月天成人手机在线视频| 少妇性按摩无码中文A片| 影音先锋人妻出差| 97se视频在线| 日本三级大片| 亚洲激情综合免费| 狠狠色丁香久久| 精品色色| 亚洲这里只有精品| 丁香综合网| 嫩草AV久久伊人妇女超级A| 日韩99色99| 五月婷婷|欧美| 婷婷五月激情图片| 亚洲十月婷婷综合| 天堂久久性| 久久婷婷热| 婷婷色五月天在线| 丁香五月自拍| a毛片二逼wwwwwwwwww|