欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網運營的一線實戰(zhàn)洞察。

Ethernet幀完整性校驗:從FCS原理到CRC-32故障排查實戰(zhàn)

Ethernet幀完整性校驗:從FCS原理到CRC-32故障排查實戰(zhàn) 做網絡這一行“Ethernet幀完整性校驗”這串詞平時未必天天掛在嘴邊但真遇到網絡上莫名其妙的丟包、誤碼、延遲抖動繞來繞去最后總會撞到它身上。我第一次對它產生強烈印象是在一次聯(lián)調現(xiàn)場客戶反映兩套系統(tǒng)之間偶發(fā)通訊卡頓接口統(tǒng)計面板里某個計數(shù)在緩慢上漲業(yè)務卻感知不到太多異常。查了好幾天換線、換模塊、重啟設備都試過最后才有人點了一句“你怎么不去看看FCS錯誤率”。也正是從那一次開始我把幀完整性校驗的原理、計算方式、排查套路徹底過了一遍后面再遇到類似問題基本都能在半小時內找到方向。這篇文章里的內容我會從原理講到實操包括CRC-32到底怎么算、為什么抓包工具看不見幀尾的FCS、FCS異常增長時該怎么由表及里定位故障最后再總結一些我用過、踩過、后來養(yǎng)成的排查習慣。適合剛接觸網絡協(xié)議分析的開發(fā)者也適合在網絡一線做過一段時間、想系統(tǒng)梳理一下這類知識的朋友。1. 一次聯(lián)調里的意外發(fā)現(xiàn)抓包看不見幀尾FCS1.1 現(xiàn)場現(xiàn)象與第一反應那次聯(lián)調的環(huán)境并不復雜兩臺服務器通過交換機互通中間走了一段雙絞線再看一眼光模塊轉接。業(yè)務流量本身不大但每天總有那么幾個時段出現(xiàn)重傳。起初我沒太在意因為應用層有重試機制偶發(fā)重傳也正常。真正引起警覺的是某臺交換機端口統(tǒng)計里兩個字段在緩慢增長一個和CRC錯誤相關另一個和入方向丟棄相關。雖然增長幅度不大對業(yè)務暫時沒有明顯影響但這類計數(shù)一旦出現(xiàn)說明鏈路里一定在做“無用功”。我第一反應是懷疑線纜和光模塊。按照常規(guī)做法先換了一根跳線又把兩端的收發(fā)模塊重新插拔看是否能匹配成功。結果并不理想CRC錯誤計數(shù)并沒有停。后來又試著把兩條鏈路的速率協(xié)商狀態(tài)改為固定模式同樣沒有明顯改善。這時候我才意識到一個問題我一直在“猜”是物理鏈路的問題但我根本沒有真正搞清楚這個錯誤計數(shù)到底是在什么時候產生的。換句話說我該先弄懂“FCS”是什么它校驗的是什么才能知道該懷疑誰。1.2 以太網幀結構里FCS到底在哪里IEEE 802.3標準定義的基礎以太網幀結構從發(fā)送端的角度來看大致是這樣一個順序前導碼7字節(jié) 幀起始定界符SFD1字節(jié) 目的MAC地址6字節(jié) 源MAC地址6字節(jié) 長度/類型字段2字節(jié) 載荷46到1500字節(jié) 幀校驗序列FCS4字節(jié)前導碼和SFD是物理層同步用的接收端把它們識別出來之后就知道“幀數(shù)據(jù)從這兒開始了”。目的MAC、源MAC、長度/類型字段和載荷是真正被協(xié)議棧解析的內容。而FCS這4個字節(jié)就是我今天要重點聊的“Ethernet幀完整性校驗”機制的核心。FCS的校驗范圍是從目的MAC地址開始一直覆蓋到載荷結束不包含前導碼、SFD也不包含F(xiàn)CS本身。發(fā)送端對這一段數(shù)據(jù)算出一個32位的結果并按固定字節(jié)序填到幀尾。接收端收到整個幀之后用同樣的算法對同樣的范圍重新計算一次再把計算結果和收到的FCS做比較。如果一致就認為這一跳傳輸過程中數(shù)據(jù)沒有發(fā)生比特級的變化如果不一致接收端會把這個幀直接丟棄。有一點值得注意如果幀里帶了VLAN標簽802.1QFCS的校驗范圍會從目的MAC一直算到VLAN Tag和載荷結束這部分額外字段同樣受保護。無論是私有VLAN還是其他擴展標簽只要在幀頭里作為數(shù)據(jù)結構存在、接著載荷發(fā)送它們都會被納入CRC計算范圍。實踐中我見過不少人在用抓包工具查看帶VLAN幀時下意識只盯著源目MAC和IP完全沒意識到FCS覆蓋范圍已經發(fā)生了變化。1.3 為什么抓包工具“看不見”FCS很多第一次接觸抓包的朋友都會問同一個問題我抓出來的幀里明明能看到MAC頭能看到IP頭為什么找不到文檔里說的那4字節(jié)FCS答案和抓包工具的采集位置有關。抓包工具讀取的是主機協(xié)議棧里某個“鉤子”位置這個位置通常位于網卡驅動把報文上拋給系統(tǒng)網絡棧之后。而絕大多數(shù)網卡在硬件收幀時會先做一遍CRC校驗校驗不過的幀直接丟棄不往上拋校驗通過的幀再把尾部的4字節(jié)FCS剝離掉只把有效載荷部分交給驅動。所以應用層抓包工具拿到的幀天然就少了尾部這4個字節(jié)。這就帶來一個很重要的實操認知用抓包工具抓到的幀“看起來都是好的”并不能證明鏈路就是干凈的。因為真正帶FCS錯誤的幀在網卡硬件這一層就已經被處理掉了。你如果想驗證“這一跳有沒有出錯”不能只看抓包文件里的幀內容而是要看網卡驅動或者對端交換機的底層計數(shù)統(tǒng)計比如常見的rx_crc_errors、rx_fcs_errors這類字段。在不少網卡驅動里FCS錯誤是單獨計數(shù)的也有驅動把它并入CRC錯誤一類這取決于具體實現(xiàn)但整體思路一致它是物理層和MAC層之間的事件普通抓包工具默認是看不見的。當然也有例外。部分網卡驅動支持關閉CRC剝離功能或者抓包工具配置為“保留壞幀”模式這時你可能會在抓包里看到尾部帶FCS的完整幀甚至看到CRC校驗失敗的幀。但這種模式不是默認行為而且開啟之后抓包工具本身也容易把壞幀當作正常幀顯示反而誤導判斷。所以我個人并不建議在日常分析中開這種模式除非你明確知道自己想要抓壞幀做實驗。2. CRC-32幀完整性校驗的數(shù)學底子2.1 為什么以太網選擇CRC而不是簡單校驗和如果只是想讓接收端確認數(shù)據(jù)沒被改過最直覺的做法是“把所有字節(jié)加起來存一個和”。IP協(xié)議頭部的校驗和就是這么干的。但以太網這種鏈路層技術面對的是實實在在的物理信道電磁干擾、線纜衰減、連接器氧化、信號反射都會造成比特錯誤而且這些錯誤往往不是孤立的單個比特翻轉而是連續(xù)的突發(fā)錯誤。簡單求和這種方式對突發(fā)錯誤的識別能力很差。CRC循環(huán)冗余校驗的核心思想是把數(shù)據(jù)看成一個龐大的二進制數(shù)用這個數(shù)去除以一個固定的“生成多項式”得到的余數(shù)就是校驗值。接收端拿到數(shù)據(jù)和校驗值之后再做一次同樣的除法如果余數(shù)不為零就說明數(shù)據(jù)在這條鏈路上發(fā)生了改動。這個“除法求余”的過程聽起來復雜但在硬件上用移位寄存器實現(xiàn)非常順而且可以通過查表法提升速度這就是它在通信領域被廣泛采用的原因。IEEE 802.3選擇的CRC-32并不是隨便挑了個多項式。它背后對應了突發(fā)錯誤檢測能力的數(shù)學保證可以檢測出所有長度不超過32比特的突發(fā)錯誤可以檢測所有奇數(shù)個比特錯誤并且在數(shù)據(jù)長度足夠短的情況下雙比特錯誤的漏檢率也極低。對于一條物理鏈路上常見的噪聲擾動來說這套保證已經非常夠用。所以別看FCS只有4字節(jié)它在鏈路層協(xié)議里承擔的角色比很多剛入門的人想象中重要得多。2.2 IEEE 802.3 CRC-32的參數(shù)細節(jié)很多朋友試過自己實現(xiàn)CRC-32卻發(fā)現(xiàn)自己算出來的值和抓包工具或設備上的FCS對不上。真不是你代碼寫錯了而是CRC存在多種“變體”IEEE 802.3使用的CRC-32有自己特定的參數(shù)組合。我整理成一張速查表參數(shù)項IEEE 802.3 CRC-32取值生成多項式普通寫法0x04C11DB7生成多項式反射寫法0xEDB88320初始值0xFFFFFFFF輸入數(shù)據(jù)是否反射處理是輸出結果是否反射處理是最終異或值0xFFFFFFFF這里面的“反射”指的是對參與計算的每個字節(jié)先做位序反轉或者對整段數(shù)據(jù)處理時按位反序操作。用業(yè)界常見的話說802.3的CRC-32是“反射輸入、反射輸出、初值全1、結果異或全1”。如果你的CRC計算工具或者算法實現(xiàn)沒有配齊這套參數(shù)算出來的結果自然和真實FCS對不上。新手最容易栽的坑有三個一是多項式寫法搞混普通寫法和反射寫法之間的二進制位序正好相反二是忘記處理初始值不置為全1的話算出的結果只在空數(shù)據(jù)時恰好一致一旦有實際數(shù)據(jù)就會出現(xiàn)偏差三是漏掉最終異或導致差一個固定掩碼。還有一點FCS在網絡上的字節(jié)序也要注意常見網卡把CRC結果按小端序填到幀尾如果你按大端讀出來再比較一樣會不匹配。2.3 用生活化的例子理解“多項式除法”我知道“除以多項式”這個概念對非數(shù)學背景的讀者容易勸退。換個說法可以理解為你有一串特別長的數(shù)字然后有一個固定的“模子”發(fā)送端拿著這串數(shù)字去除以模子得到的余數(shù)就是蓋章。接收端收到數(shù)據(jù)之后也拿著同一個模子去除如果余數(shù)和發(fā)過來的章對不上說明數(shù)字在運輸途中被改過。為什么它能檢測出“改了哪個位”因為模子本身有精心設計的數(shù)學性質。任意一個比特錯誤等價于原數(shù)據(jù)加上了某個“誤差向量”。如果這個誤差向量恰好不是模子的倍數(shù)除法余數(shù)就會改變就會被識別出來。CRC能保證一定長度范圍內的所有突發(fā)錯誤都會被識別正是因為這個模子的數(shù)學設計讓這些誤差向量都不會“正好整除”。實際做鏈路分析時我不需要去手推多項式除法但理解這一層之后你會明白一個關鍵道理CRC不是加密不是哈希它不承諾防偽只承諾“傳輸過程有沒有擾動”。它也不會告訴你錯誤發(fā)生在哪個比特只會告訴你“這一幀壞掉了”。這一點在后面的故障排查里非常重要——FCS異常說明問題出在這條鏈路的某個環(huán)節(jié)但具體是哪一段還需要進一步定位。3. 手寫一個幀完整性校驗工具3.1 構造最小以太網幀并計算FCS要說對Ethernet幀完整性校驗的理解光看書肯定不夠。我當時為了讓自己徹底搞明白FCS的計算過程寫了一個很小的腳本去“造幀”自己拼一個最小以太網幀算出CRC-32再模擬接收方校驗一遍。整個過程不到幾十行代碼但對理解校驗邏輯非常有幫助。思路很簡單拼一個目的MAC是全FF廣播地址、源MAC是某個本地地址的幀EtherType字段填入0x0800載荷就放46個字節(jié)的測試數(shù)據(jù)。算一下FCSimport zlib import struct def build_frame(dst_mac, src_mac, ethertype, payload): frame dst_mac src_mac ethertype payload crc_val zlib.crc32(frame) 0xffffffff fcs struct.pack(I, crc_val) return frame fcs def verify_frame(frame): fcs frame[-4:] body frame[:-4] expected struct.pack(I, zlib.crc32(body) 0xffffffff) return fcs expected dst bytes.fromhex(ffffffffffff) src bytes.fromhex(001122334455) etype b\x08\x00 payload bytes(range(46)) full_frame build_frame(dst, src, etype, payload) print(frame length:, len(full_frame)) print(fcs bytes:, full_frame[-4:].hex()) print(verify result:, verify_frame(full_frame)) # 模擬傳輸過程中一個比特被翻轉 bad_frame bytearray(full_frame) bad_frame[20] ^ 0x01 print(verify result with flip:, verify_frame(bytes(bad_frame)))這里用到了Python內置的zlib.crc32它的底層實現(xiàn)恰好就是IEEE 802.3這套CRC-32參數(shù)多項式反射寫法是0xEDB88320初始值是全1輸入輸出都帶反射最后再做異或。所以不用自己寫查表邏輯。代碼里定義了兩個函數(shù)build_frame負責構造完整幀verify_frame負責把幀尾4字節(jié)當成FCS重新計算并比較。運行之后你會看到正常幀校驗返回True而把第20個字節(jié)翻轉一位后校驗立刻返回False。這個“翻轉一位就翻車”的效果正是CRC-32在鏈路層的務實價值它不保證你不被攻擊但能保證你不會把壞數(shù)據(jù)當成好數(shù)據(jù)繼續(xù)往上拋。3.2 離線驗證真實抓包數(shù)據(jù)自己造完幀之后我接下來做的一件事是拿一批真實的抓包文件做離線校驗。想直接從抓包文件里驗證FCS首先要面臨一個現(xiàn)實問題多數(shù)抓包文件保存的幀里根本沒有FCS字節(jié)。如果抓包時啟用了“完整幀保存”或者某些設備明確保留了幀尾FCS那么離線文件里的每一幀會包含完整4字節(jié)。需要逐幀解析pcap記錄pcap全局頭通常是24字節(jié)之后每一條記錄頭16字節(jié)記錄頭里的incl_len告訴你這條記錄實際捕獲了多少字節(jié)orig_len則告訴你網絡上的原始長度。如果incl_len比正常最小幀頭加最小載荷還要多出4字節(jié)或者和你已知的載荷長度對不上就值得去讀取最后4字節(jié)做校驗。import struct import zlib def parse_and_verify_pcap(file_path): with open(file_path, rb) as f: global_header f.read(24) while True: rec_header f.read(16) if len(rec_header) 16: break ts_sec, ts_usec, incl_len, orig_len struct.unpack(IIII, rec_header) packet_data f.read(incl_len) if incl_len 64 and orig_len 64: fcs packet_data[-4:] body packet_data[:-4] expected struct.pack(I, zlib.crc32(body) 0xffffffff) if fcs ! expected: print(ftimestamp {ts_sec}.{ts_usec:06d}: FCS mismatch)這段代碼只是示意不同鏈路類型比如帶VLAN Tag、帶元數(shù)據(jù)封裝會有差異但整體結構差不多。我實際跑批處理時發(fā)現(xiàn)一部分抓包確實能驗證通過另一部分文件里的幀尾4字節(jié)并不是有效FCS而是某些網卡驅動填充的占位數(shù)據(jù)這時候直接按FCS校驗就會出現(xiàn)大量“誤報”。所以離線校驗前最好先確認抓包工具到底有沒有存儲FCS別對著一堆占位數(shù)據(jù)空跑。3.3 單跳校驗通過之后的事從FCS角度看每經過一條鏈路、一臺交換機幀都會被重新計算一次FCS。也就是說端到端抓包時你看到的FCS已經是被中間設備“重新蓋過章”的版本而不是最初發(fā)送端蓋的章。這是理解幀校驗和上層校驗關系的關鍵。交換機從入端口收到一幀先校驗FCS通過之后再查轉發(fā)表修改某些字段比如TTL或MAC等涉及三層轉發(fā)的場景再重新計算一個新的FCS發(fā)出去。這個過程保證了“每一跳”的可靠性但每一跳都獨立完成上下游之間沒有狀態(tài)關聯(lián)。所以只靠鏈路層FCS沒辦法保證端到端的數(shù)據(jù)完整性應用層數(shù)據(jù)跨越多個網絡節(jié)點中間只要有一個節(jié)點軟件內部出問題就可能改掉數(shù)據(jù)后重新計算一個合法的FCS。這也是為什么TCP層還要有自己的校驗和到了更高層有些協(xié)議還會再做一次完整性摘要。鏈路層FCS是一道重要的防線但它只是縱深防御體系里的一道而不是唯一一道。實際排查問題的時候不要把“FCS校驗過了”當作“整條鏈路沒問題”的結論要理解每一層校驗各自保護的范圍。4. 從FCS異常反推鏈路故障4.1 CRC錯誤到底是在哪個環(huán)節(jié)產生的FCS異常的本質是“接收端算出來的校驗值和發(fā)送端寫的不一致”。那這個不一致通常在哪里被引入首當其沖是物理層雙絞線過長導致信號衰減、連接器氧化造成接觸電阻增大、網線內部線對絞距被破壞導致的串擾、電磁干擾源靠近線纜、光模塊老化導致光功率下降、光纖彎曲過大導致反射這些都會讓比特位在傳輸過程中“翻轉”。另一個常見來源是鏈路雙方的工作狀態(tài)不匹配。比如一端協(xié)商到了全雙工另一端卡在半雙工這種狀態(tài)在低速以太網上會出現(xiàn)大量沖突嚴重時幀會被截斷、撕裂接收端的FCS校驗自然過不了。尤其是強制雙工模式的時候風險更大因為雙方完全放棄了自動協(xié)商的握手確認過程。還有一個容易被忽視的環(huán)節(jié)網卡或交換芯片內部的處理邏輯。比如芯片收到一個長度異常的短幀Runt可能還沒來得及完整接收就已經把不完整的數(shù)據(jù)提交給上層模塊又比如交換機緩存不足時某個隊列被丟棄或部分丟棄也會表現(xiàn)為CRC錯誤或對齊錯誤。這類問題的物理鏈路本身可能是健康的。我自己的經驗是遇到FCS異常先不要急著懷疑線纜質量而是先看錯誤計數(shù)的分布特征。如果錯誤零散分布在多個端口那更像環(huán)境干擾或設備共有問題如果錯誤集中在一條鏈路的兩端那重點懷疑這條物理路徑如果只有一端報錯另一端完全干凈那可能是接收端硬件或驅動的問題。4.2 一套可以照抄的排查順序下面這套順序是我后來固定下來的排查流程不算特別復雜但每一步都有明確目的先收集兩側端口統(tǒng)計把CRC錯誤、FCS錯誤、對齊錯誤、短幀錯誤、丟包計數(shù)全部記下來。不要只看其中一個字段它們組合起來會給出更多線索。觀察錯誤增長速率和負載的關系。如果只在業(yè)務高峰時快速增長說明大概率是信號質量問題在高負載下被放大如果空載也在漲那問題可能很穩(wěn)定比如硬件損壞或接觸不良。做一次“物理層替換法”換線、換模塊、換端口。每換一個環(huán)節(jié)觀察一段時間計數(shù)。替換法最忌諱一次換好幾個東西那你就永遠不知道是哪個環(huán)節(jié)治好了問題。檢查協(xié)商狀態(tài)。確認兩端速率、雙工模式一致關閉強制的“非標準”配置再做對比。如果是在僅跑少量流量的測試環(huán)境可以嘗試顯式固定速率看錯誤是否消失。在鏈路兩端同時抓包并打時間戳比對兩端收到的幀數(shù)量和數(shù)據(jù)內容。如果入口流量正常、出口出現(xiàn)突發(fā)錯誤問題很可能在中間設備如果兩端都干凈但交換機計數(shù)在漲也可能是交換機內部統(tǒng)計口徑問題。如果錯誤只在某個特定網卡上出現(xiàn)更新驅動、固件并檢查網卡是否啟用了某些卸載特性比如接收側合并、Large Receive Offload這些特性在驅動實現(xiàn)有bug時會引發(fā)奇怪的數(shù)據(jù)異常。如果以上都做完了還沒找到原因再考慮設備硬件故障比如交換芯片的背板問題。這種情況通常需要換一臺設備或換一個板卡做隔離驗證。這套流程看起來基礎但能覆蓋絕大多數(shù)場景。尤其第3步的“每次只換一個環(huán)節(jié)”聽起來像廢話恰恰是無數(shù)現(xiàn)場工程師最容易因為急躁而犯的錯誤。4.3 故障速查表現(xiàn)象、原因與驗證手段為了隨時查閱我整理了一張速查表也算是對上面排查順序的一個濃縮現(xiàn)象可能原因先驗證什么可能的動作單端口CRC計數(shù)緩慢增長業(yè)務無明顯感知線纜老化、連接器接觸電阻、輕微電磁干擾端口協(xié)商狀態(tài)、線纜長度、兩端功率更換跳線、重新壓接水晶頭高負載下CRC計數(shù)快速上升信號衰減、光模塊劣化、雙工不匹配光功率、錯誤增長速率與負載關系更換光模塊、調整協(xié)商策略CRC錯誤伴隨對齊錯誤出現(xiàn)鏈路沖突、物理層幀截斷雙工狀態(tài)、線對序強制全雙工一致或更換線纜多端口同時出現(xiàn)CRC錯誤公共環(huán)境干擾、設備供電異常設備側電源、周邊大功率設備干擾整改布線路徑、調整電源更換模塊后計數(shù)短暫清零又復漲硬件插槽或背板鏈路問題換一個端口或設備對比進一步隔離硬件層級這里有一條通用原則CRC計數(shù)是一個“果”不是“因”。你從它著手去查問題沒錯但最終修復的一定是導致它的環(huán)境、物理鏈路、協(xié)商狀態(tài)或者硬件故障。神化統(tǒng)計字段容易把自己帶偏。5. 常見誤區(qū)和幾個實戰(zhàn)心得5.1 誤區(qū)一看到CRC上升就斷定是線纜質量差這類判斷太絕對了。很多情況下CRC錯誤來自驅動或設備內部的異常。我遇到過一次很典型的例子兩端口之間CRC計數(shù)持續(xù)上漲但把線纜、模塊全部換了一遍問題依舊。最后發(fā)現(xiàn)是某塊板卡內部背板鏈路的數(shù)據(jù)通路故障換了整塊線卡后才恢復。如果當時只盯著“換線”這一條思路根本走不到真正的根因。另一個容易被忽略的是虛擬化環(huán)境。虛擬交換機和虛擬網卡驅動在統(tǒng)計CRC時很多實現(xiàn)只是把宿主機物理網卡的統(tǒng)計原樣暴露出來并不代表虛擬鏈路上真的發(fā)生了比特錯誤。如果在虛擬化平臺上看到CRC上漲第一件事應該是確認這個計數(shù)到底來自物理網卡還是虛擬數(shù)據(jù)通路否則你容易把平臺自身的問題嫁禍給底層物理網絡。5.2 誤區(qū)二抓包工具顯示無錯鏈路就一定干凈這個誤區(qū)在上文已經提到過但它真的太常見了值得單獨拿出來再說一次。抓包工具默認拿到的幀是網卡剝離FCS之后的版本壞幀在進入?yún)f(xié)議棧之前就被丟棄了。所以抓包結果里每一條記錄都“光鮮亮麗”根本不能說明物理鏈路上沒有噪聲。想看鏈路健康度必須配合網卡底層計數(shù)否則你會被自己的抓包文件欺騙。反過來如果抓包工具里真的出現(xiàn)了CRC錯誤標記某些工具在捕獲引擎保留了壞幀時會有提示那說明這已經很嚴重了鏈路質量可能差到了一定程度。但普通場景下抓不到CRC錯誤反而是常態(tài)不要因為抓包結果好看就放松警惕。5.3 把CRC計數(shù)當作長期健康度指標排查完一個具體問題之后就可以建立一套自己的觀察習慣。我對接口統(tǒng)計的處理方式不是看某一個時間點上的絕對數(shù)值而是看趨勢。比如某端口的CRC錯誤計數(shù)今天比昨天多了300這個數(shù)量級在業(yè)務負載變化范圍內是否正常相比硬件報錯我更關心它是不是持續(xù)、單調地增長。持續(xù)增長意味著某個劣化過程正在發(fā)生可能是光模塊的激光器在緩慢衰老也可能是連接器在逐漸氧化。建議每隔一段時間把關鍵端口的統(tǒng)計拉出來存一份基線等變更發(fā)生后做對比。這個辦法成本極低但對解決問題幫助很大。真到問題爆發(fā)那一刻你能立刻判斷出“這個錯誤是什么時候開始變多的”“最近改了什么東西”遠比現(xiàn)場抓瞎要強。對于光口順帶關注光模塊的收發(fā)光功率變化趨勢光功率下降往往比CRC計數(shù)增長提前幾天就發(fā)出預警這算是我自己比較受用的一個小技巧。還有一個小習慣拿到一臺新設備或者新網卡先做一次短時間高負載收發(fā)測試把錯誤統(tǒng)計清零再觀察。每個硬件對誤碼的容忍度不一樣過早做基線反而容易在基線里埋入大量背景噪聲。等確認鏈路在干凈狀態(tài)下跑穩(wěn)了再開始記錄正?;€之后每一次統(tǒng)計異常都會很有參考價值。做鏈路分析做得時間長了我對“Ethernet幀完整性校驗”這串詞的感受已經從“一個CRC寄存器”變成了一整套觀察鏈路健康度的視角。自己動手寫校驗腳本、跑真實數(shù)據(jù)、被虛驚嚇過、也被真正的根因折磨過這些過程確實是把知識變成能力的最好方式。如果你下次再遇到CRC相關告警不妨先冷靜下來把統(tǒng)計字段、抓包位置、物理鏈路狀態(tài)這三樣東西擺到桌面上再決定要不要動手拆線纜。我個人的體會是絕大多數(shù)FCS異常都能通過一張清晰的排查順序表快速收斂真正難的從來不是修而是判斷該修哪里。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久新地址| 五月丁香少妇| 天天干天天插| 影音先锋一区二区三区| 五月天综合婷婷| 九九视频这里是精品五月| 大色鬼综合| 99热在线观看精品| 思思99热这里只有精品| 月色色综合婷婷网| 五月婷婷色在线| 五月天婷婷久久| 9久国产精品| 激情五月综合亚洲另类| 欧美视频五区| 26uuu精品一区二区| 亚洲成人超碰| 丁J香六月首页| 99热这里只有精品中文字幕| 天天操夜夜操| 直接看的av| 久久久久亚洲AV无码网影音先锋| 影音先锋男人AV资源站| 91碰碰碰| 婷婷久久大香蕉| 甈你aaaaa| 98永久精品| 亚洲九九夜夜| 91超级碰| 26uuu欧美| 亚洲激情.com| 婷婷五月天天aV| 九九人人操| 久久久久久久久久久久63| 91久久久久久| 婷婷久久丁香五月| 91大神操美女| 久久五月激情综合| 丁香五月欧美色综合| 久久免片| 超碰国产AV| 免费观看2018www黄色操逼网站| 久久网日本| 亚洲欧美一区二区三区四区爱爱动图| www.minyis.com【JT】币址百万U预算可预付QQ2101460746 | 五月天成人免费视频| 欧洲综合视频在线观看。欧洲,亚洲综合食品在线观看。 | 狠狠操狠狠| 综合久| 五月成人天| 五月天另类综合网| 婷婷成人丁香色情基地30 | 婷婷射丁香| 伊人影院久久网| 99国产精品久久久久久久久久久| 婷婷婷婷婷婷婷五月丁香| 久热这里只有精品在线| 国产玖玖资源| 婷婷中文字幕网| 婷婷激情社区| 色播五月综合网| 噜啊噜在线| 激情五月天小说| 天天精品视频在线观看视频| WWW,婷婷,COM| 在线可以看的av网址| 激情图片婷婷| 色色色色色色综合| 99热在这里只有精品| 国产三级秋霞| 免费国产视频| www.91色| 五月天大香蕉av| av一级棒av| 97在线精品| 五月丁香黄色视频| 久九男女天堂| 91久久国产综合久久| 久碰久| 色婷婷丁香AV综合| 五月激情网站| 色婷婷婷婷成人网| 成人丁香婷婷| 九九热这里| 91精品丝袜久久久久久| 欧美丰满熟妇BBB久久久| 色婷婷成人做爰A片免费看网站| 国产精品第一国产精品| 色五月色五天色情网址| ww久久| 久久综合干| 五月丁香六月在线欧美| 伊人五月丁香| 五月丁香六月在线| 五月丁香亭亭激情操逼网| 婷婷六月丁综合| 都市激情亚洲| 99视频地址| 婷婷丁香成人网址| 五月婷婷在线观看黄| 九九九九综合| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 五月天婷综合| 色五月天天| 五月色丁香婷婷中文字幕| 加勒比色色| WWW.桔色成人.COM| 亚洲精品国产setv| 久久99人人| 久久天堂色| 五月天丁香综合久久国产| 亚洲综合激情五月天婷婷| α久久| 五月天婷婷成人网| 99精品偷自拍| 中文字幕黄色片| 亚洲激情高潮| 五月丁香无码| 国产美女无遮挡裸体毛片A片| 九色99视频| 偷偷操99| 丁香5月婷婷| 99视频只有精品| 亚洲色网址| 曰本久久女| 玖玖婷婷综合| 丁香六月久| 九九人人操| 五月婷婷六月天| 综合www色| 亚洲精品va| 99亚洲色色| 丝袜激情网| 亚洲欧洲中文日韩久久AV乱码| 99色视| 丁香女人五月天| 毛片新网地| 97色久| 五月婷婷香蕉| 色亭亭五月天网扯| 亚洲区视频| 天天肏视奸| 综合激情五月四射婷婷| 在线网黄| 激情爱爱网站超大免费| 久久九九热视频| 五月婷婷深深爱| 成人免费在线电影| 五月丁香六月情| 亚洲日日日| 狠狠干狠狠操狠狠爱| 亚洲一色色色色色色色色| 十一月婷婷激情四射| 日日噜噜夜夜狠狠久久丁香六月| 91综合在线观看| 五月丁香 久久久| 97婷婷色| www久久久| 婷婷丁香六月天| 狠狠爱青青草| 久久婷婷亚洲五月天| 99热精品在线观看| 五月丁香激情综合网| 婷婷十月激情综合网| 538在线精品| 99熟女视频| 深爱激情五月天| 丁香六月成人网| 99色一| 婷婷中文字幕| 激情婷婷五月天。| 五月天婷婷丁香| 亚洲色色五月| www.99热在线| 日韩人妻在线观看| 97色色色色色| 在线观看五月婷婷网| 婷婷五月天堂| 丁香五月电影| 少妇激情五月天| 色天堂A| 婷婷综合激情| …亚洲黄色在线播放日韩、av中文a…| 99热这里只有精品18| 最新无毒无码AV| 99在线观看这里都是精品| 婷婷亚洲综合| 嫩草综合网| 99精品久久| 武则天精品久久| 秋霞AV淫| 丁香五月激情婷婷视频| 国产人妻777人伦精品HD| 亚洲欧洲99| 狠狠的日| 日本本土色网第一区| a在线观看| 成人精品在线| 夜夜爽77777妓女免费下载| 5月丁香综合网| 99国产精品久久久久久久久久久 | 婷婷中文字幕| 99热在线观看| 婷婷视频在线| 99自拍网| 91 影音先锋| 五月婷综合性中心| 71在线精品视频一区| 久久五月丁香| 久久视这里只有精品| 成人AV在线电影| 色狠狠六月| 五月天婷婷狂暴白浆| www、色色色| 久操大屁股女人av| 东京热免费视频| 99A片| 激情综合5| 六月丁香五月婷婷| 色婷婷五月天视频网站| 综合激情伊人影视在线| 97人人妻人人艹| 天天草天天摸| 亚洲 精品 综合 精品| 4399无码视频| 色在线99| 精品综合五月| www.maotanji.com| 日韩AV无码影片| 日日噜狠狠色综合久| 91九色 婷婷| 六月丁香激情网| 天天综合天天玩夜夜玩天天玩夜夜玩 | 五月婷婷色| WWW激情五月天| 色色婷婷婷丁香五月天| 99热免费| 色色婷婷丁香| 免费观看的婷婷五月视频在线| 四月婷婷五月丁香| 国产婷婷色综合AV蜜臀AV | 激情六月丁| 四月婷婷五月色综合| 亚洲乱码日产精品BD| 色综合性视频| 97干在线| 亚洲AVDVD| 99热这里只有精品66| 天天日夜夜夜操操操操| 天天色丁香| 国产精产国品一二三在观看| 超碰成人免费| 激情六月天婷婷| 亚洲艹网| 午夜成人网站在线观看| 91久操| 精品丁香五月天在线播放| 青青热视频| 综合久久十| 五月天婷婷社区| 日韩视频99| 亚洲成色综合网站免费观看| 五月婷婷婷综合网| 五月天丁香婷婷视频网址| 亚洲成人网站在线播放| 99爱在线精品视频免费观看| 丁香五月天激情小说| 人妻人人操| 五月激情婷婷四射| 五月婷婷六月激情| 99熟女| 亚洲色在线观看| 欧美综合激情五月丁香| 久久精品性爱视频,| 日韩精品电影| 色久一| 五月天成人小说| 婷婷婷久久久| 国精产品一区一区三区有限公司杨 | www.99视频| 超碰9在| 婷婷色色综合| www婷婷色| 日韩999| 99色中文| 色噜噜狠狠色综合网| 五月天激情日色在线| 天天摸.天天mo| 激情婷婷久久| 91丁香五月| 人人干人人操外国| 中文字幕五月久久婷婷| 热婷婷在线视频| 国产,欧美,学生妹,视频| 欧美婷婷| 26uuu欧美| 亚洲综合在线视频| 丁香色婷婷五月天| 任你艹| 99精品在线观看视频| www激情婷婷com| 99久久免费精品| 亚洲六月婷| 在线成人网站| 思思热闹这里只有精品| 五月婷婷天天色| 丁香五月婷婷啪| 大香蕉520| 久操大| 91色综合网| 激情丁香五月AV| 91久久18| 婷婷色啪| 久久色在线视频| 久久婷婷成人视频| 五月丁综合在线观看| 色婷婷色久综| 日本颜色视频人人爱| 色婷婷色婷婷五月| 丁香激情网| 激情五月丁香六月综合AVXXXX| 国产激情在线| 色色色婷婷| 色婷婷五月综合在线| 激情网五月天| 久久99综合网| 五月天婷婷基地| 中文字幕人妻熟女在线| 另类亚洲电影| 国产激情AV| 婷婷色在线| 九九家庭影院| 99re最新地址| 91操片| 丁香五月天激情综合| 色综合色| 五月天婷婷涩涩| 人人操人人爽成人AV| 九九热91| 成人精品一区二区三区四区五区| 3www激情| 久9热| 欧美性爱五月天| 久久久婷丁香五月| 97人人操人人| 天天日夜夜夜操操操操| 五月天社区婷婷丁香社区| 五月天丁香综合| 久婷五月| 大香蕉网 久久| 91肏| 色情久久久| 欧美狠狠地| 免费97碰碰| 91热在线| 婷婷五月天激情综合深爱| 五月天精品视频| 97视频.干com| H亚洲| 黄网免费观看| 成 人 色 色| 9久国产| 4399成人黄A片| 99丁香五月| 影音先锋毛片网站| 亚洲久久婷婷| 欧美一级色| 久久婷婷五月天激情新地址| 97碰碰人人| 精品九九视频| 五月大香蕉| 五月婷婷色色爱| 丁香激情四射| 亚洲99热| 无码免费人妻A片AAA毛片西瓜| 国产操逼网站| 五月丁香六月激情狠狠| 91九色首页| 五月综合激情啪啪啪啪啪| 五月丁香婷草| 青草激情综合| 青柠影视免费高清电视剧| 九九色播五月丁香| 久久99色色| 99热这里| 丁香五月婷婷五月| 精品人妻久久久| 亚洲99综合| 青青久久五月| 日日夜夜青青草| 97人人操在线| 丁香激情五月| 色婷九九九| 蜜乳.comcom| 99re在线视频| 九月丁香婷婷网| 九九综合视频在线观看| 26UUU欧美激情一区二区| 欧美综合五月天婷婷tin| 东京热免费视频| 欧美色性色好| 色五月开心久久网| 久草xx性爱视频| 婷婷丁香五月综合| 99国产小视频2013| 激情五月天视频| avh片在线观看| 色色色视频| 99热这里只有精品22| 亚洲4区国产欧美| 在线,国产,色,热视频| 久久看婷婷| 99热99| 不卡影院午夜理论片| 婷婷色九月| 超碰在线94| 天天操天天操天天操天天操天天操天天操| 欧美三级巜人妻互换| 色五月激情视频在线综合| 久久最新色| 热热99爱爱| 色日本五月天| 国产精品人妻在线网址| www.yw色| 九九综合伊人| 91久久99久久91熟女精品| 久热伊人9| 99热一区| 99热播放| 激情丁香五月婷婷| 婷婷5月天av| 天天日天天色| 呦呦视频无码播放| 天堂va久久久噜噜噜久久Va| 婷婷五月天综合在线| www.久操| 伊人久久大香蕉网| 99精品视频在线观看免费| 久热久| 91综合在线| 99热这里只有精品99| 丁香色五月直播| 日韩成人无码人妻| 丁香五月 综合| 91碰碰| 日本色婷婷久久99精品91| 99热这里精品| 2020夜夜操天天爽| 91人无码久久久久久| 丁香成人色情五月天| 五月丁香婷婷色播无码| 五月丁香婷婷综合视频| 人人草公开操| 99精品成人无码A片观看金桔| 3p日韩网站视频| 亚洲综合视频八| 婷婷六月啪啪| www.五月天性.com| 人妻精品一区二区三区| 五月婷婷丁香综合| 三男玩一女三A片| 久久人妻超碰一区| 日韩五月丁香| 九九热AV| 玖玖婷婷色欲| 婷婷五月天久久| 亚洲成人色五月天| 色欲AVV| 婷婷激情六月| 伍月婷婷免费视频| 丁香五月婷婷综合激情啪啪啪啪啪啪啪| 色婷婷激情五月天在线观看| www.黄色片-久久成人国产精品在线播放-999AV | 99热这里有精品2| 亚洲无码九九九| 91人人操人人| 婷婷成人综合免费视频| 91综合在线观看| 9热在线观看| 天天弄天天爽| 91se在线观看| 欧美色综合天天久久综合精品| 婷婷久久草| 婷婷九月| 第九色区AV在线| 4438激情网| 久久久久久久久久久久久久人妻视频| 伊人久热91| 五月天狠狠| 久久这里有精品视频在线免费观看| 九热电影av| 99精品无码| 午夜做爱影院| 婷婷五月天黄色| 91.www综合| 无码啪啪| 99爱视频在线观看| 色婷婷六月精品| 五月天丁香婷| 亚洲岛国电影| 任你草| 免费看成人747474九号视频在线观看| 五月四色色| 婷婷五月天激情综合| 色五月色综合| 玖玖色综合网| 婷婷综合六月| 久久精品爱爱| 殴美激情综合网| 色婷婷成人做爰A片免费看网站| 五月婷婷六月情| hd五月婷婷在线| 久久精典| 色吧婷婷五月亚洲| 狠狠爱综合网| 大香蕉婷婷丁香天堂AV| 五月丁香网站| 天天做 天天爱| 亚洲国产精品成人免费一区久久久在线观看AAAA | WWW、日本色丁香、co m| 婷婷五月天久久| 在线sebiav精品视频| 成人午夜天| 狠狠色丁香| 色五月偷偷| 狠狠干五月丁香综合网| 99久久99热| 五月天婷婷基地| 五月婷免费视频| 日日噜噜夜夜狠狠久久丁香五月| 婷婷久久网| 婷婷五月天综合在线| 五月天伊人av| 日本色天堂| 久久44| 专区无日本视频高清8| 深爱五月激情| 丁香桃色网| 天堂综合久| 另类激情首页| 亚洲色热| 日本色五月婷婷| 婷婷五月六月丁香综合| 色婷婷丁香五月综合| 亚洲欧洲自拍图片专区五月天| www.91色| 婷婷五月激情热播| 五月天色导航婷婷资源婷婷| 97色图片中文字幕视频在线观看| 亚洲九九婷婷| 伊人色综合久久久| 99热国产婷婷| 中文字幕,综合,91| 久久婷婷东京热| 大香蕉人人人| 538任你爽视频不一样的| www91久久| 久久精品天| www.一起草av| 14色综合婷婷| 欧美精品999| 99亚洲天堂| 色婷婷五月天激情| 色婷婷最爱五月| 激情综合网激情五月网| 五月丁香 啪啪啪| 久热这里只有精品99re,久热这里只有精品7| 国产婷婷五月中文字幕高清| 天天天天天色| 日韩99精品| 五月激情婷婷播播开心| 日韩久久色| www.夜夜| 清纯唯美 激情四射| 国内外色色色色色成人视频| 99在线精品免费视频| 国产视频色色色色色色色| 五月久久综合| 97碰碰在线观看视频| 综合久久综合久久| 九九热亚洲中文在线观看免费| 99re在线观看视频| 5月婷婷激情网| 天天肏高清在线| 成人VAV视频在线观看| 亚洲免费观看高清完整版AV线| 五月婷婷导航| 免费成人va| 丁香激情六月天婷婷| 亚洲激情精品| 五月婷婷丁香| 91中文狠狠综合| 无码九九九九| www.五月天婷婷.com| 九九家庭影院| 国产色色色色| 中文字幕永久在线| 日韩二区搞逼插逼毛片| 丁香六月婷婷久久高清| 五月丁香六月激情综合啪啪| 色五月天成人| 婷婷久久五月| 一级片无码| 色丁香婷婷| 色九月激情综合网| 99亚洲大片精品永久在线观看| 亚洲视频99| 涩五月婷婷| 色噜婷婷| 色视频2025| 天天日天天操天天干| 深爱婷婷丁香五月激情| 天天干天天干天天干| 五月丁香综合网| 91色久| 思思综合热| 91热网址| 欧美十二区| 67194成I人在线观看线路1| 五月丁香在线偷拍视频| 九九99精品| 亚洲成人日韩无码精品| 大香蕉中文| 亚洲性爱日韩无码| 丁香婷婷五月六月久久| 荫道BBWBBB高潮潮喷| 1区2区视频| 秋霞三级影视资源| 色99网| 91在线97视频| 综合激情网| 五月天婷婷网站888| 久久ri精品| 99热国品免费| 国产婷婷综合在线免费视频| 色99在线| 亚洲性视频| 久色资源网| 激情小说五月天| 五月丁香婷婷啪啪综合| 五月丁香基地| 国产AV一区二区三区最新精品| WWW,五月| 桃色激情网| 中文字幕一色哟哟哟哟| 天天日日人| A1片久久久| 超碰人人妻| 丁香五月在线人妻| 国产激情婷婷| 亚洲视频伍月婷婷| 国产毛片精品一区二区色欲黄A片 欧美交换配乱吟粗大25P | 日本97人人| 色五月亚洲五月天| 91精品无码| 综合激情九月婷婷,激情综合婷婷中文字 | 99熟女啪啪视频| 久久caop| 五月婷高清视频| 啊v视频在线观看| 99re热在线视频| 亚洲婷婷基地| 亚洲无aV在线中文字幕| 色色无码| 丁香五月天.com| 一起草性爱不卡视频| 亚洲黄色网址| 九九热视频思思| 日韩人妻AV在线| 天天综合久久| 婷婷丁香在线| 久久多色| 丁香婷婷五月| 丁香五月AV在线| 久久久久久久人妻| 五月丁香花伦理电影| 亚洲天天| www.99婷婷| 婷婷五月天黄色| 丁香五月色色| 狠狠操狠狠| 99er精品| 97精品人人A片免费看| 激情综合网,五月| 99久久国产宗和精品1上映| 热无码A∨| 校花娇喘呻吟校长陈若雪视频| 五月综合亚洲| 高清a片基地| 激情美女五月天激情在线| 91九九热| 新激情五月天天在线网| 精品成人久久久久久久_一二三四视| 久久五月视频| 丁香五月六月久久综合| 婷婷情色开心五月天99| WWW五月婷婷| 乱精品一区字幕二区| 国产亚洲99| 国外亚洲成AV人片在线观看 | 九九九九九九毛片| 婷婷精品视频| 五月天成人在线精品| 日韩AV无码影片| 丁香五月综合在线观看| 亚洲AV网站在线观看| 五月花婷婷在线精品视频| wwwss在线观看| 久久这里只有精彩| 五月天激情美女久久| 无码网站视频| 97人妻碰碰碰久| 粉嫩AV久久一区二区三区| 五月激情综合婷婷| 九色PORNY在线精品酒店| www.9797国产| 加勒比色色| 玖玖99婷婷| 婷婷色基地| 黄色三级日本| 狠狠干.com| 人妻尝试久久久久久久久久久久| 亚洲影院婷婷色| 综合图片色色| 第二色AⅤ| 色吧网综合| 五月婷婷激情综合网| 99色热视频| 九月婷婷色色| 超碰在线日夜| 91人妻人人做人碰人人爽九色| 五月熟妇婷婷久久| 密臀av无码人妻精品| 99热91| 亚洲精品国产精品乱码不99| 色久女| 亚洲亚洲人成综合网络| 天天色视频| 蜜桃婷婷丁香五月天狠狠久久综合| 久久丁香婷婷色情综合| 亚洲无码播放| 狠狠色综合五月| 欧美日韩成人免费在线| 99热传媒| 日韩成人AV在线| 99亚洲大片精品永久在线观看| 色婷婷狠| 无码碰碰| 亚洲成人免费电影| 香焦网五月天| 五月婷婷人妻| 五月香蕉婷婷| 色狠狠色| 人人叉久| 黄色网址五月婷婷| 婷婷五月婷婷| 婷婷丁香九月| 久草五月天| 狠狠操天天日| 五月色婷婷在线观看| 亚洲成人无码网站| 大战熟女丰满人妻AV| 久久99免费视屏| 丰满少妇猛烈A片免费看观看 | 国产肥白大熟妇BBBB视频 | 在线观看国产高清视频免费网站| 日狠狠| 夜夜躁狠狠| 97超级操操| 欧美黄色一级| 色狠狠色噜噜AV天堂五区| 精品激情| 噜噜色五月| http://www.lingjunshare.com/| 99热乎| 大香蕉婷婷丁香天堂AV| 五月婷婷色啪| 九九久久高清| 熟女国产在线一区二区三区四区| 久久99精品九九久久久婷婷| 精品99视频| 亚洲色视频| 人人看人人摸人人| 伊人狠狠综合| 天天碰天天插天天操| 色很很96| 国产乱码久久| 色色精品色| 欧美99| 日韩ac不卡无码| 射区导航| 五月丁香婷婷啪啪网| 国产黄色大片| 综合激情四射一theav| 日本三级99人妇网站| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 97激情五月天| 色99综合视频| 婷激情五月| 99热这里只有精品最新| 婷婷五月视频| 久久金品黃色| 深爱开心激情| 久久久人妻| 婷婷五月丁香超碰| 丁香五月亚洲综合| 色婷婷4| 亚洲综合丁香婷婷六月天| 免费的日逼视频| 深爱婷婷色| 婷婷五六日| 狠狠干五码| 99精色| 色www.con| 91九色小视频| 秋霞丝袜啪啪啪| 五月色婷婷夜色| 日韩AV中文字幕在线| 久久资源综合| xxxx久| 九九黄色网| Av大香蕉| 激情综合网婷婷久久| 99久久思思| www.minyis.com【JT】实力收量可预付QQ2101460746 | 亚洲激情av| 丁香九月激情| 国产精品国产成人国产三级| 亚洲偷| 五月婷婷亚洲天堂97色婷婷| 毛v一区二区视频| 国产精品日日躁夜夜躁| 欧美在线操| 99精品这里只有免费视频 | 亚洲九九夜夜| 深夜婷婷 丁香| 九九精品系列| 9 1超碰九色| 天天拍天天做视频| 玖玖资源站中文| 亚卅毛片| 五月婷婷开心网| www久久久久久久久久久| 真实熟女-91九色| 99大香蕉| 亚洲无码成人性爰网| www.夜夜操.com| 99成人| 婷婷五月丁香国产| 激情五月综合网最新| 九九sese| 婷婷综合成人| 午夜不卡久久精品无码免费| 99日在线观看视频| 激情五月婷婷| 日本激情综合| 色五月超碰| 亚洲中文字幕在线观看| 色情五月天。| 五月丁香 久久久| 日韩在线一级| 狠狠精品干练久久久无码中文字幕 | 日本三级大片| 一本到不卡高清DVD| 97碰碰视频在线观看| 天天色天天色天天色天天色天天色天天色| 欧美日本一区二区三区| 九九色婷婷| 五月婷婷久久网| 色综合天天| 五月天激情网图片| 先锋影音男人的天堂AV| 99热 这里只有精品 国产 日韩| 欧美综合激情五月天| 久久婷婷五月天| 粉嫩AV久久一区二区三区| 99日本视频在线观看专区| 激情五月婷婷| 婷婷亚洲色| 五月天啪啪视频| 91九色在线| 色在线免费观看| 色色色视频免费无码 | 少妇人妻人伦A片| 4399伦理午夜| 丁香婷婷五月六月天| 无码任你操| 在线看黄色| 婷婷色五月天第7色| 99热主页日本| 成人无码精品1区2区3区免费看| 五月天激情图片| 激情五月天小说|五月天开心激情网|亚洲精品国产自在现线|黄色五月天 | 99热日韩| 国産精品| 五月丁香综合中文| 中文字幕簧片| 婷婷综合网站| 一区二区三区视频| 天天日天天插| 人妻中文av| 涩涩婷婷五月| 丁香五月综合| 五月丁香啪啪| 五月婷婷六月丁香在线视频免费在线观看| 狠狠插.com| 欧美激情 日韩无码 婷婷 五月天| 999精品乱码77777| 亚洲精品中文字幕成人片| 日韩乱玛久久| 激情6月| 色五月婷婷激情五月| 色狠狠综合| a色色色色色| 婷婷五月天AV| 久久超级碰视频| 激情五月四色| 久久婷婷一级片| 婷婷五月丁香伊人网| 拍真实国产伦偷精品| 视频综合网| 99精品在这里| 91蜜桃婷婷狠狠久久综合9色| 五月婷婷亚洲| 九月影院義母在线播放| 久久久香| 婷婷五月天堂| 91精品久久久久| 激情六月色| 国产综合久久久777777| 99在热线免费视频| 五月天激情综合网| 五月婷婷啪啪| 五月婷婷深深爱| 天天影院色| 色五月婷婷大香蕉| 另类激情首页| 琪琪色热色色| 大香蕉啪啪| 婷婷久久久| 中文字幕在线日亚洲9| 9久精品| 中文字幕在线播放视频| 婷婷久久亚洲| www.激情| 五月丁香婷婷激情在线| 国产成人综合亚洲| 好吊丝aV| 天堂二区| 夜夜干夜夜操| 伊人久久大香蕉网| www.minyis.com【JT】实力收量可预付QQ2101460746 | 五月激情五月丁香| 蜜桃五月天| 26uuu另类| 中文字幕av网站| 亚洲、热| 久久伊人婷| 色玖玖综合网| 天堂婷婷五月在线| 丁香五月天天久久综合小说| 激情五月亚洲| 偷拍91九色| 综合激情在线视频| 五月开心婷婷极品激情| 亚洲视频一区| 丁香五月天色婷婷| 九九九热精品| 饮料下药迷倒漂亮女同事强干| 天天成人综合| www.亚洲激情.com| 99综合一区| 99精品这里只有免费视频| 五月开心播播网| 丁香桃色网| 日本久久精品| 91人人爱| 少妇人妻人伦A片| 欧美性爱中文字幕| 狠狠色成人影片| 人人做人人看人人摸| 六月丁香狠狠爱| 亚洲精品国产成人AV在线| 安息电影在线观看完整版| 国产成人综合亚洲| 亚洲成人超碰| 婷婷五月天色综合翘| 强奸幻女毛片| 中文字幕AV网址| 色就是色婷婷五月亚洲激情| 综合色七七| 色五月欧美| 9久热这里只有精品视频| 超爽内射| 任你艹| 激情综合五月色丁香婷婷| 大香蕉综合| 五月丁香六月婷婷亚洲激情综合| 色婷成人狠干| 99久久久久| 99热这里只有精品最新地址获取| 亚洲六月色婷婷| 中日韩美欧成人一区二区精品在线| 五月天啪啪啪| 日本色噜| 人人干女人| 强辱丰满人妻HD中文字幕 | 99热超碰人| 五月丁香六月色| 久久婷婷五月天蜜桃| 二人电影免费版在线观看| 婷婷五月成人社区| 丁香六月婷婷综合激情欧美| 五月丁香六月婷婷综合免| 大香蕉七区| 610018岁成人视频| 大香蕉手机视频| 亚洲激情区| 激情六| 人妖色AV色综合| 亚洲精品白浆高清久久久久久| 99热99久久| 九月色婷婷综合| 九九人妻福利| 91丨九色丨熟女丰满| 91操黄| 婷婷色播婷婷| 亚洲午夜视频| 色色哒五月婷婷六月丁香| 91成人品| 啪啪夜久久| 久久婷婷五月天激情新地址| www.色婷婷.com| 91狠狠色色丁香婷婷综合久久| 99热这里只有在线| 亚洲小视频免费看| 五月丁香花视频| 日韩久久欧亚| 久久性综合| 五月婷婷激情综合| 综合激情站| 色婷久| 中文在线视频久1| 色婷五月| jiqingtaose五月天| 色五月色图| 1024在线视频| 99热这里都是精品| 超碰免费99| 丁香五月婷婷大香蕉| 午夜国产精品AV在线播放| 六月丁香射婷婷欧美色图片 | 久草视频大香蕉99| 九九爱激情| 免费无码毛片一区二区A片| 五月婷婷五月| 久色视频| 无码区婷婷五月花开| SESE无码AV| 五月丁香婷婷伊人| 中出内射的人妻视频| 色五月综合婷婷| 艹| 久久成人精品视频| 伊人狠狠综合| 99re热视频| m色激情网| 久草五月天| 日日爽日日| 婷婷五月丁香超碰| 五月丁香六月婷婷操操操| 婷婷五月天伊人网| 在线日韩视频| 99久久丝| 亭亭五月丁香综合欧美| 婷婷爱五月| 大香蕉婷婷色| 67194国产| 国产成人+综合亚洲+天堂| 91久久久久久久| 强壮的公次次弄得我高潮A片日本 | 97色色综合| 99热18| 欧美成人猛片AAAAAAA| 成人在线二区| 99精品国产在热久久| 最近免费中文字幕大全高清大全1| 日欧一片内射VA在线影院| 久久人妻少妇嫩草AV| 亚洲操女| 91九色无码内射| 在线不卡中文字幕| 91人人操人人| 538在线| 色婷婷a三区麻| 天天综合在线网| 日本99在线| 99ri在线观看视频| 操操碰| 九九爱激情| 日本天堂久久| 色色色色色综合| 日韩综合网络男女香蕉a片| 六月婷婷激情| 狠狠干总合| 六月天丁婷婷| 能看的AV| 天天狠天天叉| 99九九精品| 雪千夏麻豆| 啪啪六月婷婷| 激情五月天婷婷久久久久久久久久久| 99热在线里有精品| 丁香五月婷婷激情蜜桃| 欧美天堂久久| 夜夜骑夜夜撸| 久99婷婷色综合| 丁香六月婷婷社区| 人人爽天天莫| 亚洲天堂AAA| 亚洲色99| 丁香六月婷婷色XXXXX| 丰满人妻一区二区三区| 中文AⅤ大全| www.五月婷婷.com| 深爱激情五月天色婷婷| 开心激情五月天网| 五月婷色| 日操熟女| 99re久热只有精品6在线直播.com| 噜噜干日本| 丁香婷婷五月六月天| 天天插天天插| 99热精品在线| 久艹久| 思思热在线视频观看精品| 99re8这里只有精品99re8热视频| 中文字幕,综合,91| 色情综合网| 五月丁香天堂| 五月婷婷六月丁香激情深爱| 五月欧美色播| 亚洲AV中文在线| 婷婷综合成人五月天| 91超碰人人操| 中文婷婷狠狠| 日韩成人综合网| 五月婷婷69| 国产SUV精品一区二区6| 久久综合婷婷五月| 亚洲十月婷婷综合| 久久久久久人妻| 九九久久高清| 丁香九月婷婷色| www.婷婷五月| 夫妇交换刺激做爰| 91蜜桃婷婷狠狠久久综合9色| 久色资源网| 99视频这里有精品| 综合网色| 五月丁香综合激情| 97自拍99| 亚洲成人AV高清字幕| 久久总和99| 丁香五月天社区婷婷| 丁香色婷婷色手机免费在线| 丁香五月香蕉| 成人网址在线观看| 亚洲国产网址| 欧美天天综合网站上去吧| 久久XX| 五月丁香毛片| 99热久草| 国产熟妇的荡欲午夜视频| AV成人在线播放| 开心激情五月天网| 色九四色| www.久久五月天.com| 99这里只有精品|v| 99热老网站| 天天影院色| 任你搞在线观看视频| 久播影院免费观看电视剧大全最新网| 精品亚洲国产成AV人片传媒| 婷婷五月成人色综合| 色婷丁香| 久久大香蕉同僚| 99视频在线播放大全| 狠干综合| 精品成人a v无码内射| 久久婷婷青青草| 久久人妻情侣| 日日爽夜夜爽| 99精品视频在线观看免费| 婷婷色色网| 九九精品自拍| 日韩欧美颜射| 色五月婷婷久久| 国产 亚洲 在线| www色五月| 操碰99| 五月 成人 婷婷| 亚洲成人av在线| 先锋资源91| 秋霞AV淫| 区美毛片子| 99热这里是精品| 九九九日本熟女| 亚洲啪啪啪啪| 五月婷五月婷伊人伊人五月婷| 六月婷婷视频| 色色丁香婷婷| 日本99久久| 丁香五月天啪啪| 九九99精品视频在线观看| 国产精品成人AV在线| 丁香五月香蕉| 五月婷婷影视| 超级碰碰99| 亚洲精品影视| 99久久黄色顶级视频| BlACKEDRAW视频一区二区| 五月丁香999| 亚州欧美黄色电影| 99热这里只有精品4| 成人免费高清在线播放| 丁香五月欧美激情| 狠狠色婷婷丁香六月| 丁香婷婷五月综合欧美另类| 欧美色婷婷| 天天综合色综合| 国精产品一区二区三区| 久久五月综合| 影音先锋按摩| 五月婷婷中文| 精品久久99码| 91丨九色丨大屁股| 婷婷五月丁香综合激情| 精品久久9| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 伊人五月天日日夜夜久久久天天| 五月婷婷黄色| 亚洲综合婷婷| 五月天成人免费视频| 再次出发二| 男人操女人高潮91视频| 99免费视频精品| 超爽内射| 亚洲国产99| 五月丁香婷婷久久| 五月天网址在线刘玥| 99久视频| 99碰碰| 综合久久狠狠| 色综合久久88色综合天天99| 五月丁香日本在线视频观看| 亚州成人综合在线| 五月天最新网| 丁香五月天偷拍| 日本二级毛片二级毛片| 亚洲天天操| 日日天天天| 久久激情四射| 99在线69| 这里只有精品9| 久9精品|