欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

MQTT QoS深度解析:報(bào)文交換機(jī)制與選型建議

MQTT QoS深度解析:報(bào)文交換機(jī)制與選型建議 1. 從一次實(shí)際故障聊起為什么選錯(cuò) QoS 會(huì)讓人半夜爬起來修先說個(gè)我踩過的坑。某次給一套物聯(lián)網(wǎng)設(shè)備做數(shù)據(jù)采集傳感器每隔幾秒上報(bào)一次溫濕度我圖省事把所有消息都設(shè)成了 QoS 0覺得丟了就丟了下一條馬上就來。結(jié)果客戶現(xiàn)場出現(xiàn)間歇性數(shù)據(jù)空洞運(yùn)維同事查到半夜最后發(fā)現(xiàn)是弱網(wǎng)環(huán)境下報(bào)文頻繁丟失而業(yè)務(wù)側(cè)又拿這條數(shù)據(jù)做告警判斷一個(gè)空洞直接觸發(fā)誤報(bào)。反過來另一個(gè)項(xiàng)目里我把所有下行控制指令都設(shè)成了 QoS 2結(jié)果設(shè)備量上來之后broker 的 Qos 2 報(bào)文處理隊(duì)列積壓嚴(yán)重指令延遲從幾十毫秒飆升到好幾秒。兩次教訓(xùn)讓我徹底明白一件事MQTT 的 QoS 不是越高越好選錯(cuò)才是真麻煩。在選擇 QoS 之前得先弄清楚它到底解決什么問題。MQTT 是應(yīng)用層協(xié)議跑在 TCP 之上按理說 TCP 已經(jīng)保證了字節(jié)流的可靠傳輸為什么還需要業(yè)務(wù)層的 QoS 等級原因在于 MQTT 的通信模型是客戶端 - broker - 客戶端而 broker 是獨(dú)立進(jìn)程TCP 只保證單條連接上的字節(jié)不丟不亂不保證 broker 在轉(zhuǎn)發(fā)消息、處理 session、管理訂閱關(guān)系時(shí)不出岔子。同時(shí)MQTT 消息是發(fā)布 / 訂閱的異步模式發(fā)布者發(fā)完就完事訂閱者可能在某個(gè)時(shí)間點(diǎn)才上線這中間消息在 broker 里怎么存、怎么保證不重復(fù)不丟失TCP 根本管不著。所以 QoS 實(shí)際上是客戶端與 broker 之間、以及 broker 與訂閱端之間的協(xié)議層可靠性約定從每次握手需要交換多少個(gè)報(bào)文就能看得很清楚。這篇文章我把 QoS 0、1、2 逐個(gè)拆開核心關(guān)注點(diǎn)只有一個(gè)它們各自在投遞一條消息時(shí)到底要交換多少報(bào)文、狀態(tài)機(jī)長什么樣、失敗時(shí)誰來負(fù)責(zé)重試、以及這些機(jī)制在真實(shí)業(yè)務(wù)中對應(yīng)的代價(jià)是什么。把這幾個(gè)問題算明白你自然知道什么場景用什么等級。2. QoS 0一發(fā)一收的裸奔模式到底省在哪QoS 0 是整個(gè)協(xié)議里最干脆的等級官方術(shù)語叫 At most once最多一次投遞。它的行為就是發(fā)送端把 PUBLISH 報(bào)文扔出去然后什么都不管沒有 ACK沒有重傳沒有消息 ID。broker 收到之后往匹配的訂閱者那邊轉(zhuǎn)發(fā)一條 PUBLISH同樣不確認(rèn)。2.1 報(bào)文數(shù)量與協(xié)議行為一條 QoS 0 消息的完整鏈路報(bào)文數(shù)量極其固定發(fā)送端向 broker 發(fā)送 1 個(gè) PUBLISH 報(bào)文broker 向每個(gè)匹配的訂閱端轉(zhuǎn)發(fā) 1 個(gè) PUBLISH 報(bào)文全程 0 個(gè)確認(rèn)報(bào)文如果發(fā)送端和訂閱端有 N 個(gè)匹配訂閱關(guān)系那么一條原始消息最多產(chǎn)生1 N個(gè) PUBLISH 報(bào)文除此之外沒有任何額外的握手開銷。這里有一個(gè)容易忽略的細(xì)節(jié)PUBLISH 報(bào)文的固定頭里QoS 等級只占 2 bitQoS 0 對應(yīng)的值是 0所以 DUP 標(biāo)志位、RETAIN 標(biāo)志位的組合也相對簡單。沒有 QoS 0 的消息沒有 Packet ID或者說 Packet ID 字段長度為 0這意味著從協(xié)議層面根本無法追蹤某一條消息是否被送達(dá)。2.2 省下來的開銷背后是什么QoS 0 最大的價(jià)值是極低的延遲和極小的帶寬占用。對于上報(bào)型業(yè)務(wù)比如環(huán)境溫濕度、GPS 坐標(biāo)、設(shè)備心跳這類數(shù)據(jù)天然有時(shí)間價(jià)值衰減一條數(shù)據(jù)過了幾秒就是廢數(shù)據(jù)重傳舊數(shù)據(jù)反而會(huì)干擾下游分析。與其糾結(jié)丟沒丟不如盡快把最新值送過去。而且這類消息量大、頻率高如果每條都走確認(rèn)流程broker 的 CPU 和網(wǎng)絡(luò) IO 都會(huì)明顯上升最終反而擠壓了真正重要的控制消息的帶寬。但省下的代價(jià)也清清楚楚消息可能丟失。TCP 層只保證字節(jié)流到達(dá) broker不保證 broker 應(yīng)用層一定能把消息成功寫入訂閱者的會(huì)話。比如訂閱者正好在斷線重連瞬間消息被 broker 發(fā)往舊的 socketTCP 連接關(guān)閉時(shí)數(shù)據(jù)被丟棄QoS 0 不會(huì)觸發(fā)任何重發(fā)再比如 broker 內(nèi)部路由處理時(shí)發(fā)現(xiàn)沒有匹配的訂閱者消息直接丟棄也不會(huì)告訴發(fā)送端。這些行為在協(xié)議規(guī)范里都是允許的所以業(yè)務(wù)代碼必須把可能丟消息當(dāng)成默認(rèn)前提來設(shè)計(jì)。2.3 一個(gè)容易犯的認(rèn)知錯(cuò)誤很多人以為反正應(yīng)用層自己會(huì)做數(shù)據(jù)校驗(yàn)QoS 0 丟了我可以從別的地方補(bǔ)然后給所有消息都用 QoS 0。這個(gè)思路在純數(shù)據(jù)采集、且下游能做時(shí)序拼接的場景下是合理的但在以下場景就危險(xiǎn)了告警觸發(fā)類消息比如設(shè)備溫度越限、電量低丟了可能就是一次安全事故狀態(tài)變更類消息比如設(shè)備在線 / 離線切換、門鎖開閉丟了會(huì)導(dǎo)致業(yè)務(wù)側(cè)狀態(tài)字段和實(shí)際不符冪等性較弱的下行控制消息比如切換工作模式重發(fā)或丟失都會(huì)造成狀態(tài)漂移所以我現(xiàn)在的習(xí)慣是把所有消息按可丟性分三檔QoS 0 只放丟掉之后對業(yè)務(wù)無影響或影響可自然恢復(fù)的那一檔。這不是保守而是吃過虧之后的經(jīng)驗(yàn)。3. QoS 1多一來回買到的是至少一次的確定性QoS 1 全稱 At least once至少一次投遞。它的引入提供了消息到達(dá)確認(rèn)機(jī)制但同時(shí)也引入了重復(fù)消息的可能性。這個(gè)等級應(yīng)該是 IoT 項(xiàng)目里用得最多的比 QoS 0 多了一倍的握手但可靠性提升非常明顯。3.1 報(bào)文交換流程逐字節(jié)算清一條 QoS 1 消息從發(fā)布端到 broker 的流程如下我做了一個(gè)逐步驟拆解發(fā)送端先給消息分配一個(gè) Packet ID2 字節(jié)從 1 到 65535發(fā)送端發(fā)送 PUBLISH 報(bào)文QoS 位設(shè)為 1Packet ID 填入報(bào)文broker 收到后把消息按訂閱關(guān)系轉(zhuǎn)發(fā)給所有匹配的訂閱端broker 向發(fā)送端回復(fù)一個(gè) PUBACK 報(bào)文確認(rèn)收到發(fā)送端收到 PUBACK 后把這條消息的本地狀態(tài)標(biāo)記為已完成如果發(fā)送端在發(fā)出 PUBLISH 之后等待 PUBACK 期間發(fā)生了超時(shí)或連接斷開發(fā)送端就不知道 broker 到底有沒有收到。此時(shí)協(xié)議允許發(fā)送端在重連后重新發(fā)送一次 PUBLISH并且把 DUP 標(biāo)志置 1表示這是一條可能重復(fù)的報(bào)文。這個(gè) DUP 重發(fā) 的機(jī)制正是 QoS 1 重復(fù)消息的來源。從報(bào)文數(shù)量上看一條 QoS 1 消息發(fā)布和確認(rèn)至少需要 2 個(gè)報(bào)文PUBLISH PUBACK如果發(fā)生超時(shí)重發(fā)那就是 4 個(gè)、6 個(gè)甚至更多。對于每個(gè)匹配的訂閱端broker 向它轉(zhuǎn)發(fā)時(shí)同樣會(huì)進(jìn)行 QoS 1 的流程因此完整鏈路的報(bào)文量是 2 2N不考慮重發(fā)。3.2 重復(fù)消息為什么不可避免注意上面對話里第三步的時(shí)序很關(guān)鍵broker 在轉(zhuǎn)發(fā)給訂閱端和回復(fù) PUBACK之間是有順序的。不同 broker 的實(shí)現(xiàn)可能先轉(zhuǎn)發(fā)再回 ACK也可能先回 ACK 再轉(zhuǎn)發(fā)甚至可能是異步并發(fā)。如果 broker 已經(jīng)向訂閱端轉(zhuǎn)發(fā)了 QoS 1 消息但是發(fā)送端斷線了沒收到 PUBACK那發(fā)送端重發(fā)時(shí)訂閱端就會(huì)收到兩條一模一樣的消息。兩條消息的 Packet ID 一樣DUP 標(biāo)志也一樣因?yàn)槎际峭粫?huì)話重發(fā)訂閱端無法簡單地通過 Packet ID 去重因?yàn)?QoS 1 規(guī)范里壓根沒要求它做去重。這就是至少一次的代價(jià)消息不丟但你得自己處理重復(fù)。最常用的辦法是在應(yīng)用層加業(yè)務(wù)去重比如每條消息帶一個(gè)全局唯一的 messageId 字段訂閱端用一個(gè)滑動(dòng)窗口或者 Redis set 記錄最近處理過的消息 ID。另一個(gè)常規(guī)思路是把消息做成冪等操作例如把溫度設(shè)為 25 度這種賦值型指令天然冪等重復(fù)執(zhí)行兩次結(jié)果一樣而把計(jì)數(shù)器加 1這種非冪等操作就必須配合業(yè)務(wù)去重。3.3 QoS 1 實(shí)際項(xiàng)目中擴(kuò)展出來的花樣實(shí)際項(xiàng)目里我還見過 QoS 1 配 session 過期時(shí)間的方式來做離線消息緩存。比如控制指令場景設(shè)備可能離線一小段時(shí)間如果 cleanSessionfalse 且 session 未過期broker 會(huì)把 QoS 1 消息緩存在會(huì)話里等設(shè)備重連時(shí)再補(bǔ)發(fā)。這比直接用 QoS 2 便宜得多而且大部分業(yè)務(wù)對重復(fù)指令是可以容忍的——用冪等設(shè)計(jì)把重復(fù)消掉就好。所以 QoS 1 是可靠性和成本折中最均衡的等級也是我默認(rèn)的起步等級。4. QoS 2兩輪四次握手為了恰好一次付出多少代價(jià)QoS 2 全稱 Exactly once恰好一次投遞。這是 MQTT 協(xié)議里最復(fù)雜、也是最容易被誤解的部分。很多人以為 QoS 2 就是更可靠一點(diǎn)實(shí)際上它是用一整套握手狀態(tài)機(jī)換來消息既不丟失也不重復(fù)的語義報(bào)文量和協(xié)議復(fù)雜度都遠(yuǎn)超 QoS 0 和 QoS 1。4.1 每一條消息的四步完整往返QoS 2 的發(fā)送端到 broker 這一段協(xié)議規(guī)定的報(bào)文交換流程嚴(yán)格分成兩階段第一階段發(fā)送端發(fā)送 PUBLISH 報(bào)文QoS 位設(shè)為 2攜帶 Packet IDbroker 收到后不會(huì)立刻轉(zhuǎn)發(fā)給訂閱端而是先持久化這個(gè) Packet ID 到會(huì)話狀態(tài)標(biāo)記為已收到但未釋放然后向發(fā)送端回復(fù) PUBREC 報(bào)文第二階段發(fā)送端收到 PUBREC 后知道 broker 已經(jīng)確認(rèn)收到該消息于是發(fā)送一個(gè) PUBREL 報(bào)文表示我這邊已經(jīng)完成發(fā)送流程你可以正式釋放這條消息broker 收到 PUBREL 后才把消息轉(zhuǎn)發(fā)給訂閱端同時(shí)向發(fā)送端回復(fù) PUBCOMP 報(bào)文表示整個(gè) QoS 2 發(fā)送流程關(guān)閉現(xiàn)象上一條 QoS 2 消息從發(fā)送端到 broker 至少要交換 4 個(gè)報(bào)文PUBLISH、PUBREC、PUBREL、PUBCOMP。在最理想情況下是各 1 個(gè)總共 4 個(gè)。如果在某個(gè)環(huán)節(jié)發(fā)生重傳那報(bào)文數(shù)量還會(huì)成倍增加。這個(gè)成本已經(jīng)非常直觀了傳輸 1 條 QoS 2 消息控制報(bào)文的個(gè)數(shù)是 QoS 1 的 2 倍是 QoS 0 的 4 倍以上。4.2 為什么是兩階段提交而不是簡單 ACK 兩次初學(xué) MQTT 的人都會(huì)有一個(gè)疑問QoS 1 是 PUBLISH PUBACKQoS 2 為什么不能做成 PUBLISH PUBACK 再 PUBACK 一次因?yàn)閮纱为?dú)立的 ACK解決不了重復(fù)問題。如果只用一次 ACK重復(fù)完全靠語義用兩次獨(dú)立 ACK發(fā)送端重發(fā) PUBLISH 時(shí)broker 無法區(qū)分這條 PUBLISH 是全新的還是重發(fā)的也就無法決定到底要不要把消息轉(zhuǎn)發(fā)兩次。QoS 2 的關(guān)鍵設(shè)計(jì)在于中間那個(gè) PUBREL。PUBREL 是一張釋放令牌相當(dāng)于告訴 broker之前的 PUBLISH 我已經(jīng)確認(rèn)你收到了現(xiàn)在我們要完成最后的交接。broker 在收到 PUBLISH 時(shí)記錄 Packet ID但并不會(huì)立即把它投入轉(zhuǎn)發(fā)流程收到 PUBREL 之后這個(gè) Packet ID 的狀態(tài)才從待處理變?yōu)榭赊D(zhuǎn)發(fā)從而保證任何一個(gè) Packet ID 在 broker 側(cè)只會(huì)被消費(fèi)一次。這套機(jī)制和分布式事務(wù)里的兩階段提交思路非常像本質(zhì)上就是用額外的握手換取唯一一次投遞的語義保證。從 broker 側(cè)視角來看還隱含了一個(gè)重要邏輯收到 PUBREC 后broker 一方面要保存 Packet ID另一方面可以回復(fù) PUBREC但是對外轉(zhuǎn)發(fā)消息必須等到 PUBREL 之后。如果發(fā)送端在發(fā)出 PUBREL 后一直沒收到 PUBCOMP發(fā)送端會(huì)重發(fā) PUBREL而不是重發(fā) PUBLISHbroker 收到重復(fù)的 PUBREL 時(shí)不會(huì)再次轉(zhuǎn)發(fā)消息只會(huì)再次回復(fù) PUBCOMP。這個(gè)細(xì)節(jié)保證了無論如何重試訂閱端最多收到一次。4.3 QoS 2 的狀態(tài)機(jī)異常情況都從哪里來我把 QoS 2 發(fā)送端的典型狀態(tài)變化列一下更直觀發(fā)送端狀態(tài)觸發(fā)事件動(dòng)作待發(fā)送業(yè)務(wù)產(chǎn)生消息發(fā)送 PUBLISH記錄 Packet ID進(jìn)入等待 PUBREC等待 PUBREC收到 PUBREC發(fā)送 PUBREL進(jìn)入等待 PUBCOMP等待 PUBREC超時(shí) / 斷線重連后重發(fā) PUBLISHDUP1仍在等待 PUBREC等待 PUBCOMP收到 PUBCOMP清理 Packet ID流程結(jié)束等待 PUBCOMP超時(shí) / 斷線重連后重發(fā) PUBREL仍在等待 PUBCOMP你可能注意到了等待 PUBREC 階段重發(fā)的是 PUBLISH等待 PUBCOMP 階段重發(fā)的是 PUBREL。這兩次重發(fā)的報(bào)文類型是不同的很多 SDK 的 debug 日志里可以看到同一 Packet ID 的 PUBLISH 和 PUBREL 交替出現(xiàn)如果你不理解狀態(tài)機(jī)很容易誤判成協(xié)議 bug。其實(shí)這正是 QoS 2 為了防重復(fù)做的一個(gè)細(xì)節(jié)只有收到 PUBREC 之后才允許把消息提交給 broker否則無條件重發(fā) PUBLISH而一旦進(jìn)入 PUBREL 階段PUBLISH 已經(jīng)確認(rèn)落地了重發(fā) PUBREL 不會(huì)造成二次轉(zhuǎn)發(fā)。4.4 一個(gè)值得警惕的坑QoS 2 不是端到端恰好一次QoS 2 只保證了發(fā)布端到 broker這一段恰好一次以及broker 到單個(gè)訂閱端這一段恰好一次。如果一條消息從發(fā)布端發(fā)出broker 把它轉(zhuǎn)發(fā)給兩個(gè)訂閱者 A 和 B那么在 A 和 B 那邊各自會(huì)獨(dú)立執(zhí)行 QoS 2 流程。也就是說broker 和 A 之間的 Packet ID 可能與 broker 和 B 之間的完全不同A 和 B 收到消息的時(shí)間也可能差很多。QoS 2 從來不做跨訂閱端的全局去重它只做連接級的語義保證。更關(guān)鍵的是如果發(fā)布端和 broker 用 QoS 2但 broker 向某個(gè)訂閱端轉(zhuǎn)發(fā)時(shí)訂閱策略或會(huì)話配置把 QoS 降級了比如訂閱時(shí)請求 QoS 1或者 broker 對 QoS 2 做了下鉆映射那么端到端的語義就不是恰好一次。所以當(dāng)你看到某個(gè)架構(gòu)說自己實(shí)現(xiàn)了端到端 exactly once一定要追問一句發(fā)布端到 broker 是什么等級broker 到訂閱端是什么等級兩個(gè)等級不一致的時(shí)候消息語義以更低的那個(gè)為準(zhǔn)。5. 三張表看懂 QoS 選型性價(jià)比才是第一原則把前三節(jié)的內(nèi)容壓縮一下QoS 等級的核心差異其實(shí)可以收斂成一張報(bào)文對照表、一張可靠性對照表、和一張選型決策表。我在實(shí)際評審方案時(shí)基本就是拿這三張表逐條過需求。5.1 報(bào)文量與開銷對照QoS等級最簡報(bào)文數(shù)確認(rèn)機(jī)制消息ID超時(shí)重發(fā)動(dòng)作重復(fù)可能性QoS 01PUBLISH無無無沒有重發(fā)邏輯不可能重復(fù)但可能丟失QoS 12PUBLISH PUBACK有有重發(fā) PUBLISHDUP1可能重復(fù)QoS 24PUBLISH PUBREC PUBREL PUBCOMP兩階段確認(rèn)有等待 PUBREC 時(shí)重發(fā) PUBLISH等待 PUBCOMP 時(shí)重發(fā) PUBREL不重復(fù)保證恰好一次這個(gè)表格應(yīng)該是你電腦前貼著的默認(rèn)參考。凡是讓你一把梭直接全上 QoS 2的把這個(gè)表格甩給他看同樣的消息吞吐QoS 2 的協(xié)議開銷是 QoS 1 的兩倍是 QoS 0 的四倍如果消息量大這帶來的 CPU、帶寬、延遲成本會(huì)直接反饋在監(jiān)控曲線上。5.2 典型場景決策參考以下選型建議來自我參與過的幾類真實(shí)項(xiàng)目不是教科書標(biāo)準(zhǔn)答案但大概率能幫你少走彎路業(yè)務(wù)場景消息特征推薦QoS理由傳感器高頻數(shù)據(jù)上報(bào)周期性、容忍少量丟失、量大QoS 0省帶寬、低延遲下游可以做插值或跳變檢測設(shè)備心跳 / 在線狀態(tài)低頻、需要不丟失QoS 1丟了就誤判離線正常重發(fā)可接受控制指令開關(guān)、調(diào)參低頻、需要必達(dá)QoS 1 業(yè)務(wù)冪等重發(fā)可接受但要做好指令去重計(jì)費(fèi) / 工單 / 支付回調(diào) / 授信變更低頻、語義重大、不允許重復(fù)QoS 2用協(xié)議層保證恰好一次省掉大量對賬離線設(shè)備指令緩存設(shè)備可能長期離線QoS 1 持久會(huì)話用 session 緩存成本比 QoS 2 低很多要注意的是表格里 QoS 1 業(yè)務(wù)冪等和 QoS 2 是兩條不同的技術(shù)路線。很多時(shí)候 QoS 2 能解決的問題QoS 1 配合冪等 ID 也能兜住只是實(shí)現(xiàn)位置不同QoS 2 把去重做在協(xié)議棧里QoS 1 把去重做在應(yīng)用代碼里。前者省心但費(fèi)帶寬后者省帶寬但費(fèi)開發(fā)。5.3 不要盲目升級 QoS 的另一個(gè)原因有人可能想我都用 QoS 2成本高點(diǎn)就高點(diǎn)至少保險(xiǎn)。但 QoS 2 的恰好一次有一個(gè)前提條件broker 必須能夠維護(hù)每個(gè) Packet ID 的會(huì)話狀態(tài)。如果 broker 宕機(jī)重啟、或者客戶端長時(shí)間離線導(dǎo)致會(huì)話過期那么 QoS 2 的握手狀態(tài)也會(huì)丟失此時(shí)若發(fā)送端重連并重發(fā) PUBRELbroker 可能已經(jīng)不認(rèn)識這個(gè) Packet ID 了這時(shí)候會(huì)回復(fù)一個(gè) DISCONNECT 或直接當(dāng)作新消息處理。所以 QoS 2 并不等于消息絕對可達(dá)它只是盡最大努力保證在鏈路和會(huì)話正常的前提下不重不丟。一個(gè)真正可靠的系統(tǒng)還是要靠業(yè)務(wù)層的最終一致性設(shè)計(jì)和重試機(jī)制兜底而不是寄希望于單一協(xié)議等級。6. 實(shí)際工程里影響 QoS 選擇的隱藏因素我不說你很難注意到上面聊的都是協(xié)議本身的語義但在真實(shí)項(xiàng)目里QoS 最終表現(xiàn)還受一堆外部因素制約。這些因素在報(bào)文數(shù)量層面看不出差異一旦上線都是暗坑。6.1 cleanSession 與持久會(huì)話對 QoS 的影響MQTT 連接由 CONNECT 報(bào)文里的 cleanSession 標(biāo)志控制。如果 cleanSessiontruebroker 不保存任何會(huì)話狀態(tài)客戶端重連后一切清零。此時(shí) QoS 1 或 QoS 2 的重發(fā)機(jī)制依舊存在但當(dāng)客戶端斷開期間到達(dá)的消息broker 不會(huì)緩存直接丟棄。如果 cleanSessionfalsebroker 會(huì)為這個(gè)客戶端保留 session包括未確認(rèn)的 QoS 1 / QoS 2 消息狀態(tài)和離線消息隊(duì)列這才會(huì)出現(xiàn)我們常說的離線消息補(bǔ)發(fā)。所以做選型的時(shí)候要問的不只是 QoS 等級還有 cleanSession 配置。設(shè)備上報(bào)場景通常 cleanSessiontrue簡單干脆但控制指令緩存、遺囑消息、狀態(tài)同步這些場景往往要開持久會(huì)話。我見過一個(gè)項(xiàng)目用了 QoS 2 但忘了關(guān) cleanSession結(jié)果設(shè)備一離線消息就丟排查了很久才發(fā)現(xiàn)是會(huì)話狀態(tài)沒保留。協(xié)議等級選得再高會(huì)話策略不對等于白搭。6.2 Broker 實(shí)現(xiàn)差異同一 QoS不同表現(xiàn)不同 broker 內(nèi)部實(shí)現(xiàn)方式差別很大直接體現(xiàn)在 QoS 處理路徑上。輕量級 broker 可能把所有消息都放在內(nèi)存里投遞完就刪企業(yè)級 broker 會(huì)對消息做持久化甚至在 QoS 2 轉(zhuǎn)發(fā)之前寫入消息存儲(chǔ)。如果你的 QoS 2 消息數(shù)量很大broker 的磁盤 IO 就是新的瓶頸。我實(shí)測過同一組 QoS 2 消息在嵌入式 broker 和企業(yè)級 broker 上的表現(xiàn)吞吐可以差一個(gè)數(shù)量級原因就是后者多了持久化步驟。另外某些 broker 為了性能會(huì)在轉(zhuǎn)發(fā)時(shí)做 QoS 降級。比如發(fā)布端用 QoS 2 發(fā)送但某個(gè)訂閱端訂閱主題時(shí)用的是 QoS 0那么 broker 按照取發(fā)布和訂閱 QoS 的較小值這個(gè)規(guī)則只會(huì)用 QoS 0 轉(zhuǎn)發(fā)給該訂閱端。很多人不知道這個(gè)規(guī)則以為發(fā)布端選了 QoS 2 訂閱端就一定能 QoS 2 收到實(shí)際上協(xié)議規(guī)定是 min(pubQoS, subQoS)。所以客戶端訂閱時(shí)的 QoS 也必須按業(yè)務(wù)需求明確設(shè)置否則前面省心后面鬧心。6.3 鏈路層不等于應(yīng)用層TCP 超時(shí)重傳與 MQTT 重發(fā)的疊加MQTT 跑在 TCP 上TCP 自己也有超時(shí)重傳這會(huì)不會(huì)和 MQTT 的 QoS 重發(fā)疊加會(huì)但它們的語義不同。TCP 重傳解決的是字節(jié)流層面的丟包保證整段字節(jié)到達(dá)對端MQTT 重傳解決的是 broker 應(yīng)用層是否處理完畢。舉一個(gè)極端例子發(fā)送端發(fā)出 QoS 1 的 PUBLISHTCP 層把它拆成幾個(gè) segment 發(fā)出去第一個(gè) segment 到了 broker第二個(gè) segment 丟了TCP 會(huì)重傳丟掉的 segment最終 broker 完整收到 PUBLISH回復(fù) PUBACK。這一過程 TCP 和 MQTT 都在參與但 MQTT 的重發(fā)邏輯不會(huì)介入因?yàn)榘l(fā)送端還沒到超時(shí)條件。如果網(wǎng)絡(luò)質(zhì)量極差TCP 重傳多次仍失敗MQTT 層才會(huì)啟動(dòng)自己的重發(fā)定時(shí)器。所以做測試時(shí)不要用拔網(wǎng)線來模擬 MQTT 消息丟失那模擬的是連接斷開觸發(fā)的行為往往是會(huì)話重建和 DUP 重發(fā)而不是 TCP 重傳。想要看 MQTT QoS 機(jī)制的真實(shí)表現(xiàn)更好的方式是人為丟包、亂序或延遲注入比如 tc 命令加 netem 模塊這樣可以分別觀察 QoS 1 的 PUBACK 超時(shí)和 QoS 2 的 PUBREC/PUBCOMP 超時(shí)。搞清楚這兩層機(jī)制線上出問題時(shí)才不至于把鍋甩錯(cuò)對象。6.4 消息體大小對 QoS 開銷的放大效應(yīng)協(xié)議開銷的計(jì)算不應(yīng)該只算報(bào)文個(gè)數(shù)還得乘消息體長度。QoS 0 和 QoS 1 / QoS 2 在 PUBLISH 報(bào)文的可變頭部上差異很小差值基本上就是 0 到 2 字節(jié)的 Packet ID。但是 QoS 1 和 QoS 2 的確認(rèn)報(bào)文 PUBACK / PUBREC / PUBREL / PUBCOMP 都很短固定頭 可變頭不超過 4 字節(jié)。所以當(dāng)消息體很大時(shí)比如固件升級包分片QoS 1 和 QoS 2 的額外開銷占比反而小當(dāng)消息體很小時(shí)比如開關(guān)狀態(tài)就幾個(gè)字節(jié)QoS 2 的控制報(bào)文開銷占比可能超過 100%。這也是為什么大量小報(bào)文的遙測場景要堅(jiān)持用 QoS 0哪怕業(yè)務(wù)方一開始喊著不能丟講完成本之后通常也會(huì)接受加業(yè)務(wù)層兜底而不是全局升 QoS。7. 最后的實(shí)操建議和幾個(gè)值得收藏的細(xì)節(jié)寫到這里把我自己項(xiàng)目里沉淀下來的幾條硬經(jīng)驗(yàn)放出來基本上可以直接抄作業(yè)。第一默認(rèn)從 QoS 1 起步再按需降級或升級。不要在項(xiàng)目啟動(dòng)會(huì)上拍腦袋定 QoS而是先按消息分類梳理出丟得起 / 丟不起但可重復(fù) / 絕不能重復(fù)三類每一類對應(yīng) QoS 0、QoS 1 冪等、QoS 2。這套方法我用在十幾個(gè)項(xiàng)目里都穩(wěn)。第二消息體里一定要帶業(yè)務(wù) ID即使你已經(jīng)用了 QoS 2。因?yàn)榭?broker 橋接、版本升級遷移、以及訂閱端做多副本消費(fèi)時(shí)都可能出現(xiàn)重復(fù)或亂序業(yè)務(wù) ID 是最后的兜底手段。QoS 2 節(jié)省了去重代碼但省不掉業(yè)務(wù)排重字段。第三QoS 2 的 PUBREL 重發(fā)是很常見的現(xiàn)象不要當(dāng)成錯(cuò)誤。正常網(wǎng)絡(luò)抖動(dòng)下每次 QoS 2 消息的傳播都可能伴隨一次 PUBREL 重發(fā)字節(jié)流日志里出現(xiàn) DUP 標(biāo)志是正常行為。真正需要警惕的是 PUBLISH 的 DUP 在 QoS 2 下頻繁出現(xiàn)那說明 PUBREC 遲遲未到大概率是 broker 處理能力存在瓶頸。第四做壓測時(shí)把報(bào)文數(shù)量統(tǒng)計(jì)帶上。只要在發(fā)布端和訂閱端分別統(tǒng)計(jì)收到的 PUBLISH 數(shù)就能立刻算出實(shí)際 QoS 生效比例。比如發(fā)布端發(fā)了 1000 條 QoS 1訂閱端收了 1012 條那說明至少有 12 條經(jīng)歷了重復(fù)投遞如果訂閱端只收到 958 條那不是 QoS 的錯(cuò)而是會(huì)話配置或 broker 丟消息得另行排查。第五不要在 QoS 2 上強(qiáng)行疊加離線永久緩存。離線緩存場景用 QoS 1 持久會(huì)話就夠了QoS 2 的握手狀態(tài)在長時(shí)間離線后大概率會(huì)失效到時(shí)候反而多出一堆 PUBREL 重發(fā)日志和數(shù)據(jù)殘留。把話說到底QoS 2 是為在線鏈路可靠性設(shè)計(jì)不是為離線海量緩存設(shè)計(jì)。我覺得 MQTT 的 QoS 選型本質(zhì)上是個(gè)系統(tǒng)工程問題協(xié)議只是給了一個(gè)解決可靠性的杠桿而你真正要做的是搞清楚業(yè)務(wù)能容忍什么語義再?zèng)Q定要不要花報(bào)文數(shù)量的成本去換取更嚴(yán)格的語義。報(bào)文數(shù)量會(huì)告訴你每個(gè)選擇的代價(jià)業(yè)務(wù)語義會(huì)告訴你每個(gè)選擇的收益兩者對齊答案自然就出來了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月婷婷激情综合| 丁香婷婷黄网站| 五月网网站| 少妇高潮呻吟A片免费看软件| 欧美性交一区二区三区| 色哟哟精品| 丁香五月婷婷激情四射| 色色五月丁香| 婷婷色导航| 操人91| 99热日韩| 最近中文字幕在线中文视频| 欧美丁香六月在线观看视频| 天天草天天爽| 久久久区区一久久久久久| 亚洲在线免费成人| 亚洲天堂aaaa| 天堂综合久久| 婷婷五月天综合网| 色色丁香激情五月| 99久精品视频| 丁香五月偷拍| Www.激情| 欧美三级欧美一级| 婷婷伊人| 五月婷婷开心综合| 大香蕉综合在线| 五月丁香毛片| 色在线99| 久久亚洲婷婷综合色五月| 99欧美| 五月天婷婷久久综合| 久久久91精品| 六月99天天婷婷激情综合| 九九色热| 丁香六月婷婷操逼网| 九九免费精品| 99 热| 嫩草AV久久伊人妇女超级A| 99亚洲欧洲| 欧美啪啪五月天| 天天爱天天爽| 噜噜久| 色婷婷色综合激情91| 激情综合五月| 五月色情网| 91九色PORNY中文啦| 久久狼人天堂| 婷婷五月丁综合| 五月婷久久久| 香蕉久久国产AV一区二区| 亚洲最大五月六月丁香婷婷| 久久激情网| 专区无日本视频高清8| 激情婷婷五月天在线观看| 五月婷久草| Av大香蕉| 日本色色色| 久久精典| 丁香情色五月| 99免费热视频在线| 五月成人天| 色色色99| 97人人操人人操人人操人人| 国产成人精品一区二三区熟女在线 | 天堂呦 呦百度搜索-百度搜索| 综合网视频| 亚州色婷婷| 无码成人AAAAA毛片AI换脸| 五月婷婷av| 超碰激情网| 午夜精品久久久久久久爽| 天天做天天爱天天玩| www久久五月com| 婷婷丁香五月天色色| 亚洲精品视频电影| 99久久久国产精品免费蜜乳tv| 操逼三区| 婷婷五月激情丁香| 99精品视频在线| 新激情综合| 久久九九99| 天天做天天爱天天高潮| 免费观看欧美成人AA片爱我多深| 综合网激情五月天| 五月天婷婷黄色视频| www.91五月| 91日本在线观看| www.五月激情红色| 婷婷在线五月天观看| 中文字幕av亚洲| 中文成人在线| 国外亚洲成AV人片在线观看| 久色网| 激情小说婷婷五月| 天天操天天草天天草天天| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 色婷婷五月天亚洲| 久久激情五月婷婷| 日本精品干| 七月丁香婷婷 色色| 日韩啊啊啊| 99热这里有精品| 婷婷碰碰| 三级片AAA久久久AAA久久久AAA | j五月香在线| 狠狠干综合| 综合狠狠干| 国产日韩亚洲欧美在线观看| 久久婷婷操| 99久久亚洲精品视频| 9999综合99综合人| 9久久久| 99久操视频| 色播综合| 裸睡玩奶头(高H)| 婷婷色网| 婷婷久久网| 欧美精品999| 婷婷综合色五月天| 人妻操逼视频| 午夜丁香婷婷| 日本va欧美va国产激情| 丁香五月婷婷偷拍| 五月丁香 啪啪| 六月婷婷开心| 五月婷婷,狠狠操| 国产午夜一区二区三区| 久久99热这里只有精品| 91无码高清| 婷婷激情社区| 丁香五月激情五月开心五月| 天天爱综合网| 日本精品在线噜噜噜| 99久久玖玖| 91综合在线观看首页| 精品自拍97| 丁香婷婷AV| 国产一二区爆乳_1国产日韩一区二区三-成人AV | 直接看的av| 久久久久久性爱视频| 66精品成人免费网站在线观看| 五月天伊人日日噜影片AV| 婷婷综合五月激情| www.亭亭五月天| 五月天婷婷丁香社区| 亚洲亚洲亚洲AAAAAA| 婷婷视频在线| 天天在线XXX| 99色热视频在线| 婷婷五月天AV| 色色色9| 色情婷婷五月天| 激情五月天色色网| 牛牛澡牛牛爽| 97碰碰视频| 婷婷五月丁香91| 婷婷午夜精品久久久| 亚洲AV成人精品日韩在线播放| 大香蕉五月丁香| 色婷婷WWW| 安息电影在线观看完整版| 亚洲激情五月婷婷日日| 玖玖色资源| 殴美日韩成人| 99热这里只有精品国产免费| 淫荡综合网| 九九精品在线观看视频6| 婷婷日日夜夜| 色综合激情| 成人AV在线电影| 狠狠精品干练久久久无码中文字幕 | 79色色色色| 少妇人妻人伦A片| 99精品热视频| 9精品久久999| 日本WWW九九九| 91一起操| 婷婷综合色五月天| 我爱大香蕉| 人妻中文在线| 天天艹| 超碰色色综合| 最新午夜理论片| 日韩欧美四五区| 亚洲精品国产精品乱码视99| 国产精品美女| 激情五月婷色| 久久久妻人人人| 狠狠擼综合| se99视频| 北京熟妇搡BBBB搡BBBB| 99热丁香五月| 日本在线播放97| 欧美三级视频下载| 美臀自射自家人妻| www.夜夜操| 丁香六月在线| 色综合久久88| 伦99热| 色欲午夜无码久久久久久张津瑜| 国产精品久久久久久久久久免费| 91九色欧美| 97色干| 五月丁香激情婷婷综合| 成年人丁香五月| 91精品刘玥| 涩综合网| 久热这里只有精品99re| 成人综合网站| 99re免费精品视频| 综合图片色色| 大香蕉五月婷婷丁香| 91亚洲免费片| www.五月天。com| 色综合色五月| 久久精品女人天堂AAA| 婷婷第六色| 午夜丁香婷婷| www.99.色| 99ri在线视频| 天天干天天干天天干| 99热这里都是精品| 午夜免费试看| 久久婷婷五月天激情| 激情内射人妻1区2区3区| 99色视频| Caop在线| 丁香五月天网友自拍啪啪啪视频| 色欲一区二区三区精品A片| 97人妻碰碰碰久久| 五月丁香婷婷激情澎湃四射| 性一交一乱一交A片久| 日韩操逼大片| 人妻少妇色综合| 91日在线视频| 五月天婷婷色小说| 亚洲乱码日产精品BD在线观看| 視频福利乱色| 99热这里只有精品青草| 96色婷婷| 丁香婷在线| 五月丁香婷婷基地| 五月色色色| 婷婷五月激情图片| 激情丁香五月| 丁香五月综合亚洲| 欧美成人猛片AAAAAAA| 超碰在线人妻| 激情久久久久久| www.99精品日操伊人乱碰在线| 五月婷婷激情四季| 五月天丁香| 碰碰91| 爱婷婷都市激情| 激情玖玖综合网| 爱草视频在线观看| 欧美一级色| 玖玖午夜视频| 99久久久久| 色在线99| 亚洲熟女色| 久久99大全| 中文字幕久久婷九女同| 亚亚州久久高潮| 思思9久久| 噜噜噜噜噜在线| 丁香婷婷基地| 五月天色色网站| 亚洲成人中心| 婷婷99狠狠躁天天| 久热久| 色播婷婷大香蕉| 99在线精品视频| 婷婷99丁香| 色视频五月天| 婷婷九月狠狠色| 狠狠高潮精品亚洲1| 97丁香视频| 99热这里只有精品最新地址获取| 1769在线观看欧美国产| 噜一噜在线| 91在线日本| 天天肏高清在线| 超级碰碰视频无码| 秋霞A V毛片| 婷婷九月综合| 99成人| 第四色色六月色综合| 五月婷婷开心网| 色色日韩| 久爱综合| 色婷婷日本| 六月色播| 五月婷色| 99精品无码网站| 日本性视频| 婷婷伊人五月天| 99啪在线| 天天爽天天日| 女人露出p毛视频www网站| 99这里只有精品| 婷婷丁香五| 伊人婷婷大香蕉在线| 99热这里只有在线| 日韩在线99| 狠狠大香婷婷爱| 成人电影AV在线观看| 亚洲综合视频在线| 久久久国产精品黄毛片| 色99网| 日韩 中文 欧美| 久9视频| 欧洲亚洲欧洲99久久| 国产亚洲99久久精品熟女| 色丁香影院| 久久久欧美精品sm网站| 丁香五月影院| 四月婷婷丁香| 色情五月丁香| 五月婷婷香蕉| 91久久1118| 九热在线这里有精品6| 午夜AV网| 99热这| 一个色的综合| 人妻激情视频| 日本熟妇乱妇熟色A片蜜桃| 亚洲婷婷激情五月天| 五月丁香久久呀| 五月婷婷色播| 丁香五月在线观看| va婷婷在线| 六月丁香开心婷婷欧美| 中文字幕黄色片| 狠狠狠狠免费| 日本色天堂| 99国产精品白浆在线观看免费 | 激情网 五月天| 九九九九九九九九九九九九九国产精品 | 亚洲综合色网站| 99热精品中文字幕| 丁香五月婷婷激情尤物| 无码se| 五月婷天天搞视频| 色婷婷成人色网| 操一区| 26uuu精品国产| www.婷婷六月天| 91黄操| 国产精品成人av在线观看春天| 久久99热这里只有精品23| 777精品久无码人妻蜜桃| 天天激情欧美美女| 亚州视频九九99| www.99热精品| 人碰人人人玩91| 久久视频这里有精品99| 婷婷五月天网| 婷婷丁香六月激情综合| 激情五月婷婷丁香六月| 一起肏在线视频| 538在线精品| 综合另类视频| www五月天com| 操操操97| 婷婷香五月综合激情| 国产激情视频在线观看| 久久XX| 九九热大香蕉| 9久精品视频| www久久艹| 97成人超碰免| 婷婷成人视频| 亚洲精品久久久无码| 婷婷五月天综合久久| 五月丁综合在线观看| 色激情综合| 天天爽天天| 婷婷五月丁香五月天| 97人人干| 91美女被操| 卡视频1区2区| 亚洲国产网址| 亚洲区在线| 日本乱子人伦在线视频| 久色激情| www.激情.com.| 几激情五月婷婷色五月色天堂| 影院久久久| 五月婷婷二月丁香| 98色花堂98t.R| 婷婷婷五月天最新综合你懂的| 欧美成人猛片AAAAAAA| 五月天综合区| 99超碰人人| 伊人久久大香网| 丁香五月激情月| 夜夜资源站| 超碰人人99| 亚洲操精品| site:xiongshengzz.com| 天天做天天爱| 五月天色婷婷成人| 91尤物九色在线| 丁香五月色情| 六月丁香婷婷在线波多| 天堂久久大香蕉| 在线中文亚洲| 五月天色婷婷小说| 婷婷色色丁香五月天| 91久热| 狠狠色狠狠鲁| 69精品无码一区二区三区| 久久伦乱| site:esunnet.com| 干婷婷五月天| 婷婷五月天论坛| 99亚洲大片精品永久在线观看 | 丁香激惜男女| 久久精品小视频| 天天婷婷天天| 五月丁香在线偷拍视频| 丁香婷婷成人在线播放| 99久热这里只有精品| 丁香五月成人社区| 色中色综合| 99热色精品| 五月丁香亭亭| www.色五月| 九九热精品视频| 色丁香五月婷婷| 久久久网站| 99热这里只有精品2| 久久综合人妻| 国产一级片色色| 丁香五月色情av| 亚洲人成网站999久久久综合| 色五月大香蕉婷婷| 亚欧州精品视频| 亚洲激情视频在线观看| 婷婷在线操| 深爱激情av| AAAA网站| 九九综合色| 无码少妇高潮喷水A片免费| 99热精品中文字幕| 亚洲狠狠爱婷婷| 六月婷婷日| 九月激情综合| 婷婷五月天,影院| 插插五月天| www.操.com| 一区二区成人电影| 人妻熟女一区二区AV| 伊人九九68| 色婷婷影| 亚洲色色爱| 停停五月天激情网| 这里只有精品视频在线| 99无码| 九九一综合精品| 91九色大屁股| 日韩黄色网络| 超碰成人av| 丁香九色不卡aaa| 97精品人人A片免费看| 91九色国产熟女| 亚洲十月婷婷综合| 99热这里精| 色色色精品无码区| 99综合婷婷五月| 五月丁香久久精品在线观看| 激情综合五月| 色5月婷婷色| 白人荫道BBWBBB大荫道| 色欧美影院| 婷婷伊人无码| 五月丁香亭亭| 91性交在线播放| 色五月激情综合| 五月丁香六月欧美综合| 久久99激情| 搡BBBB搡BBB搡18| 五月丁香亭亭AV女优| 中文精品久久久久人妻不| 五月丁香婷婷激激激综合网色播| 五月激情啪啪| 成人网站高清无码| 思思久久96热在精品国产,| 久热这里只有精品6| 丁香五月影院| 色吊丝中文字幕| 婷婷激情丁香五月天综合| 婷婷日日夜夜| 风流少妇A片一区二区蜜桃| 偷偷操99| 丁香五月激情图片| 五月丁香啪啪网| 97婷婷五月激情六月丁香伊人| 婷丁五月| 超碰97人人操| 美女xx不卡| 色五月激情五月丁香五月婷婷啪啪综合 | 激情五月丁香五月| 五月婷婷导航| 色色亚卅| 国产99热| 婷婷欧美综合| 天天干天天干天天干天天干天天干| 国产精品国产成人国产三级| www.久久久久久久| 欧洲激情精品婷婷| 综合久久十三| 丁香五月天AV在线| 日本久久性| 七七久久婷婷| 色五月成人在线| 天天操天天日天天操| 亚洲欧洲国产精品| 99re热在线视频观看| 天天干天天色天天干| 中文AV网| 黑人熟妇一区二区三区| 五月婷婷亚洲| 激情五月天久久| 婷五月天天| 久久五月六月| 很操日本7| 久热网站| 久久婷婷五月天| 91 影音先锋| 狠狠狠狠狠狠草| 99狠狠| 婷婷激情六月综合| 高清无码入口| 99自拍视频在线| 免费无码毛片一区二区A片| 91操在线| 五月丁香综合网色欲| 色色丁香激情五月| 九九热在线观看视频| 91干婷婷| 五月天婷婷久久| 国产午夜精品一区二区三区四区| 97影院一级片| www.色综合| 婷婷玖玖五月天| 天天插天天射| 婷婷久久精品| 欧美婷婷丁香五月社区| 97九色| 久热免费视频| 4438成人电影| 欧美色色色色色色色| 99热这里有精品首页10| 超碰激情网| 五月丁香婷婷综合视频| 深夜男女福利刺激影院一区| 怕怕視頻| 俺去也五月| 99色播| 少妇大叫太大太粗太爽了A片| 熟女激情网| 欧美99| 国产精品在线视频| 欧美顶级少妇做爰HD| 久久午夜理论| 亚洲成人丁香花| 五月丁香六月情| 麻豆忘忧草午夜| 欧美3AaAa大片| 久久99免费视频| 免费精品99| 五月天开心色情网| 五月婷婷丁香| 激情欧美婷婷| 夜夜嗨一区二区三区直播内容| 99色一| 精品二区| 99热精品中文字幕| 久久 婷婷 五月天| 五月婷在线观看| 五月激情另类| 色综合色综合色综合| 99色在线观看视频| 精品久久婷婷五月天| 97在线观视频免费观看| 99视频在线精品免费观看2| 国产成人在线不卡AV| 超碰av在线| 丁香五月婷婷亚洲色图| 高清免费在线视频| 曰曰久久| 婷婷黄色五月天在线视频| 久在热99| 日本九九视频| 色婷婷丁香五月观看| 99久久婷婷综合| 99在线视频资源| 五月天开心激情网色欲无码| 九九色插| 99热超碰| 五月宗合激情网| 色色操| 人人爽人人射-美女久久久久久久久久-成人AV | 婷婷五月天网址| 婷婷丁香69精华| 激情五月四色| 色婷婷操逼| www.伊人天堂偷偷婷婷| 五月开心久久| 国产AV一区二区三区日韩| 国产无套精品一区二区| 六月婷婷天天操夜夜爽视频| 亚洲成人AV高清字幕| 亚洲无码色色| 久久这里只有精品07 | 日日撸日日操| 97在线视频观看| 久综合4| 九九九九国产| 色色cOm| 区区久久妻| 久久99草五月婷婷| 五月丁香综合啪啪| 六月丁香五月婷婷| 婷婷丁五月| 婷婷综合在线| 99re这里只有精品免费| 色激情五月| 在线观看国产高清视频免费网站 | 99热99干| 黄色毛片精品| 久久综合激情| 色婷婷天堂| 26UUU精品一区二区c〇m| 久久人人超| 丁香婷婷五月天成人| 精品激情| 九热视频| 婷婷婷五月天最新综合你懂的| 婷婷五月激情的图片| 日韩AV中文在线观看| 久热九九| 五月丁香在线| 99热九九在线| 五月丁香怕啪啪| 亚洲婷婷婷| 北条麻妃伊人| 色色色热| 九九精品99| 99色在线观看| 综合五月草| 99热 在线播放| ..真实国产乱子伦毛片 | 五月叮香啪| 北京熟妇搡BBBB搡BBBB| 秋霞AV淫| 狠狠狠狠狠操| 五月亭亭激情综合| 色欲操| 色色丁香五月天| 麻豆精品| 任我肏视频精品| 成人午夜天| 国产性爱亚洲是图| 五月婷婷av| 色亚洲婷婷| 亚洲视频a| 日本视频99| 99情色五月天| 久久久天堂国产精品女人| 久热大香蕉| 青草激情综合| 丁香激情网| 超碰人人操| www.99成人视频| 久色网五月| 激情亚洲色图片丁香综合| 夜夜躁狠狠| 五月色婷婷在线观看| 欧美色五月| 久草A片| Www99热| 99热网址| 色婷婷丁香综合中文字幕| 超91在线视频| 99视频日韩| 色天使久久综合| 影音先锋男人AV资源站| 老美AA片| 国产av天天插天天操天天爽| 偷拍九九热| 热久久999| 玖玖@三月天天丁香婷婷| 五月天小说激情| 96精品国产综合久久久久久| 久久一级免费黄色片| 色欧美日| 亚洲婷婷久久综合| 黄网免费看| av九九| 99 热| 五月花综合网| 狠狠色丁香婷婷基地| 婷婷成人综合五月| 我要看激情五月天| 日韩久久这里只有精品| 日日操天天| 激情五月天 婷婷| 色婷婷综合网| 91 九色 熟女| 色五月天婷婷| 91精品久久久久久77777| 激情五月综合| 成人视频网| 青柠影视免费高清电视剧| aV直接看| 91精品丝袜久久久久久久久粉嫩| 天天综合五月天| 丁香婷婷五月色成人网站| 色丁香五月婷婷| 九九热10| 五月婷婷视频ab| 色偷偷色婷婷| 在线成人网站| 福利视频在线播放| 久久五月天激情| 亚洲婷婷激情五月天| 这里有精品2| 97在线刺激| 久草五月| 97日韩无套内| 91打屁股视频网站| 丁香五月天啪啪| 日在线V视频在线播放| 99热这里只有精品一区| 亭亭玉月丁香| 九九99精品| 老美AA片| 日韩欧美老妇性视频91久久久| 综合色99| 99爱免费在线视频| 九九人人精品| 99在线精品免费视频| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 97超碰在线观看免费| 婷婷综合五月| 五月婷婷色吧!| 丁香色五月天| 超碰在线国产| 日本久久久97| 九九色婷婷| 激情小说之五月| 一级精品999WWW| 国产无套精品一区二区| www.五月天婷婷| 亚洲五月婷天天操| 类似婷婷激情综合网站| www99热| 欧美婷婷九月| 色婷婷综合视频| 久久精品66| 91超级碰碰| 亚洲丁香花五月丁香花| 91九色精品熟女内射| www色五月天| 五月天婷婷在线播放| Av在线资源| 六月丁香基地| 九九热视频在线观看| 久久精品一区二区三区四区| 久久最新色色色| 天堂草在线观| 影音先锋日本三级资源| 综合99在线| 婷婷六月久久综合导航| 成人电影AV在线观看| 五月婷婷中文| 在线超碰精品| 久久性爰视频这里只有精品| 年轻的妺妺伦理HD中文| 国产亚洲99| 91一起操| 大香蕉天堂| www.com五月天| 99热综合| www久久五月com| 狠狠草在线观看| 婷婷久月| 五月丁香综合激情网| 翔田千里 50岁 无码| 丁香五月在线自慰| 婷婷色啪| 五月婷婷天| 日韩在线观看网址| 婷婷色五月天第7色| 六月激情网| 丁香五月婷婷深五月| 六月丁香五月天| 婷色五月| 日日夜夜狠狠| www.sd-xiangsu.cpm| www.色婷婷.com| 欧美激情综合色综合啪啪五月| 丁香五月手机在线| 综合色99| 91久热| 无码G高清天| 99热这里只有精| 婷婷六月插屄激情| 九九九九毛片| 婷婷六月天天| 99热这里只有精品8| 久草婷妨| 热99视频| 亚洲日韩一页精品发布| 2015好吊操| 国产成人综合网| 91九色 婷婷| 五月丁香啪啪啪| 免费成人中文字幕| 夜夜操天天爽| 丁香六月婷婷操逼网| 五月天综合区| 人妻丰满精品一区二区A片| 少妇丁香婷婷| 婷婷五月天视频| 亭亭五月丁香综合欧美| 色色色色色色色色网站| 色欲丁香| 久久婷婷热| 99热这里只有精品1025| 久久综合干| 天天久久狠狠色综合| 色婷婷综合亚洲| 天堂久久婷婷| 丁香婷婷六月天| 97在线/亚洲| 999热在线视频| 九九热中文| 久久99网站| 97色婷婷| av中文在线| 开心六月婷| 91操人视频| 激情深爱五月婷婷| 99热在线观看精品| 五月总合激情网| 婷婷亚洲综合| 激情五月天婷婷激情| 超碰在线国产| 色色丁香五月婷婷| www.久99| 影音先锋777xfplay色资源网站| 激情五月天色色色| 色五月婷婷网| 狠狠香蕉| 99热精品在线观看| 五月的丁香六月的婷婷| 欧美天堂婷婷日韩| 激情www| 伊人五月综合网| 97视频久久| 色五月丁香六月资源站| 乱精品一区字幕二区| 色五月色综合| 免费观看2018www黄色操逼网站| 人人操人人干AV| 欧美操人| 亚洲亚洲人成综合网络| 天天操综合网站| www.91.com黄| 三男玩一女三A片| 五月丁香六月婷婷在线| 91婷婷伊人牛牛| 少妇人妻人伦A片| 天天天天天久久久久久| 啪啪丁香五月| 婷婷香五月天| 久久久久人无码人妻| 激情骚五月| 亚洲午夜AV| 天天做天天爱天天爽在| 丁香操逼| 91精品无码| 97色五月天| 丁香香蕉婷婷| av在线资源| 日在线V视频在线播放| 日本在线wwww| 婷婷综合网| 狠狠久综合| 一区二区乱码视频| 思思久久99热只有频精品66| 人妻操逼视频| 亚洲日韩国产黑丝黑丝AVAV一区二区三区| 九九色综合视频| 色色色地址| 亚洲精品V天堂中文字幕| 日韩AV大全| 香蕉久久国产AV一区二区| 成人无码精品1区2区3区免费看| 六月综合在线| 99开心五月五月丁香激情| 天天干天天日蜜臀av| 九九这里是免费的视频5| 五月丁香婷婷久久| 日本色色网站| 狠狠CAO日日穞夜夜穞AV| 欧美日韩aaa| 婷婷五月天激情偷拍| 丁香五月天婷婷91| 99精品偷自拍| 中文字幕av在线播放| www.狠狠狠.com| 人妻视频在线| av操逼网| 日韩无码专区| 五月婷婷影视| 在线色色| 超碰色热| 丁香六月五月天| 婷婷五月天激情免费在线观看| 丁香五月情色| 综合激情专区| 国产真实乱了老女人视频| 欧美日本黄色| 国产一二三四五六七八视频| 开心婷婷中文字慕| 操老逼综合网| 五月婷婷婷婷| 色永久| 亚洲精品操一操、噜一噜、摸一摸、爽 | 五月天另类小说久久小说网| 性爱视频99| 能看的av网站| 激情五月天免费视频| 影音先锋按摩| 丁香五月婷综合| 大地资源色婷婷视频在线| 成人在线不卡| 亚洲第一色区| 五月六月激情婷婷| 九九五月天| 大香蕉伊然在亚洲90| 国外亚洲成AV人片在线观看| 丁香五月综合婷婷| 天天狠狠夜夜狠狠2023| 五月天激情婷婷丁香| 99婷婷五月天| 91一起艹| 国产亚洲网站在线| 一区=区操屄高清大全av| 国产人妻777人伦精品HD| 婷婷综合在线| 99免费视频网| 天天干夜夜欢| 激情婷婷五月天网址| 大香蕉九九| 百度4399有码精品V在线观看| 久久se 综合网| 五月婷婷六月丁香| 亚洲操逼片| 五月婷婷深深爱| 日本色色视频| 99久久九九| 丁香六月激情综合网| 久操b网| 久久久中文| 51成人| 人人九色| 国产精品色婷婷99久久精品| 69精品人妻不卡视频| 九月丁香八月婷婷久久综合久97| 国内精品99| 果冻传媒A片一二三区| www久久久久久久久久久久久久久久久| 操操操97| 日韩成人不卡| 91人妻人人操| 久久女伦| 9色免费网| 久久人五月| 丁香五月激情欧美| 日本天堂免费99| 久久婷婷五月天激情| 九热免费视频| 九九色婷婷| 99久久婷婷国产综合| 婷婷五月丁香基地在线视频官网| 五月伊人综合| 丁香五月天色| 亚洲丁香五月美女| 五月五丁香婷婷| site:feetmall.com| 天天爽,夜夜爽| 日本色视| 色婷婷伊人| 九九精品热| 9色在线| 又大又粗九一在线| 激情综合色婷婷啪啪五月天| 国产女人十八水真多1| av在线免费网站 | 亚洲热久久| 五月开心网| av高清无码| 98热精品| 日韩不卡DvD| 激情五月深爱五月观看| 五月丁香婷婷六月天| 丁香五月激情性色郤| 成人色五婷婷| 婷婷色婷婷| 久热9| 26uuu成人网| 丁香五月天狠狠操| 久9久9热久热| 日韩激情婷婷五月天| 五月激情开心婷婷| 丁香五月婷中字幕| 九九99免费视频| 久久99综合| 久久综合最新网址| 五月丁香激情怕怕| 天天做天天视天天谢| 六月丁香激情综合| www.日韩国产| 天天插天天插| 综合五月激情| 久久伊人婷| 在线五月婷婷小电影| anquye五月| 五月天婷婷丁香导航| 色色色综合网| 丁香啪啪中文字幕| 日本97在线视频| 插插插色综合网| 激情综合激情综合| 夜夜干 夜夜操| a免费在线| 超碰亚洲天堂| 五月天婷婷导航| 五月丁香大相交| 性做爰A片免费视频A片直播| 天堂在线婷婷| 第四色色六月色综合| 五月天婷婷视频30| 99无码视频| 97伦色婷婷| 激情久久久| 婷婷久久亚洲| 激情综合五| 色婷婷播放| 九九热这里只有精品556| 五月婷婷综合精品| 久久久中文| 色五月婷婷丁香凹凸| 精品乱码视频| 婷婷射婷婷舔| 久久婷婷色| 9 1在线视频| 99 频99热国里只有精品| 精品色色| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 久久综合爱| 色深爱五月| www.夜夜操| 色涩影院六月丁香| 国产一级婬片毛片| 翔田千里 50岁 无码| 伊人久久丁香狠狠婷婷综合香蕉 | 少妇日麻屄| 色婷婷电影网| 婷婷丁香九色| 玖玖在线视频福利| 狠狠xx| AA片在线观看视频在线播放| 97操操操| 亚洲色情在线| 99网| 色综合色色| 色五月丁香网| 日韩黄在免| 五月婷婷xxx| 亚洲精品国产精品乱码视99| 久久精品A片777777| www.婷婷| 久久这里只有精品99| 婷色影院| 一根材五月婷成人| 色综合久久88色综合天天看| 亚洲岛国电影| 色综合久久伊伊婷婷五月| 热99这就是精品视频| 九9九9无码| 九九热精品6| 91久久精品国产91性色TV| 99色激| 国产免费AV在线| 日韩一级网站| 五月婷在线视频免费播放| 欧洲色色| 操操操www.com| 色哟哟精品| 九色无码| 婷婷在线激情| 日韩野外 无套| 亚洲XX日本| 2018国产大陆天天弄| www久久99| 99riAv1国产在线观看| 七月激情六月婷婷综合在线播放| 三级大香蕉网| 99热在线观看| 色五月天综合| 99精品在线观看| 综合久久综合久久| 成人电影在线免费试看| 伊人九九热| 26uuu欧美日本| 色婷婷aV四虎| 俺也高清无码高清视频| 五月网站| 五月天四色房丁香| 亚洲亚洲人成综合网络| 五月丁香A片| 五月色综合| 婷婷激情肏屄网| www.99在线| 久久丁香五月婷婷| 婷色五月| AV伊人青草丁香六月| 国产精品国产| 色噜久| 五月婷婷久草在线视频综合| 成人αV视频免费观看| 激情都市五月天| 天天综合亚洲| 亚洲欧洲色色| 色情五月天首页| 伊人网色婷婷五月天| 狠狠狠夜夜夜| 久久婷婷五月天综合| 五月天婷婷在线AN| 五月婷丁香| 婷婷五月在线观看| 97干欧美| 亚洲激情综合| 丁香五月天社区| 另类五月激情| 九九综合88| 婷婷成人AV| 五月综合丁香婷婷| 五月天狠狠网站| 激情婷婷亚洲五月| 91dy.av| 久久99性爱| 日本久久婷婷| 深爱五月婷婷| 久热免费视频| 日韩国产AV播放| 色九九七七| 五月婷婷黄色| 激情综合激情五月| 亚洲热久久| 丁香婷婷大香蕉| 色色热| 色99久草在线| 久久大香蕉同僚| 五月天久久综合| 色色影院aaaav| 天天夜夜爽| 97操视频| 五月丁香综合| 丁香六月天婷婷| 生活片五区| 婷婷丁香五月激情中文字幕版| 另类小说五月天综合网| 六九色综合婷婷五月天| 高清无码入口| 青草青草视频2免费观看| 丁香五月www| 亚洲国产精品五月天| 五月婷婷之美女图片| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 亚洲秘 无码一区二区三区妃光/1| 饮料下药迷倒漂亮女同事强干| 五月婷婷 婷婷五月 一区二区 久久久 | 日本三级韩三级99久久| WWW.五月com| 亚洲免费看片| 常久最新免费的色吊丝| 久草视频一,二三四| 国产精品涩涩涩视频网站| 99久久99视频| 伊人影音无码一区二区三区| 久久激情五月天| 五月综合视频| 综合网狠狠| 99爱视频精品在线观看| 99爱视频在线| 夜精品无码A片一区二区蜜桃| 五月激情射| 蜜乳.comcom| 美女网黄| 日韩AC在线免费观看| 99久久丝| 五月婷婷六月丁香综合| 天天日天天爽| 超碰二区| 五月婷婷开心综合| 小视频久久久aaa| 亚洲AV无码成人精品电影| 五月婷庭丁香在线| 色综合色色| 久久99久久久| 噜噜噜噜噜色| 野战J办公桌椅H| av中文在线| av中文网站| 99视频只有精品| 亚洲国产成人在线| 五月丁香 狠狠爱| 成人短视频在线观看| 国产精品人妻在线网址| 婷婷六月天亚州| 国产成人99久久亚洲综合精品| 丁香五月天社区婷婷| 五月天婷婷伊人| 亚洲成人免费在线| 婷婷六月视频| 天天干天干| 丁香五月狠狠在线观看| mmm1717.6dbm人人爱人人操| 久久婷婷内射| 热996精品在线观看| 综合图区激情| 精品欧美一区二区三区久久久| 在线观看五月婷婷网| 五月丁香色色网| 久久电影4399| www.深爱激情| 色九月综合| 九九色热视频| 99久久综合狠狠综合久久| 日韩av干| 婷婷操逼| 888精品福利地址| 五月丁香久久| 热九九精品| 国产成人av在线播放| 日本久久视频| 女婷久久| 99九九热在线观看| AVDV久久| 百度4399有码精品V在线观看| 婷婷深爱五月| 久久亚洲天堂| 日本美女天天日天天爽| 亚洲成av人影院| 久久午夜理论| 久久九久久| 五月天综合在线观看|