欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網運營的一線實戰(zhàn)洞察。

RabbitMQ消息延遲排查:業(yè)務代碼未等風控結果,根因在鏈路與編排

RabbitMQ消息延遲排查:業(yè)務代碼未等風控結果,根因在鏈路與編排 先說結論這個標題描述的現象本質上不是“業(yè)務代碼沒有做延遲處理”的問題而是消息鏈路里某個環(huán)節(jié)的耗時沒有反映到業(yè)務代碼的執(zhí)行路徑上。我排過幾次類似的問題最后發(fā)現根因往往藏在 RabbitMQ 的消費機制、下游服務耗時抖動、甚至網絡連接狀態(tài)里跟業(yè)務代碼里有沒有 sleep 關系不大。把題主說的現象翻譯一下風控服務處理消息有延遲但業(yè)務代碼消費消息時沒有等風控結果直接就往下走了。這種情況通常出現在異步消息鏈路里——訂單消息先被消費風控結果后到業(yè)務代碼沒做阻塞等待導致用戶看到的業(yè)務狀態(tài)落后于實際處理節(jié)奏。要定位這個問題得先搞清楚幾個關鍵點消息是什么時候被消費的、風控結果是通過什么通道回來的、業(yè)務代碼對消息依賴順序是怎么編排的。下面我按自己的排障思路展開講。1. 消息鏈路延遲問題可能出在哪個環(huán)節(jié)一條 RabbitMQ 消息從生產到消費大致要經過生產者發(fā)送、交換機路由、隊列存儲、消費者拉取、業(yè)務處理五個階段。任何一段變慢都會表現為“消息處理有延遲”。但如果業(yè)務代碼本身能正常運行、只是沒有等待風控結果那問題大概率不在 RabbitMQ 的基礎傳輸層而在業(yè)務編排層。先把消息鏈路拆開看。生產者把消息發(fā)到交換機交換機按路由鍵投遞到隊列消費者從隊列拉消息。RabbitMQ 的特性是推拉結合——消費者訂閱隊列后broker 會主動推送消息Basic.Deliver也可以由消費者主動拉取Basic.Get。大多數業(yè)務系統用的是推送模式這意味著 broker 是主動把消息塞給消費者的消費者只要線程空閑就立刻開始處理。這就能解釋一個現象業(yè)務代碼收到消息時消息本身是熱乎乎的生產時間和消費時間差得很小。真正的時間差出現在消費之后——業(yè)務代碼等風控結果的那個間隙。所以排查方向要鎖定在“風控結果通過什么方式回到業(yè)務系統”以及“業(yè)務代碼在等待期間做了什么”上。如果風控結果是同步 RPC 返回的那業(yè)務代碼必然阻塞在風控調用上不存在“沒做延遲處理”的說法如果風控結果是異步回調或另一個隊列消息那業(yè)務代碼就會先處理完手頭邏輯等風控結果到了再補后續(xù)動作這個設計本身就需要業(yè)務代碼具備“延遲處理”能力。所以第一層判斷是你的業(yè)務代碼到底有沒有等待風控結果的機制如果沒有那問題根源是消息編排邏輯缺失不是 RabbitMQ 配置問題。如果有那就要看等待機制本身的實現方式以及它為什么沒生效。2. 高頻根因為什么風控慢業(yè)務代碼卻感知不到延遲順著上面的思路我總結了幾個高頻根因基本都是我在實際排障中遇到過的。第一個是消費者線程池耗盡。假設消費者配置了固定線程池核心線程數 10最大線程數 20。風控服務的響應時間從 200ms 漲到 2 秒那么每個消費線程處理一條消息的時間從 300ms 漲到 2.5 秒。在消息量不變的情況下消費者的實際吞吐量直接掉了一個數量級。新消息進隊列后沒有空閑線程處理只能排隊。此時從業(yè)務側看消息延遲明顯增加但業(yè)務代碼本身沒有任何等待邏輯。這種場景的定位標志是RabbitMQ 后臺的消費者連接里Unacked 消息數持續(xù)高于線程池大小而且線程 dump 能看到大量線程阻塞在下游 RPC 調用上。第二個是消費者手動 ack 時機太晚。很多團隊把 ack 放在整個業(yè)務邏輯處理完成后包括異步回調、數據庫寫入、后續(xù)通知等。如果一條消息的完整處理鏈路依賴風控結果的回調那這條消息會一直處于“未確認”狀態(tài)。RabbitMQ 對未確認消息有數量限制prefetch超過限制后broker 不會再向消費者投遞新消息。表現就是你后臺看到消費者在線但隊列里的 Ready 消息數不降Unacked 消息數卻很高。這個場景的定位標志是消費者進程還在運行但沒有消息流入CPU 占用不高業(yè)務日志里也沒有新消息的處理記錄。第三個是跨隊列消息順序錯位。如果訂單創(chuàng)建消息和風控結果消息在同一個隊列里那消費順序是有保證的——先下單消息后風控結果業(yè)務代碼可以按順序處理。但很多系統把這兩類消息放到不同隊列甚至不同交換機這時候 RabbitMQ 只能保證單隊列內部有序跨隊列的順序是無法保證的。風控結果因為服務端處理慢可能比訂單消息晚幾十秒才到。如果業(yè)務代碼在收到訂單消息后立刻執(zhí)行后續(xù)流程不等風控結果那這個“延遲”其實是兩個隊列之間的時間差導致的。這種場景下業(yè)務代碼確實沒有做延遲處理但它也不應該用 sleep 來解決而應該設計成“先緩存訂單消息等風控結果到達后合并處理”。第四個是網絡或連接層問題。RabbitMQ 消費者連接如果被防火墻或負載均衡器斷開客戶端會自動重連重連期間消息會堆積在隊列里。雖然網絡層問題不直接等同于“風控延遲”但它會放大延遲的感知。我遇到過一種情況RabbitMQ 集群某個節(jié)點發(fā)生網絡抖動消費者連接被重置重連花了幾秒鐘但這幾秒鐘里業(yè)務方收到的告警就是“消息處理延遲”。如果只看業(yè)務代碼根本找不到問題。3. 實操復盤從現象到根因的完整排障路徑下面放一份我覺得比較標準的排障流程你可以對照著操作。3.1 先判斷延遲發(fā)生的位置接到“風控有延遲”的告警后第一步不是看代碼而是看 RabbitMQ 管理后臺。打開隊列頁面關注三個指標Ready待消費消息數、Unacked已投遞但未確認消息數、Total消息總數。再配合生產者發(fā)送時間和消費者實際處理時間的時間戳基本能判斷延遲發(fā)生在“生產到消費之間”還是“消費到處理完成之間”。如果 Ready 大、Unacked 小說明消息在隊列里堆積消費者消費速度跟不上生產速度。如果 Unacked 大、Ready 小說明消息已經發(fā)給消費者了但消費者處理得慢。第三步再去看消費者的線程池狀態(tài)。我習慣用命令抓線程棧Java 服務用jstack pid抓兩三次間隔 5 秒看哪些線程一直卡在同一個調用上。如果大量線程阻塞在風控服務的 HTTP 調用或 RPC 調用上基本就能鎖定是下游服務變慢導致消費阻塞。3.2 驗證風控服務接口耗時鎖定了風控服務變慢后需要進一步看風控服務的監(jiān)控數據。常見的情況有兩種風控服務依賴的外部數據源變慢比如查詢風控規(guī)則庫的 SQL 從 50ms 漲到 1 秒或者是風控服務本身的連接池被打滿大量請求在等待空閑連接。這個環(huán)節(jié)我一般直接用風控服務的鏈路追蹤數據看接口的 P99 延遲和下游依賴耗時分布。如果鏈路追蹤里有大段的空白時間那就是在等某個外部服務如果整個調用鏈都快唯獨整體耗時高那就是線程池排隊。這兩種根因的解決方案不一樣前者需要優(yōu)化外部依賴后者需要擴大線程池或限流。3.3 檢查業(yè)務代碼的消息編排邏輯如果風控服務本身響應很快問題還出在“業(yè)務代碼沒做延遲處理”上那就要檢查業(yè)務代碼的消息編排設計了。核心問題是業(yè)務代碼收到訂單消息后是直接執(zhí)行后續(xù)流程還是先保存一筆待處理記錄、等風控結果消息到達后再合并處理后者才是合理的延遲處理設計。如果業(yè)務代碼是直接往下執(zhí)行那你要加一個改造方案把“待風控校驗”的狀態(tài)落庫訂單消息先更新狀態(tài)為“處理中”等風控結果消息到達后再根據結果更新“通過”或“拒絕”。這種異步編排方式不需要 sleep也不需要阻塞等待而是通過狀態(tài)機 消息驅動來保證最終一致性。3.4 結合監(jiān)控數據確認全鏈路耗時做完上述驗證后最后一步是把整條鏈路的耗時拼起來看。我一般會拉一張時間線消息生產、消息入隊、消息投遞、消費者收到、風控請求發(fā)出、風控響應返回、業(yè)務狀態(tài)更新。每個時間點的差值就是每個環(huán)節(jié)的耗時。只要哪個環(huán)節(jié)的耗時異常一眼就能看出來。如果實測下來消息從投遞到消費者收到只花了 20ms但風控結果返回花了 3 秒而業(yè)務代碼在收到風控結果前就把業(yè)務狀態(tài)更新了那問題就再清晰不過了業(yè)務代碼沒有等待風控結果導致業(yè)務狀態(tài)落后于實際風控結果。這個情況本質上是業(yè)務編排問題不是 RabbitMQ 延遲問題但表面現象確實是“風控有延遲、業(yè)務代碼沒做延遲處理”。4. 常見問題速查表與定位技巧現象優(yōu)先檢查項常見根因Ready 消息數持續(xù)增長Unacked 為 0生產者發(fā)送速率、消費者是否在線消費者未訂閱隊列或路由鍵配置錯誤Unacked 消息數持續(xù)高消費者無明顯異常消費者線程棧、下游調用耗時消費線程阻塞在下游服務消息無法確認消費者在線但長期不消費新消息prefetch 設置、ack 策略已投遞消息未確認達到信道未確認上限單條消息處理正常但整體延遲高消費者線程數、批量消費配置消費者并發(fā)度不足需要增加消費者實例消息偶發(fā)延遲幾十秒無明顯規(guī)律RabbitMQ 集群狀態(tài)、網絡連接網絡抖動、連接重建、集群分區(qū)這幾個場景里最容易誤判的是第二種。表面看是 RabbitMQ 隊列堆積實際根因是下游風控服務變慢消費者線程全部卡在等待上。我曾經排查過一個 case告警顯示某隊列 Ready 消息數從正常值漲到幾萬條第一反應是加消費者實例結果加了三個實例后問題依舊。后來抓線程棧才發(fā)現所有消費者線程都阻塞在風控服務的 RPC 調用上加實例只意味著更多線程在死等完全沒解決瓶頸。定位這個問題的實用技巧是看兩個值RabbitMQ 后臺的“消費者未確認數”和“隊列 Ready 數”。如果未確認數遠大于消費者線程數說明消息都壓在消費者進程里這個時候抓線程棧比查隊列配置更有效。另外一個技巧是給消息處理鏈路的關鍵節(jié)點打上耗時日志從消息投遞到消費者、到下游調用發(fā)出、到下游響應返回分別記錄耗時。有了這三個耗時值就能定位延遲發(fā)生在消息鏈路、下游服務、還是業(yè)務代碼自身。5. 結合題主現象的經驗總結題主描述的現象里有一個很關鍵的線索“風控有延遲而業(yè)務代碼沒有做延遲處理”。這說明業(yè)務代碼缺乏對風控結果的等待機制或者等待機制本身沒有正常觸發(fā)。這種情況的最佳實踐不是讓業(yè)務代碼 sleep 固定時間而是要讓業(yè)務狀態(tài)依賴風控結果的狀態(tài)流轉。也就是說業(yè)務代碼應該具備這樣的能力收到訂單消息后把訂單狀態(tài)置為“風控校驗中”然后等待風控結果消息收到結果后更新最終狀態(tài)。這個等待不是代碼層面的 sleep而是通過消息驅動的狀態(tài)流轉。如果風控結果遲遲不到應該觸達超時重查機制而不是讓訂單一直卡在中間狀態(tài)。我在實際項目里用的方案是訂單消息先落庫狀態(tài)為“待風控”同時發(fā)一條消息到風控隊列等風控結果消息回來后更新訂單狀態(tài)。如果風控結果超過預設時間比如 5 秒未返回就觸發(fā)一個定時任務去查詢風控服務的處理狀態(tài)。這個方案的好處是業(yè)務代碼不依賴風控服務的實時性不會因為風控服務慢而阻塞整個消息消費鏈路同時又能保證最終業(yè)務狀態(tài)和風控結果一致。暫時想到這些。RabbitMQ 消息鏈路的延遲問題大部分時候都不是 RabbitMQ 本身的問題而是上下游服務之間的依賴關系沒有梳理清楚。排障的時候不妨把“消息機制”和“業(yè)務編排”分開看機制層面的問題看隊列指標、看消費者狀態(tài)編排層面的問題看狀態(tài)流轉、看業(yè)務時序。我每次排完類似問題都會順手把排查過程寫成文檔存進團隊知識庫下次遇到同類現象直接翻文檔能少走不少彎路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
开心四月婷婷在线色播播| 色波激情五月天| 超碰亚洲天堂| 五月色婷婷综合| 91九色国产| AA片在线观看视频在线播放| av在线中文| 色播五月丁香婷婷| 这里只有精品亚洲| 五月婷婷草| 99热这里是精品| 情涩婷婷五月天| 国产精品国产| 五月婷婷久久网| 色婷婷久久综合| 丁香五月23111| 婷婷五月色影视先锋| 婷婷五月天成人| 天天干狠狠| 狠狠香婷婷五月| 色婷婷狠狠禁18久久| 五月激情综合网| 99热这里只有精品最新网址| 这里只精品| 91免费看片| 日本不卡一区二区三区| 天天日夜夜| 午夜成人综合| 五月丁香琪琪| 9l视频自拍九色9l视频在线观看| 五月天久久婷婷| 综合亚洲色色| 另类 在线| 欧美va在线| 超碰自拍天堂| 天天操天天谢| 国产乱子轮XXX农村| 97人妻碰碰碰久久久久-最近国语高清| 成人做爰高潮A片免费视频| 99热首页| 色五月天视频| 婷婷午夜精品久久久| 五月色激情综合网| 精品人妻久久久久久| 色噜噜狠狠色综合日日免费| 99热6这里只有精品6| 人妻精品在线| 性五月激情| 日韩啪| 在线超碰精品| 中文字幕综合色| 色99在线| 婷婷五月天VI| 色综啪啪| 人人操女人| 婷婷基地成人五月天| 91人人人人人| 91a片爽| 色爱综合网| 欧美人人操| 99热网址| 99热这里只有精品22| 超碰日日操| 日本成人噜噜噜| 日韩久久这里只有精品| 伊人深爱综合| 九九热在线精品视频| 丁香狠狠色婷婷久久无码视频| 国产又黄又爽又激情不遮挡视频在线观看| 亚洲小说欧美激情| av操一操| 91久久1118| 人人97碰| 色婷婷成人做爰A片免费看网站| 欧洲不卡视频| 超碰碰碰碰| 伊人激情| 狠狠一日| 99九九热视频免费| 欧美日朝成人| 天天综合天天玩夜夜玩天天玩夜夜玩| 韩国三级五月天婷婷。| 综合网亚洲| 五月婷av| 天天操人人干| 欧美,日韩成人在线| 第四色色色色色丁香五月天| 婷婷五月天情色| 在线观看亚洲视频影院| 五月激情婷婷六月丁香| 色色色色热| 五月开心久久| 可以免费观看的av| 综合久久六月| 亚洲激情综合色站| 天天天操天天天日| 九九人人操| www超碰| 精品国产一区二区三区四区阿崩 | 日日干夜夜撸夜夜骑| 久久伊人日日夜夜| 亚洲无码yw| 亚洲第一第二网站| 99视频| 午夜在线成人网站免费观看| 夜夜躁婷婷AV| 五月天婷婷影院影院| 丁香激激情网| 色婷婷五月丁香在线观看| 全网最新网黄大秀直播高清,主播国产录屏在线| 99爱在线| www.婷婷亚洲基地| 亚洲中文字幕翔田千里| 色婷婷影院| 色五月视频无码播放| 五月色情婷婷开心五月色情| 丁香激情五月| 五月伊人91| 中文字幕,综合,91| 亚州操人在线视频| 中文字幕免费高清电视剧| 久久婷婷电影| 丁香五月天婷婷中文| 免费成人网在线观看| 99激情网| 五月婷婷激情五月| 天天射天天操天天干| 激情av在线| 丁香五月天色| 丁香五月六月综合激情| 婷婷五月欧美| 狠狠操天天干| 噜噜狠狠色综无码久久合欧美| 亚洲综合色棒| AV操操操| 91人碰| 婷婷激情丁五月| 五婷婷综合网| 丁香情色五月| 9热久久在线| 开心激情色婷婷五月天| 亚洲综合网在线| 色五月琪琪| 淫五月停停| 五月婷婷激情| 婷婷五月天情色| 最近中文字幕2019视频1| 99久久五月天| 九九免费视频| 久久精彩视频18| www色色com| 色色色综合色| Www.se.久久| 永久思思热在线| 五月天另类小说| 综合色99| 天天玩夜夜操天天爽| 熟女激情五月天| 国产精品久久久久久妇女6080| 婷婷五月综激情| 激情综合网亚洲色图| 九九aV| 中文字幕综合色| 色五月涩涩婷婷蜜桃| 囯产精品久久欠久久久久久九大| 亚洲成人综合网在线免费观看| 思思99热在线| www.婷婷五月天| 色爱99| 五月天,激情四射,婷婷频道| 色色综合网。| 久久免片| 97人妻碰碰碰久久久久-最近国语高清| 五月婷婷m| 婷婷丁香五月激情| www.97干视频| 激情五月天激情五月天| 色一情一乱一乱一区9| 五月开心啪啪| 玖玖婷婷免费| 五月丁香中文| 99在线公开视频| 五月婷婷六月色| 亚洲精品无码A片一区二区| 激情黄色五月天| 26uuu国产| 妇激情基地| 伊人久久艹| 99操逼视频| 欧美啪啪9| 婷婷中文字幕网| 婷婷五月天综合在线| 九 九九九AV| 国产精品久久久久久五月天加勒比| 五月天激情视频| 五月花综合网| 91无码一起草| 精品久久久人妻| 色婷婷亚洲综合av| 中文字幕在线不卡| 国产色丁香| 色噜噜狠狠一区二区三区| 色婷婷小说| 99色免费观看全部| 久热最新视频| 五月丁香六月婷婷久久| WWW.婷婷| 激情小说之五月| 97精品综合| 五月丁香婷婷五月色| 蜜臀综合久草| 亚洲在线激情婷婷五月| 久热大香蕉| 黄色短视频在线观看| 思思视频这里是精品| 五月丁香香蕉| 九九色中文| 最近中文字幕大全免费版在线| 久久伦乱| 丁香五月婷婷超碰在线| 丁香五月五月婷婷| 亚洲色婷婷视频| 婷婷丁香五月网| 第五婷婷伊人丁香色| 五月婷六月| 91干| 婷婷婷婷午夜| 成人短视频在线| 天天爱天天做天天日| VA色婷婷| 伊人深爱综合| 亚洲综合激情五月久久| 90色免费视频| 丁香色色网| 岛国资源网| 久久性爱激情| 91碰碰视频| 丁香六月色婷婷欧美| 国产性av| 丁香五月天堂网| 久艹久| WWW.99热| Va另类视频| 六月丁香婷婷综合狠狠爱夜夜爱| 精品9197碰| 激情五月婷婷在线观看| 六月婷五月丁香| 大香蕉懂9| 亚洲综合色色色| 色色色色色色综合| 丁香婷婷六月激情文学| 97碰碰电影| 色色色网站| www.成人婷婷综合| 婷婷五月天视| 九九精品热播| 久久99久久99久久99| 久久九精品| 精品国产va久| 丁香色色网| 午夜在线成人网站免费观看| 99色色网| 99精品在线| 五月丁香久久网| 在线看黄色| 这里只有精品在线观看视频| 综合网啪| 26uuu国产| VA日本视频| 久久五月婷综合| 538在线精品| 一区二区三区四日本| 国内一级片| 五月色丁香| 五月天婷婷视频30| 亚洲色热| 色欲天天综合网| 99热费观看| 色色色视频免费无码| 五月天婷婷綜合院| 99九九热视频免费| 六月色 亚洲| 男女啪啪做爰高潮无遮挡| 亚洲人成色A777777在线观看| 日韩av大全| 九九碰九九爱97超| 久久大香蕉同僚| 丁香五月亚洲综合| 五月天激情美女久久| 久久机热/这里只有精品| 婷婷五月天综合在线| AV国产有码| 久久精品色| 丁香婷婷91在线观看视频| 在线五月婷| 欧美成人精品A片免费一区99| 久久人人看| 俺去也婷婷| 国内精品玖玖| 17.c黄色| 日韩爱操视频| 99这里只有精品视频| 丁香五月天欧美在线| 久久ER视频com| 九九色热| 成人av播放| 99久久五月天| 99干99| 婷婷五月天亚洲综合网| 极品五月天| 国产肥白大熟妇BBBB视频| 丁香五月婷婷综合精品素人| 婷婷五月丁香啪啪| 这里只有精品视频| 99re在线观看| 中文字幕日产A片在线看| 亚洲综合另类| 亚洲精品久久久久久久久久飞鱼| 五月婷A V在线| 狠狠精品干练久久久无码中文字幕| 激情五月天网| 日韩成人影片网站| 色婷婷最新域名| av第一二区| 色五月婷婷激情基地| 精品99在线观看| 五月婷婷丁香六月| 久久精品91视频| 欧美久久网| 激情六月天婷婷| 亚洲欧美综合7777色婷婷| 东京热伊人| 综合五月草| 婷婷六月色丁香视频在线观看| 亚洲人人96@| 狠狠色丁香婷婷基地| 99视频在线观看视频| 天天干夜夜b| 深爱婷婷色| 淫荡工a| 五月天另类图片| 天天干夜晚夜操| 伊人激情影院| 久久性视频| 成人国产网站在线免费看| 日韩精品VIP| 综合色网站| 激情五月天久久丁香| 99热啪啪| 婷婷性爱五月天丁香网| 丁香五月九九| 区区久久妻| 五月成人网天天| 五月天激情啪啪| 日产精品一线二线三线芒果| 色综合久网| 午夜免费试看| 色色婷婷五月| 另类图片五月天| 播五月丁香三月婷婷| 色色五月婷婷网| 四色五月婷婷| txt五月激情四射网综合俺也来了 五月天婷婷丁香人人操91 | 日韩在线观看亚洲| 五月婷婷综合热| 婷婷五月天熟妇| 人人摸人人干| 婷婷在线视频| 婷久久综合| 五月天婷婷激情网| 日日撸夜夜操| 中文字幕免费高清电视剧| 久啪欧美| 狠狠va| 26uuu精品一区二区| 五月天社区| 激情AV综合| 综合狠狠干| 亚洲欧洲自拍图片专区五月天| 五月婷婷av| 色优久久| 大香蕉久久久久| 色情免费视频播放| 久99视频| 中文字幕婷婷| 久久久久久久人妻| 天堂二区| 日韩AAA| 91无码一起草| 五月婷六月综合在线观看| 五月婷婷久久久| 色综合久久综合| 国产成人99久久亚洲综合精品| 久久婷婷一级片| 久久只有精| 激情六| 1024在线视频| 欧美精品18| 国产午夜一区二区三区| 日韩精品VIP| 涩五月婷婷| 五月婷婷丁香啪啪| 亚洲mm色| 大学生高潮无套内谢视频| 97碰免费精采视频| 人人爽欧美婷婷久久久五月丁香| 国精产品一区一区三区免费视频| 人人操AV| 激情六月天婷婷| 国产精品扒开腿做爽爽爽A片唱戏 青青草国产亚洲精品久久 | 2025最新亚洲激情在线| 婷婷五月天精品| 色播五月丁香综合| 99er热精品视频| 国产精品色情AAAAA片软件| 六月丁香婷婷五月天| 色欲午夜无码久久久久久张津瑜 | 色之综合网| 五月天伊人综合| 久久婷婷五月综合色天| 五月婷婷,六月丁香| 激情又色又爽又黄的A片| 任你艹| 婷婷六月激情综合| 99久高清视频| 色五月欧美| 五月婷色丁香| www.五月.com| 五月丁香趴趴| 日本天堂免费99| 色五月婷婷五月天激情综合| 伊人玖玖网| 影音先锋 一区| 天天插天天操| 久久婷婷一级片| 天天干夜夜b| 狠狠干婷婷| 99爱欧美| 五月天sesese| 日日操日日撸| 色色五月天网站| 97碰| 国产精品久久久久9999小说| 91九色视频在线观看| 无码人妻一区二区三区免费九色| 黄色笑话深爱激情网丁香五月婷婷啪啪啪啪啪 | 色爱综合网| 玖玖婷婷精品| 99热这里有精品| 91麻豆国产三级精品福利在线观看| 人人澡天天色天天做| 亚州色色色| 五月丁香亚洲校园欧美| 五月丁香综合激情| 狠狠色精品综合| 婷婷五月精品| 九热视频在线精品15| 久操激情| 国产美女无遮挡裸体毛片A片| 欧美毛片www| 色五月噜噜| 五月丁香六月激情视频| 色综合激情| 五月天婷基地| 狠狠丁香| 九九sese| 九九色黄色| 五月天丁香综合久久国产| 色色丁香婷婷综合| 超碰九色| 99爱在线视频观看| 天花AV无码| 日韩无码专区| 这里只有九九精品| 97久人人| 国产3p露脸普通话对白| 五月久久婷婷成人网| 五月天伊人综合| 1024人妻| 六月丁香六月婷婷欧美| 91色噜噜狠狠狠狠色综合| 激情深爱五月天| 五月激情婷婷播播网| 99在线一区| 伊人五月婷婷| 日本九九热| 亚洲综合一区二区| 婷婷五月18永久免费视频| 国产肥白大熟妇BBBB视频| 性日本精品| 日日.c| 五月天丁香| 五月丁香六月婷婷操操操| 婷婷字幕在线| 99精品视频网| 六月婷婷综合| 精品无码人妻一区| 黄色片精品| 激情内射人妻1区2区3区| 丁香五月第四色88| 操碰99| 亚州欧美黄色电影| 99热6精品| 久久丁香久久| 噜噜噜噜婷婷五月天| 五月综合激情网| AAA久久| 六月丁香成人网| 日日骑夜夜撸| 五月丁香婷婷综合视频| 91n啪啪| 67194中文字幕| 五月天成人手机在线视频| 五月丁香好婷婷A片网| 久久6这里只有精品| 亚洲网站观看视频| 婷婷五月天综合网| 亚欧州精品视频| www.婷婷五月天啪啪| 一区视频网站| 色欲色香,www,com| 99视频这里有精品| 97色婷婷| 五月丁香婷婷综合| 91超级碰| 99热这里| 特级西西4444www无码| 91婷婷五月天综合视频| 激情网站五月| 97人人看一| 黄色片avv| 91丨九色丨东北熟女| 欧美三级欧美一级| 五月天色不卡| 五月天伊人综合| 丁香六月婷婷综合网| 色色婷| 99精品久久久久久久婷婷| 五月丁香色| 综合玖玖性爱免费视频| 五月丁香91| www、丁香五月天| 五月丁香A∨在线| 91男女视频在线观看| 日日夜夜狠狠| WWW.桔色成人.COM| 中文幕无线码中文字蜜桃| 激情五月天色色| 五月丁香激情婷婷| 天天干天天拍| 久久hd| 五月丁香香蕉| 丁香五月天电影| 日韩AAAAAAAAAAA片| 日韩欧美骚货| 五月丁香六月婷婷综合网站| 色丁香五月| 亚城区在线| 五月婷婷丁香色播网| 色999五月色| 色的色综合| 天天搞夜夜六| 欧美五月婷婷综合| 婷婷久久大香蕉| 狠狠综合网| 国外亚洲成AV人片在线观看| 婷婷五月天天| 99热精品超碰| 色综合久久综合中文综合网| 丁香五月天黄色片| 激情丁香五月婷| 亚洲五月婷天天操| 五月播播| 久婷婷色| 五月激情偷拍| 狠狠色综合网| 国产又粗又大又爽又黄| 国产精品久久久久久久久久 | 久久伊人婷| 婷婷狠狠狠爱| 久久久久8888| 色色色综合视频| 思思综合热| 色情播放| 九九精品热| 超碰大香蕉网| 丁香欧美| 五月天婷婷深深爱| 婷婷五月色激情欧美激情| 五月丁香A∨在线| 9热精品| 欧美色婷婷| 国产69久久久欧美黑人A片| 大地资源色婷婷视频在线 | 碰97 久| 国产AV成人精品| 99超级碰碰| 天堂AV三级| 六月丁香激情婷婷| 五月激情综合网| 热久精品| 亚洲视频久久| 色婷婷免费观看| 开心五月丁香综合久久| 99热免费| 国产毛片精品一区二区色欲黄A片 极品人妻VIDEOSSS人妻 | 丁香婷婷五月天在线视频| 97久久人人操| 九九爱精品网站| 啪啪激情综合| 97韩国久久电影院| 99碰在线视频| 五月的婷婷六月丁香| 精品51XX| 六月丁香五月婷婷| 婷婷五月天在线看| 人人操女人| 丁香久久| AV性爱网| 少妇人妻人伦A片| 亚洲妇女熟BBW| 男同91 | 丁香午夜天| 天堂无码人妻精品AV一区| 婷婷丁香先锋资源网站| 五月天亚洲最大成人| 色五婷婷开心缴| 五月婷婷啪啪| 97色在线视频| 亚洲另类噜噜| 99热18| 综久久久| 婷婷在线视频| 色综合九九| 日韩精品超碰在线观看| 亚洲女婷婷五月基地综合久久久| 精品99在线| 90色免费视频| 天天在线久久综合 | 久久久国产精品黄毛片| 九九色色网| 色久激情在线| 国产SUV精品一区二区6| 丁香婷婷激情综合五月激情| 久久婷婷五月综合激情国产 | 婷婷五月激情丁香| 国产偷人爽久久久久久老妇APP| jiujiujiuwuyuetian| 亚洲激情97五月天| 激情九月婷婷九月| 激情五月天黄色小说| 五月婷婷色情| 噜噜噜噜综合在线| 成人五月天在线视频在线观看| 五月色丁香激情| 免费观看全黄做爰的视频| 久久全色| 日韩久热| 五月丁香久久网| 一操久久| 120分钟婬片免费看| 六月婷婷色综合| 久热免费| www99热| 婷婷五月激情中文字幕| 97激情五月天| 九九这里精品| 激情精品久久| 日韩激情网站| 99re热视频这里只精品| 久久全意婷婷| 丁香婷婷色| 战争与艾拉电影免费观看| 婷婷五月天av| 九月激情网| 日本婷婷五月天| 51国精产品自偷自偷综合 | 五月天婷婷激情四射综合| 成人网站免费sxj| 亚洲色情在线| 激情综合青草| 日韩九区| 日亚二欧美| 大地资源色婷婷视频在线| 1024日韩| 日本V在线观看不卡视频网站| 激情五月天小说| 激情五月www| 中文字幕婷婷| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 欧美丁香婷婷天天操| 七月丁香五月婷婷在线| www.91在线看| 色狠狠六月| 9 1在线视频| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 精品久久99码| 亚洲精品字幕在线观看| 成人噜噜网| 国产精品成人在线| 凹凸操Av| 国产免费av在线| 噜噜色婷婷| 婷婷天堂视频| 五月婷婷色播| 狼人久草| 中国丰满熟女A片免费观| 亚洲99手机免费看视频| 91操在线观看| 久久丁香五月| 五月天四色房丁香| 色五月情| 激情综合区| 日本人人干| 亚洲人人操| 色婷五月| 91丨九色丨丰满人妖| 婷婷丁香五月综合| 丁香婷婷色情社区成人小说| 激情六月婷婷| 天天狠狠六月婷丁香影院| 五月婷婷丁香综合| 99er热精品视频| 射区导航| 久久99网| 五月美女婷婷风骚| 日韩av网站在线观看| 视频1区2区| 久久9精品| 激情丁香久久| 丁香五月天婷婷在线视频| 亚洲第一色色色色| 五月狠狠| 成人在线网| 天天日,天天干,天天操| 97超碰,人人舔,人人操,人人摸| 婷五月天| 操一操插一插| 综合伊人久久| 丁香六月婷婷综合| 疯狂做受XXXX高潮A片动画| 日操夜操天天操不卡| 超碰国产AV| 青草青草久热这里只有精品| 丁香五月激情澎湃一区| 综合成人小说婷婷| 伊人激情影院| 99久久五月婷婷| 99狠狠色| 婷婷五月丁香基| 99啪在线| 99久久这里只有精品免费官网| 99综合免费视频| 欧美精品啪啪| 亚洲网在线观看| 婷婷成人AV| 丁香六月婷婷缴情欧美| 日日日天天干| 97精品综合久久| 特黄三级又爽又粗又大| 色婷视频| 久久ab| 超碰人妻在线| 狠狠色婷婷7777久综合| 婷婷国产日本欧美| 99色精品| 中文字幕日本最新乱码视频 | www.色婷婷| 99日视频在线| 五月六月丁香婷婷在线观看| 狠狠综合网| 国产精产国品一二三在观看| 97视频.干com| 可以免费看的av网站| 91狠狠综合久久| 色吧网综合| 色婷婷黄色网络| 偷拍五月丁香| 亚洲欧美日韩VIP| 最新av在线观看| 五丁香激情综合| 日韩成人中文字幕| 国产精品成人网址| 亚洲欧美成人在线| 激情综合网五月天| 清纯唯美 激情四射| 日本99热| 99色在线观看视频| 欧美久久九九| 五月婷婷综合激情| 婷婷九月在线| 国产97在线日韩亚洲女人被黑人巨大| 九九国产精视频| 97色啪| 色婷婷五月丁香色| 婷婷色五月色妇| 99综合网| 操九色| 五月婷婷影| 少妇水多A片太爽了| 婷婷丁香六月| 久久婷丁香五月| www久久久久| 久久久久久五月天| 色135综合网| 亚洲愉拍99热成人精品| 天天艹夜夜艹| 五月婷婷国产| 久久婷婷五月天综合| 国产乱人偷精品人妻A片| 久久丁香| 激情综合五月| 伊人网大香| 婷婷五月丁香网| 久久五月婷综合| 五月天中文字幕在线婷婷| 色色热| 五月天激情小说婷婷| 婷婷五月电影院| 亚洲人成网站999综合| 玖玖资源天天无码| 国产精品18久久久| 日日干综合| 最近中文字幕大全免费版在线| 大香蕉手机视频| 色情综合网| 9l视频自拍9l九色9l成人| 五月天激情小说欧美激情| 香蕉影院色| 99超在线| 欧美激情性做爰免费视频| 精品99这里有| 天天插天天射| 天天爱天天日| 一本大道熟女人妻中文字幕在线 | 婷婷性爱影院| 欧洲毛片基地c区| 亚洲热久久| 99九九久久| 九九在线视频| 婷婷色播色五月五色五月天色妇| 色播丁香| 亚洲婷婷五月天综合| 亚洲色网址| 超碰免费人人| 五月天啪啪啪| 婷婷亚洲五月丁香综合在线 | 99亚洲综合| 嫩BBB槡BBBB搡BBBB| 国产夫妻操逼内射视频| 99网| 婷婷激情综合网| 夜色五月天| 久久婷婷五月草视频在线播放| 国产偷人爽久久久久久老妇APP| 色婷婷六月综合| 大伊香蕉精品视频在线| 丁香五月av在线| 极品嫩草| 色婷婷天堂| 97碰| 九久9精品| 五月色婷婷AV| 97婷婷丁香五月综合| 五月丁香婷婷AV| Caoub青青超碰| 婷婷在线视频| 性爱AV天堂| 内射干少妇亚洲69XXX| 色狠狠综合| 五月丁了香蕉综合| 婷色五月| 五月天婷婷激情小说| 毛片九九九九九九九九18| 五月丁香六月婷婷欧美综合| 97精品综合久久内射| 九月婷婷激情| 9999久久久久| 中国丰满熟女A片免费观| 97色五月天| 日韩人妻白浆视频系列| 亚洲五月情| 99人人操人人操人人精| 这里只有精品久久| 亚洲国产色色| 亚州婷婷五月激情综合| 色婷婷99| 婷婷五月色网| 国产精品日日躁夜夜躁| 久久久亚洲精品一区二区三区浴池| 99性爱视频网站| 婷婷五月天Av| 99热免费| 丁香六月天婷婷开心综合| 久久久99日本大片| 婷婷综合五月| 这里只有精品网站| 欧美一级色| 国精产品久久| 影音先锋一区二区三区| 免费观看欧美成人AA片爱我多深| 婷婷五月综合亚洲| 在线五月婷婷小电影| 色九九九综合| 99色免费观看全部| 久久人妻高清中文| av色婷婷| 婷婷丁香色五月天| 五月婷婷激情性爱| 色婷婷五月天天天干天天操天天爽| 五月天久久综合| 日韩在线视频9色| 网色99| 丁香五月冃欧美| 久久久久激情| 丁香五月天堂婷婷| 91天天操天天干天天射| 激情五月天色爱| 日本婷久久| 不卡在线视频| 色五月综合激情| 婷婷五月天高清无码| 久久精典| 极品五月天| 色噜噜婷婷| 99热这里是精品| 第六色在线| 91se精品国产| 九九99在线免费在线观看视频| 久久五月丁香六月婷| av激情在线| 狠狠精品干练久久久无码中文字幕| 人人爱人人摸人人澡| 日韩欧美一区二区三区四区| Www99热| 日韩五月婷婷久久| 9999久久久久| 日本色爽| 99在这里有精品| 激情深爱婷婷网| 97黑人精品区| 久久加勤综合| 日本99视频| 五月丁香婷婷导航视频| 五月天在线视频尤物视频在线看| 天天射天天干天插色综合| av操B网站| 亚洲五月婷婷| 久久免费操| 天天激情| 色婷婷精品小视频| 婷婷五月电影院| 天天肏高清在线| 日本综合九九| 少妇搡BBBB搡BBB搡毛茸茸| 国产色色视频| 五月丁香六月婷婷亚洲视频| 日日日,com| 99热日韩| 91婷婷色| 51XX嘿嘿午夜无码| 婷婷五月天丁香综合网| 国产真实乱对白精彩| 丁香五月在线播放| 日韩久久色| 九九这里是免费的视频5| 五月婷婷久久激情 | 九九99热| 久久久香港| 99丁香婷婷综合网| 在线中文AV| 99国产精品白浆在线观看免费 | 国产在这里只有精品| 久久五月天激情婷婷| 俺去也五月| 九九综合| 99激情| 激情深爱五月天| 日本色婷婷| 激情婷婷丁香五月天| 丁香六月婷婷色播| 激情五月天视频| 丁香婷婷成人网站| 久久精品性爱| 色丁香五月婷婷在线| 99热成人在线观看| 深爱激情丁香五月| 人人人舔人人人操人人人摸人人人97 | 日本九九视频| 97日在线视频| 国产.亚洲.欧洲视频在线| 激情五月婷婷啪啪| 精品九九婷婷| 国产婷婷久久| 九九精品亚洲| 人妻九九九九| 97黑人精品区| 日韩成人AV在线播放| 97人人操| 久久久99视频| 丁香五月婷婷亚洲综合精品| 色区久久| 丁香综合伊人| 就爱操www com| 激情五月综合色婷婷| 日韩按摩二区| 这里精品| 女人天堂AV| 91玖玖| 婷婷网五月天| 五月网站| 男同91 | renrencaoav| 丁香五月天无码| 婷婷丁香色五月久久88| 色综合激情| 播播网色播播| 欧美日韩成人在线网| 九色婷婷| 国产亚洲色婷婷久久99精品91| 粉嫩AV久久一区二区三区| 伊人大香蕉爱聚| 超碰AV成人| 1024手机在线观看看片_日韩精品| 狠狠爱婷婷爱| 五月丁香手机在线| 天天综合亚洲综合| 婷婷久久草| 99九九在线精品热动漫| 天天干天天做| 亚洲午夜在线视频| 色色丁香色五月| 久99久在线| 内射激情在线| 日日夜夜久| 在线另类| 五月天成人综合| 91男同视频| 性色av大香综合| 啪啪夜久久| 亚洲五月丁香综合网| 超碰AAAAAAV| 亚洲激情免费视频| 久久久无码精品成人A片小说| 五月花免费视频| 最新高清无码专区| 九月激情综合婷婷| 九九色逼| 国产伦亲子伦亲子视频观看| 美女爆乳18禁www久久久久久| 色综合久久天天综合网| 色国产五月| 99爱在线免费视频| 91狠狠综合久久| 亚洲久久天堂| 五月丁香狠狠爱| 丁香激激情网| 久久久香| 欧美一级a| 丁香六月啪| 99九九视屏| 天天拍天天操| www.久久99| ..真实国产乱子伦对白在线_欧 | 丁香五月六月久久综合| 这里只有免费精品| 99视频在线观看网址| 久久这里有精品| 31色区视频免费看| www.99视频| 婷婷在线免费| 激情五月婷婷| 99伊人婷婷在线| 人人草成人视频| 久久 这里只有精品1| 91婷婷搞| 婷婷在线五月综合| www.久久久久| 五月色色激情网| 久/久精品99看9| 亚洲成人精品三区| 蜜臀av无码久久久久久久久| 六月婷婷中文字幕| 国产成人片| 91丨九色丨高潮丰满日本| 情五月亚洲婷婷| 97人人操| 丁香五月欧美婷婷| 亭亭玉立国色天香| 人妻久久久久久| 爱爱网址9| 激情综合啪啪啪| 99热这里只有精品在线观看| 精品人妻伦九区久久AAA片| 五月丁香操婷逼| 丁香婷婷五月天色播| 久机视频这只有精品| 午夜婷婷久久| 色青青五月| 亚洲综合色婷婷| 伊人久热91| 婷婷丁香五月亚洲综合网在线视频观看| 日韩中文欧美| 伊人狠狠色婷婷综合丁香一区| 色五月视频无码播放| 五月天综合视频| 最新色色五月天| 日日操夜夜撸| 97日本操| 最新亚洲色色网| 99热这里只有精品中文字幕| 七月婷婷色香综合网| 99久久视频| 五月天五月天成人网亭亭成人色网站| 97高清国语自产拍| 亚洲区,视频区,视频区免费| 亚洲黄色精品| 天天色凹凸| 人人干Av| 一本大道熟女人妻中文字幕在线| 婷婷综合色色| 综合激情五月天六月婷免费视频| 六月婷婷综合| 丁香六月色婷婷欧美| 丁香五月Av| 大香蕉五月婷婷| 无码色| 热久69| 思思久久99热只有频精品66| 婷婷丁香91综合| 丁香婷婷激情五月| 色综合色色色| 在线视频你懂得| 91要啪| 黄色精品五月婷婷| 91色在线| 国产激情综合五月久久| 亚洲热久| 婷婷深爱五月| 丁香六月欧美| 夜丁香综合| 久久久久久婷| 深爱激情九九五月天 | 91凹凸在线| ...婷婷五月综合不卡,国产在线手机| 婷婷色情五月| 色www99| 天天狠狠色| 国产乱子轮XXX农村| 色综合久久88色综合天天人守婷| 91丨九色丨国产打屁股| 99黄色在线视频精品熟女| 国产性爱一级| 九九99九九99九九99视频网| 这里只有精品免费观看网占| 色丁香五月天| 五月婷婷九九热| 中文字幕av在线播放| 91porn一起草| 日本天天操| 五月婷激情影院| 成人丁香色| 五月婷婷久久大香蕉| 色5月婷婷色| 色激情综合| 久久机热/这里只有精品| 丁香六月天AV| 精品夜夜澡人妻无码AV| 操国产人妻| 亚洲综合色成丁香五月色| 丁香五月六月欧美| 99热超| 五月丁香成人网| 婷婷丁香激情综合色情| 五月婷丁香| 大香蕉婷婷色| 狠狠狠狠狠狠| 久色五月婷婷综合| 久久免费高| 婷婷五月天在线一区| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 丁香婷婷色九月| 九九综合| .操區COm| 美女婷婷激情亚洲| 激情五月天影院| 激情婷婷99| 先锋资源婷婷| 色欲婷婷夜夜| 免费看欧美成人A片无码 | 六月婷婷无码观看| www.91五月| 色色哒五月婷婷六月丁香| 91丁香婷婷综合资源| 久久曰曰| 91精品久久久久久77777| 婷婷久久久| 激情五月丁香综合网站| 日本色99| 日韩另类| 巴基斯坦粉嫩无码视频| 成人av在线网址| 色婷婷丁香五月天| 色色免费网战视频| 91色色色18| 久久人妻久久| 五月婷导航| www.91在线观看| AV九九| 天天干 夜夜爽| 啪啪激情网| 思恩热国产视频右线观看| 丁香九月激情在线视频| 天天射美女| 色综合五月婷婷狠狠干| 久久婷五月影院| 五月天成人在线视频网站| 婷婷操逼| 色情成人五月天| 人妻av在线| 久久婷婷五月综合色播| 婷婷久久影院| 狠狠CAO日日穞夜夜穞AV | 一婬一伦一区二区三区| 五月天另类小说| 色综合日日| 丁香婷婷网| 7777久久亚洲中文字幕| 久久ww| 激情五月亚洲| 丁香婷婷人妻| 97超碰9久热婷婷热| 91操在线视频| 欧美成人网婷婷综合在线| 热99色| 五月叮香啪| 婷婷四色五月| 亚洲精品在线视频| 五月婷婷很很色| 丁香五月开心婷婷| 超级97碰碰| 五月丁香| www..999热久| 国产日韩欧美性生活| 蜜乳人妻一区二区三区| 草综合14| 婷婷五月成人色综合| 亚州第一黄网| 人妻久久久久久| 久久久久人妻| 亚洲瑟瑟精品在线| 97碰久久| 青青草Avb在线| 国产小精品| 久久久久久久久久8888| 另类视频丁香五月| 伊人春天av| 丁J香六月首页| 婷婷五月天av| 五月丁香啪啪婷婷| 骚货艹网站视频| 亚洲日韩人妻操逼| www.com在线操视频免费观看| 91久热| 色色丁香婷婷| 99只有精品|