欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

在skynet中集成KCP協(xié)議:原理、綁定實(shí)操與延遲優(yōu)化實(shí)踐

在skynet中集成KCP協(xié)議:原理、綁定實(shí)操與延遲優(yōu)化實(shí)踐 我最早接觸 KCP是在一版強(qiáng)調(diào)實(shí)時(shí)同步的戰(zhàn)斗服務(wù)里。skynet 本身對(duì) TCP 的支持非常成熟網(wǎng)關(guān)、轉(zhuǎn)發(fā)、agent 這些鏈路都能順暢跑起來(lái)但真到了玩家技能、位置高頻同步的時(shí)候TCP 的重傳隊(duì)列和擁塞窗口經(jīng)常把一次小抖動(dòng)放大成上百毫秒的延遲尖刺。后來(lái)我們把網(wǎng)絡(luò)層遷到 KCP 上情況好轉(zhuǎn)明顯。這里要特別說(shuō)明的是KCP 不是一個(gè)獨(dú)立服務(wù)它是一套基于 UDP 的可靠傳輸狀態(tài)機(jī)要真正在 skynet 里用起來(lái)需要把 KCP 的 C 實(shí)現(xiàn)和 skynet 的 socket 事件、定時(shí)器消息縫在一起。這篇文章不講 KCP 原理 PPT直接講怎么綁、綁的時(shí)候哪些坑最傷人。1. 為什么在 skynet 里折騰 KCP一次延遲敏感服務(wù)的選型復(fù)盤1.1 TCP 在幀同步場(chǎng)景下的“超時(shí)放大”問(wèn)題skynet 自帶的網(wǎng)絡(luò)鏈路大多數(shù)情況下是 TCP。TCP 的可靠性由內(nèi)核保證每個(gè)包都要確認(rèn)丟包了要重傳而且重傳時(shí)間走了指數(shù)退避。這在普通登錄、聊天場(chǎng)景里完全夠用但在幀同步或者狀態(tài)同步要求很高的戰(zhàn)斗里玩家操作是通過(guò)高頻小包上報(bào)的一旦某個(gè)包丟了TCP 會(huì)阻塞后續(xù)所有數(shù)據(jù)等重傳成功才開(kāi)始繼續(xù)推進(jìn)。表現(xiàn)出來(lái)就是玩家端莫名其妙卡一下然后一瞬間收到一堆遲到的同步數(shù)據(jù)角色瞬移、技能時(shí)間軸錯(cuò)亂。這種“隊(duì)頭阻塞 重傳退避”的組合是 TCP 在設(shè)計(jì)上為公平性付出的代價(jià)。它優(yōu)先保證可靠性和網(wǎng)絡(luò)公平不優(yōu)先保證延遲。KCP 不是要推翻 TCP 的可靠性而是把可靠性的實(shí)現(xiàn)放到應(yīng)用層用更激進(jìn)的重傳策略、可選擇的無(wú)延遲模式和快速重傳機(jī)制讓“丟包到恢復(fù)”的時(shí)間從幾百毫秒壓到幾十毫秒。這也是我當(dāng)時(shí)決定在 skynet 里引入 KCP 的根本原因不是 TCP 不靠譜而是它不適合對(duì)延遲極度敏感的場(chǎng)景。1.2 KCP 解決的問(wèn)題與不解決的問(wèn)題KCP 解決的問(wèn)題很明確在不保證可靠傳輸?shù)?UDP 之上加上一套確認(rèn)、重傳、排序機(jī)制。它把 TCP 里由內(nèi)核管理的發(fā)送窗口、接收窗口、重傳隊(duì)列全部搬到用戶態(tài)交給開(kāi)發(fā)者控制。你可以讓每個(gè)包更快被重傳可以關(guān)閉擁塞控制甚至在犧牲帶寬的前提下把延遲降到最低。對(duì)游戲來(lái)說(shuō)這通常意味著弱網(wǎng)下的操作反饋更快玩家不用系統(tǒng)性等待網(wǎng)絡(luò)恢復(fù)。但 KCP 不解決的問(wèn)題也要說(shuō)清楚。首先它不處理 NAT 穿透也不管路由質(zhì)量網(wǎng)絡(luò)物理丟包率太高時(shí)KCP 只是比 TCP 恢復(fù)得快不代表游戲不卡。其次KCP 假設(shè)調(diào)用方自己維護(hù)時(shí)間源它內(nèi)部所有的超時(shí)判斷都依賴外部傳入的當(dāng)前毫秒數(shù)如果上層定時(shí)器不準(zhǔn)KCP 的 RTO 計(jì)算也會(huì)跟著飄。第三KCP 不會(huì)自動(dòng)幫你做連接管理底層是 UDP沒(méi)有三次握手也沒(méi)有連接狀態(tài)超時(shí)斷線必須由業(yè)務(wù)層設(shè)計(jì)心跳。1.3 綁定方式選哪種C 服務(wù)內(nèi)置還是 Lua 模塊封裝在 skynet 里綁定 KCP業(yè)內(nèi)通常走兩條路。第一條是把 KCP 邏輯寫(xiě)進(jìn)一個(gè) C 服務(wù)這個(gè)服務(wù)持有 UDP socket 和一組 KCP 會(huì)話對(duì)象收包、解包、調(diào)用 ikcp_input全部在 C 層完成再把最終業(yè)務(wù)消息發(fā)給對(duì)應(yīng)的 agent 服務(wù)和房間服務(wù)。優(yōu)點(diǎn)是性能好、拷貝少適合純 C 實(shí)現(xiàn)的戰(zhàn)斗邏輯或高頻網(wǎng)關(guān)。缺點(diǎn)是開(kāi)發(fā)調(diào)試成本高尤其是包頭協(xié)議變更時(shí)每次都要編譯。第二條路是在 Lua 層封裝。skynet 的 socket API 本身是消息驅(qū)動(dòng)通過(guò) socket.udp 綁定端口收到 UDP 數(shù)據(jù)后進(jìn) Lua 回調(diào)再調(diào)用一個(gè)封裝好的 KCP Lua 模塊。開(kāi)發(fā)速度快配合 skynet.console 可以隨時(shí)看會(huì)話狀態(tài)甚至能在不重啟服務(wù)的情況下調(diào)整某一路連接的參數(shù)。代價(jià)是每次消息都有一層額外的 Lua/C 邊界拷貝對(duì)很極端的同屏戰(zhàn)斗來(lái)說(shuō)可能吃緊。我的建議是先做 Lua 封裝跑通業(yè)務(wù)再根據(jù)壓測(cè)結(jié)果決定是否把這層下沉到 C。綁定 KCP 最大的難點(diǎn)從來(lái)不是性能而是你還沒(méi)搞清楚 KCP 狀態(tài)機(jī)時(shí)就把復(fù)雜度引入了 C 代碼。2. 綁定前的狀態(tài)機(jī)功課conv、窗口、nodelay 這些參數(shù)到底怎么配2.1 會(huì)話標(biāo)識(shí)一個(gè) UDP 端口如何映射多個(gè) KCP 連接KCP 的每個(gè)會(huì)話對(duì)象都由一個(gè) conv 值區(qū)分。conv 本質(zhì)上是會(huì)話 ID客戶端和服務(wù)端必須約定相同的 convKCP 協(xié)議頭里第一個(gè) 4 字節(jié)就是這個(gè)字段。由于 UDP 本身是無(wú)連接的skynet 里一個(gè) UDP fd 上可能同時(shí)跑幾十上百個(gè)客戶端所以服務(wù)端必須維護(hù)一張從 conv 到 KCP 會(huì)話的映射表。這里有個(gè)細(xì)節(jié)容易踩坑KCP 包的頭里帶 conv但它不區(qū)分“這個(gè)包是新連接還是舊連接”。服務(wù)端收到一個(gè)從未見(jiàn)過(guò)的 conv不能立刻拒絕應(yīng)當(dāng)把它當(dāng)成新會(huì)話建立請(qǐng)求。業(yè)務(wù)層要再定義一層握手消息來(lái)確認(rèn)身份比如客戶端首包帶一個(gè) session id服務(wù)端校驗(yàn)通過(guò)后才允許后續(xù)數(shù)據(jù)進(jìn)入游戲邏輯。KCP 只保證傳輸通道可靠不保證玩家身份合法。2.2 收發(fā)窗口與 MTU調(diào)整前先理解隊(duì)列模型KCP 內(nèi)部維護(hù)發(fā)送窗口和接收窗口。發(fā)送窗口決定在未收到確認(rèn)前最多有多少個(gè)分段可以被丟到網(wǎng)絡(luò)上接收窗口決定對(duì)方即使提前發(fā)來(lái)更多數(shù)據(jù)KCP 一次最多緩存多少分段。窗口太大會(huì)導(dǎo)致內(nèi)存占用升高窗口太小則吞吐上不去尤其是在高丟包環(huán)境下窗口小很容易把鏈路打滿。MTU 則影響分段策略。KCP 默認(rèn)按 1400 字節(jié)左右去切分用戶數(shù)據(jù)超過(guò) MTU 的大包會(huì)被拆成多個(gè)分段每個(gè)分段按序號(hào)重傳和重組。在 skynet 里綁定時(shí)我建議 MTU 先保持默認(rèn)不要在前期調(diào)它。真正需要調(diào)整的是業(yè)務(wù)消息大小一次 ikcp_send 最好不要超過(guò) 1200 字節(jié)這樣大部分戰(zhàn)斗同步消息都不觸發(fā)分段省掉不少重組開(kāi)銷。如果你堅(jiān)持要傳大包也要接受它被打散后任意一個(gè)分段丟失都會(huì)讓整個(gè)業(yè)務(wù)包無(wú)法交付。窗口參數(shù)我一般給一個(gè)相對(duì)穩(wěn)的經(jīng)驗(yàn)組合發(fā)送窗口 64接收窗口 64。如果同屏同步對(duì)象多、單幀數(shù)據(jù)量超過(guò) 4KB再適當(dāng)調(diào)大。注意窗口是按“分段”計(jì)算的不是按“邏輯包”計(jì)算一個(gè) 4000 字節(jié)的業(yè)務(wù)包切成 3 個(gè)分段就占 3 個(gè)窗口槽位。2.3 nodelay 組合游戲常用參數(shù)的含義與代價(jià)KCP 的 nodelay 參數(shù)有四個(gè)經(jīng)常有人只調(diào)第一個(gè)后面三個(gè)不動(dòng)結(jié)果延遲改善不明顯。完整的參數(shù)組合是nodelay、interval、resend、nc。nodelay 設(shè)為 1 表示關(guān)閉延遲等待盡量發(fā)出去interval 是內(nèi)部狀態(tài)機(jī)更新的最小時(shí)間間隔單位毫秒resend 控制快速重傳的觸發(fā)閾值nc 表示是否關(guān)閉擁塞控制設(shè)為 1 表示關(guān)閉。我的常用組合是 nodelay1interval10resend2nc1。這個(gè)組合的含義是每 10 毫秒驅(qū)動(dòng)一次 KCP 更新開(kāi)啟快速重傳關(guān)閉擁塞控制。它適合局域網(wǎng)或者可控弱網(wǎng)環(huán)境能明顯降低延遲但代價(jià)是網(wǎng)絡(luò)擁塞時(shí)不會(huì)主動(dòng)退讓可能把丟包率進(jìn)一步拉高。所以這個(gè)參數(shù)不是所有場(chǎng)景都適用如果是公網(wǎng)大型多人在線穩(wěn)妥做法是先 nc0 跑一段時(shí)間用監(jiān)控?cái)?shù)據(jù)說(shuō)話。你可以在 skynet 的 Lua 服務(wù)里封裝一個(gè)接口暴露這四個(gè)參數(shù)方便后續(xù)熱調(diào)。我就吃過(guò)參數(shù)寫(xiě)死的虧開(kāi)發(fā)環(huán)境跑得好好的一上弱網(wǎng)測(cè)試傻眼了重傳風(fēng)暴把服務(wù)器出口帶寬吃滿最后定位出來(lái)就是 nc1 加 resend2 在丟包率超過(guò) 15% 時(shí)過(guò)于激進(jìn)。3. 在 skynet 里接住 KCP完整數(shù)據(jù)鏈路拆解3.1 收包鏈路UDP 數(shù)據(jù)到達(dá)后如何交給 ikcp_input不管走 C 服務(wù)還是 Lua 封裝收包鏈路的順序是固定的。skynet 的 socket 層收到 UDP 包后回調(diào)或者消息里帶著一段字節(jié)流第一個(gè)動(dòng)作是解析出 KCP 頭里的 conv然后拿 conv 去會(huì)話表里查 KCP 對(duì)象。找不到就創(chuàng)建找到了就把去掉頭部的原始 KCP 報(bào)文交給 ikcp_input。ikcp_input 這一步非常關(guān)鍵它不能只被調(diào)用一次就完事因?yàn)樗鼉?nèi)部會(huì)根據(jù)序列號(hào)判斷哪些數(shù)據(jù)是新數(shù)據(jù)、哪些是重復(fù)包同時(shí)更新確認(rèn)信息和接收緩沖區(qū)。調(diào)用完 ikcp_input 之后還要反復(fù)調(diào)用 ikcp_peeksize 和 ikcp_recv 把完整業(yè)務(wù)包取出來(lái)因?yàn)橐粋€(gè) UDP 包可能只包含業(yè)務(wù)包的一個(gè)分段也可能一個(gè)業(yè)務(wù)包被拆成多個(gè)分段分批到達(dá)。-- 偽代碼展示收包主流程 function kcp_network:udp_recv(packet, addr) local conv bytes_to_uint32(packet, 1) local kcp self.sessions[conv] if not kcp then kcp self:new_session(conv, addr) end -- 去掉外層 conv 頭之后剩下的就是 KCP 協(xié)議報(bào)文 kcp:input(packet:sub(5)) while true do local peek kcp:peeksize() if peek 0 then break end local msg kcp:recv() skynet.send(self.agent[conv], lua, msg) end end這段偽代碼是最核心的框架。真正實(shí)現(xiàn)時(shí)new_session 里面不要急著 skynet.send先給 agent 服務(wù)發(fā)一個(gè)會(huì)話建立消息由 agent 決定要不要接納這個(gè)連接。業(yè)務(wù)層需要把會(huì)話映射和玩家綁定分開(kāi)管理。3.2 發(fā)包鏈路ikcp_output 回調(diào)與真正 socket 發(fā)送KCP 是一套獨(dú)立的狀態(tài)機(jī)它并不直接操作 UDP socket。當(dāng) KCP 內(nèi)部產(chǎn)生需要發(fā)出去的報(bào)文時(shí)會(huì)通過(guò)一個(gè) output 回調(diào)把這些報(bào)文交給你。你必須自己實(shí)現(xiàn)這個(gè)回調(diào)否則數(shù)據(jù)只會(huì)堆積在 KCP 的發(fā)送緩沖里永遠(yuǎn)不會(huì)真正到達(dá)網(wǎng)絡(luò)。所以每次調(diào)用 ikcp_update 之后KCP 會(huì)把待發(fā)送的數(shù)據(jù)整理好在 update 內(nèi)部通過(guò) output 回調(diào)一批一批吐出來(lái)?;卣{(diào)里拿到的是一段完整 UDP 負(fù)載需要你自己補(bǔ)上 conv 頭然后通過(guò) skynet 的 socket 發(fā)送接口 sendto 到客戶端地址。注意這里發(fā)送的不一定是用戶調(diào)用 ikcp_send 的原始數(shù)據(jù)而是 KCP 分段后的報(bào)文可能一個(gè)用戶包被拆成好幾個(gè) UDP 小包。// 偽代碼展示 output 回調(diào)的實(shí)現(xiàn)思路 static int udp_output(const char *buf, int len, ikcpcb *kcp, void *user) { struct session *s (struct session *)user; // KCP 回調(diào)的數(shù)據(jù)需要加上 conv 頭再發(fā)給遠(yuǎn)端 uint32 conv ikcp_getconv(kcp); char head[4] {conv 24, conv 16, conv 0xff, 0}; // 調(diào)用 skynet socket sendto }這個(gè)回調(diào)的線程模型很容易埋雷。如果 KCP 對(duì)象在主服務(wù)線程更新output 回調(diào)也發(fā)生在主服務(wù)線程那么里面直接調(diào) socket 發(fā)送是安全的。如果底層 UDP fd 被別的線程監(jiān)控就要謹(jǐn)慎處理跨線程 sendto 的問(wèn)題。最省心的方式是讓所有 KCP 相關(guān)的操作全部收斂到同一個(gè)服務(wù)線程里。3.3 定時(shí)驅(qū)動(dòng)用 skynet 超時(shí)消息喚醒 ikcp_updateKCP 不會(huì)自己蘇醒它必須被周期性調(diào)用 ikcp_update并在恰當(dāng)?shù)臅r(shí)機(jī)調(diào)用 ikcp_flush。skynet 里最常見(jiàn)的做法是給持有 KCP 會(huì)話的服務(wù)掛一個(gè)循環(huán)定時(shí)器每隔一小段時(shí)間遍歷所有會(huì)話調(diào)用一次 update。但更精確的做法是使用 ikcp_check。ikcp_check 會(huì)返回一個(gè)毫秒時(shí)間點(diǎn)告訴你在當(dāng)前時(shí)間之后下一次必須調(diào)用 update 的時(shí)機(jī)。你把這個(gè)時(shí)間點(diǎn)換算成相對(duì)延時(shí)然后通過(guò) skynet.timeout 注冊(cè)下一次定時(shí)器。這樣 KCP 在空閑時(shí)可以盡量少喚醒在網(wǎng)絡(luò)繁忙時(shí)又能保證調(diào)度足夠密集。-- 偽代碼展示使用 check 的定時(shí)循環(huán) function kcp_network:tick() local now now_ms() local next_time 0x7fffffff for conv, kcp in pairs(self.sessions) do kcp:update(now) local check_at kcp:check(now) if check_at next_time then next_time check_at end end self:set_timeout(next_time - now_ms()) endskynet 的定時(shí)器精度受服務(wù)消息隊(duì)列繁忙程度影響如果你的戰(zhàn)斗邏輯服務(wù)在同一條線程里處理大量消息定時(shí)器觸發(fā)可能晚于預(yù)期。這時(shí)候 KCP 的 RTO 就會(huì)偏慢因?yàn)橐磺袝r(shí)間判斷都基于你傳入的 now_ms 和實(shí)際觸發(fā)時(shí)刻。所以綁定 KCP 的服務(wù)盡量不要和重 CPU 邏輯擠在同一個(gè)服務(wù)里。3.4 斷線檢測(cè)KCP 不負(fù)責(zé)告訴你連接斷了很多第一次用 KCP 的人會(huì)問(wèn)對(duì)方斷線了KCP 能檢測(cè)到嗎答案是能感知一部分但不能完全依賴。KCP 知道哪些包一直沒(méi)被確認(rèn)也知道對(duì)方最后的確認(rèn)序號(hào)停留在哪但 UDP 沒(méi)有連接狀態(tài)KCP 無(wú)法區(qū)分“對(duì)方網(wǎng)絡(luò)差”和“對(duì)方已經(jīng)下線”。所以綁定到 skynet 后業(yè)務(wù)層必須自己設(shè)計(jì)心跳。常見(jiàn)方案是應(yīng)用層心跳包每隔幾秒通過(guò) KCP 發(fā)送一個(gè) ping 消息服務(wù)器維護(hù)最后活躍時(shí)間超過(guò)心跳間隔的若干倍就判定超時(shí)回收會(huì)話對(duì)象。不要把這個(gè)邏輯和 KCP 的 nodelay 參數(shù)混在一起應(yīng)用層心跳是業(yè)務(wù)規(guī)則KCP 重傳是傳輸規(guī)則兩者缺一不可。我當(dāng)時(shí)的教訓(xùn)是最初把超時(shí)判定寄托在 KCP 的發(fā)送隊(duì)列上以為發(fā)了很多包沒(méi)確認(rèn)就說(shuō)明對(duì)方斷了結(jié)果玩家只是切換 Wi-Fi網(wǎng)絡(luò)短暫中斷后本可以恢復(fù)卻被服務(wù)器提前踢下線體驗(yàn)非常差。后來(lái)改成應(yīng)用層心跳加 10 秒超時(shí)閾值誤踢率降為 0。4. 綁定期的三個(gè)大坑外層包格式、分幀習(xí)慣、并發(fā)邊界4.1 在外層還是復(fù)用 KCP 自帶的 conv 頭KCP 協(xié)議頭本身自帶 conv 字段理論上不需要再包一層。但在 skynet 里綁定我強(qiáng)烈建議留一個(gè)極小的外層頭哪怕只是 4 字節(jié) conv 復(fù)制一份。原因很實(shí)際skynet 的消息系統(tǒng)里UDP 數(shù)據(jù)到達(dá)服務(wù)端時(shí)你拿到的是整段數(shù)據(jù)不可能每次都去解析 KCP 的內(nèi)部偏移而且未來(lái)你可能需要升級(jí) KCP 版本或者加加密、加客戶端版本號(hào)外層頭給你的擴(kuò)展空間遠(yuǎn)比直接用 KCP 頭大。外層頭設(shè)計(jì)成 [1 字節(jié)版本][4 字節(jié) conv][2 字節(jié)長(zhǎng)度][payload] 就夠了。版本號(hào)留給協(xié)議演進(jìn)conv 用于會(huì)話映射長(zhǎng)度字段幫你判斷 UDP 粘包因?yàn)闊o(wú)連接不代表不會(huì)一次收多個(gè)應(yīng)用包。KCP 本身會(huì)把大包分片重組但業(yè)務(wù)邏輯要一次性讀完整條消息長(zhǎng)度字段能省掉很多邊界判斷。4.2 KCP 已經(jīng)解決了半包但業(yè)務(wù)分幀仍要自己做這句話聽(tīng)起來(lái)矛盾其實(shí)不矛盾。KCP 是消息協(xié)議一次 ikcp_send 對(duì)應(yīng)一次 ikcp_recv它已經(jīng)幫你解決了 TCP 那種字節(jié)流半包問(wèn)題。真正容易出問(wèn)題的是發(fā)送側(cè)如果業(yè)務(wù)層把兩條邏輯消息拼在一個(gè) buffer 里發(fā)送接收方拿到后就必須自己拆開(kāi)。很多團(tuán)隊(duì)剛開(kāi)始接 KCP 時(shí)覺(jué)得隨便后面加協(xié)議字段就痛苦了。正確的姿勢(shì)是每個(gè)業(yè)務(wù)邏輯消息單獨(dú)調(diào)用一次 ikcp_send發(fā)送前在業(yè)務(wù) payload 最前面加一個(gè) 2 字節(jié)的消息類型字段。這樣接收方 ikcp_recv 拿到的就是一個(gè)帶類型的完整業(yè)務(wù)包直接按類型分發(fā)不需要再維護(hù)拼包狀態(tài)機(jī)。KCP 做的是傳輸層可靠業(yè)務(wù)層協(xié)議仍然要按消息幀設(shè)計(jì)。4.3 并發(fā)邊界讓所有 KCP 操作收斂到同一條服務(wù)線程skynet 服務(wù)默認(rèn)是“單消息隊(duì)列 串行回調(diào)”看似不會(huì)并發(fā)但底層 socket 事件來(lái)源、定時(shí)器來(lái)源可能不在同一條線程。如果你在 C 服務(wù)里直接寫(xiě)很容易出現(xiàn)兩個(gè)線程同時(shí)訪問(wèn)同一個(gè) KCP 對(duì)象的情況輕則數(shù)據(jù)錯(cuò)亂重則觸發(fā)段錯(cuò)誤。我推薦的做法是KCP 會(huì)話對(duì)象不對(duì)外暴露任何人想操作連接都通過(guò) skynet 消息投遞到持有該連接的 service。UDP 收包線程收到數(shù)據(jù)后只負(fù)責(zé)把原始字節(jié)放入消息隊(duì)列不直接調(diào) ikcp_input定時(shí)器線程只負(fù)責(zé)發(fā)一條 tick 消息不直接調(diào) ikcp_update。這樣所有 KCP 相關(guān)操作都在服務(wù)線程的 invoke 流程里串行完成天然免鎖。4.4 綁定期常見(jiàn)問(wèn)題排查清單現(xiàn)象可能原因驗(yàn)證方法收到 UDP 包但業(yè)務(wù)消息始終不出現(xiàn)output 回調(diào)沒(méi)實(shí)現(xiàn)或 send 后沒(méi)調(diào) update在 output 回調(diào)里打日志看是否有產(chǎn)出丟包后恢復(fù)明顯偏慢interval 太大、nodelay0短間隔下用日志記錄 RTT 分布內(nèi)存持續(xù)上漲發(fā)送后沒(méi)及時(shí) update隊(duì)列堆積監(jiān)控每個(gè)會(huì)話的 snd_queue 長(zhǎng)度一段時(shí)間后對(duì)方全斷線應(yīng)用層心跳機(jī)制缺失抓 UDP 包看是否有周期性數(shù)據(jù)這張表是我踩坑之后的濃縮。它不能解決所有問(wèn)題但能幫你快速定位 70% 的綁定期 bug。5. 參數(shù)調(diào)優(yōu)與落地測(cè)試我踩過(guò)之后的實(shí)操建議5.1 先跑通默認(rèn)參數(shù)再上弱網(wǎng)壓測(cè)綁定 KCP 最大的敵人是“自以為理解了參數(shù)”。一開(kāi)始我也直接套了 nodelay1、interval10、resend2、nc1結(jié)果在丟包模擬環(huán)境里重傳風(fēng)暴把帶寬吃光了。后來(lái)我改成先跑默認(rèn)參數(shù)確認(rèn)整個(gè)鏈路通數(shù)據(jù)可靠再逐步調(diào)整。弱網(wǎng)工具我推薦直接在內(nèi)網(wǎng)機(jī)器上做延遲和丟包模擬把丟包率設(shè)定為 3%、5%、10%、15% 四檔。每檔跑至少五分鐘記錄業(yè)務(wù)層的有效傳輸成功率。不要只看 KCP 是否最終把包送到了游戲體驗(yàn)更關(guān)心的是“多少包在 50 毫秒內(nèi)到達(dá)”這個(gè)指標(biāo)才能反映弱網(wǎng)手感。5.2 推薦的監(jiān)控維度與驗(yàn)收指標(biāo)KCP 綁進(jìn) skynet 后至少要有四個(gè)監(jiān)控維度日志里能看到每個(gè)會(huì)話的重傳次數(shù)、每個(gè)會(huì)話的發(fā)送隊(duì)列長(zhǎng)度、一次業(yè)務(wù)消息從 send 到 recv 的耗時(shí)分布、以及應(yīng)用層心跳超時(shí)次數(shù)。驗(yàn)收指標(biāo)我建議定兩條線?;A(chǔ)線丟包率 5% 時(shí)90% 的業(yè)務(wù)消息延遲在 100 毫秒內(nèi)進(jìn)階層丟包率 15% 時(shí)連接存活率不低于 95%且不出現(xiàn)重傳風(fēng)暴導(dǎo)致出口帶寬打滿。如果你的服務(wù)滿足這兩條說(shuō)明綁定方案基本合格可以繼續(xù)做業(yè)務(wù)側(cè)優(yōu)化。5.3 一個(gè)值得做的改造把 KCP 封裝成獨(dú)立網(wǎng)絡(luò)服務(wù)等你把單機(jī)綁定跑通之后我建議再花點(diǎn)時(shí)間把 KCP 網(wǎng)絡(luò)層獨(dú)立成一個(gè) skynet 服務(wù)不把它和具體業(yè)務(wù)混在一起。這個(gè)網(wǎng)絡(luò)服務(wù)只負(fù)責(zé)管理 UDP socket、KCP 會(huì)話、心跳超時(shí)、消息收發(fā)向上提供一個(gè)統(tǒng)一的接口建立會(huì)話、發(fā)送消息、廣播消息、關(guān)閉會(huì)話。業(yè)務(wù)邏輯全掛在 agent 服務(wù)上。這樣做的收益很大。首先戰(zhàn)斗服需要熱更新時(shí)可以只更新業(yè)務(wù)服務(wù)不碰網(wǎng)絡(luò)層。其次壓測(cè)時(shí)可復(fù)制出多個(gè)網(wǎng)絡(luò)服務(wù)實(shí)例分別綁定不同端口觀察會(huì)話數(shù)和消息吞吐是否線性擴(kuò)展。最后后續(xù)如果要換加密算法或者改 MTU只需要改網(wǎng)絡(luò)服務(wù)內(nèi)部實(shí)現(xiàn)上層業(yè)務(wù)幾乎無(wú)感知。我在最后把綁定跑上線時(shí)最感慨的是綁定工作本身不難難的是意識(shí)到 skynet 的消息模型怎么和 KCP 的狀態(tài)機(jī)配合。所有跨線程的焦慮最后都?xì)w結(jié)為“讓每件事都在它該在的隊(duì)列里發(fā)生”。如果你也正在做類似的事先按文中的偽代碼跑通一次再開(kāi)始?jí)簻y(cè)先解決“數(shù)據(jù)能流動(dòng)”再談參數(shù)優(yōu)化這樣會(huì)順很多。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月婷丁香花| 九九99九九99九九99视频网| WWW,五月天| 美女婷婷六月色| 五月婷婷激情五月| 五月色婷| 激情五月综合网| 亚洲综合欧美色丁香婷婷888月图片| 色综合久久888| 久婷五月| 免费日韩99| AA丁香综合激情| 亚洲综合无码| 亚洲精品国产setv| 精品99这里有| 日本三级黄色大片| 日本无va视频| 专区无日本视频高清8| hd五月婷婷在线| 色五月激情五月| 婷婷五月在线综合| 涩五月婷婷| 久xxxx| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 激情综合五月婷婷| 九九色大香蕉| 日韩成人综合网| 丁香五月激情宗合| 久久婷婷精品| 五月激情婷婷开心| 国产五月天婷婷| 九九激情网| 激情婷婷五月女| 亚洲AV中文在线| 毛片蕉地一二| 123草逼网| 久99久在线| 婷婷激情六月| 五月丁香啪啪伦理电影| 九色视频91疯狂| 婷婷综合五月| 婷婷婷婷色| 大香蕉视频99| 色五月六月| 91在线资源| 色综合色综合网| 亚洲国产精品成人午夜| 99热在线精品播放| 色情播放| 最新日韩AV中文字幕| 99热| 五月婷婷色| 少妇高潮呻吟A片免费看软件| 天天模,夜夜模夜夜爽| 激情小说婷婷| 色五月丁香婷婷| 97超碰人人操| 婷婷丁香黄色| 综合网激情| 国产片色| 久久婷婷伊人| 好好干av| 激情视频婷婷五月花| 色五月色图| 九九热10| 九九热9| 婷婷激情视频| 激情q青青草在线婷婷| 九月丁香八月婷婷加勒比| 婷婷丁香五月婷婷| 精品国产va久久久久| 免费观看18视频网站| 日本a片网址| 国产在线网| 五月婷婷视频28| 天天干天天日蜜臀av| 日 日干 日日做| 丁香色婷婷色手机免费在线| 丁香大香蕉| 亚州精品色情无码A片| 97香蕉碰碰人妻国产欧美| 国产韩日亚洲美州欧亚综合在线| 九九亚洲视频| 精品久热69| 婷婷亚洲五月丁香综合在线| 丁香大香蕉| 91久女| 久久久久人妻精品| 亚洲婷婷欧美婷婷| 色五XX| 久久婷婷草| 97久久人人| 91热er| 五月 成人 婷婷| 九九色情网站| AAA级久久久精品| 亚洲精品视频在线播放| 久久丁香综合| 久久久婷丁香五月| 五月丁香久人妻中文| 婷婷五月天激情网| 天天在线XXX| 五月婷婷综合激情| 五月婷婷色男女| 婷婷久久色| 这里只有精品1| 开心五月网| 啪啪啪五月天| 亚州欧美国产久精国产99综合视频| 久xxxx| 丁香五月天激情综合| 天天日天天舔| 超碰爱爱爱| 九九热这里只有精品31| 日本九九热| 国内裸舞二区| 97操碰人免费| 99色在线| 久久色情| 婷婷五月色激情欧美激情| 激情五月天色婷婷综合| 色五月丁香在线| 激情5月婷婷狠狠干| 久久99网站| 成人免费在线电影| 色情五月丁香| 伊人五月天男人的天堂在线| 99久久婷婷| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 开心深爱五月天| 欧美操综合| 欧美日综合| 色~性~乱~伦~噜| 婷婷五月伦理网站| 这里只有精品1| 五月色婷婷影院| 91在线观看九区| 婷婷视频网| 色婷婷久久| 婷婷九月激情| 九九五月天| 丁香五月激情在线| 婷婷丁香五月六月激情| 色婷婷在线视频久| 五月开心激情网| 久久久精久人妻| 91丨九色丨东北熟女| 久久久久五月丁香| 五月久久综合| 丁香五夜激情四射夜夜夜| 欧美性丁香色色五月天干干| 熟妇内谢69XXXXXA片| 国产欧美精品AAAAAA片| 婷婷99| 国产美女无遮挡裸体毛片A片| 婷婷五月丁香啪啪| 五月天激情小说网| 久热婷婷| 婷婷久久色| 色婷婷亚洲五月天| 婷婷99视频精品| 大香蕉伊人99| 五月天激情国产综合婷婷| 婷婷丁香五月天激情| 涩五月丁香| 欧美丁香六月激情视频| 色五月在线观看| 久久久免费精彩视频| 天天日夜夜操五月| 激情 婷婷| 久久五月天激情| 2017狠狠干| 成人午夜无码视频| 26uuu欧美| 大战熟女丰满人妻AV| 69凹凸成人综合网| 中文AV网站| 欧美熟妇一区二区三区| 少妇日麻屄| 大狠狠在线| 99性视频| 99精品久久| 99热这里都是精品| 国产偷人爽久久久久久老妇APP| 九九综合| 丁香五月天亚洲综合| 色天使久久综合| 99精品无码| 亚洲精品第一国产综合亚AV | 激情六月天| 色婷婷视频| 另类专区在线| 午夜天堂一区人妻| 大香蕉久久草| 99久久a线观| 色五月天天| 久久久月丁香| 中美日韩成人在线| 丰满少妇猛烈A片免费看观看| 97久久视频| 性按摩玩人妻HD中文字幕| 免费观看18视频网站| 三年高清大片免费观看国语| 96精品久久久久久久久| 久久婷婷五月天激情唯美| 丁香婷婷社区| 天天日天天色| 99精品人人| 五月婷婷,狠狠操| 丁香五月婷婷大香蕉| 伊人五月综合网| 丁香五月停停基地| 丁香婷婷中文字幕| 国产成人+综合亚洲+天堂| 色五月婷婷久久| 99热这里只有精| 免費观看aV在线网址| 99在线热视频| 无码网站视频| 欧美性生交XXXXX无码小说| 日韩日比视频| 久久偷拍综合五月天| 丁香午夜天| 婷香狠狠爱五月| 久久婷婷资源| 性天天中文网| 色欧美一级| 激情五月婷色| 天天开心天天色| 99热精品中文字幕| 91色综合久久| 99热精国产这里只有精品| 99热在线观看免费精品| 疯狂做受XXXX高潮A片| 97碰碰视频| 精品视频这里只有精品| 综合图片色色| 99亚洲精品| 99人人操人人操人人精| hd五月婷婷在线| 九九人人操| 人人综合色| www九九| 97色色综合| AV片一区在线观看| AV在线中文| 五月天六月天| 色婷婷丁香| 伊人大蕉香| 99爱免费视频在线观看| 欧美69久成人做爰视频| 激情久久久久| 五月婷婷色影院| 9热久久在线| 九九色99| 可以免费观看的AV| 久久hd| Www,五月天| 五月丁香啪啪综合| 久久五月婷婷电影| 激情综合五月天| 久操人妻| 色婷婷六月天在线| 日日操夜夜操不卡| 综合狠狠五月婷婷| 婷婷午夜| 丁香五月婷婷狠狠色| 色色色婷婷五月| 五月天丁香看婷婷| 99热国产免费| 久久五月激情综合| 色婷婷色99国产综合精品| 久操香蕉| 中文不卡一二三区| 97色精品视频 | 色婷婷欧美| 九色地址91视频| 色婷婷成人丁香| 天天日夜夜曹| 1024婷婷综合久久五月天| 天天日综合| 婷婷激情综合色五月久久91| 99热这里只有精品2016| 超碰啪啪网| 色综合综合网| 久久婷婷综合五月| 99热成人精品| 国产成人网| 久久综合网桃花| 性色天| 婷婷.com| 开心婷婷五| 五月婷丁香| 久久开心五月天激情| 色色网91| 九九色婷婷| 激情 婷婷| 丁香五月综合网亚洲综合欧美狠狠| 91re色综合视频| 婷婷五月丁香久久| 97黑人精品区| 天天插天天日| 婷婷欧美综合| 九九热大香蕉| 9+1视频网址| 五月婷婷色播| 色噜噜狠狠色综合AV兰草影视| 色五月激情综合网| 9久久精品| 精品成人在线观看| 91操网| 欧美日韩999| 日韩ac不卡无码| 91操操| 99精品爱| 日日干夜夜撸夜夜骑| 99精彩视频网站在线| 99综合| 久久久久久欧美精品se一二三四| 加勒比色色| www.婷婷激情网.com| 婷婷五月婷婷五月| 成年视频免费观看| 99在线播放视频| 色婷婷基地| 激情婷婷护士激情| 日本va欧美va欧美va| 插逼综合网| 久久婷五月综合| 开心久久xxx色| 潘金莲AAAAAAAAAA| 色婷婷小说| 深爱五月亚洲| 大香蕉娱乐| 亚洲操操操| 丁香五月123| 亚洲中文乱字字幕在线永久| 美女亚洲五月丁香| 色很久综合| 久久久激情| 五月丁香久人妻中文| 99热亚洲只有色| 丁香五月天黄色片| 五月婷深深爱激情网| 超碰在线网站| 91妻人人爽人人看片| 六月丁香婷婷色69| 欧美在线操| AA片在线观看视频在线播放| 亚洲aV写真天天综合网久久| 久久婷婷六月天| 成人片黄网站色大片免费毛片| 九九热免费| 狠狠色婷婷7| 超碰v| 激情五月天www| 国产精品黑丝| 日日操日日撸| 五月激激网w'w'w| 色婷婷狠狠18yy| 天天狠狠夜夜狠狠2023| 丁香五月老师| 操操操操操操婷婷五月天| 久久蜜臀婷婷| 五月婷婷丁香在线| www婷婷亚洲| 欧美色图天堂网色| 香蕉97碰碰碰欧美| 色99视频| 2050人人操免费工开爱| 婷婷的99视频网站| 极品嫩草| 任你爽精品免费视频6| 五月丁香伊人网| 伊人五月综合网| 啪啪综合| 婷婷婷婷色| 色婷婷伦理| 91婷婷丁香五月天免费视频网站| 激情婷婷护士激情| 色伦专区97中文字幕| 色色婷婷五月天| 九九热99精品在线| 久99久视频| 日本 色综合| 激情五月天婷婷| 超碰在线中文字幕| 中文字幕久久一区二区三区| 精品无码色欲AV| 日本三日本三级少妇三级66| 亚洲另类在线观看| 玖玖婷婷色五月| 久久99免费视屏| 亚洲精品久久久久AV无码| 五月激情婷婷综合| 色五月亚洲开心网| 天天日夜夜B久久| 另类图片五月激情| 五月激情久久| 色欧美色色色| 人人操五月天| 色情五月综合婷婷| 婷婷五月天小说| 99这里只有精品|v| 99色视频| 色婷婷小说| 无码人妻激情| 激情都市丁香婷婷| 99热手机在线精品| 激情丁香五月激情婷婷| www激情网| 丁香色色网| 夜夜爱爱亚洲| 少妇婷婷五月天| 日本熟妇乱妇熟色A片蜜桃| 97久久久| 久久视频这里有精品99| a在线观看| 99爱在线视频观看| 国产美女最新VA在线免费观看| 国产99久久久| 久热欧美| 黄色99视频| 久久五月视频| 91丨九色丨熟女|老版| 中文av在线观看| 午夜不卡久久精品无码免费| 99精品热| 色婷| 天天插天天插天天插天天插| 99熟女| 五月婷婷综合在线| 日日爽日日| 色色色色综合| 丁香综合婷婷五月天| 国产精品婷婷午夜在线观看| 综合网亚洲| 丁香久久| 婷婷黄色| 综合XX网| 五月天婷婷亚洲| 天天xxxxxx天天日| 成人AV中文字幕| 97色色网| 97影院一级片| 色婷婷在线视频| 国产精品99久久久久久久女警| 99年操人人爽| 九月婷婷综合在线| 婷婷五月天久| 五月丁香好婷婷A片网| 精品九九久久| 天天综合网~91综合网| 丁香婷婷色九月| 五月天停婷基地| 久久婷婷婷| 日日夜夜狠狠| 五月综合人妻| 九热免费视频| 丁香五月六月婷婷自拍| 夜夜操天天爽| 99ri在线观看视频| 六月婷婷综合| 888久久久| 亚洲操人| 亚洲五月天婷婷综合| 婷婷六月综合激情| 欧美色五月| 丁香五月成人社区| 特黄三级又爽又粗又大| 九九九这里只有精品| 另类图片天天影视在线观看| 久热这里只有精品6官网亚洲| 99色播| 在线观看婷婷5月| 亚洲精品视频电影| 久久99久久99精品免视看婷婷| 色婷视频| 久久激情视频| 9久热精品在线视频| 五月婷婷视频| 大香蕉九九| 99精品这里只有免费视频| 亚洲视频图片婷婷五月| 五月婷婷六月色| 五月婷婷激情网| 99九九在线视频| 182TV大香蕉| 亚洲字幕AV一区二区三区四区| 射婷婷中文字幕| 五月天小说激情| 久久刺激网| 五月综合777| 亚洲丁香五月| 日本狠狠色| 色五月情| 国产日产成人亚洲欧美国产VA| 精热在线综合网| 天天激情夜夜干| 五月丁香在线婷婷蜜桃| 五月天色裸体视频| 99精在线| 97日本操| 色噜噜夜夜夜综合网| 成人网站免费sxj| 婷婷欧美综合| 色五月色五天色情网址| 天天色伊人| 成人AV在线网站| 色情五月综合婷婷| 伊人色综合影院视频| 色婷婷欧美| 国产精品美女久久久久AV超清 | 五月天狠狠网站| 激情五月天www| 丁香五月偷拍| 精品影院| 色五月xxx| 国内外色色色色色成人视频| 91紱請| 91日精品| 综合激情五月天六月婷免费视频| 亚洲久久激情| 日本啪啪网| 成年人看Va免费视频| 在线理论片| 人人操9| site:picc-up.com| 久热这里只有| 五月天色色色| 久久婷婷丁香五月一二三| 《蜘蛛女》梁铮1995| 狠狠色婷婷| 婷婷色五月激情强奸四射| 国产无套精品一区二区| 97色在线| 激情五月婷婷免费视频| 天天干 夜夜爽| 婷婷综合干| 久久ww| 综合婷婷五月丁香在线观看| 99燥99日| xfplayav在线| 激情六月综合| 婷婷综合九月| 丁香五月天堂网| 午夜天堂一区人妻| 九九成人精品| 婷婷丁香成人| 国产成人AV人人爽人人澡Va| 午夜成人网站在线观看| 亚洲人妻电影| 5五月综合网亚洲| 国产偷人爽久久久久久老妇APP| 91人人超碰在线| 天天舔日日肏夜夜爽| 极品少妇XXXX精品少妇偷拍| 五月在在观看| 97色色色色色| 91九色熟女| www.99婷婷| 91日本在线| 欧美色婷婷| 五月丁婷香| 九九色精品| 九九人人精品| 五月丁香婷婷基地| 99久re热| 色五月播五月| 五月色婷婷影院| 婷婷丁香在线| 国产av影片| 狠狠色丁香久久综合婷婷亚洲成人福利| 色五月婷婷狠狠撸| 色色网站在线| 色婷婷人人| 99色日本| 五月丁香六月色| 超级碰91| 亚洲中文字幕AV| 欧美激情丁香五月| 久久婷综合| 丁香五月天天哦| 99爱视频| 日韩综合网络男女香蕉a片| 激情五月久久| 成人av播放| 99爱爱网| av中文在线| 99在线精品免费视频| 久热视频A.| 五月婷婷亚洲| 天天网站天天爽| 丰滿爆乳一区二区三区| 亚洲啪啪网| 五月婷婷在线视频免费观看| 影音 五月 婷婷 久久| 五月叮香啪| 91人妻人人操人人爽| 狠狠操狠狠爱| 思思99热热热99| 五月性色| 五月丁香婷婷啪啪网| 五月第四色| 欧美婷婷九月| 亚洲欧美婷婷五月色综合| 黄色aaaaa| 久久久27操| 婷婷综合欧美| 亚洲日比视频| 日韩高清成人| 激情五月丁香激情综合网| 丁香五月婷婷天堂大香蕉| 丁香五月激情五月| 台湾佬天天日丁香婷婷五月天| 97超级碰碰碰久久久| 九色91视频| 99视频精品视频| 色色五月丁香婷婷综合| www.色五月| 婷婷五月天激情丁香| 另类亚洲2| 国外亚洲成AV人片在线观看| 深爱激情丁香| 九九热自拍| 天天骑天天操| 五月丁香va| 丁香五月婷婷激情97| 大香蕉伊人99| 婷婷基地成人五月天| 91人人人人人| 激情六月日韩| 大天天伊人| 伊人九九热| 五月天精品| 丁香五月在线伊人| 久草x色在线观看99| 亚洲成人网站在线观看| 99精品亚洲| 99热在线观看精品| 草榴视频黄色网| 噜噜网免费视频| 色五月无码| 五月桃花网综合| 色狠狠伊人久久五月丁香| 国产1区2区3区| 国成人网| www.99热在线| 色五月综合| 久热re在线视频| 激情五月天色网站| 色五月婷婷九月| 婷婷婷五月天最新综合你懂的| 日韩黄在免| 九九无码| www激情婷婷com| 天天日天天操天天干| 99er日韩| 久久久色情| 国产9色在线/日韩| 99热欧美在线观看| 97人人草| 色情成人五月天| 婷婷六月天亚州| 色婷视频| 五他月天啪啪啪| 永久精品| 久久久久婷婷| 欧美3AaAa大片| 色婷婷基地| 亚洲色人妻| 99情色五月天| 大香蕉综合视频在线| 99精彩视频| 怡红院 久久| 亚州综合色| 激情五月天视频| 激情五月天天狠狠久久| 五月天婷婷色播综合在线| 男女免费视频999| 色综合99色| 秋霞九九无码| 九九热这里只有精品9| 精品香蕉99久久久久网站 | 六月丁香婷婷综合色播| 日本WWW九九九| 青青久久91| www.狠狠| 日韩色色视频| 久久久99免费视频| 99热99热99热99热| 这里只有精品视频在线观看免费| 激情五月天久久丁香| 亚洲色色色色色色色色色| 五月天激情色色| 日韩av一区二区在线/日产精品久久久| 99黄色性生活| 亚洲成人AV在线| 亚洲午夜在线视频| 好叼操在线观看| 色色六月| 婷久久高清| 久久久久久久久18久久| 五月丁香婷婷成人网| 91狠狠色丁香婷婷综合久久精品| 99精品综合| 欧美性爱中文字幕| 思思热高清在线观看| 色欲资源网| WWW,五月| 天堂网啪啪| 人人看人人摸人人| 婷婷五月天少妇| 婷婷五月色亚洲| 日本色婷婷综合| 人妻操逼视频。| 99亚洲综合| 婷婷五月天人妻| 亚洲成人黄色网| 五月天婷婷久久| 激情六月婷婷| 日本99在线| 五月丁香六月激情欧美综合| 久9免费视频| 99热这里有精品| 成人在线视频网| 午夜丁香综合婷婷| 欧美性丁香色色五月天干干| 涩婷婷五月天| 毛片毛片毛片毛片| 欧美性爱中文字幕| 婷婷99狠狠| 婷婷丁香91综合| 婷婷六月色情| 久婷婷五月综合欧美| www.sebowuyue| 俺来也综合网精品一区| 婷婷激情啪啪| 开心五月色婷婷综合开心网| 婷婷九月丁香久久| 久久精品夜色噜噜亚洲a∨| 婷婷激情小说| 在线免费视频caop| 操操天堂| 综合99综合久久久久久久| 99久热在线精品| 五月花成人网| 丁香五月开心亚洲| 天堂综合久| 啪啪啪大香蕉| 婷婷在线精品| 成 人片 黄 色 大 片| 黄色AAAAAAA| 亚洲免费在线观看岛国| 51精品国内探花| 国产精品成人网站| 色色色999| 超碰大香蕉网| 五月丁香久久网| 五月亭亭激情综合| 99热在线精品观看| www.婷婷五月天| 丁香六月情| 欧美A A A A A| 香蕉婷婷| 丁香五月婷婷性爱| 91日韩美女被插视频| 99视频色在线观看| 亚洲中文乱字字幕在线永久| 五月大香蕉| 乱岳熟女50岁| 影音先锋91视频| 五月欧美色播| 日韩激情人伦人| 亚洲国产成人在线| 荡乳尤物3HP1V5| 久久伦乱| 丁香五月综合在线观看| 久热婷婷| 久久性刺激| 日韩免费乱轮网站| 免费不卡狠操美女视频网| 激情综合五月| 久久您您综合网| 操日本三片99| 日韩色色网| 五月激情基地| 欧美性猛交99久久久99| 91色色色18| 免费观看18视频网站| 婷婷自拍| 黄网在线免费观看| 天天日天天草| 激情五月激情综合网| 中文字幕av久久爽| 秋霞电影理论| 色婷婷五月在线| 嫩草视频| 九九爱这里只有精品| 成人AV在线网站| 六月婷久久| 色色色色色日韩午夜激情 | 777久久精品| 五月婷婷开心亚州在线| 三男玩一女三A片| 久xxxx| 五月婷婷精品无在线| www.黄色片-久久成人国产精品在线播放-999AV| 91婷婷| 日韩黄色AV无码| 九九机热| 九九综合九| 九九人人自拍| 五月天激情AV| 91久久久久久| 天天激情5月天亚洲| 丁香五月天激情免费在线观看AV777| 婷婷99狠狠躁天天久久久九九九| 91天天操天天干天天射| 色狠狠色综合| 色婷婷久久| 婷婷五月天久草在线| 伊人六月无码视频| 中文字幕丰满人妻无码专区| 99操| 婷婷综合色| 丁香五月在线播放| www.婷婷com| 内射丰满人妻| www.色五月| www.爱操com.| 成人在线视频网| 九九久久高清| 五月天婷婷丁香| 色吊丝av中文字幕| 九九热在线视频,| 五月婷婷啪啪| 免费无码毛片一区二区A片| 久久欧洲久久| 婷婷在线视频| 丁香五月第九色| 99爱视频在线观看| 久久永久网址| 亚洲综合激情五月久久| 9热视频在线观看| 丁香婷婷色| 99操久久| www.91九色| 91传媒无码人妻精| 五月天婷婷导航| 97精品欧美91久久久久久久| 欧美日韩中国| 欧美久久婷婷| 婷婷五月丁香六月| 黄色成人AV在线| 丁香婷婷成人网站| 14色综合婷婷| 激情五月婷婷五月| 婷婷丁香91综合| 亚州激情网站无码| 大香蕉av在线| 天天干天天干天天干天天干天天| 五月天婷婷在线视频| 天天射夜夜爽| 国产看真人毛片爱做A片| 综合五月草| 亚洲热热视频| 婷婷五月天激情在线观看| 丁香五月天啪啪| 精品视频99看在线视频| 99亚洲天堂| 五月天激情小说婷婷| 人人摸人人摸| 婷婷色亚洲| 天天干天天爽| 婷婷六月花| 久久涩视频| 天天婷婷色六月| 肏屄色播伊人97婷婷| 五月综合无码| 99热综合| 狠狠操狠狠干综合| 久久久婷丁香五月| 人妻久久久| a在线免费v| 久久人人妻| 热久久国产视频| 色色婷婷丁香五月天| 天天噜| 狠狠综合色网| 超碰97免费在线| xxxx五月| 97操碰在线97| 九热视频| 人妻精品久久久久久久| 国产精品成人AV在线| 狠狠操狠狠操| 色噜噜,噜噜色| 强辱丰满人妻HD中文字幕| 婷婷久久亚洲| 欧美性猛交XXXX乱大交极品| 亚洲、热| 婷婷综合视频| 色五月六月| 婷婷五月天性| 97婷婷丁香五月综合| 99综合网| 五月婷婷少妇之| 丁香花婷婷五月天| 狠狠干天天日| 五月天激情中文字幕| 丝袜激情网| 性爱综合网| 五月丁香狠狠| 激情综合五月| 婷婷欠久少妇| 99热色精品| 婷婷中文在线| 粉嫩AV久久一区二区三区| 香蕉AV777XXX色综合一区| 九九综合久久| 免费看片在线观看| 婷婷五月天少妇| 九九精品热播| 婷婷丁香成人| 激情五月天色播| www.五月天婷婷姐姐| 亚洲AV网站在线观看| 99热超碰在线| 五月婷婷色播| 少妇性按摩无码中文A片| 婷婷五月骚厕所| 天天日日夜夜爽| 五月婷婷丁香日韩在线| www.色五月| 操逼123网| 亚洲精品亚洲人成人网| 岛国资源站| 九九热视频精品| 一级A片天天操夜夜操| 激情综合色婷婷啪啪六月天| 久热无码| 九九色99| 激情小说婷婷| 天天做天天爱天天玩夜夜爽| 五月天丁香啪啪综合| 另类国产欧美视频| 91性高潮久久久久久久久| 色五月天丁香婷婷| 99热这里只有精品23| 欧亚洲在线高清视频| 综合色七七| 亚洲综合另类| 丁香五月性| 综合伊人久久| 亚州操人在线视频| 色情一区二区播放| 天天爽天天日人人爱| 视频1区2区| 国产熟妇的荡欲午夜视频| 97碰超级人人看| 五月婷综合性中心| 色六月天天激情综合网| 97婷婷丁香五月天激情图片| 少妇性按摩无码中文A片| 国产精品成人在线| 丁香六月无码播放| ri电影在线| 五月丁香综合| 五月色丁香| 日本九九网| 欧美性交一区二区三区| www.五月天| AV在线中文| 99re这里只有精品视频了| 亚洲婷婷丁香五月亚洲| 亚洲一级色电影| 丁香五月婷婷天堂大香蕉| 亚洲亚洲人成综合网络| 色婷婷丁香A片区毛片区女人区| 啪啪色区| 五月婷在线观看| 99在热线免费视频| 婷婷五月天黄色小说| 婷婷丁香五月综合网上| 婷婷开心六月| 亚洲五月婷婷在线| 久久九区| 日韩大片艹艹| 色婷婷8| 久久久婷婷| 色色五月婷婷| 99激情视频| 色色色婷婷五月| 综合XX网| 97丁香五月| 婷婷激情社区| 日日操人人操| 欧美啄木乌丝袜人妻系列| 91色情播放| 能直接看的av网站| 天天摸天天透天天舔| 色情免费视频播放| 激情五月六月丁香| 激情文学 综合 九月| 国产午夜精品AV一区二区麻豆| 成人丁香五月天| 一区视频网站| 丁香五月综合婷婷| 久久伊人大香蕉| 婷婷丁香九月| 激情五月婷黄版| 久9久9久9久9久9久9| 99在线精品免费视频| 久久伊人婷婷| 亚洲另类婷婷综合| 色99日韩| 99riAV国产精品视频| 久久亚洲天堂| 日本美女五月天| www.五月婷婷久久.com| AV人人操| 涩涩涩五月天| 色你久久| 色色色综合网| 另类激情综合| 99国产精品久久久久久久久久久| www.婷婷六月天| 欧美成人精品A片免费一区99| 嫩草极品| 亚洲国产精品成人午夜| 狠狠色丁香久久综合婷婷亚洲成人福利| 伊人婷婷99热精品| 欧美日韩成人在线免费| 91a片爽| 激情亚洲婷婷| 亚洲av免费在线| 婷婷六月综合在线| 丁香婷婷婷五月| 色碰碰| 色婷婷久久综合| 色爱五月天| 色情五月婷婷| av婷婷丁香| 色5月婷婷色| 欧美婷婷日本| www.99精品在线| 激情婷婷色小说| 丁香激情综合| 欧美乱码国产一级A片| 色婷婷88| 极品人妻VIDEOSSS人妻| 丁香狠狠操| 热中文字幕| 开心五月激情婷婷| 操骚货在线| www.操.com| 99热自拍| 97人妻碰碰碰碰碰久久久久久| 久久亚洲婷婷| www.99热国产| 五月丁香六月婷婷在线观看| 可以免费观看的av| 婷婷九月丁香| 97日本操| 久久久久久久久久久月丁| 日韩成人AV在线播放| 精品久久久999| 天天干夜夜操A片| xfplayav在线| 夜夜谢天天干| 级情九色| 91狼友视频在线观看| 免费观看2018www黄色操逼网站| 激情网站五月| 婷婷五月婷| 操一区| 97碰碰电影| 黄涩毛片| 97人人干人人操| 亚洲AV成人精品网站在线播放| 中文字幕 码精品视频网站| 激情婷婷丁香色五月| 亚洲精品婷婷| 91成人看片| 狠狠ri| 91在线视频综合| 色八月婷婷| 色五月亚洲| 久久艹 五月天| 97碰在线视频| 色婷婷六月开心中文字| 婷婷五月天美女21p| 综合色播| 色香久久| 成人婷婷色五月天| 久久婷五月综合| 伊人99久久| 日日噜狠狠色综| 久色激情| 殴美97色| 激情综合网络插| 99精品大片| 九九色综合| 欧美激情久| 第四色色六月色综合| 亚洲亚洲永久无码777777| 九色视频91疯狂| 国产,欧美,学生妹,视频| 五月丁香啪啪啪啪| 99性爱精品| www.minyis.com【JT】实力收量可预付QQ2101460746 | 亚洲综合久| 九九视频这里只有精品| 996热| 96丁香六月婷婷蜜桃综合久久| 激情五月天 婷婷| 伊人啪啪网| 五月婷婷深深爱| 亚洲精品大片| 大地9中文在线观看免费高清| 伊人碰碰婷婷| 国产熟女日日骚五月丁香爱| www99热| 色婷婷超碰| 丁香五月六月综合激情| 免费无码毛片一区二区A片| jiujiu热在线视频| 激情综合九月| 日韩黄色影院| 婷婷激情六月综合| 丁香色六月婷婷| 五月激情婷婷四射| a色色片| 欧美黄色韩日网| 99久久天堂婷婷| 五月综合六月婷婷| 五月丁香婷婷啪啪| 97香蕉人人在线观看| 五月天婷婷激情干干| 高清不卡一区| www.99日本| 激情久久丁香| 亚洲成片在线观看| 婷婷激情欧美| 成人国产欧美大片一区| xx综合网| 婷婷五月天色| 九九这里只有精品在线视频| 久久色亭亭五月天| 亚洲六月综合激情久久下卡| 五月天激情综合首页| 亚洲色五月婷婷| 丁香狠狠色婷婷| 99操无码视频观看| 成人综合视频在线| 九九精品视频在线观看| 以及AA大片看看| 六月婷婷久久大全| 99久久99综合| 婷婷久久五月| 人妻中文在线| 久热只有这里有精品| 婷婷久久网| 色婷婷婷综合五月天| 六月综合婷婷开心伊人| 五月丁香琪琪| 9l视频自拍9l九色成人| 色色五月丁香婷婷综合| 婷婷激情六月天视频| 伊人大香蕉毛片| 99在线国| 97夫妻超碰| 99热20| 风流少妇A片一区二区蜜桃| 色欲婷婷夜夜| 色色a| 2025最新亚洲激情在线| 婷婷综合久久| 亚洲小说五月婷婷| 丁香五月天激情综合| 婷婷免费成人视频| 久久色情| 五月婷婷免费视频| 国产成人精品123区免费视频| 玖玖伦理电影| 午夜大香蕉| 99爱在线| 开心五月婷婷伊人| 91热网址| 噜噜噜噜婷婷五月天| 9l视频自拍九色9l视频自拍九色9l社区 | 99色婷婷| WWW.桔色成人.COM入口| 欧美大片| 欧美另类五月激情| 可以观看的AV| 无码AV免费精品一区二区三区 | 激情婷婷黄色五月| 国产精品香蕉| 99热这里有精品首页10| 亚洲综合久| 丁香五月视频在线观看| 久久受www免费人成| 婷婷五月激情的图片| 激情五月天久久丁香| 亚洲乱码日产精品BD| 综合久久99| 丁香六月啪啪| 夜夜爽天天爽| 日日爱678| 五月天婷婷在线视频| 色情五月天A片| 久久月天堂| jiZZdr| 亚洲99在线| 五月婷婷久久久| 天天综合久久| 被男人添B超爽视频| 婷婷色五月天在线观看| 亚洲操精品| 成人无码髙潮喷水A片| 色婷婷激情五月天在线观看| av国产精品偷| 图片区 小说区 区 亚洲五月 | 色婷婷久久| 久久机热这里只有精品| 婷婷激情性爱| 五月丁香婷婷钟和色图| 亚洲五月色| 26uuu偷拍亚洲欧洲综合| 婷婷五月色| 色日本五月天| 久久久大香蕉| 色综合色色| 99久久激情视频| 久久这里只有精品5| 色欲色香,www,com| 亚洲人成色A777777在线观看| 色久九| 激情婷婷丁香| 中文av网站| 丁香五月综合激情久久潮喷| 男人大jjc女人免费视频| 激情五月天在线视频| 丁香五月影视| 开心五月婷婷| 丁香婷婷色六月| WWW丁香五月| 婷婷五月丁香性爱| 99久久综合网| 亚洲乱码在线观看| 99热成人在线观看| 伍月婷丁香婷| 欧洲区自拍| 婷婷九月| 激情五月天社区| 狠狠狠人妻| 五月天激情影院| 久碰久| 国产精自产拍久久久久久蜜 | 91九九九色在| 六月婷婷综合| 欧美Va婷色| 婷婷色五月天第7色| 色婷婷免费观看|