欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

分庫分表避坑指南:從全局ID到分布式事務(wù)的實戰(zhàn)方案

分庫分表避坑指南:從全局ID到分布式事務(wù)的實戰(zhàn)方案 幾年前我接手過一個訂單系統(tǒng)單表數(shù)據(jù)量破了億高峰期一個簡單的 count 查詢就要跑好幾秒慢日志把監(jiān)控面板刷得通紅。那時候擺在團隊面前的方案就是今天要聊的分庫分表。分完之后單表壓力確實下來了但隨之而來的問題也一個接一個冒出來全局ID、跨庫Join、分布式事務(wù)、深分頁還有最頭疼的擴容遷移。這篇文章我會按自己在生產(chǎn)環(huán)境里的踩坑順序把分庫分表后暴露出來的典型問題逐個拆開講清楚底層原因和可行的解決方案。適合正在準備分庫分表的團隊、被分片問題折磨的后端開發(fā)以及想系統(tǒng)理清這套架構(gòu)思路的人。有一些方案屬于行業(yè)通用做法我會額外標注哪些是來自我的實踐經(jīng)驗供你參考。1. 分庫分表前必須想清楚的那筆賬1.1 它到底解決了什么問題先別急著追求“用了分庫分表就高級”。分庫分表本質(zhì)上解決的是三個現(xiàn)實瓶頸。第一是連接數(shù)問題。MySQL 這類數(shù)據(jù)庫的連接是有限資源一個實例的連接數(shù)一旦被占滿新請求只能在連接池里排隊等。很多系統(tǒng)的數(shù)據(jù)量不大但應(yīng)用實例多、連接池配得又大單庫連接數(shù)很容易被打爆。分庫之后連接壓力被分散到多個實例上這個問題會立刻緩解。第二是單表數(shù)據(jù)量膨脹后索引性能下降。這里有個容易誤解的地方B樹索引本身能支撐千萬級數(shù)據(jù)3到4層深度其實還挺能打。但真實生產(chǎn)環(huán)境不是教科書大量歷史數(shù)據(jù)堆積、頁碎片增加、隨機回表變多幾億行的單表會讓很多簡單查詢變得很慢尤其帶 order by、group by 的時候慢查詢幾乎躲不掉。分表把數(shù)據(jù)拆成多份每張物理表的數(shù)據(jù)量降下來索引效率自然恢復(fù)。第三是單庫的寫入吞吐天花板。一個主庫的磁盤IO、binlog寫入、刷盤能力都有上限。日增百萬行以上的業(yè)務(wù)單庫寫入很容易成為瓶頸。分庫分表后寫入被分散到多個節(jié)點這個天花板就被抬高了。我經(jīng)手的那個訂單系統(tǒng)就是這樣單表日均新增幾十萬行大促期間一個簡單寫操作排隊幾百毫秒庫的連接數(shù)和CPU都頂不住。分完立刻立竿見影但也只是“開始”。1.2 分完之后你失去了什么可以這么理解分庫分表前你的數(shù)據(jù)庫是一個大倉庫你想怎么盤點都行分完之后倉庫被切成幾十個小隔間找特定商品很快但跨隔間盤點就得挨個進去數(shù)再在外面匯總。這是分庫分表最核心的代價用犧牲“全局視圖”換“伸縮能力”。具體來說你至少會失去以下東西跨庫 Join 能力原本一條 SQL 關(guān)聯(lián)三張表分庫后如果數(shù)據(jù)不在同一個庫這條 SQL 基本廢了。本地事務(wù)邊界原本一個事務(wù)里同時更新訂單、庫存、余額分庫后它們可能在不同庫ACID 不再由單庫保證。唯一索引約束user_name 這類全局唯一字段在分片后的數(shù)據(jù)庫里無法靠單表唯一索引兜底。全局排序、分頁、聚合count、sum、avg 這些操作都要先分散查詢再歸并深分頁更是災(zāi)難。DDL 與索引管理原來對一張表加個索引現(xiàn)在要對幾十張表操作窗口期成倍拉長。所以分庫分表是一個“確定性有損方案”。它不是優(yōu)化技巧是為了可用性和容量做出的取舍。動手之前最該做的事情就是把現(xiàn)有 SQL 全部梳理一遍按“能帶路由鍵的查詢”“不帶路由鍵的查詢”“跨分片查詢”分類。很多團隊跳過這一步拆分之后才發(fā)現(xiàn)核心列表頁全是跨分片查詢等于把單表的慢查詢換成了更復(fù)雜的跨分片慢查詢。1.3 分庫還是分表垂直還是水平不少人把“分庫分表”當(dāng)成一個詞其實它們是不同的手段解決的問題也不一樣。分庫是把不同業(yè)務(wù)域的數(shù)據(jù)放到不同數(shù)據(jù)庫實例比如把訂單庫、用戶庫、支付庫拆開。它主要解決單庫連接、IO、CPU 瓶頸。很多時候一個實例扛不住只是因為所有業(yè)務(wù)擠在一起垂直分庫就夠了根本不用水平分表。分表是把一張大表按行拆成多張結(jié)構(gòu)相同的物理表。它主要解決單表數(shù)據(jù)量過大、索引效率下降的問題。比如訂單表按 user_id 哈希拆成 64 張每張表只存原來的 1/64 數(shù)據(jù)。垂直拆分是按列拆把熱點字段和冷字段分開減少單行數(shù)據(jù)體積提高緩存命中率。水平拆分才是通常說的“分表”也是這里要討論的重點。判斷標準我一般這樣簡化單庫連接或 CPU 扛不住優(yōu)先分庫單表數(shù)據(jù)量過大、索引性能明顯退化優(yōu)先分表一張表字段特別多且冷熱訪問差異極大考慮垂直拆分。拆鍵的選擇則是最關(guān)鍵的決定。理想路由鍵要覆蓋 80% 以上的查詢。比如訂單高頻查詢是“查某個用戶的訂單列表”那就按 user_id 拆如果是“按訂單號查訂單詳情”那就按 order_id 拆。注意這兩個鍵往往只能二選一選了 user_id所有按 order_id 的查詢就會退化成全分片掃描。如果你兩種查詢都很高頻就得考慮冗余表或者異構(gòu)存儲來兜住另一種查詢方式。2. 分布式主鍵、跨庫Join與唯一約束第一個痛感來源2.1 全局唯一ID自增主鍵的替代方案分庫分表后單表自增主鍵立刻失效。原因很簡單兩個分片各自從 1 開始自增會出現(xiàn)重復(fù) ID。你說我可以設(shè)置不同的初始值和步長比如庫1生成 1,3,5庫2生成 2,4,6這確實能撐一陣子但后期擴容要重新調(diào)整步長歷史數(shù)據(jù)還得重新計算維護成本很高不推薦。實際生產(chǎn)里常用的方案有三類我做過對比方案特點適用場景業(yè)務(wù)規(guī)則ID用日期用戶ID序列拼出訂單號天然唯一且可讀訂單號、流水號等業(yè)務(wù)強相關(guān)場景號段模式集中發(fā)號服務(wù)每次取一批號本地內(nèi)存分配需要高性能、實現(xiàn)簡單的場景雪花算法時間戳機器標識序列號趨勢遞增分布式節(jié)點多、需要本地生成ID的場景UUID全局唯一但隨機無序不適合做數(shù)據(jù)庫主鍵只適合做鏈路追蹤等UUID 不建議當(dāng)主鍵這是我在實際中踩過的坑。UUID 沒有順序性作為聚簇索引主鍵時新數(shù)據(jù)會隨機插入索引頁導(dǎo)致頁分裂頻繁寫入性能和磁盤碎片都很難看。雪花算法是當(dāng)前最主流的方案核心結(jié)構(gòu)是 1 位符號位 41 位毫秒時間戳 10 位機器標識 12 位序列號。它能保證全局唯一并且趨勢遞增對索引比較友好。但有一個經(jīng)典問題時鐘回撥。如果機器 NTP 校時后時間往回跳就可能生成重復(fù) ID。我實踐中的做法是記錄上一次生成 ID 的時間戳如果當(dāng)前時間小于等于上次時間就拒絕生成或者阻塞等待時鐘恢復(fù)同時配合機器標識位做兜底。號段模式也很值得提一下它的思路是集中發(fā)號服務(wù)在數(shù)據(jù)庫里維護一個“當(dāng)前最大號段”每次申請取一批號比如一次取 1000 個應(yīng)用本地分配。這樣發(fā)號服務(wù)壓力小性能高實現(xiàn)也簡單。缺點是發(fā)號服務(wù)仍然是個單點需要做好高可用取號窗口也不能太小否則會造成頻繁訪問發(fā)號庫。我自己在中等規(guī)模系統(tǒng)里很喜歡用號段模式因為維護成本遠低于雪花算法。2.2 跨庫Join習(xí)慣了SQL的人最先懵掉的地方分庫之后一條 SQL 關(guān)聯(lián)多張表還能不能跑取決于你的拆鍵設(shè)計。最理想的情況是經(jīng)常一起 Join 的父子表使用同一個路由鍵。比如訂單表和訂單明細表都按 order_id 分片那么同一筆訂單的數(shù)據(jù)天然落在同一個分片單庫 Join 依然可用。這一點應(yīng)該在設(shè)計拆鍵時優(yōu)先考慮能幫你省掉大量后續(xù)麻煩。但現(xiàn)實往往是用戶表和訂單表沒法用同一個鍵拆。訂單按 user_id 分片用戶表又按 user_id 分片這其實還能對得上。就怕訂單按 order_id、用戶按 user_id兩套路由體系那么“查詢訂單并顯示買家昵稱”就必然跨分片??绶制?Join 的常規(guī)解法有四種冗余字段。把查詢列表需要的買家昵稱、商品標題等字段直接冗余到訂單表寫入時多寫一份查詢時無需關(guān)聯(lián)。這是最簡單也最有效的方案絕大多數(shù)訂單列表展示場景都夠用。應(yīng)用層組裝。先在分片里查出訂單數(shù)據(jù)再根據(jù) user_id 集合批量調(diào)用用戶服務(wù)查詢昵稱最后在服務(wù)內(nèi)存里拼裝。要注意控制批量查詢的 IN 條件長度分片查詢也盡量并發(fā)。寬表/匯總表。把高頻查詢需要的維度都同步到一張寬表里這張表可以單獨存儲查詢走它。本質(zhì)上是建立一個面向查詢的模型。異構(gòu)存儲。復(fù)雜關(guān)聯(lián)和檢索直接交給搜索引擎或者分析型存儲業(yè)務(wù)庫只承擔(dān)在線交易寫入。我的建議是優(yōu)先冗余字段其次應(yīng)用層組裝別在業(yè)務(wù)代碼里硬撐復(fù)雜 Join。分庫分表之后SQL 不再是萬能膠水這條認知越早建立越好。2.3 唯一約束失效唯一索引在分片下不靈了分庫分表后一個容易被忽略的問題是唯一約束失效。比如用戶表的用戶名需要全局唯一但表按 user_id 分片之后每個分片只能檢查自己分片內(nèi)有沒有重名無法判斷其他分片的同名情況。數(shù)據(jù)庫層的唯一索引在這里形同虛設(shè)。解決思路有三條。第一條讓業(yè)務(wù)規(guī)則保證唯一。比如訂單號本身由全局發(fā)號器生成規(guī)則上就不會重復(fù)這時數(shù)據(jù)庫層不需要唯一索引兜底。適合有明確業(yè)務(wù)編號的場景。第二條建立“唯一鍵 → 路由鍵”的映射表。以用戶名注冊為例先在一張獨立的全局映射表里插入用戶名和 user_id 的對應(yīng)關(guān)系映射表本身可以做唯一索引插入成功后再把用戶數(shù)據(jù)寫入 user_id 對應(yīng)的分片。并發(fā)重復(fù)注冊時映射表的唯一索引會把沖突擋在外面。代價是多一次查詢和一次額外寫入。第三條路由鍵本身如果是唯一字段比如 user_id 本身全局唯一那就不存在額外約束問題直接用路由鍵作為唯一條件即可。這套機制需要額外引入一張映射表增加一次網(wǎng)絡(luò)交互很多人會覺得麻煩。但這是分庫分表的固有復(fù)雜度躲是躲不掉的。不做映射表的話就得自己做分布式鎖而且要處理鎖粒度、鎖超時、鎖釋放復(fù)雜度只會更高。3. 跨庫分頁、排序與聚合業(yè)務(wù)代碼里最隱蔽的坑3.1 深分頁為什么是災(zāi)難分頁這個功能看起來人畜無害但分庫分表之后它是隱藏極深的性能殺手。先看單庫分頁select * from order where user_id 100 order by create_time desc limit 100000, 20。MySQL 會掃描前 100020 行丟棄前 100000 行再返回 20 行。單庫這個操作已經(jīng)很重了但還能咬牙撐住。分庫之后就完全不同了。假設(shè)拆了 16 個分片你要取全局第 100000 到 100020 條不能只查詢每個分片的后 20 條因為全局排完序之后第 100000 條可能分布在任何分片里。正確做法是每個分片各取前 100020 條然后合并排序再截取第 100001 到 100020 條。每個分片都得傳輸十萬級數(shù)據(jù)到聚合層內(nèi)存和 CPU 開銷呈線性放大offset 越大代價越高。這還不算最慘的。如果分頁查詢沒帶路由鍵比如管理員后臺按狀態(tài)查訂單所有分片都得參與那就是 16 倍的掃描量。解決方案我實踐下來最有效的是這三種禁止深分頁。前端頁碼限制到 100 頁以內(nèi)超出就提示用戶縮小查詢范圍。很多業(yè)務(wù)場景其實根本不需要翻到很深。鍵集分頁也叫 keyset pagination / 游標分頁。不依賴 offset而是記住上一頁最后一條數(shù)據(jù)的排序字段值。例如 order by create_time desc, id desc下一頁就查詢 where create_time ? or (create_time ? and id ?) order by create_time desc, id desc limit 20。這樣每頁查詢都能利用索引數(shù)據(jù)量再大也能保持穩(wěn)定的查詢耗時??绶制判蚍猪摻唤o搜索引擎。業(yè)務(wù)庫只負責(zé)寫入搜索引擎負責(zé)維護倒排索引列表頁和后臺查詢?nèi)孔咚阉鞣?wù)。這是大型系統(tǒng)里最穩(wěn)妥的路線。方案優(yōu)點缺點傳統(tǒng) offset 分頁實現(xiàn)簡單前端友好深分頁性能災(zāi)難跨分片必放大游標/鍵集分頁性能穩(wěn)定適合列表不能跳頁需要知道上一頁錨點搜索引擎分頁支持復(fù)雜條件排序引入額外組件有數(shù)據(jù)同步延遲3.2 全局排序、count與avg的歸并陷阱排序和分頁是連在一起的??绶制判虻幕舅悸肥敲總€分片先按排序字段排序取出前 N 條聚合層做歸并排序再取出最終結(jié)果。但如果排序字段不是路由鍵這個“每個分片取前 N 條”并不等于全局前 N 條需要每個分片取的量足夠大最后結(jié)果才準確。所以跨分片排序的復(fù)雜度不僅來自排序本身還來自“取多少才夠”的不確定性。生產(chǎn)上最簡單的做法就是限制查詢范圍或者直接把排序場景遷移到搜索引擎。再說 count 和 avg這兩個函數(shù)都有考核點。count(*) 在單庫是一條索引掃描分庫后就必須“各分片 count 再累加”。如果業(yè)務(wù)量每小時都要做一次精確全量計數(shù)對分片的壓力很大。更合理的做法是維護一張匯總表或者直接由分析引擎提供計數(shù)能力。avg 有一個非常經(jīng)典的坑不能直接把各分片的 avg 加起來再求平均。正確的計算方式是 avg sum(所有分片的總和) / count(所有分片的總數(shù))。因為各分片的數(shù)據(jù)量可能不均勻簡單平均結(jié)果會偏。這個我在代碼評審里見過不止一次看起來是小問題一旦數(shù)據(jù)分布傾斜報表數(shù)據(jù)直接失真。sum 也一樣需要先各分片 sum再匯總。min、max 反而簡單各分片取自身最大最小再取極端值即可。3.3 分組統(tǒng)計在分片下的正確姿勢group by 的問題比單值聚合更隱蔽。比如要統(tǒng)計“每個城市的訂單量”但訂單表是按 user_id 分片的同一個城市的用戶分散在各個分片每個分片只能算出自己的城市分組要得到全局分組必須把所有分片的小組結(jié)果合并然后按城市維度重新聚合。如果數(shù)據(jù)量不大這種歸并還能接受。但一旦分片多、基數(shù)大應(yīng)用層需要做一次完整的 MapReduce非常難受。在線上交易庫里做分組統(tǒng)計我強烈建議三條路只允許按路由鍵分組。例如按 user_id 分片就只做 user 維度的分組這樣每個分片獨立算結(jié)果直接匯總即可。把分組鍵作為二級分片鍵建設(shè)維度表或匯總表。異步預(yù)聚合。寫入時同步到分析型數(shù)據(jù)庫或搜索引擎報表和統(tǒng)計全部從這邊出。這是大型系統(tǒng)的通行做法也是我實際最喜歡的方案。分庫分表永遠是為在線事務(wù)服務(wù)的不是為了數(shù)據(jù)分析更好。分析類的復(fù)雜聚合應(yīng)該盡早導(dǎo)出到專用引擎而不是在業(yè)務(wù)庫上硬扛。4. 分布式事務(wù)從本地ACID到最終一致性的思維切換4.1 單庫事務(wù)為什么不能直接搬到分庫分庫之前一個下單操作通常是這樣開啟事務(wù)插入訂單表扣減庫存表更新賬戶余額然后提交。如果中間任何一步失敗本地事務(wù)回滾數(shù)據(jù)保持一致。分庫分表之后訂單、庫存、余額很可能在不同的庫甚至不同的物理機。你無法再用一個數(shù)據(jù)庫事務(wù)把它們包起來——每個庫的事務(wù)是獨立的Commit 的時候可能訂單庫提交成功、庫存庫提交失敗系統(tǒng)立即處于不一致狀態(tài)。這就是分布式事務(wù)要解決的問題。很多人一開始試圖找一種“像本地事務(wù)一樣”的分布式事務(wù)框架但分布式環(huán)境下沒有免費的午餐你必須接受一個事實跨庫操作的原子性要么依賴協(xié)調(diào)協(xié)議要么靠最終一致性補償。一個非常實用的建議在拆鍵設(shè)計階段盡量把強一致相關(guān)的數(shù)據(jù)放到同一個分片。比如“訂單和訂單明細”本來就在同一個庫里關(guān)聯(lián)那就保持同一路由鍵“用戶余額變動”和“訂單創(chuàng)建”如果無法避免跨分片則需要認真評估業(yè)務(wù)上是否真的需要強一致。4.2 幾種主流的分布式事務(wù)方案怎么選我把實際工程里見得最多的方案拉個表給你參考方案一致性強度開發(fā)成本適用場景XA 兩階段提交強一致低一致性要求極高、并發(fā)量不大TCC 補償最終一致高跨服務(wù)資金操作需自定義補償本地消息表/事務(wù)消息最終一致中訂單、異步通知最通用SAGA 長事務(wù)最終一致中高流程長、有明確正向/補償步驟XA 是數(shù)據(jù)庫原生支持的強一致方案邏輯簡單但兩階段提交的鎖持有時間長并發(fā)能力差在高頻寫入場景下基本扛不住。用在低并發(fā)、強一致的管理類操作還可以。TCC 需要業(yè)務(wù)方自己實現(xiàn) Try、Confirm、Cancel 三個動作。Try 階段預(yù)留資源Confirm 提交Cancel 回滾。這套方案靈活、性能比 XA 好但代碼量很大還要處理協(xié)調(diào)者的狀態(tài)和超時。我見過不少團隊用 TCC 處理支付扣款最后維護補償邏輯的成本非常高。本地消息表和事務(wù)消息是最終一致方案里性價比最高的。核心思路是在業(yè)務(wù)本地事務(wù)里同時寫入業(yè)務(wù)數(shù)據(jù)和一條待發(fā)送消息事務(wù)提交后再把消息發(fā)出去消費者異步處理后續(xù)步驟。由于業(yè)務(wù)數(shù)據(jù)和消息同庫提交不會出現(xiàn)“業(yè)務(wù)做了但消息沒發(fā)”的問題。很多消息中間件的事務(wù)消息做得更徹底把本地表都省了原理是一樣的。SAGA 把長事務(wù)拆成多個本地事務(wù)每一步有正向操作和補償操作。和 TCC 的區(qū)別是SAGA 沒有預(yù)留資源這一說直接執(zhí)行失敗時逆序補償。適合訂單流程長、步驟邊界清晰的場景。我的個人傾向是能用單庫事務(wù)解決就不做分布式事務(wù)必須跨庫時優(yōu)先事務(wù)消息和最終一致不要一上來就上 TCC 或 XA。真正的高并發(fā)系統(tǒng)核心訴求是“最終把事辦成且不重復(fù)”而不是“每一步都強一致”。4.3 兜底補償與對賬生產(chǎn)環(huán)境真正的保命手段再好的分布式事務(wù)方案在真實網(wǎng)絡(luò)環(huán)境下也會出現(xiàn)消息丟失、重復(fù)消費、超時無響應(yīng)。所以生產(chǎn)環(huán)境里真正靠得住的是兜底機制。第一是對賬。定期掃描所有跨庫業(yè)務(wù)的狀態(tài)數(shù)據(jù)找出不一致的記錄并觸發(fā)補償。比如訂單表和支付流水表對不上對賬任務(wù)自動補單或者告警人工介入。這是最終一致性的守護神比任何事務(wù)框架都重要。第二是冪等。下游消費方必須能冪等處理否則一條消息重復(fù)投遞就會造成重復(fù)扣款、重復(fù)發(fā)貨。冪等鍵一般用業(yè)務(wù)主鍵加事件類型處理前先查詢是否已處理。我分享一個真實教訓(xùn)有段時間我們上線了本地消息表機制以為萬事大吉結(jié)果忘了給消息表配置定期清理任務(wù)消息表膨脹到幾千萬行查詢越來越慢消費端延遲飆升。后來加上“消息表狀態(tài)掃描 定時補償”才穩(wěn)定下來。分布式事務(wù)只能降低不一致概率不能消滅不一致運維側(cè)的兜底永遠不能省。5. 擴容與數(shù)據(jù)遷移分庫分表真正的第二次考驗5.1 取模擴容的代價與一致性哈希很多人以為分庫分表是一勞永逸等容量不夠了才發(fā)現(xiàn)擴容才是最難的一步。最早期的方法是按 user_id % 16 取模拆成 16 個分片。這種方案在數(shù)據(jù)量增長到臨界點后想擴到 32 個分片問題就來了因為取模的模數(shù)變了原來大部分數(shù)據(jù)的路由結(jié)果都會變幾乎所有的數(shù)據(jù)都得重新搬遷。擴容不再是“加幾臺機器”的事而是一次接近全量遷移的大工程。一致性哈希是這里面的經(jīng)典解法。把哈希值空間組織成環(huán)機器落在環(huán)上數(shù)據(jù)按順時針歸屬到最近的節(jié)點。擴容時只需要把一部分數(shù)據(jù)從相鄰節(jié)點遷移到新節(jié)點遷移量比取模小得多。但一致性哈希也有自己的問題節(jié)點分布不均會導(dǎo)致數(shù)據(jù)傾斜需要引入虛擬節(jié)點來緩解同時遷移期間新舊映射要保證一致性否則會出現(xiàn)讀寫走不同節(jié)點的情況。另外按范圍分片比如按時間范圍、按ID區(qū)間在擴容時更靈活只需要切分某個區(qū)間的數(shù)據(jù)但缺點也很明顯最新數(shù)據(jù)往往集中在某個區(qū)段容易形成熱點。如果業(yè)務(wù)本來就是冷熱交替比如訂單按月份歸檔范圍分片反而很合適。所以沒有哪種分片算法是完美的只有適不適合當(dāng)前業(yè)務(wù)。5.2 邏輯分片與預(yù)分片平滑擴容的工程化思路這里介紹一個我在實踐中認為最值得推廣的方案邏輯分片與預(yù)分片。核心思想是把“分片編號”和“物理存儲位置”解耦。預(yù)先定義一批固定數(shù)量的邏輯分片比如 1024 個槽位每個槽位是一個邏輯概念它當(dāng)前映射到哪張物理表、哪個物理庫由一個路由表維護。寫入數(shù)據(jù)時先用路由鍵算出槽位編號再查路由表找到實際物理存儲位置。擴容時不需要改變槽位數(shù)量和路由算法只需要把一部分槽位從舊節(jié)點遷移到新節(jié)點并更新路由表即可。遷移粒度從“全量數(shù)據(jù)”變成“局部槽位”范圍可控影響面小。預(yù)分片的槽位數(shù)在設(shè)計時就要預(yù)留未來好幾年的增長空間比如先定 1024 個槽位映射到 16 個物理庫每庫 64 個槽位。將來擴到 32 個庫每庫分到的槽位變成 32 個數(shù)據(jù)只搬移那些槽位對應(yīng)的數(shù)據(jù)其他槽位紋絲不動。工程實現(xiàn)上路由表可以放到配置中心或本地進程緩存。這里有個小細節(jié)路由表變更期間要保證一致性最好引入版本號所有請求在同一個版本下解析路由等遷移完成再切換版本。否則遷移中途出現(xiàn)路由不一致數(shù)據(jù)就會讀到一半新一半舊的。預(yù)分片的實現(xiàn)比直接取模多一層映射初期確實有點多余但它是長期最省心的方案。如果團隊有中長期擴容預(yù)期建議一步到位。5.3 數(shù)據(jù)遷移的完整節(jié)奏從雙寫到灰度切換不管用哪種方案數(shù)據(jù)遷移都不是“停服拷貝”而是線上平滑切換。我自己跑過多次遷移基本固定成下面五步節(jié)奏。第一步建表與雙寫。在目標庫建好新表結(jié)構(gòu)業(yè)務(wù)寫入時同時寫舊表和按新規(guī)則映射的新表雙寫邏輯要能容忍重復(fù)數(shù)據(jù)最好以冪等寫入方式保證兩側(cè)一致。第二步全量遷移。用一致性快照或者離線任務(wù)把存量數(shù)據(jù)導(dǎo)入目標庫。如果數(shù)據(jù)量很大按槽位或按ID區(qū)間分批處理。第三步增量追平。通過數(shù)據(jù)庫的變更日志訂閱或者消息回放把雙寫期間產(chǎn)生的增量數(shù)據(jù)持續(xù)同步到目標庫直到目標庫和舊庫的數(shù)據(jù)延遲降到秒級以內(nèi)。第四步數(shù)據(jù)校驗。抽樣或者全量對比主鍵、版本號、排序字段。不一致的記錄要重新回放。這一步不要省我見過直接跳過校驗上線結(jié)果漏了部分分片的數(shù)據(jù)用戶反饋問題層出不窮。第五步灰度切換。先把少量讀寫流量切到新路由觀察指標逐步放大比例1% → 10% → 50% → 100%。每次放大后至少觀察一個業(yè)務(wù)周期確認無異常再繼續(xù)。窗口選擇低峰期出錯時還能快速回切。雙寫與增量同步期間還有一個常見坑新舊路由并存會導(dǎo)致部分數(shù)據(jù)重復(fù)。這個只能靠全鏈路冪等去兜比如每次寫入帶業(yè)務(wù)主鍵目標庫按主鍵去重??傊w移本身不可怕可怕的是遷移方案里沒有回退預(yù)案和校驗機制。6. 反向經(jīng)驗有些表根本不該分庫分表6.1 什么情況下分庫分表是負優(yōu)化聊了這么多問題與解法我得潑一盆冷水很大一部分系統(tǒng)其實根本不需要分庫分表。一個典型場景是單表只有幾百萬行數(shù)據(jù)查詢幾十毫秒僅僅因為聽說“大廠都這么干”或者為了面試好聊就引入了分庫分表。結(jié)果每個查詢都要帶路由鍵不帶就全分片掃描跨分片查詢還引入額外的組裝邏輯性能比單庫更差。這種屬于典型的負優(yōu)化。另一個反例是業(yè)務(wù) SQL 本身特別復(fù)雜、關(guān)聯(lián)五六個表、查詢維度又多又雜的表。這種表一旦水平拆分幾乎所有查詢都會退化成跨分片掃描加上 MapReduce 式的歸并復(fù)雜度直接爆炸。對于這種表分庫分表只會讓系統(tǒng)更慢、更不穩(wěn)定。一個簡單判斷是如果分庫分表之后你的核心查詢依然需要頻繁跨分片且跨分片率超過 30%那大概率是拆錯了。正確做法是在拆分前就把查詢模式摸清而不是拆完再補。6.2 更輕的替代方案緩存、冷熱分離與異構(gòu)存儲很多以為需要分庫分表的問題其實用更輕的方案就能解決。讀多寫少、查詢熱點集中優(yōu)先上緩存。把高頻查詢結(jié)果緩存起來數(shù)據(jù)庫壓力立刻降下來。緩存都搞不定的高頻復(fù)雜查詢再考慮別的。歷史數(shù)據(jù)不參與在線查詢做冷熱分離或歸檔。以訂單系統(tǒng)為例三個月前的訂單查詢頻率驟降可以直接遷移到歸檔庫或大數(shù)據(jù)存儲在線庫只保留熱數(shù)據(jù)。這種方案比無腦水平分表更簡單效果也更直接。單庫連接和IO扛不住優(yōu)先垂直分庫。把用戶、訂單、商品放到不同實例互不影響。很多時候沒有水平拆分的必要只是多個業(yè)務(wù)域擠在一起了。復(fù)雜檢索、報表聚合這類需求最好直接交給搜索引擎或者分析型數(shù)據(jù)庫。讓在線事務(wù)庫承擔(dān)極少的高權(quán)重查詢其他分析類需求全部導(dǎo)出到專用引擎。這套組合拳下來真正需要水平分表的場景會少很多。6.3 我的選型判斷標準最后分享一套我自己的選型判斷框架純經(jīng)驗之談不一定絕對但值得參考單表數(shù)據(jù)量是否接近 5000 萬行以上并且持續(xù)增長單庫寫入 QPS 是否持續(xù)打到上千甚至更高連接數(shù)和 CPU 是否長期高水位核心業(yè)務(wù)是否已經(jīng)無法靠索引優(yōu)化、緩存、歸檔、讀寫分離來緩解最頻繁的查詢是否能以某一個固定鍵作為路由鍵收斂跨分片查詢比例是否足夠低團隊是否有人能長期維護路由、雙寫、對賬、遷移這套體系如果這五條里有兩條以上不滿足我都建議先不要分。因為分庫分表是用復(fù)雜度換容量收益必須明顯大于復(fù)雜度才有意義。我以前接手過一個“號稱已分庫分表”的老系統(tǒng)不少表才幾百萬行卻因為路由鍵設(shè)計不合理每個查詢都在全分片掃描比單庫還慢最后又把那些表合并回去了。這個內(nèi)容后續(xù)還可以這樣擴展把路由表、雙寫同步、對賬任務(wù)做成可觀測的治理平臺或者進一步思考冷熱混合存儲讓分片策略隨著數(shù)據(jù)生命周期動態(tài)調(diào)整。不過這些都是后話了先把上面這些問題想清楚分庫分表這條路才算真的走穩(wěn)了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
婷婷的色色五月天| 很很干在线视频| 丁香五月久久| 夜夜撸天天操| 婷婷五月丁香五月天| 久久影视婷婷五月| 99热亚洲精品| 这里只有精彩视频| 色五月xxx| 婷婷性爱综合| 狠狠五月天| 狠狠干无码| 久久婷婷网| 色婷婷丁香AV综合| 亚洲V国产V欧美V久久久久久| 狠狠色噜噜色狠狠狠综合久久成人波 | 玖玖婷婷五月| 99热在线精品观看| 五月婷婷在线短视频| 中文字幕乱码亚洲精品一区| 91丨九色丨熟女高潮| 丁香五月婷婷乱| 激情综合网婷婷久久| 4438亚洲欧美| 婷婷激情五月综合| 综合网色| 玖玖婷婷五月天| 久青草大香蕉| 色区久久| 爆乳熟妇一区二区三区爆乳| 日日夜夜爽| 色婷婷五月六月丁香综合视频| 久久婷婷大香蕉| 色婷婷中文在线| 丁香五月天激情综合网| 色综合久久88色综合天天人守婷| 五月丁香怕怕综合| 欧美噜噜免费观看| 色五月婷婷中文字幕在线观看| 色呦精品| 色婷婷性爱网| 婷五月天影院| 久久艹 五月天| 激情五月综合婷婷| 久热免费| 激情丁香五月天| 婷婷色五月开心五月| av国产精品| 色婷婷视频在线| 99久久久国产大片区| 在线观看免费狠狠色丁香香综合| 任你日热视频| 色播婷婷大香蕉| 免费成人中文字幕| 婷婷天天日婷婷| 成人色站,在线视频,看片-SS1AV| 亚洲 精品 综合 精品| 99riAv1国产在线观看| 人妻AV在线| 婷婷久久欧美| 99九九热视频免费| 五月丁香激情综合六月涩涩爱| 天啪天啪天啪天啪| 色综合天堂| 午夜丁香六月婷| 五月丁香综合网| 91妻人人爽人人看片| 91打屁股免费看| 最近免费中文字幕大全高清大全1| 久久99热这里只有精品| 三男玩一女三A片| 女人高潮内射99精品| 狠狠狠狠狠狠| 黄色毛片精品| 女性自慰系列第五页| www久久五月com| 五月激情五月丁香| WWW丁香五月| 99ri视频| 九九九午夜影院成人| 天天噪夜夜爽| 五月天com| 殴美日韩成人| 五月天色色网站| 大香蕉在线观看9| 操B无码视频国语| 第六色在线| 九九这里只有精品在线视频| 欧美综合在线五月天色婷婷| 荷兰av一级| 色婷婷www| 久久激情视频| 99热亚洲| 99热无码| 成人亚洲精品久久久久| 日本啪啪天堂| 被男人添B超爽视频| Www.久久| 欧美99热| 五月天开心色情网| 久久久五月天婷婷成人网| 九九大香视频| 婷婷五月天成人综合网| 开心激情五月天网| 婷婷久久影院| 99精品7| 能看的av| 久久久全国免费视频| 五月丁香色综合| 视频免费精品免费精品免费精品免费精品免费精品免费精品免费99 | 天天干天天干天天干| 大香蕉色婷婷伊人在线| 九九视频免费| 亚洲AV人人操| 变天就操逼婷婷五月| 色色色色欧洲| 国产精品美女| 禁片二区| 婷婷五月天首页| 黄色一级影片| 亚洲美女高潮久久久久久69| 五月丁香六月激情| 这里只有精品在线播放| 久久女婷| 亚洲精品乱码久久久久99| 激情六月天| 婷婷色情 | 九九99免费视频| 日日日日操| 99亚洲精品| 超碰免费人妻| 99热在这里只有精品| 人妻久久久久久| 色色999三级片| 亚洲精品色色| 色婷婷五月在线| 国产AV网页| 热这里| 91欧美| 任你搞在线观看视频| 五月天婷婷丁香花| 无码AV免费精品一区二区三区| 亚洲综合婷婷五月| 婷婷射丁香| 爆乳熟女-区二区三区| 99'无码| 一级黄色影片| 丁香五月天无码AV| 久热这里只有精品6| 任你爽精品免费视频6| 婷婷六月花| 国产XXXX搡XXXXX搡麻豆| 亚洲婷婷91丁香| 婷婷色五月天在线观看| 9视频1在线| 99热99这里只有精品| 99婷婷| 91蜜桃婷婷狠狠久久综合9色| 丁香六月激情综合| 久操福利| 久久怕怕视频| 草美女在线观看视频在线播放| 99热精品在线播放| 激情精品久久| 91se精品国产| 婷婷天天色| 丁香五月 性爱| 久久视频这里99| 久久丁香综合香蕉| 亚洲欧洲中文日韩久久AV乱码| 91综合视频丁香| 日韩欧美骚货| 人妻激情视频| www.操.com| 操91| 日本熟妇乱妇熟色A片蜜桃| 婷婷九月激情| 色操综合| AV操逼网| 婷婷在线五月天观看| 国产成人精品123区免费视频| 色婷婷视频| 人妻丰满精品一区二区A片| 精品人妻伦| 五月丁香亭亭| 天天狠狠干| 操操熟女| 99热精品中文字幕| 开心五月婷婷在线| 一起草无码| 久久9精品| 五月丁香久久精品在线观看 | Caop在线| 99热这里只有精| 欧美日本综合网| 午夜天堂一区人妻| 中文AV网| 五月天婷婷六月激情网| 免费在线观看av网站| 日本色狠狠| 小骚穴电影| 人人干人人看| 天天视频亚洲| Av大香蕉| 久久综合9| 久热69| 激情av| 大香蕉久操| 26uuu91| 热996精品在线观看| 99国产精品久久久久久久久久久 | 婷婷色五月大香蕉在线| 91操熟女| 99视频只有这里精品| 激情av在线| 饮料下药迷倒漂亮女同事强干| 日日夜夜噜噜爽爽| 玖玖婷婷五月天| 男男野外做爰全过程69| 超碰99久久| 亚洲激情免费久久| 色婷婷a| 欧美婷婷| 色噜噜狠狠色综无码久久合欧美| 婷婷五月天亚洲激情戏精品| 变态另类9| 国产偷人爽久久久久久老妇APP| 色导航色婷婷五月天在线观看| 久9热在线视频| 国产真实乱了老女人视频| 五月婷婷成人| 九九热这里只有精品9| 久久hd| 可以看的av| 狠狠干婷婷| 欧洲婷婷五月天| 婷婷伊人视婷婷婷| 日日噜噜夜夜狠狠久久丁香五月| 丁香五月手机在线| 九九性爱网| 开心五激情网| 99热在线爱| 人人干人人操外国| 色欲AVV| 夜夜骑夜夜撸| 亚洲六月婷婷| 天天爽天天爽| 夜夜干天天干| 久久五月激情| Jh7Uf088VHafNm| 中文字幕婷婷| 日本久久视频| 激情久久 婷婷| 五月丁香六月激情| 国产,欧美,学生妹,视频| 操操天堂| 97影院一级片| 99啪啪网| 丁香五婷婷| 在线观看视频1区| 99在线播放视频| 五月丁香啪啪综合| 久久思思精品| 五月丁香婷爱在线| 五月婷婷九| 热99视频精品| 99热99热在线观看| 综合99在线| 中文字幕婷婷| 五月丁香六月婷| 伊人婷婷五月天av| 丁香密臀AV激情网| 久久久婷丁香五月天激情综合| 日本色啪| 婷婷六久久| 少妇水多A片太爽了| 亚洲另类电影| 免费看欧美成人A片无码| 欧美色五月| 色在线99| 超碰AV在线| 九色91国产| 亚洲成人超碰| 色五月婷婷av| 五月丁香在线观看| 婷婷五月天影院| 狠狠色成人影片| 丁香五月大香蕉| 激情五月天综合网| 久久网婷婷| 91精品久久久久久久| 久久人妻久久久久| 久久爱婷婷| 成人AV在线电影| 国产露脸150部国语对白| 婷婷字幕在线| 九九热这里只有精品5| 99在线看片| 亚洲综合99| 丁香六月啪啪| 欧美性爱日韩性爱| 思思久久思思| 色婷五月| 91色噜噜狠狠狠狠色综合| 六月婷婷之青青草| 六月丁香婷婷综合狠狠爱夜夜爱| 96自拍视频九色在线观看| 色综合av超碰| 99热精品9| 五月丁香婷婷色色| 五月婷婷婷| 天天爽天天操| 婷婷伊人网| 久久激情视频| 俺去婷婷 丁香| 91久久久久久久久久| 丁香婷色| 色欲五月天| 五月宗合激情网| 99视频在线| 久婷| 九九在线热九九在线热99热| 五月狠狠| 婷婷成人综合免费视频| xxx.色婷婷| 日本一级特黄大片AAAAA级| 久久久com| 97操操网| 国熟女视频| 99热这里只| 操人视频91| 五月婷色啪| 色吧五月| 99热在这里只有免费精品| 无码动漫av| 久久91久久精品久久| 99热思思久| 91精品久久久久久久久| 99色免费| 激情五月丁香婷婷| 影音先锋天天日| 五月婷婷九| 99热啪啪| 99热亚洲| 5Www色5夜| 亚洲色碰| 婷婷免费视频| 亚洲亚洲人成综合网络| 香蕉婷婷| 亚洲综合五月天婷婷| 99色在线| 热99在线精品| www夜夜操wwwcon| 亚韩在线视频| 日本英国美国欧美亚洲国产精亚洲日韩精品在线观看 | 婷婷久久国产视频| 少妇AB又爽又紧无码网站| 九九热这里只有精品556| 秋霞AV淫| 亚洲精品亚洲人成人网| 可以免费观看的AV| 五月丁香少妇网| 97人人干| 久久久五月婷婷| 超碰在线人妻| www.激情com| 激情无码五月天| 99亚洲精品视频| 亚洲中文字幕在线观看| 亚欧州精品视频| 久久人妻在线| 亚洲色无码A片一区二区麻豆| 婷婷趴趴| 免费观看的婷婷五月视频在线| 激情五月激情综合网| 最新日韩久热免费视频看看| 性99网站| 影音先锋日本三级资源| 99久久99九九99九九九| 精品人妻午夜一区二区三区四区 | 成人网页在线观看| 99热在线精品观看| 思思热再线视频| 91色色色视频| 久久婷婷六月综合| 五月婷婷丁香六月在线| 怡春院久操| 久久总和99| 日本三级成人秘书精品片| 99色色热| 99这里有精品视频| 欧美五月丁香啪啪响视频| 色婷婷A| 99热在线播放精品| 噜噜色com| 2025神马午夜福利| 九九久久综合网站| 五月丁香婷婷伊人| 99日这里只有精品| 大香蕉视频99| av性爱网站| 丁香五月激情欧美| 色婷婷婷婷| 蜜乳A√| 中文网婷婷字幕婷| 无码人妻AV久久久一区二区三区 | 91九色大屁股| 99re欧美精品| 综合网激情| 五月丁香无码视频| 98色花堂98t.R| 婷婷综合九月| 婷婷操久久| 97色啪| 欧美色婷婷| 97色视频网| 亚洲这里只有精品| 99碰网站| 99色热| WWW·天天操·视频?| 亚洲色网址| 天天开心天天色| 色综合伊人网| 成人免费黄色短视频| 婷婷五月美女直播| 高清无码一区二区三区四区| 精品久久99| 日韩成人综合| 一本到不卡高清DVD| 亚洲天堂色色| 99操碰| 色在线视频网2025| 伊人五月网| 婷婷丁香色五月| 婷婷五月天综合亚洲| 激情小说 五月天| 色五月色五天色情网址| 亚洲婷婷视频| 色天堂婷婷| 俺也高清无码高清视频| 婷婷久久五月天丁香| 91蜜桃婷婷狠狠久久综合9色| 91操操| 99在线免费观看| 亚洲人妻一区二区 | 99久久久久久www| 97久久婷婷色| 亚洲黄色影视| 色情婷婷| 九九热精品视频在线观看| 99热9999| 色噜噜婷婷| 猫咪伊人久久| 色综合com| 26uuu丁香婷婷五月| 激情精品久久| 碰99在线| 色婷婷WWW| 国产精品久久久久9999小说| 五月婷婷视频| 99热这里只有在线播放| 婷婷五月天丁香成人社区| 欧美丁香婷婷五月| 99久久大片| 97资源碰碰| 五月Huangsewang| 欧美成人日韩| www激情网| 色九月婷婷丁香| 色婷婷丁香五月| 伍月婷丁香花全集| 日本欧美成人片AAAA| 色综合色综合色综合色综合| 丁香五月婷婷偷拍| 久久99久久99久久99人受| 五月天婷婷色色| 色情综合网| 五月综合视频| 婷婷在线日韩综合| 97碰成超视频免费视频| 久久久久9| 久久97| 婷婷丁香五月综合免费视频百花| 亚洲瑟瑟精品在线| 九九色中文| 久久久com| 亚洲国产网址| 99精品久久久久久久婷婷久久| 九九碰九九爱97超碰| 大香人妻| 色五月婷激情| 亚洲人妻av伦理| 国产成人av在线播放| 色丁香婷婷| 北京熟妇搡BBBB搡BBBB| 久久性视频| XX色综合| 九九色婷婷Av| 久久久99精品| 成人免费120分钟啪啪| 亚洲视频二区| 大香蕉欧美在线| 婷婷香蕉香| 欧美色六月婷婷| 五月丁香婷婷六月| 久久性视频| 激情小说婷婷| 97人妻碰碰碰碰碰久久久久久| 热99久久这里只有精品| 久久久网站| 国产99久久久| 99久在线视频| 色五月激情| 5五月综合网亚洲| 97色射| 五月婷婷这里都是精品| 国产亚洲精品久久久久久牛牛| 99操碰| 97操碰碰无码视频| 久久伦乱| 日本99在线| 九九热在线99| 日本一毛片| 99视频在线啪| 六月丁香网| 丁香五夜激情四射夜夜夜| 丁香五月23111| 亚洲亚洲人成综合网络| 婷婷五月免费在线| 久爱综合| 99re这里只有精品视频了| 精品久久久中文字幕大豆网推荐理由| 亚洲综合丁香婷婷六月天| 天天操夜夜操| 丁香婷停五月激情综合深爱| 99爱视频在线| 99久久大片| 狠狠激情五月天| 丁香 婷婷 亚洲 熟女| 久久亚洲婷婷| 夫妇交换刺激做爰| 国产脫衣舞一区二区三区| 婷婷六月伊人| 国产熟妇乱子伦hd| 亚洲综合激| 色婷婷色99国产综合精品| 一起草aV| 思思热精品在线| 色和综合网| 99er国产| 大学生高潮无套内谢视频| va中文资源在线观看| 99热这里只有精品国产免费| 国产美女精品| 五月天网站亭亭| 91综合色| 人妻久久婷婷| 美日韩成人| 婷婷永久在线| 久久香视频| 9月色婷婷| www.99视频| 丁香六月婷婷久久综合| 日日夜夜天天爽| 涩五月丝袜婷婷| 日韩在线视频中文字幕| 99久99热| 4399精品一区二区| AV五月丁香| 久久五月天婷婷视频| 三年高清大片免费观看国语| 第四色首页| 神马欧美精| 五月婷婷香| 激情五月婷婷伊人| 99 福利 导航| 26uuu亚洲| 久热中文字幕在线线观看| 影院久久久| 久久九九爽| 77799热| 丁香五月婷婷五月基地| 天天肏夜夜肏| 久久亭亭电影| 日本在线视频播放91| 日本在线免费中文com.| 999热在线观看视频| 夜夜久久综合网| 色五月之第四色| 久久五月丁香综合| 国产亚洲在线观看| 深夜A片| 丁香婷婷六月天| 欧美大片| 久艹大香蕉| 五月综合婷婷开心网| 日本少妇AA一级特黄大片| 啪啪啪综合网| 99色最新在线视频网站| 亚洲AV成人片无码网站| 99热传媒| 久热99| 久热播这里只有精品| 激情综合在线观看| 天天射天天操天天干| 丁香五月欧美激情| 亚洲五月天婷婷在线| 五月婷婷黄色| 丁香五月 性爱| 五月天桃色深爱网| 婷婷社区五月天| 嫩草AV久久伊人妇女超级A| 日日日日操| 99无码视频| 久久大香免费| 日韩人妻操逼视频| 拍真实国产伦偷精品| 久久久久久久久99精品| 99热这里只有精品18| 免费观看的av| 4399在线观看免费高清电视剧| 人人综合91网| 97啪在线观看视频| 丁香在线视频| 欧美日本黄色| 中文乱子伦视频| 情婷婷五月天在线| 99日韩| 大香蕉娱乐| 国产成人精品一区二三区熟女在线| 色五月天丁香婷婷| 色色综合色| 婷婷五六日| 99视频自拍| 欧美啪啪五月天| Www.sesese丁香| 可以免费观看的AV| 爆乳熟妇一区二区三区爆乳照片| 九九精品在线观看视频6| 婷婷五月天激情综合婷婷五月天激情综合| 99riAV国产精品视频| 人操91在线| 校花娇喘呻吟校长陈若雪视频| 五月天综合在线| 激情九九六月激情免费视频| 天天爱夜夜爽| 婷婷五月色亚洲| 婷婷在线操| 热九九在线| 婷婷五月天黄色| 日韩高清久久| 欧美啪啪五月天| 成人五月天。COM| 国产精品久久久爽爽爽麻豆色哟哟| 操91| 久久五月丁香婷婷| 天天射射夜| 天天日综合| 亚洲AV综合在线观看| 丁香六月综合| 91碰碰碰久久久久| 任你干aa| 99精品手机在线视频| 婷婷色五月大香蕉在线| 天天日天天久久青青| 另类少妇人与禽zOZZ0性伦| 日本五月婷| 中文字幕不卡+婷婷五月| 丁香五月天亚洲视频| ji'qi'luan'ren'lun| 天天色综合网1| 热99这里只有精品视频| 丁香婷婷五月六月天| 亚洲综合色丁香婷婷六月| 天天综合干| 日韩AAA| 丁香五月激情六月综合| 欧洲亚洲欧洲99久久| 五月天色婷婷小说| 97五月天婷婷| 9热在线视频| 激情五月天福利| 一区操| 色色丁香色五月| 婷婷成人在线| 国产精品视频免费看| 日本色天堂| 99精品在线播放| 日本a片网址| 久久九九免费大视频| 99极品视频| 五月婷婷中文网| 热99热9| 五月婷婷中文字幕| 久久丁香五月| 激情五月天综合| 天天爽夜夜操| 91碰碰视频在线观看| 葵花AV在线| 超碰在线中文字幕| 91超级碰碰| 怡红院院在线导航网| 人人干AV| 婷婷五月天狠狠色| 婷婷婷婷色| 无码人妻丰满熟妇奶水区码| 婷婷伊人欧美| 久久视频婷婷| AV伊人青草丁香六月| 六月丁香深深爱| 婷婷五月骚厕所| 婷婷八月丁香激情综合| www.久久99| 大地9中文在线观看免费高清| 99热每日| 國語久久婷| ,99视频久久| 伊人AV五月婷| 婷婷四色五月| 9热网站| 九九九九九九综合| 五月丁香日本片| 五月婷婷手机在线| 99精品视频偷拍| 久久免费精彩视频| 极品五月天| 五月丁香婷婷久久| 日日噜狠狠色综合久久| 五月天婷婷伊人| 五月丁香影院| 婷婷va| 天天综合亚洲综合网天天αⅴ| 91综合视频在线| 五月丁香激情四射综合| 六月婷婷狠狠做| 成人在线视频一区| 国产精品涩涩涩视频网站| 激情AV中文| 激情综合青草| 五月婷婷六月丁香在线| 二色av| 国产精品成人网站| 欧美在线骚货| 色色日本欧美| co超碰在线观看| 2017狠狠干| 五月丁香久久久| 婷婷伊人网| 日本波多野结衣视频| 色狠狠综合| 79色色色色| 婷婷色影院| 丁香五月综合无码趴趴| 亚色网站小视频| 色婷婷超碰| 伊久大香蕉| 99精品视频在线观看免费| 色五月激情婷婷| 丁香六月婷婷久久综合| 五月天综合激情网| 久久婷婷激情视频| 99综合网| 超碰免费成人| 久久综合五月| 琪琪布丁香社区激情五月天| 天天开心天天色| 久久婷婷五月综合| 六六久久黄色| 永久99免费视频网站| 中文字幕,综合,91| 丁香色色五月| 深爱婷婷色| 久久久久er热| 五月婷婷|欧美| 色色哒五月婷婷六月丁香| 丁香激情五月天| 久久综合干| 五月丁香网站| 色综合久久无码| 五月丁香成人| 色综合99| 这里只有精品视频222| 久久婷婷五月天激情| 狠狠色综合久久久久| 777丁香六月青青草婷婷综合久月| 色五月综合| 婷婷五月精品中文字幕| 久久色情综合免费网站| 五月六月丁香激情| 69超碰在线| 国产五月丁香在线| 五月色综合| 色天堂A| 五月婷婷69| WWW色色色COM| 五月综合六月婷婷| 91 影音先锋| 综合逼五月激情婷婷| 青青草激情网| 五月婷婷五月天| 久久玖玖综合| 六月激情婷婷综合| 激情噜噜噜| 99精品久久久久久久久| 99热这里只有免费| 五月婷A V在线| 色久五月| 综合色在线| 丁香五月丁香伊人| 屁股翘好撅高迎合跪趴| 激情六月五月婷婷综合网| 久久婷婷五月天| 婷婷成人网五月天| 六月色婷婷| 婷婷五月天改成什么了| 亚洲精品亚洲人成人网| www久久99com| 日日干夜夜干| 五月天婷综合网站| 玖玖在线视频| 婷婷热婷婷色| 精品香蕉99久久久久网站| 狠狠狠狠狠狠狠狠狠狠狠色宗合图片 | 婷婷性色| 久久99久久久| 色私五月婷婷| 一区二区成人电影| 婷婷中文字幕| 日韩三级片一区二区| 色综合色色| 色综合爱综合| 激情五月成年| 夜丁香五月婷婷| 久久久五月天婷婷成人网| 日韩五月丁香| 色噜噜五月天| 日日天天干| 国产99精品免费视频| 中文字幕在线免费看线人| 久久99热精品a片在线观看| 无码 av电影| 久狠日av| 密臀av无码人妻精品| 97影院一级片| 亚洲精品网站色视频| 无码免费人妻A片AAA毛片西瓜| 欧美激情丁香五月天久久婷婷一区| 少妇搡BBBB搡BBB搡毛茸茸| 午夜国产精品AV在线播放| www九月婷婷| 日亚二欧美| 色色色欧美| 国产XXXX搡XXXXX搡麻豆| 五月婷婷精品视频| 亚洲综合五月天| 日本人妻A片成人免费看片| 99色视频| 午夜婷婷五月天| 亚洲xx网| 色五月五月婷婷| 久久久区区一久久久久久| 青青草五月天| 日韩成人电影AV| 婷婷五月天深爱| 国内在线99视频| 99久久99九九99九九九| 五月天婷婷久色| 九九精品少妇| 狠狠干综合| 色综合网综合| 在线观看av网站| 色婷婷亚洲婷婷| www.五月.com| 看婷婷五月天网| 99欧美精品99日本精品| 九九99九九99九九99视频网| av在线超清中文| 性爱111111| 99在线观看| 婷婷色丁香五月| 久青操| 做爰丰满少妇1313| 五月天播播中文字幕| 人人玩人人橾| 色约约视频一区二区三区四区五区| 色综合九九| 99热99这里有免费的精品| 噜噜色五月| 成人国产欧美大片一区| 综合网啪| 99视频在线观看视频| 任你操精品免费| www.色五月| 亚洲欧洲国产精品| 欧美性色五月天| 无码激情| 五月婷九月| 天天操天天干天天日| 99久久综合| 秋霞午夜理论| 精品亚洲国产成AV人片传媒| 99热99艹在线观看| 色啪影院| 色五月婷婷色五月| 午夜理论片最新午夜理论剧| 成人在线观看一区| 成人无码髙潮喷水A片| 伊人色综合久久久| 亚洲久久婷婷丁香五月天| 久天综合| 大香伊人婷婷影院| 欧美丰满熟妇BBB久久久| 婷丁香五月天| 色婷婷五月天天天干天天操天天爽| 婷婷九月色| 一本色道久久综合狠狠躁小说| 精品国产乱码久久久久夜深人妻| 99色热视频| 五月丁香啪啪伦理电影| 一区二区三区四日本| 这里只有精品在线观看视频| 99精品热| 可以直接看的AV网站| 五月天婷基地| √天堂资源在线人妻熟女| 99精品九九| 五月丁香综合啪啪| 五月婷婷激情久久| 综合99在线| 超碰人人艹| 激情久久丁香| 国产精品成人av在线观看春天| 色五月综合婷婷久久综合婷婷久久综合婷婷久久综合婷婷久久 | 欧美色色色色色色| 五月丁香婷中文| 亭亭五月丁香五月天激情| 欧美激情五月天在线观看| 天天日天天久久青青| 99热这里只有精品最新地址获取| 久久久久九九九九视屏小说88| 婷婷五月草| 五月婷婷色影院| 大香蕉五月天| 婷婷色五月情| 伊人综合婷婷| 五月丁香| 97色伦另类图片小说视频 | 激情综合文学| 欧美性色视频| 99五月丁香丁| 狠狠干五月| 欧美性爱五月天| www九九热| 五月天色色无码| 久久这里只有精品99| 婷婷五月色情天| 久久精品A片777777| 99热在线只有精品| 丁香五月婷婷久久综合激情网 | 亚洲免费在线观看岛国| 色吧五月| 激情黄色小说五月天| 久久久27操| 久久99综合| 色欲久久久久| 色婷婷五月综合| 一本色道久久综合狠狠躁一二三 | 激情婷婷九月| 97香蕉碰碰人妻国产欧美| 五月丁香无码| 亚洲精品国产成人AV在线| 610018岁成人视频| 五月停停999| 五月色导航| 99色五月| 26uuu欧美亚洲日韩| 亚洲XX网| 久久综合久色欧美综合狠狠| 日亚二欧美| 狠狠色婷婷丁香六月| 日本天堂免费99| 中字幕视频在线永久在线观看免费| 天天综合网在线| 亚洲性爱干干| 色久影院| 丁香六月丁香婷婷激情| 97碰免费视频在线| http://www.sd-xiangsu.com/| 婷婷五月丁香综合| 九一九九黄色| 婷婷综合在线| 看全色黄大色大片| 这里只有九九精品| 日本九九九九| 人人草碰| 免费观看全黄做爰的视频| 玖玖无码中文| 色色色色色色色色综合网| 26uuu淫色| 亚洲AV日韩无码| 亚洲日比视频| 激情婷婷五月天| 99免费热视频在线| 久热这里只有精品视频免费观看| 激情 五月 婷婷 丁香| 九九人人自拍| 狠狠爱五月婷婷综合六月| 色婷婷丁香五月| 丁香五月婷婷色情综合| 噜噜色com| 国产成人VA| 九九人人操| 五月婷婷六月丁香首页| 好叼操在线观看| 开心五月深爱五月| 色情综合| 91ncm视频| 这里只有精品免费| 淫水导航| 色综合xx| 激情五月黄色小说| 国产精品久久久久久白浆色欲| www.久9| 影音先锋男人av资源站| 亚洲亚洲人成综合网络| 天天日天天插| 大香蕉久| 五月综合激情| 色噜噜五月天| 亚洲美女网Va| 热99这就是精品视频| 色婷亚洲| 激情九九综合网| 色五月五月丁香| 日日色五月天| 这里只有精品热| 日本老女人黄页在线播放| 99噜噜| 丁香五月黄色| www.com.色色| 色婷成人狠干| 高清国产AV| 国产精品成人网站| 伊人超碰在线| 九九美女视频| 狠狠色狠狠色综合日日91| 婷婷六月成人| 色网站9| 99热色综合| 婷婷激情五月天激情小说| 日逼影音先锋AV男人资源站| 亚州第一黄网| 色情成人五月天| 色综啪啪啪啪啪啪| 超级碰碰视频无码| 成人片在线免费看| 99在线视频女女视频| 伦99热| 色综合中文| 99久视频| 丁香五月激情天AV无码| 思思视频精品| 人人射av| 中文网av| 综合久久五月天| 久久玖玖综合| 狠狠香蕉| a在线观看| 亚洲精品白浆高清久久久久久| 国产一级片色色| 天天视频精品9| 操逼国产91| 久9久9热久热| 婷婷五月花免费视频在线| A片试看120分钟做受图片| 国产精品色情AAAAA片软件| 8050一级网| 综合爱久久| 亚洲AV日韩无码| 丁香婷婷六月激情文学| 99er国产| 免费视频这里只有精品| www.夜夜操.com| 色哟哟精品| 激情丁香五月| 婷婷丁香五月综合网| 野外99热| www.99在线| 日日夜夜青青草| 九九热经典视频在线观看| 婷婷五月色激情欧美激情| 激情婷婷| 91se视频| 亚洲久久日| 久久这里只精品66| 色色色色色色综合| 人人操AV| 久色网| 久久免费干| 久久婷五月婷| 亚洲 在线 性爱 | 久热天堂| 婷婷啪啪| 天天檫天天爽| 激情AV在线| BBWCUCKOLD精品熟妇| 99热在线网站| 亚洲视频a| 26uuu国产激情视频| 婷婷久久亚洲| 日韩精品色| 大香蕉五月婷婷| 免费观看全黄做爰的视频| 五月天婷婷涩涩| 99这里有精品久久97| 婷婷五月天堂一本在线| 婷婷五月天AV| 伊人狼人干| 色色五月婷| 亚洲人成人五月天| 大香蕉九九| 综合另类激情| 久久只有精| 狠狠色综合精品视频在线| 开心五月婷婷| 黄色毛片精品| 99热精品网| 97热精品| 东京热五月婷婷| 97色干| 婷婷五月天激情诱惑| 丁香五月婷婷基地| 久婷自拍视频| 婷婷激情蜜桃玖玖丁香| 琪琪色五月天| 丁香婷婷五月综合欧美另类| 丁香五月婷婷六月婷婷| 深爱激情丁香| 国产精品激情AV久久久青桔| 97干网站| 人人摸人人搞| 大战熟女丰满人妻AV| 欧洲不卡视频| 激情五月婷婷开心网| 97色吧| 久久久18| 99热这里有精品| 婷婷五月丁香图片人人操| 99视频内射三四| 天天干一干| 懂色av粉嫩AV蜜臀AV| wwxx日本| 丁香婷婷久久| 国产精品汇聚精彩第二页 - 高清完整版在线 - 青蛙AV | 天天五月丁香五月| 99视频激情四射| 青青久久五月天丁香婷婷| 99在线免费视| 五月婷婷综合激情| 91人碰| 成人综合伍月天| 久久久亚洲精品一区二区三区浴池| 91精品久久久久久久| 五月天综合| 丁香五月伊人| 丁香网五月网| 激情综合网亚洲色图| 激情丁香五月天| 色5月婷婷色| EEUSS鲁片一区二区三区| 91在线就要啪| 97干在线播放| 五月色婷婷综合| 依人大香蕉在钱1| 九九热区一区二区三区| 婷婷色在线| 亚洲va日| www.91久久| 丁香五月人妻| 在线中文亚洲| 久9视频免费播放| 亚洲激情婷婷| 欧美日本99| 五月婷婷综合久久| 丁香操逼| 日韩欧美一级大黄网站| 99精品久久久久久| 天天色天天色天天色天天色天天色| 强辱丰满人妻HD中文字幕| 五月激情精品视频| 久久99热这里只频精品6学生| 色色网站免费在线视频| 久色资源| 99热免费精品热久久66| 性爱久久| 国产激情综合五月| 五月天社区| 欧洲亚洲免费视频区| 99精品视频在线观看| 亚洲五月婷婷在线| AA片在线观看视频在线播放| 九九在线免费观看| 五月丁香花成人社区| 丁香五月网在线观看| 先锋影音男人的天堂AV| 五月婷婷久草在线视频综合| 天天操天天插天天射| 五月在线| 91狠狠综合网| 综合婷婷| 伍月婷婷免费视频| 日日夜夜天天| 色性日本| 九九九九九九九九九九九九九国产精品| 五月婷婷在线综合| 色香久久| 久热九九| 色婷婷视频| 丁香六月婷婷基地| 怡红院视频| 日本婷婷在线| AA丁香综合激情| 色情五月丁香婷婷网| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 久久九九网| 色优久久| 色五月婷婷天天操夜夜操| 91日综合欧美| 九久9精品| 五月丁香六月婷婷免费| 就去色色五月丁香婷婷久久久| 99这里| 99九九在线| 粉嫩AV久久一区二区三区| 五月花丁香婷婷| 99人人操人人爱久久久| 思思热在线精品视频| 夜夜夜夜操| 97艹| 99热精品在线播放| 丁香婷婷六月天| 婷婷五月天首页激情| 91精品久久久久久77777| 色色色视频免费无码| 九九爱精品网站| 91大神操美女| 噜色精品| 成人啪啪色婷婷久| 丰满人妻一区二区三区| 99热久草| 五月婷婷色影院| 青草青草视频2免费观看 | H亚洲| 91美女被操| 米奇影视资源777狠狠色婷婷五月天激情网 | 婷婷五月激情综合网| 伊人激情啪啪| 六月婷婷七月丁香| 色五月婷婷自拍| 天天干一干| 婷婷丁香小说| 五月丁香色婷婷婷基地| 97丁香视频| 天天爱天天操| 婷婷五月六| 色婷婷五月天天天天天天天天天|