欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

MySQL InnoDB數(shù)據(jù)損壞:從崩潰排查到完整恢復(fù)的實(shí)戰(zhàn)手冊(cè)

MySQL InnoDB數(shù)據(jù)損壞:從崩潰排查到完整恢復(fù)的實(shí)戰(zhàn)手冊(cè) 1. 故障現(xiàn)場(chǎng)InnoDB 崩潰的一小時(shí)凌晨?jī)牲c(diǎn)半告警電話把我從睡夢(mèng)中拽起來(lái)。某電商系統(tǒng)的核心訂單庫(kù)連接數(shù)飆滿監(jiān)控顯示大量MySQL is down告警。登上服務(wù)器一看error log里刷滿了熟悉的陌生報(bào)錯(cuò)[ERROR] InnoDB: Database page corruption on disk or a failed file read [ERROR] InnoDB: Page [page id: space12, page number1827] log sequence number is in the future [ERROR] InnoDB: Unable to read tablespace page [page id: space12, page number1827] [ERROR] InnoDB: Assertion failure in thread ... in file ... line ...看到Assertion failure我就知道這不是簡(jiǎn)單的連接數(shù)打滿或慢查詢問(wèn)題而是 InnoDB 存儲(chǔ)引擎的數(shù)據(jù)頁(yè)損壞導(dǎo)致實(shí)例直接崩潰Crash。這類故障是 DBA 在生產(chǎn)環(huán)境遇到的最棘手問(wèn)題之一——不是重啟就能恢復(fù)的因?yàn)?InnoDB 為了保證數(shù)據(jù)一致性在啟動(dòng)時(shí)也會(huì)讀取數(shù)據(jù)頁(yè)并校驗(yàn)損壞的頁(yè)面會(huì)導(dǎo)致實(shí)例反復(fù)崩潰、無(wú)法正常拉起。這篇文章就是針對(duì)這類場(chǎng)景的一次完整復(fù)盤從故障現(xiàn)象判斷、損壞原因分析到參數(shù)配置、修復(fù)操作、數(shù)據(jù)恢復(fù)、事后預(yù)防把自己實(shí)際踩過(guò)的坑和驗(yàn)證過(guò)的流程整理出來(lái)給同樣會(huì)碰到這類問(wèn)題的運(yùn)維和 DBA 一份可直接參考的操作手冊(cè)。無(wú)論你是剛接手 MySQL 的運(yùn)維新人還是被半夜告警支配的資深 DBA這篇文章都能幫你在面對(duì) InnoDB 數(shù)據(jù)損壞時(shí)少走彎路。2. 先判斷“能不能修”和“怎么修”2.1 從錯(cuò)誤日志定位問(wèn)題邊界InnoDB 數(shù)據(jù)損壞的報(bào)錯(cuò)雖然千奇百怪但核心信息就那幾個(gè)損壞的頁(yè)面 IDspace ID 和 page number、損壞的文件類型系統(tǒng)表空間、undo 日志、用戶表空間、校驗(yàn)和不匹配的頁(yè)面。進(jìn)入修復(fù)前先收集三類信息錯(cuò)誤日志中反復(fù)出現(xiàn)的space id和page number判斷損壞的是哪個(gè)表空間文件。SHOW ENGINE INNODB STATUS如果實(shí)例還能啟動(dòng)的話中的 Last checkpoint 和 LSN 位置。磁盤健康狀態(tài)dmesg看是否有 I/O 錯(cuò)誤smartctl抽查磁盤健康度。為什么這一步如此重要因?yàn)樾迯?fù)方案的選型完全取決于損壞位置和損壞程度。舉個(gè)實(shí)際例子如果損壞的是用戶表空間的非關(guān)鍵頁(yè)那么通過(guò)innodb_force_recovery跳過(guò)損壞頁(yè)、邏輯導(dǎo)出數(shù)據(jù)是損失最小、成功率最高的方案但如果損壞的是系統(tǒng)表空間里的 redo log 或 undo log情況就復(fù)雜得多可能需要從備份重建實(shí)例邏輯導(dǎo)出的方案極難走通。2.2 常見(jiàn)損壞原因畫像做修復(fù)之前先搞清楚“為什么壞”。根據(jù)我處理過(guò)的生產(chǎn)案例InnoDB 數(shù)據(jù)損壞的原因基本逃不出以下幾類突然斷電 / 強(qiáng)制關(guān)機(jī)redo log 還沒(méi)來(lái)得及落盤緩沖池里的臟頁(yè)丟失文件系統(tǒng)緩存與磁盤數(shù)據(jù)不一致。磁盤壞道 / RAID 卡故障底層 I/O 已經(jīng)出錯(cuò)了但某些存儲(chǔ)系統(tǒng)在硬件層直接返回錯(cuò)誤數(shù)據(jù)InnoDB 的 checksum 機(jī)制根本防不住。文件系統(tǒng)異常比如 ext4 的 metadata 損壞、磁盤滿導(dǎo)致寫入不完整。硬件層面的內(nèi)存故障ECC 關(guān)閉的機(jī)器上內(nèi)存比特翻轉(zhuǎn)會(huì)讓數(shù)據(jù)頁(yè)在內(nèi)存里就已經(jīng)損壞寫回磁盤時(shí)把壞數(shù)據(jù)固化下來(lái)。不正確的運(yùn)維操作比如用kill -9強(qiáng)殺 mysqld、直接拷貝數(shù)據(jù)文件導(dǎo)致 LSN 不一致、跨版本直接替換數(shù)據(jù)目錄。理解成因不是學(xué)術(shù)需求而是直接影響后續(xù)恢復(fù)策略如果底層磁盤已經(jīng)有物理壞道你“修復(fù)”完數(shù)據(jù)把實(shí)例拉起來(lái)了這只是治標(biāo)不治本。恢復(fù)完成后必須做硬件的全面體檢否則二次崩潰是大概率事件。2.3 盤點(diǎn)手里的底牌備份策略決定恢復(fù)難度這是我處理所有崩潰案例時(shí)的第一反應(yīng)檢查備份是否可用。很多團(tuán)隊(duì)的備份是“有備份但沒(méi)驗(yàn)證過(guò)”真到恢復(fù)時(shí)才發(fā)現(xiàn)備份文件也是壞的或者備份周期太老丟了最近幾小時(shí)的數(shù)據(jù)。需要盤點(diǎn)的底牌包括全量備份mysqldump邏輯備份 /XtraBackup物理備份最后一份完整副本。binlog 歸檔是否連續(xù)、master log position是否能對(duì)齊備份點(diǎn)。從庫(kù) / 只讀副本是否健康能否臨時(shí)提升為主庫(kù)對(duì)外服務(wù)。為什么強(qiáng)調(diào)這一輪盤點(diǎn)因?yàn)?InnoDB 數(shù)據(jù)損壞后的修復(fù)本質(zhì)上是用最小的代價(jià)找回盡可能多的數(shù)據(jù)。如果有健康的物理備份和連續(xù)的 binlog那標(biāo)準(zhǔn)路線就是“備份恢復(fù) binlog 追平”壓根不需要在損壞實(shí)例上做高風(fēng)險(xiǎn)操作。只有當(dāng)備份不可用或損壞實(shí)例包含關(guān)鍵最新數(shù)據(jù)時(shí)才需要走innodb_force_recovery邏輯導(dǎo)出路線。3. 修復(fù)前的準(zhǔn)備把風(fēng)險(xiǎn)鎖在籠子里3.1 磁盤空間和文件權(quán)限檢查進(jìn)入修復(fù)操作前先做兩件不起眼但能救命的檢查第一確認(rèn)數(shù)據(jù)目錄所在磁盤有充足的剩余空間。innodb_force_recovery模式下mysqld 會(huì)盡量跳過(guò)損壞的頁(yè)面但啟動(dòng)過(guò)程本身也可能觸發(fā)回滾和重做臨時(shí)文件可能膨脹。而且我們后續(xù)要用mysqldump導(dǎo)出全庫(kù)數(shù)據(jù)邏輯備份文件大小不可小覷。通常建議剩余空間至少是當(dāng)前數(shù)據(jù)量的 1.5 倍。第二確認(rèn)運(yùn)行用戶對(duì)數(shù)據(jù)目錄有完整讀寫權(quán)限。這個(gè)聽(tīng)起來(lái)很基礎(chǔ)但真有人卡在這里——用 root 啟動(dòng)了 mysqldInnoDB 文件被 root 持有后續(xù)用 mysql 用戶操作時(shí)報(bào)權(quán)限錯(cuò)誤白白浪費(fèi)寶貴時(shí)間。3.2 不可逆操作前的底線動(dòng)作InnoDB 修復(fù)操作具有極強(qiáng)的不可逆性所以我必須強(qiáng)制要求這一步在任何修復(fù)動(dòng)作之前先對(duì)數(shù)據(jù)目錄做一次完整拷貝或至少對(duì)關(guān)鍵文件做快照備份。一條命令的事cp -a /var/lib/mysql /var/lib/mysql_bak_$(date %Y%m%d_%H%M%S)如果數(shù)據(jù)量太大不適合直接拷貝至少把損壞表空間對(duì)應(yīng)的.ibd文件、ibdata1、ib_logfile*單獨(dú)備份出來(lái)。為什么這個(gè)動(dòng)作如此重要因?yàn)樵趇nnodb_force_recovery模式下啟動(dòng)實(shí)例InnoDB 會(huì)在啟動(dòng)過(guò)程中執(zhí)行崩潰恢復(fù)邏輯可能會(huì)修改數(shù)據(jù)文件本身。一旦操作失敗原始文件已經(jīng)被動(dòng)過(guò)就失去了重試的機(jī)會(huì)。留一份底稿相當(dāng)于給自己的操作買了份保險(xiǎn)。3.3 工具鏈選擇理解每件工具的邊界處理這類問(wèn)題常用的工具鏈包括mysqldump邏輯備份工具能讀取 InnoDB 表并生成 SQL 文件。在innodb_force_recovery模式下它幾乎是必備工具因?yàn)?SQL 文件是恢復(fù)目標(biāo)實(shí)例的核心數(shù)據(jù)來(lái)源。XtraBackup備份工具和mysqlbinlogbinlog 解析工具前者用來(lái)做物理備份后者用來(lái)追平二進(jìn)制日志。如果計(jì)劃從某時(shí)刻備份恢復(fù)這兩個(gè)工具會(huì)派上大用場(chǎng)。dd / strings / hexdump底層工具。當(dāng) InnoDB 文件結(jié)構(gòu)損壞到連引擎層都無(wú)法解析時(shí)這些工具還能幫你“搶救”出部分可讀數(shù)據(jù)比如從ibd文件中提取未被覆蓋的文本記錄。工具選型的標(biāo)準(zhǔn)只有一個(gè)在“盡量不修改原始文件”的前提下拿回最多的數(shù)據(jù)。千萬(wàn)別一上來(lái)就想著跑各種“修復(fù)”工具修復(fù)工具的寫操作可能破壞現(xiàn)場(chǎng)導(dǎo)致更高級(jí)的數(shù)據(jù)恢復(fù)服務(wù)也無(wú)從下手。4. 核心修復(fù)流程從強(qiáng)制啟動(dòng)到邏輯導(dǎo)出4.1 逐步試探innodb_force_recovery 的正確打開(kāi)方式innodb_force_recovery是 InnoDB 提供的一組“越級(jí)啟動(dòng)”選項(xiàng)取值從 1 到 6每升一級(jí)InnoDB 在啟動(dòng)時(shí)就越“容忍”損壞同時(shí)也會(huì)犧牲一部分一致性檢查。正確做法是從小到大逐步試探能用低級(jí)別解決就絕不用高級(jí)別。在my.cnf的[mysqld]段中加上innodb_force_recovery 1然后嘗試啟動(dòng) mysqld。各級(jí)別含義和適用場(chǎng)景如下級(jí)別作用適用場(chǎng)景風(fēng)險(xiǎn)1跳過(guò)損壞頁(yè)檢測(cè)強(qiáng)制繼續(xù)啟動(dòng)只有少量頁(yè)面損壞InnoDB 仍能讀取絕大多數(shù)數(shù)據(jù)低2阻止 master thread 運(yùn)行后臺(tái)刷臟線程導(dǎo)致崩潰時(shí)中3回滾事務(wù)時(shí)跳過(guò) undo log 操作undo 日志損壞導(dǎo)致回滾失敗時(shí)中高可能丟失已提交事務(wù)的一致性4跳過(guò)所有回滾與重做操作redo log 或 undo log 大面積損壞時(shí)高5忽略 undo log不再檢查回滾段undo 損壞嚴(yán)重?zé)o法自動(dòng)恢復(fù)時(shí)高6啟動(dòng)時(shí)不做任何恢復(fù)操作數(shù)據(jù)文件大規(guī)模損壞只能做邏輯導(dǎo)出時(shí)極高可能導(dǎo)致數(shù)據(jù)不一致這里有個(gè)關(guān)鍵技巧不要一開(kāi)始就設(shè)成 6。先用 1 嘗試如果失敗再升到 2、3……逐級(jí)試探。實(shí)際經(jīng)驗(yàn)中很多場(chǎng)景在innodb_force_recovery2或3時(shí)就足以拉起實(shí)例。級(jí)別越高啟動(dòng)成功的可能性越大但啟動(dòng)后能做的操作越受限比如 6 模式下不能寫數(shù)據(jù)、不能執(zhí)行大部分 SQL數(shù)據(jù)導(dǎo)出的一致性也可能打折扣。啟動(dòng)嘗試的命令systemctl start mysqld # 或 mysqld_safe --defaults-file/etc/my.cnf 觀察 error log 的變化。如果日志中出現(xiàn)新的[ERROR]但實(shí)例最終ready for connections說(shuō)明啟動(dòng)成功。4.2 啟動(dòng)成功后立即導(dǎo)出數(shù)據(jù)實(shí)例在innodb_force_recovery模式下啟動(dòng)成功后應(yīng)盡快使用mysqldump導(dǎo)出數(shù)據(jù)。這一步的思路是先把數(shù)據(jù)從“受損的數(shù)據(jù)庫(kù)實(shí)例”轉(zhuǎn)移到“安全的 SQL 文件”中然后再創(chuàng)建全新的實(shí)例把數(shù)據(jù)導(dǎo)入回去。導(dǎo)出命令參考mysqldump -uroot -p \ --single-transactionFALSE \ --skip-lock-tables \ --force \ --all-databases /data_backup/all_databases_$(date %Y%m%d).sql這里幾個(gè)參數(shù)必須重點(diǎn)解釋--single-transactionFALSE在 recovery 模式下InnoDB 的事務(wù)一致性無(wú)法保證依賴 MVCC 的一致性快照可能失效所以使用非事務(wù)方式導(dǎo)出。--skip-lock-tablesrecovery 模式下鎖表可能觸發(fā)引擎層異常而且某些級(jí)別下無(wú)法獲取元數(shù)據(jù)鎖。--force遇到單個(gè)表導(dǎo)出報(bào)錯(cuò)時(shí)不中斷整個(gè)導(dǎo)出流程先把能導(dǎo)出的數(shù)據(jù)全導(dǎo)出來(lái)。如果mysqldump在某個(gè)表上報(bào)錯(cuò)比如讀索引頁(yè)時(shí)再次遇到損壞頁(yè)面不要慌。把報(bào)錯(cuò)的表名記下來(lái)單獨(dú)對(duì)這張表做針對(duì)性處理。后續(xù)章節(jié)會(huì)講表級(jí)救援方案。另外強(qiáng)烈建議在導(dǎo)出前先確認(rèn)max_allowed_packet足夠大避免因行數(shù)據(jù)過(guò)大導(dǎo)致導(dǎo)出中斷。比如SET GLOBAL max_allowed_packet 1073741824;4.3 創(chuàng)建新實(shí)例并導(dǎo)入數(shù)據(jù)導(dǎo)出完成后修復(fù)流程的下一階段是重建一個(gè)干凈的實(shí)例。操作步驟停止當(dāng)前 recovery 模式下的實(shí)例。移除innodb_force_recovery配置恢復(fù)正常配置。用全新的數(shù)據(jù)目錄初始化一個(gè)新的 MySQL 實(shí)例mysqld --initialize。導(dǎo)入 SQL 備份文件mysql -uroot -p all_databases.sql。導(dǎo)入過(guò)程也建議分批操作、細(xì)粒度觀察先導(dǎo)入核心業(yè)務(wù)庫(kù)表確認(rèn)數(shù)據(jù)量和應(yīng)用功能正常再導(dǎo)入低頻數(shù)據(jù)。不要一把梭否則導(dǎo)入中途報(bào)錯(cuò)時(shí)排查范圍會(huì)很大。如果二進(jìn)制日志binlog在損壞事件發(fā)生前是開(kāi)啟且完整的還可以結(jié)合mysqlbinlog把備份點(diǎn)之后到崩潰點(diǎn)之間的數(shù)據(jù)追回來(lái)先在備份點(diǎn)恢復(fù)全量數(shù)據(jù)再應(yīng)用 binlog 中該時(shí)間段的增量事務(wù)。這個(gè)操作能顯著降低數(shù)據(jù)丟失的量但前提是 binlog 文件本身沒(méi)被損壞且時(shí)間線清晰。這里有一個(gè)實(shí)操提示盡量在業(yè)務(wù)低峰期做切換。從邏輯導(dǎo)出到數(shù)據(jù)導(dǎo)入再到應(yīng)用切換訪問(wèn)整個(gè)過(guò)程的時(shí)間窗口要提前跟業(yè)務(wù)團(tuán)隊(duì)對(duì)齊。我的習(xí)慣是先撥 20% 流量驗(yàn)證讀寫再全量切換。5. 沒(méi)有備份的險(xiǎn)境表級(jí)救援與文件級(jí)搶救5.1 單獨(dú)損壞表的定向?qū)С霈F(xiàn)實(shí)總比劇本殘酷。很多中小團(tuán)隊(duì)遇到 InnoDB 損壞時(shí)全量備份存在但陳舊盤中關(guān)鍵的最近數(shù)據(jù)只在損壞實(shí)例上。這種情況下mysqldump全庫(kù)導(dǎo)出會(huì)因?yàn)槟骋粡埍韽氐鬃x不出來(lái)而中斷拖累其他好的表。應(yīng)對(duì)思路是錯(cuò)開(kāi)導(dǎo)出順序先跳過(guò)損壞表把健康表全部導(dǎo)出去再單獨(dú)跟損壞表“死磕”。跳過(guò)某張表導(dǎo)出mysqldump -uroot -p \ --skip-lock-tables \ --force \ --ignore-tablemy_db.bad_table \ my_db my_db_without_bad_table.sql然后針對(duì)bad_table單獨(dú)嘗試mysqldump -uroot -p --force my_db bad_table bad_table.sql如果單表導(dǎo)出依然失敗錯(cuò)誤信息通常會(huì)說(shuō)明具體的頁(yè)面號(hào)。此時(shí)檢查該表對(duì)應(yīng)的.ibd文件是否還有大部分完整頁(yè)面。少數(shù)場(chǎng)景下通過(guò)innodb_force_recovery6--forceInnoDB 能跳過(guò)索引損壞的頁(yè)把聚簇索引中幸存的行導(dǎo)出來(lái)。5.2 文件層搶救最后一道防線當(dāng) InnoDB 引擎層真的無(wú)力回天時(shí)如果該表有大量未損壞的數(shù)據(jù)塊還有一個(gè)土辦法——直接從.ibd二進(jìn)制文件中提取數(shù)據(jù)。InnoDB 數(shù)據(jù)頁(yè)的默認(rèn)大小是 16KB每一頁(yè)有固定的頭部結(jié)構(gòu)記錄數(shù)據(jù)時(shí)是緊湊行格式compact 或 dynamic??梢杂胹trings命令粗暴提取可讀字符串但這只能拿到散亂的片段適合“撈幾條關(guān)鍵記錄”的場(chǎng)景不適合大規(guī)?;謴?fù)。更靠譜的做法是用解析 InnoDB 文件結(jié)構(gòu)的專業(yè)工具比如某些商業(yè)恢復(fù)工具的試用版或者寫腳本按頁(yè)掃描解析記錄。這個(gè)過(guò)程需要深入理解 InnoDB 的物理存儲(chǔ)格式頁(yè)面結(jié)構(gòu)、記錄頭、字段長(zhǎng)度編碼等技術(shù)門檻高且耗時(shí)不短。我的建議是只有在數(shù)據(jù)價(jià)值極高且其他手段全部失效時(shí)才考慮走這條路線。順帶提醒一句這類文件級(jí)搶救操作必須在原始文件副本上進(jìn)行全程保留原始文件只讀這是我反復(fù)強(qiáng)調(diào)的底線。5.3 無(wú)備份場(chǎng)景下的取舍原則當(dāng)備份缺失、只能依賴損壞實(shí)例本身時(shí)最現(xiàn)實(shí)的期待不是“恢復(fù)到崩潰前的完美狀態(tài)”而是“盡可能多地?fù)苹財(cái)?shù)據(jù)”。以下幾種取舍我一般會(huì)和業(yè)務(wù)方拉齊預(yù)期后再執(zhí)行優(yōu)先恢復(fù)主鍵完整、結(jié)構(gòu)簡(jiǎn)單的表這類表數(shù)據(jù)緊湊受損概率小恢復(fù)成功率高。接受部分行丟失InnoDB 的頁(yè)損壞往往意味著整頁(yè)數(shù)據(jù)讀不出來(lái)但這個(gè)頁(yè)面丟失對(duì)整張表來(lái)說(shuō)可能只是很小的一部分。業(yè)務(wù)方接受“最近幾分鐘數(shù)據(jù)丟失”也遠(yuǎn)比“數(shù)據(jù)庫(kù)持續(xù)宕機(jī)”好。敢于放棄不可能恢復(fù)的數(shù)據(jù)比如 undo 損壞導(dǎo)致無(wú)法解析歷史版本那就放棄事務(wù)回滾直接取當(dāng)前頁(yè)面狀態(tài)。此類操作要用較高 recovery 級(jí)別但能救回盡可能多的當(dāng)前行。6. 常見(jiàn)問(wèn)題與排查技巧實(shí)錄6.1 崩潰反復(fù)出現(xiàn)的排查清單在同一個(gè)實(shí)例上如果修復(fù)后運(yùn)行一段時(shí)間又出現(xiàn)類似崩潰不要急著再次走恢復(fù)流程。先梳理下面的清單現(xiàn)象可能原因排查方向修復(fù)后再次報(bào)同一頁(yè)面損壞磁盤硬件故障未排除smartctl -a /dev/sdX、dmesg查 I/O 錯(cuò)誤啟動(dòng)過(guò)程卡死無(wú)響應(yīng)文件系統(tǒng)問(wèn)題或數(shù)據(jù)文件過(guò)大iotop、strace -p觀察阻塞點(diǎn)數(shù)據(jù)導(dǎo)入中途報(bào)錯(cuò)Row size too large表結(jié)構(gòu)與參數(shù)不匹配調(diào)整innodb_strict_mode、檢查行格式導(dǎo)入后行數(shù)不一致recovery 級(jí)別較高導(dǎo)致部分行丟失結(jié)合 binlog 補(bǔ)齊增量頻繁的內(nèi)存校驗(yàn)錯(cuò)誤內(nèi)存硬件或超頻不穩(wěn)定運(yùn)行內(nèi)存檢測(cè)工具如 memtest我處理過(guò)最典型的一個(gè)案例是“反復(fù)崩潰循環(huán)”第一次修復(fù)后運(yùn)行了 3 天再次崩潰報(bào)錯(cuò)頁(yè)面號(hào)完全一致。一查磁盤才發(fā)現(xiàn)是 RAID 卡的一塊盤已經(jīng)亮黃燈但沒(méi)有觸發(fā)自動(dòng)重建。如果當(dāng)時(shí)只做應(yīng)用層修復(fù)、不做硬件排查后面還會(huì)連環(huán)崩。運(yùn)維修復(fù)從來(lái)不只是修數(shù)據(jù)庫(kù)而是修整個(gè)鏈路。6.2 啟動(dòng)階段的常見(jiàn)卡點(diǎn)強(qiáng)制恢復(fù)模式下最常遇到的卡點(diǎn)有三個(gè)卡點(diǎn)一啟動(dòng)時(shí)報(bào)Table ... doesnt exist。這通常是系統(tǒng)表空間字典損壞導(dǎo)致 InnoDB 無(wú)法識(shí)別部分表結(jié)構(gòu)。此時(shí)不要重啟就在 recovery 模式下繼續(xù)嘗試導(dǎo)出其余表。必要時(shí)可先手工恢復(fù)數(shù)據(jù)字典或重建表結(jié)構(gòu)后再導(dǎo)入數(shù)據(jù)??c(diǎn)二啟動(dòng)時(shí)報(bào)Failed to find tablespace for table ...。這往往對(duì)應(yīng).ibd文件與數(shù)據(jù)字典不一致可能涉及表空間文件丟失。如果文件還在檢查文件和ibdata1中的表空間 ID 是否匹配如果文件丟失只能從備份中抽取該表結(jié)構(gòu)并重建。卡點(diǎn)三啟動(dòng)后執(zhí)行 SQL 報(bào)Table is marked as crashed。這主要是 MyISAM 表的報(bào)錯(cuò)但如果是 InnoDB 表在 recovery 狀態(tài)下操作也會(huì)出現(xiàn)類似提示。遇到這種情況優(yōu)先用CHECK TABLE和REPAIR TABLE試一把如果還不行再走重建路線。6.3 避免二次傷害的操作紅線在恢復(fù)過(guò)程中以下幾個(gè)操作被我一律列為紅線嚴(yán)禁在 recovery 模式下執(zhí)行寫入類 SQLINSERT/UPDATE/DELETE/DDLrecovery 狀態(tài)可能允許你寫入但那是在“帶傷工作”容易把尚未損壞但處于不一致?tīng)顟B(tài)的頁(yè)面固化到數(shù)據(jù)文件里。嚴(yán)禁在未備份原始文件的情況下運(yùn)行REPAIR TABLE或第三方“修復(fù)工具”。這種操作一旦失敗原始痕跡會(huì)被破壞后面的救援難度成倍上升。嚴(yán)禁跨大版本直接恢復(fù)。比如從 MySQL 5.7 的數(shù)據(jù)目錄直接啟動(dòng) MySQL 8.0 實(shí)例InnoDB 數(shù)據(jù)字典格式不兼容可能引發(fā)額外損壞。正確做法是先恢復(fù)原版本實(shí)例再用邏輯導(dǎo)出/導(dǎo)入完成跨版本升級(jí)。嚴(yán)禁在修復(fù)過(guò)程中關(guān)閉 binlog 記錄。你進(jìn)行的每個(gè)恢復(fù)動(dòng)作都應(yīng)該被記錄合理的 binlog 是后續(xù)增量補(bǔ)齊和數(shù)據(jù)審計(jì)的基礎(chǔ)。7. 修復(fù)完成之后回歸生產(chǎn)前的體檢清單實(shí)例重新拉起、數(shù)據(jù)導(dǎo)入完成并不意味著事情結(jié)束了。我在每次修復(fù)后都會(huì)強(qiáng)制自己走一遍下面的驗(yàn)收流程寧可多花時(shí)間確認(rèn)也不要帶著隱患上線。數(shù)據(jù)完整性校驗(yàn)抽查核心業(yè)務(wù)表對(duì)比行數(shù)與業(yè)務(wù)側(cè)對(duì)賬。比如訂單表導(dǎo)出行數(shù)、導(dǎo)入行數(shù)再抽樣對(duì)比最近 1 小時(shí)的訂單號(hào)是否連續(xù)確保沒(méi)有丟數(shù)據(jù)。主從一致性檢查如果有從庫(kù)重新建立主從關(guān)系后檢查Seconds_Behind_Master歸零主從兩端的關(guān)鍵表 checksum 一致。參數(shù)配置復(fù)盤如果這次損壞是因?yàn)閕nnodb_flush_log_at_trx_commit0或sync_binlog0這類性能優(yōu)先的配置為了加速寫入而犧牲了持久性建議根據(jù)業(yè)務(wù)重要性調(diào)整回更安全的配置組合。該妥協(xié)時(shí)妥協(xié)該堅(jiān)持時(shí)堅(jiān)持。備份恢復(fù)演練修復(fù)完成后兩周內(nèi)必須做一次從備份到恢復(fù)的完整演練確保下一次遇到同類問(wèn)題時(shí)備份鏈路是可信的。這個(gè)動(dòng)作不值錢但能救命。還有一點(diǎn)切身體會(huì)事后一定要寫一份完整的故障復(fù)盤文檔把時(shí)間線、報(bào)錯(cuò)日志、操作步驟、影響范圍、數(shù)據(jù)丟失情況、后續(xù)改進(jìn)措施都記錄下來(lái)。不是為了“表演”而是為了下次再有人哪怕不是自己遇到類似問(wèn)題時(shí)能直接照著這份文檔操作而不是重新踩一遍坑。我見(jiàn)過(guò)太多團(tuán)隊(duì)同一個(gè)坑反復(fù)跳三次就是因?yàn)槊看涡尥昃屯晔聸](méi)有沉淀。8. 留給同行的一句話這次 InnoDB 數(shù)據(jù)損壞修復(fù)的完整流程說(shuō)到底拼的不是高深的技巧而是能不能冷靜判斷損壞范圍、有沒(méi)有嚴(yán)格執(zhí)行“先備份、再修復(fù)、后驗(yàn)證”的紀(jì)律。工具和參數(shù)上面的文檔里都有但真正決定恢復(fù)效果的是那幾個(gè)時(shí)刻的決策是不是先看了 error log 再動(dòng)手是不是備份了原始文件是不是用最低 recovery 級(jí)別試出來(lái)的這些細(xì)節(jié)才是 DBA 經(jīng)驗(yàn)值最值錢的部分。我個(gè)人最后一次處理類似問(wèn)題時(shí)花了大半夜在innodb_force_recovery3下導(dǎo)出了 90% 以上的數(shù)據(jù)再靠 binlog 補(bǔ)齊了剩余部分。工具只是工具真正起作用的是對(duì) InnoDB 存儲(chǔ)機(jī)制的理解和對(duì)流程紀(jì)律的敬畏。希望這篇記錄能讓你在下一個(gè)凌晨?jī)牲c(diǎn)的告警電話面前少一點(diǎn)慌亂多一點(diǎn)底氣。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
九热视频在线精品15| 99热欧美在线观看| 国产精品久久久海的味道| 夜色.cnm| 婷婷伊人綜合中文字幕小说| 丁香五月欧美| 99热在线中文字幕| 亚洲人妻av| 五月丁香色婷婷| 成年人99热| 97人人操人人插| 亚洲欧美一区二区三区爱爱动图| 人人操Av| 91精品在线看| 亚州激情九月| 五月婷婷久久综合| 久久婷五月天| 久久久噜噜噜久久人妻| 人人色性网| 狠狠色综合久久久久| 九九99久久| 超碰激情网| 国产偷人爽久久久久久老妇APP| 婷婷开心六月| 欧美精品久久久久久视频观看| 五月婷婷综合成人| 久久人妻熟女一区二区| AV九九| 天天夜天天色天天| 亚洲AV激情五月综合网| 激情av在线| 日本色婷婷| 五月深爱网| 色五月激情视频在线综合| 97操碰98| 爱操天堂| 偷拍九九热| 国产免费一区二区三区三州老师F1F1.CC | 亚洲Av成人在线观看| 激情五月天色播| 婷婷五月天性| 99热在线中文字幕| 色偷偷综合| 内射激情在线| 99热超碰| 五月花成人网| 欧洲不卡视频| 99热最新国内| 日韩五月婷婷久久| 色综合久久88色综合中文字幕| 欧美激情综合五月色丁香| 久久五月天色婷婷| 深爱激情综合网| 天天肏屄夜夜爽| 97欧美在线| 校花娇喘呻吟校长陈若雪视频| www.五月婷婷| 激情网婷婷五月天| 五月深爱网| 婷婷爱在线观看| 成人短视频免费观看| 不卡在线中文字幕无| site:pnnrt.com| 男人的天堂五月丁香| 五月婷婷丁香网| 丁香婷婷久久激情| 91精品国产综合久久密臀| 只有精品在线观看| 五月天久久婷婷| 99色色色色| 思思热再线视频| 丁香婷婷久久| 丁香五月天导航| 综合性爱网| 色婷婷最新域名| 另类亚洲电影| 五月天激情网址| 人人操大| 7777激情基地| 婷婷五月激情网| 婷婷激情五月综合| 婷婷五月天成人导航| 久9热在线视频| 国产午夜精品一区二区三区四区| 日本三级第一页| 五月婷A V在线| 桃色成人网| 欧美日韩99| 婷婷六月综合激情| 亚洲日韩操B| 99在线精品免费视频| 午夜成人片400| 亚洲黄网AV| 97超碰,人人舔,人人操,人人摸| AAA级久久久精品| 久久人妻少妇嫩草AV| 被强行糟蹋的女人A片| 成人做爰高潮A片免费视频| 五月丁香六月婷| 综合色情网| 可以直接看的av| 五月丁香六月婷婷久久| 91妻人人爽人人看片| 蒲京久久无码视频| 五月天伊人久久久久| 欧美性爱一区| 亚洲俩性性爱图片久久第六页 | 婷婷五月花| 婷婷影院A成人| 亚洲亚洲人成综合网络| 激情久久 婷婷| 五月丁香综合啪啪| 天天操夜夜橾| 婷婷成人五月天成人文学| 丁香五月久久| 丁香五月色色婷| AV成人在线播放| 久久五月天婷婷| WWW.激情| 丁香五月婷婷偷拍| 婷婷丁香色五月天| 99综合久久| 六月婷婷无码| www.久久综合| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 夫妇交换刺激做爰| 成人综合视频在线| www.minyis.com【JT】国内CDN落地页保证转化QQ2101460746 | 人人爽天天爽| 超碰人人摸人人操| 99碰网站| 亚洲欧州色情在线观看| 五月天婷婷色| 丁香婷婷五月色成人网站| 夜夜人妻五月天| 婷婷五月激情丁香激情| 婷婷五月天综合网| 色婷婷精品视频在线播放| 日韩成人中文字幕| 丁香五月天中文字幕| 人妻精品在线| 97超级碰碰碰| 天天综合亚洲综合| 99综合视频一体| 久久久噜噜噜操操操| 丁香五月婷婷久久综合激情网| 蜜乳国产网站| 国产亚洲色婷婷久久99精品91| 国产黄大片在线观看画质优化| 久久久五月五丁香| 五月天婷婷伊人| 懂色av粉嫩av蜜臀av| 99re久久| 丁香五月91| 国产成人综合亚洲| 色婷婷在线综合色播网| 97自拍视频在线| 丁香五月色五月| 中文不卡一二区| 五月丁香激情综合网| 国产三级片91| 日本婷婷| 人人操91色| 色99视| 99视频九九热| 一区视频网站| 丁香六月婷婷综合激情欧美| 婷婷六月综合| 色五月丁香伊人五月| 五月丁香在线| 丁香九月婷| 色五月婷婷一二| 激情综合五| 玖玖99免费视频| 欧美色爱五月天| 九八Av| 婷婷激情五月天网站| 欧美丁香五月夫妻天| 婷婷丁香五月天综合在线日韩| 色色色精品无码区| 五月婷婷丁香六月| 99er在线观看| 亚洲操女| 激情六月天婷婷| 涩丁香| 欧美五月丁香在线观看| 婷婷色色综合| 天天狠天天叉| 伊人www22综合色| AV成人在线播放| 99久久新视频| 久久综合影院 | 婷婷五月天激情基地| 亚洲六月色| 99re这里只有精品首页| 肏日网在线看| 激情五月天综合网| 色五月天丁香婷婷| 天天狠天天叉| www.minyis.com【JT】实力收量可预付TG@LXSPSW8 | 性爱网六月丁香| 日本颜色视频人人爱| 亚洲狠9| 伊人深爱综合| sewuyuetingtingiii| 五月天婷婷激情春色小说| 久久曰曰| 五月天婷婷青青草| 日韩黄色AV无码| 99这里有精品| 激情综合啪啪啪| 深爱五月天| 天天插天天草人人玩| 成人日韩欧美| 色五月婷婷在线观看| 五月激情久久| 婷婷丁香五月综合激情视频| 久热在线观看视频9| 五月婷婷丁香社区| 71在线精品视频一区| 成人免费在线电影| 天天草天天舔| 丁香五月婷婷Av| 欧洲毛片基地c区| 99久热在线精品| 色丁香五月婷婷| 欧美特大片黄| 欧洲亚洲午夜| 五月婷婷精品视频| 免费婷婷| 婷婷色色综合| 99日本在线| 有码人妻久久| 五月丁香色婷婷色| www.夜夜| 久久视频婷婷| 激情综合色五月六月婷婷| 极品人妻VIDEOSSS人妻| 久久99热这里只有精品| av国产精品偷| 国产一级片| 99爱这里只有精品| 99热狠狠操| 人妻人人操| 色婷婷性爱网| 五月丁香啪啪网| 5月丁香六月婷婷| 色婷婷久久综| 校园春色亚洲色| 亚洲五月婷婷| 色情免费视频播放| 中文字幕成人| 超碰色女| 色天使久久综合| www.久久久久久久| 99热精品在线免费观看| 青草视频在线蜜臀| 色情五月天小说| 97久操| 五月婷色| 先锋资源婷婷| 99热这里只有精品18| 超极99精品| 欧美这里只有精品| 综合色色色| 色婷婷六月天| 大香蕉 婷婷| 人人操av| 婷婷丁香六月激情综合| 久久婷婷丁香花综合网| 91综合色噜噜| 香蕉久久国产AV一区二区| 91久久婷婷| 日本欧美成人片AAAA| 久婷婷婷| 99狠狠| 99热综合在线观看| 丁香色情五月天| 神马欧美精| 91操黄| 另类天堂| 久久只有18视频| 丁香六月无码| wwccc久久久| 九热久| 荫道BBWBBB高潮潮喷| 丝袜人妻| 99操逼| 第五色色色婷婷| 99热这里只有精品98| 大香蕉啪啪啪啪啪啪| AA片在线观看视频在线播放| 色婷婷99| 无码99| aa久久| 色婷婷在线视频| 婷婷激情五月天小说校园| 婷婷玉月丁香五月在线视频| 六月丁香深深爱| 超碰三级秋霞| 视频免费精品免费精品免费精品免费精品免费精品免费精品免费99 | 婷婷丁香五月色| 色婷婷色五月综合| 激情五月,婷婷五月,丁香五月| 午夜婷婷五月天在线| 99热国产国产| 欧美噜一噜| 千人斩操逼| 久热这里只有精品在线观看 | 狠狠色噜噜狠狠狠狠综合| 天天摸人人摸| 另类激情综合| 99热99精品| 成人在线视频一区| 色丁香久久| 色久女| 日韩在线视频中文字幕| 亚洲激情综合网| 91热视频色网站| 色婷婷国产精品综合在线观看| http://www.sd-xiangsu.com/| 天天色综合色| 久久这里只有精品07| 婷婷五月中文在线| 人人干天天操五月丁香| 亚洲性色XXXXX| 亚洲激情无码久久| www.丁香五月| 丁香五月激情啪| 国产欧美第五十五页| 五月色婷婷影院| 亚洲成人在线播放| 五月美女婷婷风骚| 久久加勒比| 伊人婷婷综合| 婷婷丁香五月天综合网| 这里只有精品免费视频| 久久婷色| 婷婷五月丁香综合亚洲| 色欲影香| 亚州激情在线视频| 五月婷婷婷丁香播| AV九九| 丁香五月婷婷激情97| 色色网站日本91| 婷婷午夜综合| 综合99在线| 99亚洲色| 亚洲激情婷婷| 99re久热| 另类小说五月天| 六月丁香五月亭亭| 丁香五婷婷| 九九色综合| 丁香五月停停av| 久久多色| 五月婷婷视频28| 色噜噜五月天| 人妻日日日| 超碰精品国产首页| 美女天天久久| 成人va视频| www.99热这里只有精品| ...婷婷五月综合不卡,国产在线手机| 7月婷婷六月丁香| 天天干天天色天天干| 色五月偷偷| 色色亚洲| 亚洲免费观看高清完整版AV线| 久久这里都是精品免费| 色色免费网战视频| 欧美性爱五月天| 丁香婷婷五月人体| 青青草蜜臀| 久热超碰91| 午夜无码熟熟妇丰满人妻| 五月婷综合| 久久综合激情五月天| 婷婷五点亚洲| 狠狠操狠狠| 黄色一级影片| 日日夜夜爽| 人妻久久久久久| 五月天婷婷涩涩| 亚洲在线激情婷婷五月| 激情综合婷婷| 五月天婷婷久草丁香| 婷婷五月天激情在线观看| 综合网视频| 国产真人做爰视频免费| 久久激情视频99| 亚洲色情激情丁香五月| 超碰成人免费| 欧美日比视频| 五月丁香六月婷婷姐| 精品国产乱码久久久久夜深人妻| 九九無碼| 婷婷丁香五月综合| www.91婷婷| 天天色综合网1| 狠狠狠狠狠| 在线天堂9| 国产婷婷五月色情综合| 丁香六月婷婷激情| 五月婷AV| www,超碰| 六月激情丁香一道本7777| α久久| 色婷婷狠狠18禁| 五月天成人在线视频网站| 东京热人妻一区二区三区在线| 激情深爱五月天| 婷婷中文字幕| 免费日本aⅴ中文字幕 | 99啪啪| 日韩淑女人妻luan伦激情精品一区二| 婷婷射丁香| 性色九九| 日本社区五月天激情| 色色欧美色色| 色狠狠六月| 99色综合| 狠狠擼综合| 五月天社区| 五月天久久久| 97久久超碰| 五月天色图| 欧美视频在线观看噜噜| 国产操碰| 久久caop| 开心五月深爱五月| 日日夜夜天天| A网在线欧洲| 激情色色| 色九九综合热99| 操老逼综合网| peg 2区三区四区的| 亚洲精品又粗又大又爽A片| 99无码超碰| 99色在线视频| site:pzdcoin.com| 国产乱妇乱子在线播视频播放网站| 99久久66| 中文字幕无码AV| 婷婷久久大香蕉| 综合一区二区三区| 91超碰在线播放| av中文在线| 精品久久婷婷五月天| 欧美性爱五月天| 久久五月丁香激情综合| 欧美激情综合色综合啪啪五月| www.久久爱.com| 色婷婷AAA| 5月激情天| 五月婷婷综合网| 天天搽天天射| 色婷婷精| 色婷婷成人做爰A片免费看网站 | 久久婷婷亚洲| 综合激情视频| 97性视频| 另类激情综合| 殴美综合激情五月天免费视频| 丁香五月婷婷亚洲另类| 狠狠色激情在线| 91操碰| 99免费热视频在线| 久操福利| 亚洲AV综合在线观看| 91a片爽| 人人综合五月人人婷婷| 人人综合91网| 91久热| 欧洲亚洲欧洲99久久| www网站在线观看| 久久92| yazhou seshipin| 色99xx| 色综合天堂| 玖玖在线资源视频| 亚洲另类毛片| 日本狠狠干| 这里只精品热在线18| 婷婷五月精品中文| 午夜丁香| 久久99热这里只频精品6学生| 91狠狠综合久久久| 97伦色婷婷| 五月综合无码| 天天综合网在线| 婷婷丁香视频在线观看免费| 99re青青草| 亚洲精品字幕在线观看| 97热精品| 久久五月婷婷开心网| 五月婷久久草| 爱iii做iiii日| 五月丁香综合| 精品人妻一区二区三区四区不卡在| 18av天堂| 久操干| 日逼免费视频| 五月花综合网| 99性感视频| 五月婷婷片| 丁香色播五月天| 亚州精品成人片| 丁香五月婷婷在线| 色五月婷婷综合| 91热在线| av成人在线播放| 国产精品色情AAAAA片软件| 色色免费网站| 色欲色香综合网| 男人综合网| 久久97| 一起肏在线视频| 久久性爱99国产| 91操操| 九九成人视频| 亚洲视频伍月婷婷| av在线色五月丁香婷区久| 久久丁香五月综合六月激情红杏视频 | 欧洲亚洲免费视频9| se婷97| 色噜噜丁香| 婷婷五月天久久久| 26.uuu丁香五月婷婷| 操逼福利视频| 伊人网欧美在线男人天堂五月丁香 | 色色色色色五月| 99久久精彩视频。| 热久精品| 色伊人91在线视频| 五月婷婷六月天| 人人看人人摸人人| 日日夜夜干| 91色色色视频| 丁香五月丐人妻| 极品人妻VideOssS人妻| 任你草| 五月婷婷六月综合| 天堂在线伊久| 99热99日天天干| 五月美女婷婷风骚| 91a片爽| 九九九九九九热| 婷婷激情久久| 婷色五月天| 九九aV| 五月色网| 久久免片| 九九香蕉网| 九九热在线精品视频| 五月天丁香网站| 婷婷久久丁香五月| 国产成人+综合亚洲+天堂| 久久女人天堂| 67194国产| 综合伊人久久| 碰碰91| 精品人妻一区二区三区四区不卡在| 色欲久久久久久综合网综合网| 五月丁香六月| 婷婷五月天开心网| 精品自拍97| 精品导航在线x不卡| 久久五月婷天天干| 久久九精品| 综合色影| 综合五月草| 激情婷婷亚洲五月| 夜夜操天天爽| 可以免费观看的AV| 丁香婷婷六月天| 狠狠干,狠狠操| 成人在线日韩欧美| 五月天色五月| 天天干天天干天天操| 天天综合网在线| 极品人妻VIDEOSSS人妻| 夜色五月天| 99热99草97| 色五月超碰| 久青青久| 久久A V无码视频| 亚洲精品色| 久久激情综合| 成人龟情网丁香五月| 久久全色| 久久久人妻久久久| 五月丁香激情六月| 色碰碰| 色婷婷成人做爰A片免费看网站| 大地资源色婷婷视频在线| 激情五月婷婷丁香综合网| 五月丁香六月婷婷久久| 亚洲天堂大香蕉| 激情 五月 婷婷 丁香| 婷婷五月天免费| 丰满人妻一区二区三区| 99色| 激情綜合網址| 久久综合婷婷| 伊人深爱综合| 日本99热| 婷婷激情五月天激情小说| 中文字幕在线播放视频| 五月婷婷自拍视频| 人人摸人人搞| 五月天婷婷激情小说电影| 激情五月天婷婷播播久久综合91| 99热爱爱干干日| 久久机只有这里精品| 九九热99视频| 综合另类激情| 久热这里精品免费| 碰超亚洲| 播播网色播播| 天天草天天爱| 91久久电影| 99亚洲视频| 天天五月情| 五月天天综合| 国产精品久久久久久久久久免费| 精品久久久人妻| 五月色婷| 久久久久9久无码视频| 欧美色频| 九九热色视频| 超碰色碰碰| 九九色人| 日日操天天| 超碰在线国产| 色播色丁香五月| 99热精品在线播放| 开心激情网在线| 婷婷五月丁香综合| 久久久久九九九九视屏小说88| 亚洲中文字幕AV| 人人看人人草人人摸| 亚洲色夜| www五月婷婷88导航| 久久久婷婷五月亚洲97号色| 激情五月五月五月婷婷| 色吧综合网| 丁J香六月首页| 日韩一级片| 天堂网啪啪| 亚洲美女婷婷五月天| 五月婷性爱| 亚洲天堂热| 婷婷五月天网| 深爱婷婷色| 狠狠色婷婷7777久综合| 日韩青青| 丰满人妻一区二区三区| 日本久久精品| 九九精品热播| 综合激情站| 日本妈妈乱| 五月婷婷色播| 中文字幕不卡视频| 丁香五月天日韩无码| 五月激情综合网| 色婷婷亚洲婷婷| 插插插色综合网| 欧美精品999| 成人在线观看精品| 国产AV一区二区三区日韩| 99热在线观看| 国产九九一区二区三区| 蜜乳中文字| 五月丁香成人日| 久热只有这里有精品| 五月天伊人久久久久| 97色吧| 丁香五月六月综合激情| 日本爆乳片手机在线播放| 日本久久爱| 1010日日无码| 婷婷五月天综合中文| 亚洲五月天,激情视频| av激情在线| 超碰在线免费观看3 9| 9久热精品在线视频| 91日本在线观看| 五月天,激情四射,婷婷频道| 五月丁香六月激情啪| 欧美综合激情五月丁香| 日日操,日日爽| 婷婷激情区| 色婷婷丁香特级性爱视频| AV美美午夜| 亚洲综合激| 欧美va精品va老师va| 4399精品一区二区| www.com任你艹| 日本3级片一区2区| 亚洲av网站在线观看| 丁香婷婷性爱| 久久亚洲色导航| 九九成人精品| 五月深爱激情网| 丁香五月六月| 91视频综合网| 伊人久久婷婷| 狠狠人妻色综合| 99资源在线视频| 伊人激情综合网| 色99在线| 亚洲精品a成人在线播放| 婷婷五月激情欧美大胆视频| 91综合色噜噜| 大香蕉中文| 99色在线观看免费| 婷婷丁香成人在线视频| 五月草影视| 婷婷五月天成人网| 26uuu精品一区二区| 亚洲情综合五月天| 欧美性爱日韩性爱| 婷婷丁香色五月亚洲| 日韩AAA| 五月丁香婷婷成人网| 9久久久久| 无码激情AAAAA片-区区| 97在线日韩| 久婷婷| 五月开心婷婷| 久久总和99| 五月丁香婷中文| 婷婷天堂综合| 亚洲激情四射| 久久99网| 色五月之第四色| 色深爱五月| 大香蕉久久| 国产精品男人AV不卡| 激情九月综合| 色婷五月天综合网| 九色91国产| 国产乱子轮XXX农村| 六六久久黄色| 99思思在线视频| 99热精品少| 操逼巨乳91| 国产黄色在线观看| 狠狠香蕉| 成人丁香五月天| 久久婷婷五月综合| 黄色短视频在线观看| caop在线视频| 五月香六月婷| 99精品视频在线观看| 大伊香蕉玖玖爱| 人妻操在线看| 91久久久久久| 婷婷五月丁香啪啪| 亚洲综合热| 午夜精品久久久久久久爽| www久久久久久久97| 日日操人人操| 亚洲中文字幕网| 激情久久肏屄视频| 无码区婷婷五月花开| 日韩黄在免| WWW.五月天9999| 九九精品99| 色色丁香五月天社区| 天堂婷婷丁香六月网| 99色在线| 激情综合九月| 99思思| 91操人人操| 热久久思思热思思| 久久久8| 久久99网址| 尔尔AV一区| 天堂在线伊久| 丁香花五月天| 色五月激情五月| 九九热这里只有精品5| 99综合| 六月丁香开心婷婷欧美| 午夜婷婷五月天| 欧美色综合天天久久综合精品| 99操碰| 五月天婷婷影院| 狠狠色婷婷色| 性爱视频99| 影音先锋91视频| 丁香五月开心五月激情| 9l视频自拍九色9l黑人| 日日夜夜小色哥| Aaa久久| 天天综合久久| 丁香五月激情五月| 色综合色综合婷婷热| 99精品热| 新99思思视频| 激情五月综合网| 激情丁香婷婷五月天| 综合激情婷婷| 激情综合婷婷| 性爱111111| 色在线视频网2025| 97欧美在线| 欧美久久婷婷| 开心六月丁香五月婷婷| 成人做爰高潮A片免费视频| 天天操天天操| www.婷婷激情网.com| 婷婷丁香十月| AV操逼网| 婷婷久久五月天丁香| 99玖玖视频| 五月婷婷色播| 天搞天天天天天| 欧美经典片免费观看大全| 91小黄书网址在线观看| ..真实国产乱子伦毛片| 99热这里只有精品3| 六月婷欧美丁香综合| 无码人妻一区| 丁香五月婷婷激情中文| av人人操| 色色色五月天激情资源| 九九热自拍| 色A网| 97碰 在线视频观看| 夜色综合网| 婷婷的99视频网站| 亚洲亚洲人成综合网络| 五月丁香六月婷婷久久久综合| 大香伊人婷婷| 丁香五月综合婷婷| 91啪级电影| 婷婷色中文| 思思热视频在线| 日日爽天天| 丁香激情网| 久久人人做人人妻人人玩精品va| 色五月在线播放| 啪啪啪综合网| 琪琪色网址| 99精品网站| 久久综合最新网址| 久久婷婷精品| 婷婷五月天激情五月天网站| 激情图片婷婷| www.9操| 婷婷五月天播播| 99综合视频在线| 亚洲影院婷婷色| 人妻九九九九| 97五月天婷婷| 久久婷婷激情五月天一区二区| 色五月美女| 五月婷婷六月天| 黄色99网| 香蕉狠狠爱视频| 碰碰碰97国产| 五月天激情小说| www.亭亭五月天| 久久狠狠欧美| 色综合色色色色| 国产精产国品一二三在观看| 色五月综合激情| 亚洲精品欧洲精品| 五月天婷婷操逼视频| 色吧婷婷五月亚洲| www.五月天婷婷| 婷婷激情人妻| 久99热| aa久久| 色五月97| 亚洲A片成人无码久久精品青桔| 久久精品99久久久久久| 欧美精品熟女一区二区| 久热这里只精品| 天堂网啪啪| 色www久视频| 婷婷五月色天| 超碰人人干| 久热这里只有精品99re| 开心五月丁香综合久久| 天天插操| 婷婷五月欧美综合| 99re8这里只有精品99re8热视频| 大香蕉在线99热| 干一干xxxx| 五月天基地| 成人丁香五月| 婷婷爱爱蜜臀天天操| 亚洲九九免费| 91精品久久久久久综合五月天| CAOBIBI| 丁香五月激情性色郤| 99热碰碰| 婷婷丁香精品视频在线观看| 久热精品视频在线观| 亚洲亚洲永久无码777777| 国产亚洲精品久久久久久牛牛| 亚洲免费99| 五月婷婷六月情| 日韩艹比| 六月丁香深深爱| 色婷网| 色综合久久88色综合天天看| 婷婷五月天精品| 天堂久久久久天堂网| 天天粽合合合合| 丁香六月啪啪| 久久婷婷五月国产色综合激情| 色天堂在线| 婷婷丁香社区| 亚洲成人五月| 婷五月天| 成人性爱精品视频| 99精品视频在线观看| 婷婷丁香视频在线观看免费| 激情婷婷五月| 涩五月婷婷| 另类天堂| 九热视频| 伊人五月久久| 婷婷欧美色| 婷婷五月天熟妇| 色婷婷狠狠干芒果TV| 亚洲五月天狠狠| av操一操| 婷婷五月天视频免费在线观看| 日日干日日| 99国产精品久久久久久久久久久 | 欧美日韩大黄| 五月综合激情图片| 这里只有精品9| 综合XX网| 深爱五月激情| 夜夜嗨一区二区三区直播内容| 久久婷鲁| 久久婷婷五月综合精品蜜芽| AV在线大香蕉| 久久6这里只有精品| 婷婷五月天男人影院色色网| 99热这里只有精品8| 丁香啪啪| 又大又粗九一在线| 超碰色天堂| 久操97| 五月开心婷婷网| 婷婷五月综合久久中文字幕| 婷婷五月天免费视频在线观看| 五月丁香日逼| 激情AV在线| 成人在线网站| 狠狠丁香| 色色五月婷婷| 一本久道综合色婷婷五月| 99re99热| 日本V在线观看不卡视频网站| 亚州性爱99| 青青草Avb在线| 五月丁香成人| 草操网| 丁香六月成人| 人人摸人人干| 九九热这里只有精品556| 五月天婷婷av| 激情五月天在线观看婷婷| 亚洲亚洲人成综合网络| 婷婷色爱| 天天综合网91| 婷婷六月天| 天天干天天干天天干天天干天| 91丁香五月| 久久人妻视频| 99re思思热久久| 91九色视频在线观看| 亚洲综合激情五月久久| 麻豆五月丁香婷婷| 人人性久久| 少妇性按摩无码中文A片| 婷婷丁香人妻天天久久| 婷婷九月综合| 成人做爰高潮A片免费视频| 天天综合社区| 日本99久久| 9久热| 日日干干天天干| 午夜九九九九九九九九九九九九九| 伊人久久婷婷| 激情综合色婷婷啪啪六月天| 日本一级大片| 亚洲精品视频在线播放| 99热6色| 五月开心婷婷极品激情| 九九成年视频| 天天爽天天操| 另类丁香五月天区图| 9热在线观看| AA片在线观看视频在线播放| 天天做天天爱天天玩| www.sd-xiangsu.cpm| 亚洲激情六月丁香| 超碰免费人人| AVDV久久| 天天射天天射一道本日本社区 | 人人操av| 激情五月丁香亭亭| 五月丁香激情五月天| 久久五月婷婷综合网| 色婷婷婷婷| 婷婷区日本| 91婷婷色| 成人小说色图婷婷五月| 99热这里| 国产精品电影网| 激情五月婷婷在线| 一起草无码视频| 九热视频精品| se色婷婷视频| 婷婷99狠狠| 超碰99热精品| 欧美婷婷色五月| sS丁香五月婷婷| 极品色丁香| 色吊操色妞| 99ri在线视频| 五月天堂色| 久久综合丁香激情五月| 日韩色色小视频| 久热超碰91| 色色色激情网| 蜜桃人妻无码AV天堂三区 | 五月丁香久久| 六月丁香五月激情婷婷| 色久婷婷五月| 色狠狠色综合久久久绯色AⅤ影视| 偷拍九九热| 性av| 色999五月色| 日韩啊啊啊| 亚洲激情精品| 婷婷涩五月天综合| 激情五月婷婷免费视频| 天天久综合网永久入口17v| 日日爽夜夜爽| 五月香婷婷| 狠色色狠网| 中文超碰视在线| 激情五月深爱五月| 九热视频在线精品15| 九九操屄| 丁香婷婷人妻综合网| 久热这里只有| 翔田千里 50岁 无码| 欧美网站视频4399| 1024成人免费看| 婷婷丁香熟女| 国产熟妇乱子伦hd| 熟女人妻一区二区三区免费看| 久久思思精品| 色婷婷色五月丁香| 久久视频婷婷视频| 超碰中文字幕在线| 丁香五月婷婷久久久| 亚洲免费婷婷| oumeisesewang| 很很操96| 日韩成人网站精品久久大全| 五月婷婷亚洲天堂激情在线| 久久综合激情五月天| 婷丁五月| 99热这里都是精品| 久久东京热婷婷五月| 91vip在线观看| 激情四射五月天| 97成人丁香婷婷| 婷婷伊人无码| 丁香五月激情婷婷激情| 亚洲色色色色| 99热在线成人网站| 五月天深爱激情网| 久久五月天色| 久9久成人精品视频| 五月丁香久久网| 五月婷婷激情综合网| 久操大香蕉| 欧美丰满熟妇BBB久久久| 婷婷99视频在线| 超碰免费成人网站| 日本操天堂| 任我肏视频精品| 99WWW免费视频| 亚洲AV综合在线观看| 久久草人妻| 激情综合婷婷| 这里只有精品网站| 久久激情天堂| 91色五月| www.夜夜操| 欧美在线| 中文字幕丰满孑伦无码专区| 婷婷五月天播播| 天天天久久久| 色婷婷五月影院| 色九四色| 国产精品18久久久| 综合久久久| 99精品免费欧美小视频| 小视频aaa久久久| 五月丁香六月色| 五月天啪啪网| 成人做爰A片免费看网站找不到了 噼里啪啦在线观看免费完整版视频 | 五月天激日本色情在线| 97干资源在线观看| 这里只有精品久久| 丁香婷婷91在线观看视频| 一本伊人色婷| 色五月av伊人| 色婷婷XXXXX| 亚洲五月天色色| 五月天福利影院导航| 婷婷五月天丁香| 久久只有18视频| 欧美日韩成人免费在线| 婷婷五月丁香色情| 色五月涩涩婷婷蜜桃| 综合色情网| 97色在线观看视频| 九九人人看| 九九热9| 久久五月婷婷综合网| 五月婷婷激情综合| 深爱五月激情| 丁香五月婷婷基地| 久久婷婷五月天激情唯美| 久久久久9| 另类激情五月| 欧美日本黄色| 大香蕉中文| 大陆极品少妇内射AAAAAA| 久久精品99| 玖玖婷婷五月天| 六月激情婷婷| 天天做天天爱| 97资源欧美日韩大香蕉超碰一区| 伊人玖玖婷婷| 日韩黄色电影| 五月综合丁香婷婷| 丁香婷婷色色| 色六月天| 狠狠狠五月婷婷六月丁香| 五月开心婷婷| 99热99re6国产在线播放| 美英法精品无码免费视频| 99日韩网站| 色综合色综合色综合色综合| 天天操天天日天天爽| 婷婷丁香基地在线| 五月婷婷九月婷婷九月婷婷| 永久地址 色| 无码人妻一区| 五月天天综合| 成人视频一区| XX色综合| 欧美大片免费播放器| 亚洲精品无码一区二区| 密着浓厚中出乚交尾GvG935| AV片在线观看| 丁香五月婷婷Av| 亚洲视频久久| 淫视馆AV在线| 九九九精品视频免费观看| 婷色成人| www一区二区三区| 色情五月综合婷婷| 日本3级片一区2区| 99精品在这里| 日韩人妻AV在线| 丁香九月激情在线视频| 欧美月久久| 操碰97| 激情五月综合六月丁香婷婷狠狠干| 99热| 国产精品色婷婷99久久精品| 超碰99在线| 蜜桃五月天| 丁香婷婷成年| 99热在线爱| 性爱网六月丁香| 丁香五月123| 色五月开心婷婷| 色五月婷婷啪啪五月| 午夜电影网VA内射| 欧美日韩成人高清在线| 亚洲五月婷| 97人人妻人人艹| 五月综合丁香婷婷| 美女要搞搞天天搞搞搞网站| 婷婷亚洲欧美丁香五月| 99热精品在线| 色婷婷亚洲婷婷| 微拍92| 丁香婷婷人妻| 色丁香影院| 欧美精品18| 色五月大| 夜夜夜天天操| 一级操逼内射在线视频| www久| 日本道久久91| 九九人妻福利| 亚洲色综久久五月| 天天干天天操天天上| 一区二区无码视频| 久热这里只有精品在线| 五月天婷婷Av| 天天搞天天爽| 久久婷婷激情四射五月天| 五月丁香六月激情视频| 91人人操人人爱| 日本一道久久| AV堂狠狠干| 五月婷婷六月丁香| 色97综合婷婷天天色| 国产AV一区二区三区最新精品| 成人色情五月天婷婷丁香| 四川女人毛多水多A片| wwwxxx五月婷婷小说| 91在线视频观看午夜福利| 五月草视频| 丁香五月开心亚洲| 九九色影视| 亚洲婷婷丁香五月天激情小说| 欧美顶级少妇做爰HD| 99国产性感视频| 九九热在线视频观看免费10| 丁香五月六月综合欧美| 色偷偷色婷婷| 99热这里只有精品3| 国产夫妻操逼内射视频| 日韩艹比| 99热在线观看这里只有精品| 亚洲人人艹| 在线中文字幕av| 色波激情五月天| 91丁香色| 日韩精品二三区| 日本高清久| 日本九九九九| 综合图区激情| 一操久久| 伊人99热| 欧美精品熟女一区二区| 中文字幕,综合,91| 亚洲精品va| 9l视频自拍9l九色9l成人| OUMEIRIHANCHENGREN| 亚洲国产色色| 色色网站日本91| 人妻久久久久久久久久久| 任你弄在线视频免费|