欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

MySQL 誤刪數(shù)據(jù)別慌:單表恢復(fù)的完整實操——mysqldump 拆表恢復(fù)+五個必踩的坑(2026 實戰(zhàn)復(fù)盤)

MySQL 誤刪數(shù)據(jù)別慌:單表恢復(fù)的完整實操——mysqldump 拆表恢復(fù)+五個必踩的坑(2026 實戰(zhàn)復(fù)盤) 這兩天技術(shù)熱榜上「只恢復(fù)一張表別把整個庫都還回去」這類話題排得很靠前評論區(qū)清一色的我也遇到過“當(dāng)時手都是抖的”。能共鳴成這樣說明數(shù)據(jù)庫誤刪這事兒的出鏡率遠(yuǎn)比大多數(shù)人以為的高——更扎心的是真出事那天很多人手里那份每天凌晨都在跑的備份根本救不了命。我在接手某電商項目的時候就正面撞上過一次自動備份成功跑了八個月真要用的時候打開一看dump 文件只有 374 字節(jié)連一行數(shù)據(jù)都沒有。八個月兩百四十多個備份周期一個都沒備上而且全程沒有任何報警。這篇文章就把這次事故從頭到尾拆給你看備份是怎么無聲無息失效的誤刪之后單表恢復(fù)的三條路各自怎么走、怎么選以及五個我自己踩過、也看著無數(shù)人繼續(xù)在踩的坑。先把結(jié)論放在最前面?zhèn)浞莸膬r值不在于任務(wù)有沒有在跑而在于要用的那一天它能不能恢復(fù)出數(shù)據(jù)。沒有校驗過、沒有演練過的備份只能叫心理安慰。全文以 MySQL 5.7 / 8.0 的 mysqldump 為主線命令可以直接抄但請先在測試庫上過一遍再碰生產(chǎn)。一、事故復(fù)盤跑了八個月的備份文件只有 374 字節(jié)1. 發(fā)現(xiàn)現(xiàn)場要用的時候才發(fā)現(xiàn)是空的那是個再普通不過的工作日。某電商項目要做一次數(shù)據(jù)遷移前的對賬我讓同事把最近一份全量備份拉起來看看。同事在備份目錄里敲了個ls -lh然后轉(zhuǎn)頭問我“這個 -rw-r–r-- 1 root root 374 的是備份嗎”374 字節(jié)。一個跑了三年的訂單業(yè)務(wù)庫表結(jié)構(gòu)加數(shù)據(jù)少說幾個 G每天凌晨三點的 cron 任務(wù)也確實在跑日志里天天有執(zhí)行完成。但 dump 文件就是 374 字節(jié)——往前翻這個大小已經(jīng)保持了八個月。當(dāng)場把最近三十天的備份全打開看了一遍內(nèi)容高度一致全是這么十幾行——-- MySQL dump 10.13 Distrib 8.0.33, for Linux (x86_64) -- -- Host: localhost Database: orders_db -- ------------------------------------------------------ -- Server version 8.0.33 /*!40101 SET OLD_CHARACTER_SET_CLIENTCHARACTER_SET_CLIENT */; /*!40101 SET OLD_CHARACTER_SET_RESULTSCHARACTER_SET_RESULTS */; 中間若干條會話變量保存語句然后就沒了。沒有 CREATE TABLE沒有 INSERT連正常 dump 結(jié)尾都會有的-- Dump completed on ...都沒有。這個缺失的結(jié)尾標(biāo)記后來成了定位問題的關(guān)鍵線索第四節(jié)會用到。2. 根因一條鏈從 .my.cnf 被改到 cron 靜默成功排查過程繞了些彎路剝掉之后根因鏈其實特別清晰cron 任務(wù)本身八個月沒動過mysqldump --single-transaction --routines --triggers orders_db | gzip /backup/orders_$(date %F).sql.gz。注意它沒帶 -u 和 -p——當(dāng)年寫腳本的人圖省事憑據(jù)全靠系統(tǒng)默認(rèn)配置命令行不給憑據(jù)時mysqldump 會去讀當(dāng)前用戶主目錄下的~/.my.cnf取 [client] 段里的賬號密碼。這臺機(jī)器的/root/.my.cnf里存的是一個人人共用的公共默認(rèn)賬號八個月前另一個業(yè)務(wù)也擠上了這臺服務(wù)器——一臺云主機(jī)跑三四個項目的經(jīng)典配置。對方上線時圖方便順手把/root/.my.cnf改成了自己業(yè)務(wù)的賬號密碼這個新賬號能連上 MySQL 實例但對 orders_db 一個權(quán)限都沒有。于是 mysqldump 連接成功、寫出文件頭一選庫就報 1044 Access denied錯誤進(jìn)了 stderrstdout 里只留下那十幾行頭注釋——正是那 374 字節(jié)致命的一步來了命令是mysqldump ... | gzip 文件管道的退出碼取的是最后一個命令 gzip 的。gzip 只要自己沒問題就返回 0整條管道退出碼就是 0。cron 只認(rèn)退出碼0 就是成功任務(wù)日志里干干凈凈stderr 呢沒做重定向cron 會把它郵件給本地 root——而這臺機(jī)器的 root 郵箱八個月沒人打開過。根因不是某一行命令寫錯了是整條備份鏈路里沒有一處失敗會被看見。憑據(jù)可以被人改退出碼可以被管道吞錯誤日志可以沒人看——每一環(huán)單獨看都是小事連起來就是八個月的空備份。3. 這起事故最值得記住的一句話修復(fù)本身只花了半小時建專用只讀賬號、憑據(jù)挪進(jìn)獨立配置文件、命令改用 --defaults-file 獨占、腳本加set -o pipefail、dump 后面接校驗、校驗失敗發(fā)告警。但真正值錢的是這次事故換來的認(rèn)知轉(zhuǎn)變備份鏈路里最危險的形態(tài)不是失敗是靜默成功。失敗會有人修靜默成功只會在你伸手要數(shù)據(jù)的那一天遞給你一個 374 字節(jié)的文件。后面四個坑一半是從這次事故里拆出來的另一半是我在別的項目里看著別人踩的。每一個坑都給對應(yīng)的修法修法都能直接落地。二、坑一默認(rèn)憑據(jù)被搶跑——–defaults-extra-file 的優(yōu)先級陷阱1. 配置文件到底按什么順序讀事故之后我做的第一件事是把 mysqldump 的憑據(jù)加載順序徹底搞清楚。很多人以為命令行沒給憑據(jù)就讀 .my.cnf實際要再細(xì)一層。mysqldump 默認(rèn)按下面的順序讀配置同一個選項后面的來源會覆蓋前面的順序來源說明1/etc/my.cnf全局配置2/etc/mysql/my.cnf全局配置不同發(fā)行版路徑略有差異3–defaults-extra-file 指定的文件在全局文件之后、用戶私有文件之前讀4~/.my.cnf當(dāng)前用戶主目錄下的私有配置5命令行參數(shù)優(yōu)先級最高壓過所有文件注意第 3 行和第 4 行的關(guān)系–defaults-extra-file 名字里帶個 extra很多人下意識以為它最后追加、壓過一切實際它的位置排在 ~/.my.cnf 前面。你在 extra 文件里寫了 userbackup_ro只要 ~/.my.cnf 里還躺著一個 [client] 段寫著別的 user后者照樣把它覆蓋掉——mysqldump 不會提示一個字靜默換號和事故里的劇情一模一樣。我重構(gòu)備份命令的時候就栽在這里把賬號寫進(jìn)獨立文件用 --defaults-extra-file 掛上在測試機(jī)上手動一跑一切正常——因為那臺測試機(jī)根本沒有 ~/.my.cnf。搬上生產(chǎn)又被 .my.cnf 搶跑。幸好當(dāng)時學(xué)乖了每次跑完立刻看文件大小才沒有二次事故。2. 獨占式寫法–defaults-file 必須是第一個參數(shù)正確的姿勢是用 --defaults-file——注意沒有 extramysqldump --defaults-file/etc/mysql/backup.cnf\--single-transaction--routines--triggers\orders_db|gzip/backup/orders_$(date%F).sql.gz–defaults-file 的語義是獨占只用這一個文件/etc/my.cnf、~/.my.cnf 一律不讀。備份用哪個賬號完全由你指定的這一個文件說了算別的文件改了也波及不到它。/etc/mysql/backup.cnf 的內(nèi)容[client] host127.0.0.1 port3306 userbackup_ro password一串只屬于備份賬號的密碼兩個補(bǔ)充。一是 --defaults-file 必須放在命令行第一個參數(shù)的位置放在后面會直接報錯這是官方規(guī)定的硬性順序二是如果不想在盤上落明文密碼可以用 mysql_config_editor 生成加密的 login path命令行改成--login-pathbackup原理同樣是繞開默認(rèn)配置文件。兩條路都行關(guān)鍵是別再依賴那個碰巧沒被人改過的默認(rèn)文件——它今天沒出事只說明還沒輪到它出事。三、坑二MySQL 8 受限賬號導(dǎo)出直接報錯——–no-tablespaces1. 報錯現(xiàn)場與原因憑據(jù)問題修完用新建的受限備份賬號在測試環(huán)境手工跑第一次導(dǎo)出又挨了一記mysqldump: Error: Access denied; you need (at least one of) the PROCESS privilege(s) for this operation when trying to dump tablespaces這是 MySQL 8.0.21 之后的老朋友了從這個小版本起mysqldump 導(dǎo)出時會順手查一遍表空間信息而這個查詢需要 PROCESS 權(quán)限。麻煩在于PROCESS 是全局權(quán)限給了它就能看到整臺實例上所有會話——包括別的業(yè)務(wù)正在跑什么 SQL。對一個只讀、只該看自己庫的備份賬號來說給 PROCESS 屬于明顯的權(quán)限超發(fā)多業(yè)務(wù)共庫的場景下尤其不能給。很多人5.7 時代好好的腳本升到 8.0 突然跑不了撞的就是這一條。升級數(shù)據(jù)庫版本之后老腳本一定要在測試環(huán)境用生產(chǎn)同款受限賬號重新過一遍這不是流程潔癖是血淚。2. 加權(quán)限還是加參數(shù)兩個選擇我推薦后者給賬號加 PROCESS能導(dǎo)出但備份賬號從此能看到全實例的連接與查詢權(quán)限面擴(kuò)大安全審計也難看命令加 --no-tablespaces導(dǎo)出的 dump 里不帶表空間定義。這部分信息只在需要 InnoDB 可傳輸表空間做物理級搬運的場景才有用日常備份-恢復(fù)數(shù)據(jù)完全用不到。所以受限賬號加 MySQL 8 的組合–no-tablespaces 直接寫成固定參數(shù)。代價幾乎為零換來的是備份賬號可以干干凈凈地只持有業(yè)務(wù)庫內(nèi)的只讀權(quán)限。四、坑三不校驗的備份等于沒備份1. 一個二十行的最小校驗?zāi)_本回到事故現(xiàn)場374 字節(jié)的文件在目錄里躺了八個月任何一天的任何一次檢查只要看一眼文件大小就能發(fā)現(xiàn)。但看一眼這件事沒有變成機(jī)制它就不會發(fā)生。校驗不用搞復(fù)雜一個腳本四道關(guān)#!/usr/bin/env bash# check_dump.sh /backup/orders_2026-09-20.sql.gzf$1tableorders# 第一關(guān)文件存在且大小不至于離譜[-s$f]||{echoFAIL: 文件不存在或為空:$f;exit1;}size$(stat-c%s$f)[$size-gt10240]||{echoFAIL: 文件僅${size}字節(jié)明顯異常;exit1;}# 第二關(guān)gzip 完整性能從頭解到尾gzip-t$f||{echoFAIL: gzip 校驗不過文件損壞;exit1;}# 第三關(guān)dump 文件頭 核心表的表結(jié)構(gòu)在zcat$f|head-3|grep-qMySQL dump||{echoFAIL: 不像 dump 文件;exit1;}zcat$f|grep-qCREATE TABLE \$table\||{echoFAIL: 缺核心表$table的表結(jié)構(gòu);exit1;}# 第四關(guān)結(jié)尾完成標(biāo)記 數(shù)據(jù)量級估算zcat$f|tail-3|grep-qDump completed||{echoFAIL: 缺完成標(biāo)記導(dǎo)出沒跑完;exit1;}ins$(zcat$f|grep-cINSERT INTO \$table\)echoOK:${size}B,$table的 INSERT 語句${ins}段幾處說明。第四關(guān)的Dump completed是整套校驗里含金量最高的一行這個標(biāo)記只有 mysqldump 完整跑到底才會寫出374 字節(jié)的事故文件恰恰就缺它——有這一關(guān)那次事故活不過第一天。行數(shù)估算是粗粒度的默認(rèn)的擴(kuò)展插入會把幾百上千行打包進(jìn)一條 INSERT所以看的是INSERT 語句段數(shù)這個量級指標(biāo)用途是和昨天、上周的值比對掉一個數(shù)量級就是有事。文件太大時可以只對尾部幾 MB 做抽查校驗抓完成標(biāo)記和最后一張表。2. 讓校驗進(jìn) cron讓失敗發(fā)出聲音腳本寫完不掛進(jìn)任務(wù)流等于沒寫。備份任務(wù)的完整形態(tài)是三段式導(dǎo)出、校驗、告警任何一段失敗都以非零退出碼收尾# crontab備份 校驗一體失敗走告警03* * * /opt/scripts/backup_orders.sh/var/log/backup.log21||\curl-s-XPOST-HContent-Type: application/json\-d{content:訂單庫備份校驗失敗請立即檢查}\https://你的告警接收端/webhook告警發(fā)到哪兒隨意——有 IM 就發(fā)群機(jī)器人沒有就發(fā)郵件重點是失敗必須推到人眼前而不是躺在日志里等人翻。順手把set -o pipefail寫進(jìn)備份腳本本身管道吞退出碼的問題一并解決。再補(bǔ)一個樸素但有效的習(xí)慣每周掃一眼備份目錄的文件大小趨勢異常不一定會報錯但一定會從曲線上露頭。五、坑四單表恢復(fù)的三條路各有各的坑鋪墊夠多了進(jìn)入正題真誤刪了怎么把一張表弄回來。場景設(shè)定講清楚后面的操作才有意義。某業(yè)務(wù)庫 orders_db 里的核心表 orders有人在線上跑了一條DELETE FROM orders WHERE user_id 10086 AND status 0本意是清理測試用戶的殘留結(jié)果這個 user_id 恰好被復(fù)用給了真實客戶——幾十萬行沒了表還在數(shù)據(jù)缺了一大塊。前提條件binlog 開著昨晚三點的全量備份校驗過、可用。1. 路線 A全量 dump 灌臨時庫——慢但心里踏實最樸素的做法把昨晚的全量 dump 灌進(jìn)一個臨時實例注意是臨時庫不是線上庫再從里面把 orders 表挑出來回遷。# 臨時實例上先建好空庫字符集顯式指定mysql-h127.0.0.1-P3307-uroot-p-e\CREATE DATABASE recover_db DEFAULT CHARACTER SET utf8mb4# 全量灌入gunziporders_2026-09-20.sql.gz|mysql-h127.0.0.1-P3307-uroot-precover_db這條路的優(yōu)點是流程零技巧、行為完全可預(yù)期dump 是完整的灌出來就是一個和昨晚三點一模一樣的庫之后從臨時庫里 SELECT 出缺口數(shù)據(jù)回遷線上即可。代價是慢——幾個 G 到幾十 G 的 dump按默認(rèn)配置灌一兩個小時起步。灌臨時庫可以放開手腳提速臨時實例關(guān)掉 binlog、調(diào)大 max_allowed_packet、把 innodb_flush_log_at_trx_commit 調(diào)成 2恢復(fù)速度能差出好幾倍。判斷標(biāo)準(zhǔn)如果 dump 很大、業(yè)務(wù)等不起這條路就是壓艙石而不是主力。它幾乎不犯錯但也不夠快通常和路線 C 組合使用。2. 路線 Bsed/awk 從全量 dump 里拆單表段——快但兩處要小心全量 dump 里每張表都有清晰的段落標(biāo)記可以把單表那一段直接抽出來# 抽出 orders 表段從它的表結(jié)構(gòu)標(biāo)記到下一張表的表結(jié)構(gòu)標(biāo)記sed-n/^-- Table structure for table orders$/,/^-- Table structure for table order_items$/p\orders_2026-09-20.sqlorders_seg.sql如果備份是 .gz 文件先zcat落一個臨時 .sql 再拆別直接對壓縮流做 sed。抽出來的段包含DROP TABLE、CREATE TABLE、鎖表語句和這張表的全部數(shù)據(jù)段尾會多帶進(jìn)來下一張表的標(biāo)記注釋行無害。要小心兩處。第一處拆出來的段丟了原文件頭的會話設(shè)置。全量 dump 開頭那一串/*!40101 SET ... */決定了字符集、SQL_MODE 這些導(dǎo)入環(huán)境單表段里沒有直接灌輕則告警重則亂碼。標(biāo)準(zhǔn)做法是在段文件開頭手工補(bǔ)上最小配置SETNAMES utf8mb4;SETFOREIGN_KEY_CHECKS0;SETSQL_MODENO_AUTO_VALUE_ON_ZERO;第二處段里的 DROP TABLE 是個隨時會炸的雷。我們的場景是行沒了、表還在如果把帶 DROP TABLE 的段直接對線上跑表會被整個換回昨晚的狀態(tài)——昨晚三點之后的新訂單全部消失事故反而變大。所以路線 B 的正確用法同樣是灌臨時庫、不碰線上它的價值只是把灌全庫變成灌一張表速度從小時級提到分鐘級。另有兩個小細(xì)節(jié)表名要帶上反引號做全匹配不然 orders 會連帶命中 orders_archive、orders_2025 這類前綴表段里保留的LOCK TABLESordersWRITE語句要求導(dǎo)入賬號有鎖表權(quán)限臨時庫上無所謂但要知道它在那兒別被報錯打懵。3. 路線 Cbinlog 時間點恢復(fù)——能找回誤刪但容易開過頭前兩條路都只能回到昨晚三點。昨晚三點到誤刪那一刻之間的正常寫入dump 里沒有要找回這個窗口靠 binlog 做備份 日志回放# 1. 先把昨晚全量灌進(jìn)臨時庫路線 A 打底# 2. 從備份完成時刻之后開始回放 binlog停在誤刪語句執(zhí)行之前mysqlbinlog --start-datetime2026-09-20 03:05:00\--stop-datetime2026-09-21 10:42:00\mysql-bin.000431 mysql-bin.000432\|mysql-h127.0.0.1-P3307-uroot-precover_db原理一句話全量備份是基準(zhǔn)binlog 是增量流水回放到誤刪前一秒臨時庫里就是最接近事故前一刻的數(shù)據(jù)。這是三條路里唯一能把丟失窗口壓到接近零的走法。它有兩個硬前提和一個大坑。硬前提binlog 得開著log_bin ON保留期得夠——binlog_expire_logs_seconds 只設(shè)了三天的第四天出事就只能干瞪眼平時就對著保留期和備份周期算一算覆蓋關(guān)系。大坑是停點選不好就會 GOING TOO FAR回放一旦越過那條誤刪的 DELETE它會被原樣再執(zhí)行一遍你辛辛苦苦回放出來的數(shù)據(jù)又沒了。所以動手前先把嫌疑時間段的內(nèi)容導(dǎo)出來人肉確認(rèn)# 先看后放導(dǎo)出誤刪時間點前后的 binlog 內(nèi)容定位那條 DELETEmysqlbinlog --start-datetime2026-09-21 10:35:00\--stop-datetime2026-09-21 10:50:00\mysql-bin.000432/tmp/suspect.sqlgrep-nDELETE FROM/tmp/suspect.sql更穩(wěn)的做法是用 position 或 GTID 卡邊界而不是憑秒級時間戳找到那條 DELETE 所在事務(wù)的起點–stop-position 停在它之前。社區(qū)也有現(xiàn)成的開源 binlog 解析工具能把 binlog 翻譯成 SQL 甚至生成反向回滾語句誤刪范圍小的時候更快但用之前務(wù)必在臨時庫上驗證結(jié)果。4. 三條路怎么選對比維度A全量灌臨時庫Bsed/awk 拆單表段Cbinlog 時間點恢復(fù)前提條件有可用 dump有可用 dumpdump binlog 開啟且在保留期內(nèi)能恢復(fù)到的時點昨晚備份時刻昨晚備份時刻誤刪前一刻卡準(zhǔn)停點速度慢小時級快分鐘級中等取決于回放量操作復(fù)雜度低中補(bǔ)會話頭、防 DROP高停點、GTID、回放主要風(fēng)險業(yè)務(wù)等不起丟會話設(shè)置 / 誤覆蓋線上新數(shù)據(jù)停點越過誤刪點二次事故適用場景兜底、基準(zhǔn)重建單表、binlog 沒開、要快要找回誤刪窗口內(nèi)的寫入我的選型順序供參考binlog 完好就用 A 打底加 C 回放到誤刪前一刻這是唯一能把損失窗口壓到接近零的組合binlog 沒開或已過期就接受回到昨晚的現(xiàn)實用 B 快速把表撈出來剩下的缺口走業(yè)務(wù)側(cè)對賬補(bǔ)償。三條路沒有高下之分差別只在你的前提條件允許你走哪條——而前提條件是事故發(fā)生之前就該備好的。六、坑五恢復(fù)現(xiàn)場的三個最后一公里細(xì)節(jié)前面講的是路線這里講路上的釘子?;謴?fù)操作本身通常順利翻車都翻在細(xì)節(jié)上。1. FOREIGN_KEY_CHECKS 的開與關(guān)訂單庫里的表往往帶外鍵。灌庫時表是按字母序進(jìn)的order_items子表很可能排在 orders父表前面父表還沒數(shù)據(jù)子表插入直接報 1452 外鍵約束錯誤。處理辦法是恢復(fù)會話里先關(guān)再開SETFOREIGN_KEY_CHECKS0;-- ... 灌數(shù)據(jù) ...SETFOREIGN_KEY_CHECKS1;要點三個。它是會話級變量只影響當(dāng)前連接不用擔(dān)心波及線上別的會話——反過來也提醒你別圖省事在配置文件里全局關(guān)掉它那等于把外鍵的日常保護(hù)整個拆了關(guān)掉之后灌進(jìn)去的數(shù)據(jù)外鍵關(guān)系是否成立不再有數(shù)據(jù)庫替你把關(guān)灌完要抽查臨時庫里可以跑一遍 LEFT JOIN 找孤兒行最后收尾那行 SET FOREIGN_KEY_CHECKS 1 一定寫上別讓臟狀態(tài)留在會話里。2. 唯一鍵沖突INSERT IGNORE 不是萬能膠從臨時庫回遷線上時最常見的報錯是 1062 Duplicate entry。原因前面提過誤刪發(fā)生在昨晚備份之后線上表在事故后大概率又有新寫入這些行的主鍵或唯一鍵可能和你要回遷的數(shù)據(jù)正面相撞。三種常見處理語義完全不同選錯就是新事故處理方式?jīng)_突時行為適用判斷直接 INSERT報錯中斷沖突少想逐條人工裁決INSERT IGNORE靜默跳過保留線上現(xiàn)有行明確線上現(xiàn)狀為準(zhǔn)且沖突量可接受ON DUPLICATE KEY UPDATE用回遷數(shù)據(jù)覆蓋線上行明確昨晚數(shù)據(jù)為準(zhǔn)覆蓋面要想清楚我的習(xí)慣是先量化再選回遷前先跑一遍臨時庫與線上的主鍵交集查詢沖突有幾行、都是什么業(yè)務(wù)含義看清楚了再定。能按主鍵范圍或時間窗切片回遷的就不要整表回遷——切片越小沖突面越小重跑成本也越低?;剡w腳本務(wù)必寫成冪等的跑到一半掛了再跑一遍不會產(chǎn)生重復(fù)數(shù)據(jù)。3. 字符集不一致亂碼都在恢復(fù)那天爆發(fā)平時的亂碼可能只是某個客戶端的顯示問題恢復(fù)現(xiàn)場的亂碼是真把錯誤數(shù)據(jù)寫進(jìn)庫里的。三個高頻來源拆單表段時丟了文件頭的 SET NAMES導(dǎo)入連接用了客戶端默認(rèn)字符集庫、表、列三層的默認(rèn)字符集不一致dump 是從 utf8mb4 的表里出來的臨時庫卻建成了 utf8——MySQL 的 utf8 是最多三字節(jié)的殘血版emoji 和部分生僻字直接報錯或截斷mysql 命令行導(dǎo)入時沒指定 --default-character-set連接字符集和文件實際編碼對不上。修法都是笨辦法但要練成肌肉記憶臨時實例建庫時顯式指定DEFAULT CHARACTER SET utf8mb48.0 默認(rèn)排序規(guī)則 utf8mb4_0900_ai_ci5.7 用 utf8mb4_general_ci導(dǎo)入命令統(tǒng)一帶上--default-character-setutf8mb4開灌之前先SHOW CREATE TABLE對比源表和目標(biāo)表的字符集與排序規(guī)則——花一分鐘省一個通宵。數(shù)據(jù)回遷完成后抽幾行帶中文和 emoji 的記錄肉眼過一遍亂碼越早發(fā)現(xiàn)改起來越便宜。七、把事故換成機(jī)制四條最佳實踐坑講完了收個尾。374 字節(jié)事故之后我給這個項目落的四條機(jī)制都是笨辦法但每一條都對著一個已經(jīng)付過學(xué)費的坑。1. 雙賬號隔離備份賬號專用、只讀、最小權(quán)限業(yè)務(wù)賬號和備份賬號徹底分開備份賬號長這樣賬號授予的權(quán)限明確不給的為什么backup_rolocalhost業(yè)務(wù)庫上的 SELECT、SHOW VIEW、LOCK TABLES、EVENT、TRIGGER全局權(quán)限、PROCESS用 --no-tablespaces 繞開、一切寫權(quán)限只能讀業(yè)務(wù)庫憑據(jù)泄露也刪不了數(shù)據(jù)就算哪天被換到別的庫也讀不到任何東西業(yè)務(wù)應(yīng)用賬號業(yè)務(wù)庫上的增刪改查全局權(quán)限各管各的誰也不借用誰的憑據(jù)隔離的意義是雙重的日常層面別的業(yè)務(wù)再怎么折騰自己的賬號也波及不到備份鏈路事故層面就算備份憑據(jù)整個泄露拿到的也是一個刪不了任何數(shù)據(jù)的只讀身份。權(quán)限配完別想當(dāng)然用受限賬號在測試環(huán)境完整跑一遍導(dǎo)出加恢復(fù)全流程通過才算配完——權(quán)限要求在 5.7 和 8.0 之間有些細(xì)節(jié)差異跑一遍全部現(xiàn)形。2. 校驗進(jìn) cron失敗必告警第四節(jié)的腳本加上三段式任務(wù)流是這次事故的直接遺產(chǎn)。補(bǔ)兩個容易漏的點一是set -o pipefail要寫進(jìn)備份腳本本身不然管道照樣吞退出碼校驗?zāi)_本根本不會被觸發(fā)二是告警通道自己也要定期演練——發(fā)一條測試消息看看收不收得到。我見過太多告警配置了但第一次真正觸發(fā)是在出事那天而且沒人收到。3. 定期演練恢復(fù)一次勝過檢查十次校驗?zāi)茏C明文件看起來沒問題只有真恢復(fù)能證明文件真的能用。我們的節(jié)奏是每季度一次拿最近一份 dump在臨時實例上完整走一遍灌庫、抽查行數(shù)、單表導(dǎo)出、字段核對全程記錄耗時。好處不止是驗備份——恢復(fù)耗時的手感就是事故發(fā)生時你敢向業(yè)務(wù)方承諾恢復(fù)窗口的底氣。演練過程里順帶把預(yù)案文檔更新掉哪張表多大、灌庫要多久、binlog 從哪個文件開始回放、停點怎么找。真出事那天你是照著預(yù)案干的不是憑記憶和膽量干的。4. 一份可以抄的 mysqldump 參數(shù)清單最后是積累下來的命令模板幾個參數(shù)一次說清mysqldump --defaults-file/etc/mysql/backup.cnf\--single-transaction\--routines--triggers--events\--no-tablespaces\--set-gtid-purgedOFF\--databasesorders_db\|gzip/backup/orders_db_$(date%F).sql.gz–single-transactionInnoDB 表走一致性快照導(dǎo)出不鎖業(yè)務(wù)。兩個邊界要知道表里混著 MyISAM 這類非事務(wù)引擎時它不適用導(dǎo)出窗口里來了 DDLALTER TABLE 之類會破壞一致性快照——導(dǎo)出期間凍住 DDL應(yīng)該當(dāng)成紀(jì)律來執(zhí)行–routines --triggers --events把存儲過程、觸發(fā)器、事件帶上。默認(rèn)只帶觸發(fā)器過程和事件要顯式給少了它們恢復(fù)出來的庫數(shù)據(jù)在但跑不動對賬對到一半發(fā)現(xiàn)缺一堆業(yè)務(wù)邏輯–no-tablespaces坑二講過受限賬號在 MySQL 8 上的保命參數(shù)–set-gtid-purgedOFFGTID 模式的實例往別的實例灌數(shù)據(jù)時防止把源庫的 GTID 事務(wù)歷史一起帶進(jìn)去。是否需要看你的復(fù)制拓?fù)淠貌粶?zhǔn)就先加上報錯了它會明確提示你。這套模板在 5.7 和 8.0 上都跑過版本差異就 --no-tablespaces8.0.21 起需要和 utf8mb4 默認(rèn)排序規(guī)則兩處腳本里處理掉即可兩邊通用。八、常見問題Q1發(fā)現(xiàn)誤刪第一時間該做什么A按順序做三步順序別亂。第一步鎖定時間誤刪語句大概幾點幾分執(zhí)行的先SELECT NOW(6)記下當(dāng)前精確時間這決定后面 binlog 回放的停點第二步止損把出問題的庫或表切只讀或者業(yè)務(wù)切走、把有問題的代碼入口先下線防止在臟數(shù)據(jù)上繼續(xù)產(chǎn)生新寫入——先讓傷害停止再開始修復(fù)最忌諱在主庫上反復(fù)試錯第三步清點彈藥SHOW BINARY LOGS確認(rèn) binlog 從哪個文件開始、保留到什么時候再確認(rèn)昨晚備份的文件大小和完成標(biāo)記。三步做完再決定走哪條恢復(fù)路線。Q2binlog 沒開還能救嗎A能救回來多少取決于你手里還有什么。有校驗過的昨晚備份就能回到備份時刻之后窗口內(nèi)的寫入只能走業(yè)務(wù)側(cè)補(bǔ)償——用訂單流水、支付回調(diào)、消息記錄做對賬把缺口算出來補(bǔ)錄如果配了延遲從庫比如延遲一小時可以直接從從庫撈誤刪前的數(shù)據(jù)庫托管在云上的可以看看控制臺有沒有時間點恢復(fù)能力它的原理同樣是備份加日志回放別當(dāng)成保命符。什么都沒有的情況下不要指望磁盤級恢復(fù)——InnoDB 刪掉的頁很快會被復(fù)用從磁盤底層撈結(jié)構(gòu)化數(shù)據(jù)的成功率低到不值得投入。所以 binlog 必須開保留期必須覆蓋備份周期這不是可選項。Q3dump 文件解壓到一半報錯文件壞了怎么辦A先定位損壞點gzip -t會報出第一個壞塊的位置。gzip 是流式壓縮壞點之前的數(shù)據(jù)是完好的用zcat 壞文件.gz 搶救.sql 2/dev/null把能解的全解出來然后把搶救出的 SQL 尾部那條不完整的語句刪掉通常是最后一個沒寫完的 INSERT灌臨時庫驗證行數(shù)。搶回九成以上是常態(tài)但這一招恰恰說明重要備份至少兩份、兩塊盤最好兩個機(jī)房——單點文件壞了你才有得換。Q4為什么恢復(fù)一律先灌臨時庫不直接對線上操作A三個理由。臨時庫失敗可以無限重來線上只有一次機(jī)會從 dump 里拆出來的東西帶著 DROP TABLE 和整表舊數(shù)據(jù)直接對線上跑會覆蓋誤刪之后的新寫入等于親手制造第二起事故在臨時庫上可以從容對賬——缺哪些主鍵、和線上有多少沖突、字符集是否一致——拿著完整清單再回遷每一步心里有數(shù)。多花的灌庫時間買的是任何一步搞砸了都能撤。Q5–single-transaction 不是不鎖表嗎為什么導(dǎo)出時業(yè)務(wù)還是被卡了A它只對 InnoDB 的事務(wù)表生效靠一致性快照實現(xiàn)不阻塞讀寫。三類情況仍然會卡表里混著 MyISAM 等非事務(wù)引擎導(dǎo)出它們時必須鎖表導(dǎo)出窗口里來了 DDL快照一致性被破壞還可能出現(xiàn)元數(shù)據(jù)鎖互相等待命令里帶 --flush-logs 或 --master-data / --source-data 這類選項時開頭會拿一次短暫的全局讀鎖。排查就對著這三條查看引擎構(gòu)成、看導(dǎo)出窗口有沒有 DDL 在跑、看參數(shù)列表。Q6日常到底做什么檢查才算備份真的可用A四道題全答對才算可用。文件在不在、大小和上周比在不在正常量級結(jié)尾有沒有Dump completed on標(biāo)記抽一張核心表能不能 grep 到 CREATE TABLE 和成規(guī)模的 INSERT最近一次真實恢復(fù)演練是什么時候通過的。前兩道交給腳本掛在備份任務(wù)后面成本為零第三道每周抽一次第四道每季度至少一次。任何一道答不上來就當(dāng)這份備份不存在從今天開始補(bǔ)。寫在最后回到那個 374 字節(jié)的文件。它最讓人后怕的地方不是備份丟了而是八個月里的每一天cron 日志里都是成功所有人都以為那份數(shù)據(jù)在。備份是給恢復(fù)那天用的不是給巡檢報表看的。檢驗一份備份的標(biāo)準(zhǔn)只有一條你真的用它恢復(fù)過一次。這篇文章把一次真實事故拆成了三層備份為什么靜默失效——憑據(jù)被默認(rèn)配置搶跑、退出碼被管道吞掉、沒人校驗沒人看錯誤日志誤刪之后單表怎么救——三條路線按你手里的前提條件選binlog 完好就打組合拳binlog 缺席就用拆表段搶救恢復(fù)現(xiàn)場的三個細(xì)節(jié)——外鍵、唯一鍵、字符集每個都能讓九十九步的努力卡在最后一步。對應(yīng)的修法都不高級專用只讀賬號、–defaults-file 獨占、pipefail、四道關(guān)校驗?zāi)_本、季度恢復(fù)演練。高級的從來不是某條命令而是失敗必須被看見這條機(jī)制。誤刪數(shù)據(jù)這事誰都可能攤上。區(qū)別在于有人攤上時手里是一套演練過的恢復(fù)預(yù)案有人攤上時手里只有一個 374 字節(jié)的文件。希望你是前者。有踩過的坑歡迎評論區(qū)交流尤其是恢復(fù)現(xiàn)場的那些細(xì)節(jié)——你多寫一條可能就省了別人一個通宵。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月停停大香蕉| 开心婷婷五月综合| 五月WWW| 爱iii做iiii日日| 色播五月网| 天堂网色色| 国产精品美女| 狠狠色 综合色区| 99热久久日本| 五月天色小说| 色色色综合色| 日熟女| 色五月婷婷天天干| 外国碰视频网站97| 丁香色五月AV在线| 激情图片亚洲| 99日韩| 激情五月综合网最新 | 婷婷色系婷色| 九热...av| AA片在线观看视频在线播放| 超碰久热| 激情丁香六月| 婷婷性爱五月天| 五月天婷婷激情网| 四季AV综合网| 91精品久| 久久久一级AAA| 99热热这里只精品996小说| 日韩欧美一区二区三区四区| 国产人妻操逼| 丁香五月婷婷啪| 五月婷婷久草| 久久加勤综合| 思思久久久婷婷| 另类专区在线观看| 黄色成人网站在线播放| 五月天成人在线视频网站| 国产色色网址网站| 色色色在线播放| 综合99视频| 99热有精品在线观看| 天天看A片| 欧美色色色色色| 影音先锋女人av鲁色资源网小说免费| 色婷婷中文| 五月香婷婷| 九九精品网| 综合激情网| 久久五月天视频| 色天使久久综合| www.久久久久| 国产成人精品一区二三区熟女在线| 天天檫天天爽| www.日日夜夜.com| 大香蕉欧美在线| 狠狠搞亚洲| 婷婷丁香五月视频| 丁香久久五月天视频在线观看| av大片在线| 久碰视频| 九月丁香婷婷网| 欧洲电影在线观看免费版英语版| 久久9视频| 五月婷婷深深爱| 丁香五月色欲| 丁香五月婷婷视频| 九九黄色网| 五月综合激情| 五月丁香六月| 超碰九热| 操逼视频一区| va婷婷在线| 天天日狠狠| 丁香五月综合激情久久潮喷| 五月天久久成人| caopeng97日韩| 天天摸天天爽| 99精品免费| a久久| 色综合久久88色综合天天99| 92久久| 深爱激情五月天| 另类 在线| 色噜噜狠狠色综无码久久合欧美| 欧美婷婷成人| 99精品综合视频| 色综合五月天| 丁香情色五月| 色情五月天丁香社区| 久久天堂加勒比| 1024婷婷综合久久五月天| 9月色婷婷| 色欲天天综合网| 日本妈妈乱| tingting五月天亚洲| 五月 丁香 欧美| 婷婷精品综合| 丁香五月婷婷基地| 久久精品夜色噜噜亚洲a∨| 九九久久五月天综合伊人| www.99热国产| 久久婷婷五月综合激情国产| 日本不卡一区二区三区| 五月天综合久久丁香91| 啄木鸟黑丝一区二区| 99只有这里是精品| 丁香婷婷色五月| 搡BBBB搡BBB搡18| 大香蕉 婷婷| 九九人人看| 人人爽欧美婷婷久久久五月丁香| 久久视频婷婷| 天天爽天天爽夜夜爽| 五月丁香色婷婷| 丁香五月综合婷婷| 五月深情久久| AV 3P| 五月婷婷激情| 99热黄| 色播六月| 成片免费播放| 黄网在线免费播放| 婷婷五月天激情小说| 欧美色综合天天久久综合精品 | 丁香五月 无码| 熟女色专区| 五月丁香婷婷成人网| 欧美日本日韩| 亚洲色欲欧美一区二区三区| 久久九九色| 日韩精品无码AV| 五月情丁香色| 99热这里是精品| WWW,五月| 超碰色综合| 亚洲一二三网| 亚洲色激情| 97在线观视频免费观看| 婷婷5月天激情综合| 综合99久久| 国产原创视频91九色| 五月六月丁香婷婷在线观看| 亚洲V国产V欧美V久久久久久| 亚洲黄色av网站| AV79| 99热超| 麻豆五月丁香婷婷| 婷婷五月综合社区在线| 婷婷五月六月激情| 嫩草AV久久伊人妇女超级A| 亚洲AV成人在线| 色婷婷情片| 秋霞三及片| 最近中文字幕2019视频1| 婷婷五月大| 人人爱国产| 久久精品综合色| 久久99网| 91狠狠综合久久| 97操在线视频| 婷婷丁香成人在线视频| 超碰日韩人妻在线| 婷婷五月天欧美| 六月婷欧美丁香综合| 青青草六月丁香| 香蕉人妻AV久久久久天天| 色婷婷91激情小说| 婷婷日韩| 五月婷婷六月丁香综合| 婷婷五月天色综合翘| 国产肥白大熟妇BBBB视频| 婷婷舔| 啪啪婷婷五月天激情| 亚洲精品国产setv| 五月社区婷婷激情| 久久综合五月| 狠狠干无码| 亚洲色五月天在线| www.99久久久久99| 99免费在线视频| 玖操97| 潮汕成人AV片在线| 婷婷伊人网| 五月天快乐开心激情网| 天堂在线婷婷| 99性爱视频| 天天操天天操天天操| 红桃91人妻爽人妻爽| 丁香婷婷影院| 天色综合网站| 色九月婷婷综合| 婷婷五月激情小说| 另类激情综合| 无码人妻一区二区三区四区| 七七九色| 婷婷丁香色女人| 99热精品在线观看| 婷婷六月伊人| 天天 青草 制服丝袜 在线 | 欧美啪啪9| 97色在线视频| 激情五月四色| 2015好吊操| 婷婷五月天桃花网| 亚洲情欲| 丁香五月成人婷婷| 思思热热久久| 综合激情婷婷| 大香蕉伊在| 天天日天天插| 色综合激情| 九九一综合精品| 天堂色色色| 99婷婷| 五月天伊人久久| 日韩成人免费电影| 丁香五月在线播放| 涩五月色婷婷| 中文字幕簧片| 天堂婷婷五月在线| 丝袜人妻| 99九精品| 丁香五月婷婷亚洲激情四射| 综合久久激情久久| 天天干天天干天天干| 色色五月天婷婷丁香| 色婷婷深爱五月| 欧美超碰人人| 中文字幕婷婷在线| 97成人视频| 91九色在线| 天天干天天干天天| 99热网站| 九热视频| 五月丁香六月婷婷综合网缴情| 天天综合网~91| 六月丁香激情网| 国产欧洲欧洲精品久久| 开心激情网在线| 五月天激情Av| 热99这里只有精品视频| oVV4WIB3vFi8D| 中文字幕在线日亚洲9| 怡红院91a√| 五月婷婷黄色网址| 一本色道久久综合狠狠躁一二三| 欧日韩成人| 婷婷在线日韩综合| AV操一操| 丁香婷婷综合喷| 日本一級黃色一級片| 激情色色| 亚洲视频一区| 免费色婷婷| 天天日天天久久青青| 色婷婷综合网站| 婷婷六月丁香五月| 99在线精品视频| 五月婷婷激情综合网| 97操碰视频| 操逼六区| 日韩色色视频| 婷婷五月激情黄色| 狠爱婷色| 丁香激情久久| 成人小说 五月天 婷婷| 色射婷婷五月天| 婷婷五月骚厕所| 伊人五月网| 青青福利网| 婷婷在线午夜| 亚洲操B| 亭亭玉月丁香| 996er热| 亚洲精品亚洲人成人网| 熟女色色一区二区| 五月婷久久草| 99r久久这里只有精品| 国产阿姨日皮艹逼内射视频| 深爱五月最新网址| 色综合久久综合中文综合网| 丁香五月天社区| 4399无码视频| 丁香五月123| 99热国内精品| 五月人妻婷婷| 久久999久久999久久999久久| 无人区码一码二码三码医生系列| 欧美日韩91| 色www久视频| 五月丁香六月停停停| www.色色com| 91色色色18| 最新日本A片| 天天狠狠插| 99亚洲无码| 伊人久久大香蕉网| 国产av一区二区三区| 啪啪啪丁香五月| 九九色大香蕉| 色五月色综合| 色啪网| 香蕉97碰碰碰欧美| 爱操人妻| 六月丁香五月天| 九月婷婷久久久| 亚洲情综合五月天| 丁香五月欧美成人| 99无码黄色视频| 久久98| 久久R激情| 外国碰视频网站97| 99亚洲色色| 九九久久网| 67194中文在线| 在线成人网站| 六月丁香综合| 亚洲中文字幕AV在线| 99 福利 导航| 亚洲国产精品综合色区| 综合网色| 天天摸天天肏| 五月综合激情网| 蜜桃五月天| 六月婷婷九月丁香| 婷婷五月天综合色| 国产AV一区二区三区最新精品| 99热99艹在线观看| 另类图片五月天婷婷| 99热这里只有精品9| 国产亚洲精品久久久久久牛牛| 色婷婷成人做爰A片免费看网站| 日本三级成人秘书精品片| 五月丁香无码| 91九色熟女| 久久久日韩特色特黄AAAA| 开心久久xxx色| 99热在线播放| 碰超在线九色| 日本五月婷婷| 久久婷婷大香蕉| 五月丁香综合网| 91黄址| 婷婷五月天综合久久| 国产亚洲精品久久久久久郑州| 抽插特写| 婷婷丁香激情| 91女人18毛片水多国产| 99精品22| 五月婷婷丁香综合,亚洲天堂| 99人人干人人| 久久免费操| 人人操超碰| www 五月天 com| 99在线精品观看99| 天天上天天爽| 亚洲综合在线视频| \\五月天婷婷激情| 婷婷色情 | 婷婷久久免费看| 97色干| 99丁香五月婷| 九九婷婷五月天| 综合五月亭亭9| 国产69久久久欧美黑人A片| 九九精品在线视频观看| 激情综合五月| 婷婷丁香激情五月天色色| 草了bav视频在线观看| 欧洲日韩一区二区三区| 碰碰碰97国产| 亚洲精品在线视频| 丁香五月婷婷久久综合激情网| 五月激情婷婷六月| 蜜臀av粉嫩av懂色av| 精品爆操| 一起草AV| 五月天婷婷丁香蜜桃91| 丁香婷婷五月综合欧美另类| 丁香五月社区| 国在线激情网| 97爱艹婷婷开心丁香激情综合| 爱射综合| 搡BBBB搡BBB搡18| 婷婷夜夜夜夜| 9婷婷内射| 五月综合激情| 五月天婷婷色播综合在线| 色婷婷成人做爰A片免费看网站 | 天天更新天天亚洲| 激情婷婷99| 67194中文字幕| 丁香六月开心| 国产乱轮一区二区三区| 在线99热| 17.c黄色| 成人丁香五月| 97操在线| 丁香婷婷深情五月亚洲| 一本伊人色婷| 在线日韩视频| 九97免费视频| a久久| 五月丁香六月情| 开心五月综合激情网| 五月婷丁香| 久久成人人妻| 色欲婷婷夜夜| 第四色五月婷婷| 99久re热视频精品98| 久久婷婷五月天亚洲欧美| www.91婷婷| 九九热免费视频| 99乱视频| 丁香五月aV| 久久精品日| 久久婷婷亚洲| 婷婷五月天视频| 丁香五月另类小说在线阅读| 香蕉视频91| 婷婷色情 | 久re热视频| 婷婷五月AA五月在线| 免费成片在线观看| 成人在线观看精品| 五月婷婷综合网| 色五月丁香婷婷| 凹凸探花电影| 99er日韩| 亚洲AV日韩无码| 99热伊人综合| 97色五月婷婷在线| 极品人妻VIDEOSSS人妻| 色五月婷婷基地| 色综合天天| 91久久精品国产91性色TV| 深爱激情五月网| 久久婷婷五月天激情| 五月丁香福利| 欧美三级黄色片久久| 九九婷婷五月天| 六月婷婷综合| 99精品在这里| 色五月婷婷中文字幕| 另类综合色| 日韩欧美一级大黄网站| 99热这里只有免费| 婷婷激情五月综合丁香社| 五月天久久久| 婷婷五月天综合激情| 大香av| 欧在线一区| 天天色中文字幕女优AV| 亚洲美女裸体被操在线观看| 五月精品99综合| 嫩草AV久久伊人妇女超级A| 婷婷伊人五月天| 中文字幕AV在线| 99爱爱网| 丝袜大香蕉| 五月丁香婷婷色色色| 久久久天天啊| 99在线免费视频| 97碰碰在线观看视频| 开心婷婷丁香五月| 色情五月天丁香社区| 国产婷婷综合| 久草五月| 九九在线视频| 久久艹 五月天| 99超超碰| 欧美碰碰碰| 国产精品色婷婷AV综合色色| 国产99视频永久免费| 亚洲开心激情网| 久一这里有精品国产| 伊人99热| 婷婷五月综合激情小说| 久热中文字幕在线线观看 | 9色免费网| 国产九月婷婷| 啪啪五月综合| 我爱大香蕉| 久久久人妻久久久| 丁香综合伊人| 婷婷五月天黄色小说| 天天日天天干天天插天天射| 欧美人人草| 丁香激情五月| 色99在线观看| 欧美成人一区二区三区在线视频 | 久久a热| 五月丁香影院| 色情五月婷婷| 亚洲国产精品VA在线看黑人| 丁香五月手机视频| 91男同| 性色播| 婷婷色激情五月天| 日韩精品999| 色情综合| 婷婷情色五月| 亚洲综合网 665566| 色综合久| 成人开心五月天| 久久婷婷啪啪视频| 丁香激情五月| 天天插天天干| 五月天婷婷丁香| 婷婷五月天激情网| 久草狼人| 丁香五月天无码| 精品五月天| 久久机热/这里只有精品| 婷婷五月色天| 一本久婷婷综合| 超碰在线看| 天天插夜夜爽| 日本啪啪天堂| 蜜桃人妻无码AV天堂三区| 9久热在线精品| 99热在线观看| 欧美色色色色色色色| 五月天激情影院| 国产精品第一国产精品| xxxx久| 思思热久久爱| 五月综合无码| 婷婷视频在线| 玖玖国产视频一区| 五月丁香操亭亭网| 中文字幕丰满孑伦无码专区| 国产五月天婷婷| 婷婷精品在线| 色色五月婷| 久久综合网桃花| 青青草a在线| 97碰碰在线看视频免费| 日本综合九九| 婷婷丁香视频在线观看免费 | 9久热这里只有精品视频| 99riAV国产精品视频| 婷婷六月天| 99狠狠色| 欧美va在线观看| 成人无码精品1区2区3区免费看| 丁香六月亚洲| 99热精品免费| 婷婷色婷婷亚洲成人| 中文字幕 中文字幕明步| 99.N在线视频| 夜夜综合色| 丁香五月性| 91se在线观看| 婷婷五月天综合久久| 婷婷婷狠狠| 天天搞夜夜叫| 丁香六月啪啪| 天天摸.天天mo| 91九色视频在线观看| 五月丁香色停停啪啪啪| 五月天激情小说婷婷基地| 99热免费观看| 五月丁香六月久久| 婷婷五月在线视频| 六月婷婷天天操夜夜爽视频| 中文无码婷婷| 激情综合网丁香| 丁香五月色五月| 久热99久热| 亚洲欧美另类在线23p| 国产,欧美,学生妹,视频| 日本一道久久| 丁香五月婷婷啪啪| 丁香六月婷婷综合激情欧美| 99热国产| 6月丁香婷婷激情| 久久9视频| 亚洲激情淫网| 老师的粉嫩小又紧水又多A片视频| 超碰人人插| 亚洲va欧美va国产综合久久久| 99亚洲视频| 日韩肏屄网| 色综合久久44| 成人av在线电影| 99热精品网| 久久久无码精品成人A片小说| 婷婷五月成人| 欧洲亚洲欧洲99久久| 婷婷五月天VI| 日日夜夜小色哥| 美女xx不卡| 九九热在线视频观看| 9 9 9色色| 久久婷婷激情| 热99精品视频观看| 色欲AVV| 欧美综合激情丁香五月六月婷| 香蕉久久av一区二区三区| 中文不卡一二三区| 色色丁香五月天社区| 日日杆天天| 久久久99婷婷久久久久久| 中文av网| 日日操,夜夜爽| 日韩美女羞羞网站在线观看| 日韩一级片| 一夜福利不卡| 青青草网武则天| 亚洲欧美综合7777色婷婷| 99爱视频精品在线观看| 中文字幕不卡网站| 五月婷婷久久久| 99这里只有精品视频免费| 久久A极片| 九九热这里| 五月丁香爱婷婷深深| 国产五月视频| 国产婷婷综合| 激情婷婷五月天在线观看| 色婷婷操逼网| 色色色欧美| 玖玖热视频| 九九热a| 秋霞九九无码| 天天日天天爽夜夜爽| 99riav 亚洲| 99精品视频网| 日日干夜夜撸夜夜骑| 五月婷婷亚洲色图| 天堂伊人干| 婷婷综合精品| 可似看的AV| 亚洲小视频免费观看| 97操碰人免费| 九九色精品| 亚洲综合激情五月久久| 月婷婷亚洲| 五月天婷婷操逼视频| 老美AA片| 亚洲五月婷婷| 狠狠干综合网| 日日舔夜夜操| 久久婷婷五月天激情| 超碰色色综合| 东北黄色一级| 五月婷婷六月激情| www.五月天婷婷| 91人操| www.色色色色| 色欲五月天| 五月婷婷激情刺激| 欧美VA视频| 东京热人妻一区二区三区在线| 五月天综合| www,婷婷五月天777me,com| 婷婷五月天成人五月天| 丁香色综合| 91日视频| 色欲婷婷五月天丁香| 黄色热99| 超碰日韩成人| 亚洲亚洲人成综合网络| 久草热久草在线视频| 亚洲色综合| 九色无码| 九九热视频99| 久久99久久99精品免观看粉嫩| 亚洲激情AV| 久久久大香蕉| 色五月天丁香婷婷| 色色亚洲五月天| 99思思热只有在这里看 | 人人操人av| 五月天无码视屏播放| WWW五月婷婷| 色婷婷电影网| 97人人干人人操| 99精品视频在线观看免费| 97香蕉久久超级碰碰高清版| 色婷婷丁香| 黄色五月婷婷| 91热在线| 99在线免费视| 久久与婷婷| 婷婷中文字幕版| 天天撸夜夜爽| 思思热国产| 九九热99热| 草综合14| 五月婷婷激情性爱| 5月丁香啪啪啪| 91狠狠色丁香婷婷综合久久精品| 丁香五月成人| 亚洲综合色色| 亚洲综合婷婷| 99婷婷狠狠成为人免费视频| 超碰免费观看| 日本久久人人| 婷婷久久午夜网| 丁香五月综合在线播放| 吉澤明步Av一區二區| 婷婷五月丁香网| 丁香五月开心亚洲| 91久久久久久| 丁香五月天大香蕉啪啪| 91丨人妻丨国产丨丝袜| 99热日本| 五月丁香色婷| 婷婷五月激情图片| 涩五月婷婷| 亚洲色就是色色色| 91色涩| 亚洲视频a| 色亚洲婷婷| 少妇综合网| 人妻中文在线| 丁香五月婷婷操逼| 亚洲综合在线播放| 五五月五月| 婷婷五月丁香五月综合网| 日韩 中文 欧美| 九九久久99| 亚洲最大五月天成人网| 色墦五月丁香| 丁香av网| 激情99。| 日本成人噜噜噜| 五月婷婷丁香综合| 九色成人AV在线| 久久婷.com| AV天堂婷婷五月天| 丁香五月天激情| 亚洲综合色婷| 99热这里在线精品| 婷婷深爱五月丁香| 97精品人人A片免费看| 99伊人婷婷在线| 婷婷丁香人妻| 五月丁香操婷逼| 大地9中文在线观看免费高清 | 婷婷六月激情啪啪| 啪啪综合| 九九综合九色欧美狠狠| 婷婷激情五月天天天开心| 天天综合中文| 婷婷五月花| 九九亚洲综合| 色婷婷五月中文字幕在线dvd| 久久538| 中文字幕丰满孑伦无码专区| 九色视频91| 丁香六月伊人| 午夜69成人做爰视频| 插逼综合网| 2025年最新亚洲在线欧美| 婷婷97| 伊人久久婷| 天天日夜夜曹| 99热有精品在线观看| 大香蕉婷婷丁香天堂AV| 色日本综合| 九九综合网| 色五月婷激情| 风流少妇A片一区二区蜜桃| 玖热精品综合视频| 26.uuu丁香五月婷婷| 国产三级在线播放| 色丁香五月综合网| 四LLL少妇BBBB槡BBBB| 欧美婷婷六月丁香综合色| 思思热在线| 十月色综合| 欧美人与性动交CCOO| 欧美va精品va老师va| 人人综合久| 婷婷丁香五月社区亚洲| 五月香六月婷| 狠狠色噜噜狠| 亚洲情a| 久久婷婷五月丁香蜜桃网| 五月丁香六月激情网| 天天干,夜夜爽| 婷婷5月色| 99人人干| 99小视频| 五月婷婷六月丁香| 色情·com| 久草热久草在线视频| Av性爱网站| 国产XXXX搡XXXXX搡麻豆| 99热 在线观看| 婷婷五月天成人网| 草美女在线观看视频在线播放| 久热这里只有精品66| 国产精产国品一二三在观看 | 91人妻人人做人碰人人爽九色| 丁香五月宝贝激情网| 激情都市另类| 99热最新网址| 人妻中文字幕网| 99re6久热只有精品6在线直播| 日本不卡一区二区三区| 五月丁香av在线| 90色免费视频| 99热这里只有精品4| Av在线资源| 色欲久久久久久综合网综合网| 99精品视频在线观看| 五月天基地| 午夜日韩久久久网站| 影音先锋色婷婷| 婷婷久久午夜网| 久久婷婷五月综合色欧美| 亚洲 五月 婷婷 成人| 情一色一乱一伦一91A| 性欧美日本| 婷婷五月丁香综合| 内射爽无广熟女亚洲| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 五月丁香综合激情| 青青草免费公开视频| 思思热久久爱| www.激情com| 99热日韩| 婷婷之六月丁香| 丁香婷婷久久综合在线| 五月丁香六月婷婷久久| 亚洲 小说 欧美 激情 另类| 综合精品啪啪| 性爱综合网| 亚洲一区二区无码蜜乳av| 蜜臀99久久精品久久久久| 婷婷五月天av| 人人草人人视| 无码一区二区日韩| 北条麻妃伊人 | 亚洲激情Av| 欧美99热| 婷婷五月天综合色| 色色色综合色| 婷婷成人av| 丁香大香蕉| 丁香婷婷成人在线播放| 亚洲在线操| Av在线资源| 日本va欧美va国产激情| 狠狠草狠狠草| 五月情四婷婷| 亚洲成人一区| 任你干aa| 丰满女老板BD高清A片| 五月丁香性| 色五月丁香激情| 9精品视频在线观看| 日韩中文字幕| 人人摸人人摸| www.五月天婷婷| 涩涩网五月天| 久热伊人| 久久看婷婷| 热日韩欧美| 思思99热| 99色婷婷视频| 五月婷视频在线| 丁香婷婷五月六月天| 97成人丁香婷婷| 九月激情综合婷婷| 精品自拍97| 人妻内射一区二区在线视频| 久久综合五月| 色色无码| 天天色天天日天天舔| www 五月天 com| 丁香婷婷免费| 色五月婷婷色| 久久精品4| 99er热精品视频| 天天操天天插天天射| 婷婷五月天在线观看| 五月丁香六月情| 五月丁香精品| 第五婷婷伊人丁香| 亚洲成人在线电影网站| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 欧美这里只有精品| 丁香六月天婷婷开心综合| 狠狠狠人妻| 人妻自慰在线| 26uuu国产色| 超碰99在线观看| 久久曰曰| 在线视频另类| 99熟女| 成人在线高清| 91九色在线观看免费| 久久九九激情五月天 | 玖玖爱伊人网| 秋霞AV吧| 色综色网| 亚洲啪啪精品| 婷婷五月天亚洲综合网| 色yeye欧美| 东京热五月婷婷| 婷婷狠狠青青| 丁香五月WWW| 婷婷色色丁香| 人人性久久| 婷婷五月激情欧美| 日韩婷婷五月| 色欲操| 9这里只有精品| 婷婷五月天熟妇| 婷婷色av| 噜噜视频| 亚洲AV成人精品日韩在线播放| 国产在线6| 蜜乳A√| 五月天激情婷婷小说| 综合激情五月天六月婷免费视频| 五月天堂婷婷| 久久久久久草黄色片AV在线观看| 大香蕉久久婷婷精品综合| 狠狠丁香| 99成人网站| 狠色色狠网| 亚洲色五月天| 天天操天天操天天操天天操天天操| 婷婷五月天a| 婷婷久久丁香| 丁香五月婷婷亚洲综合精品| 俺去也婷婷| 天天色五月| A网在线欧洲| www,色婷婷| 开心激情网五月天| 亚洲AV影片在线观看| 久久99免费视频网站| www.97碰碰com| 天天草人人摸| 五月深爱网| 色五月婷婷91| 欧美性生交XXXXX无码小说| 99色人| 激情婷婷五月| 五月婷伊人| 五月天婷婷成人网| 亚洲激情网| wuyuedingxiang| 色狠狠综合网| 综合深爱五月| 任你爽精品免费视频6| 国产69久久久欧美黑人A片| 海外网站专业操老外| 久久久久久久五月婷婷六月丁香综合,开心激情综合网 | 天天干天天操天天拍| 激情婷婷丁香| 国产日比| 婷婷六月花| 激情开心五月天| 久久久亚洲成人无码A片| 成人看片网站| 色噜噜狠狠狠综合曰曰曰| 天天色色天天| 五月丁香在线观看国产| 丁香五月天无码AV| 久热这里只有精品视频免费观看| 五月婷激情| 91蜜桃婷婷狠狠久久综合9色| 免费无码毛片一区二区A片| AV大片在线观看| 色八月婷婷| 丁香婷婷五月六月天| 69精品人人人人| 久激情| 日韩av干| 日韩999| 亚洲操B视频| 婷婷五月天激情五月天| 99色性爰网络| 在线观看996精品| 婷婷五月天激情小说网站| AV在线免费播放| 极品嫩草| 五月婷丁香花| 亚洲婷婷五月| 国产在线网| 国产xxxxx在线观看| 五月丁香综合激情| 九色视频九色九色91jiuseshipin| 国产成人亚洲综合亚洲| 五月丁香婷婷久久| 日日夜夜干| 丁香五月在线自慰| 激情网五月| 色综合久久无码| 伦99热| 国产肥白大熟妇BBBB视频 | 丁香女人五月天| 五月婷婷偷拍| 激情久久久久久久久| 日日夜夜狠狠干| 五月天社区婷婷| 色天天综合天天综合频道。| 99久久婷婷| 大香蕉五月天婷婷| 人人干女人| 丁香婷婷色情| 色五月综合在线| 国产三级在线播放| 狠狠色 综合色区| 超碰熟女农村在线69| 精品99久久久久成人网站免费| 五月天激情亚洲| 久久六月综合| 婷婷丁香五月亚洲免费| 亚洲操女| 午夜电影网VA内射| 久久人妻超碰一区| 丰满人妻一区三区三区| 狠狠婷婷色| 999影院成人在线影院| 久久久婷丁香五月| 26UUU欧美| 婷婷五月丁香综合瑟瑟| 欧美色色色色色| 人人97操| 9色在线视频| 五月丁香激情啪啪| 色色色无码| 九九这里有精品视频| www五月| www,五月丁,com| 婷婷五月性感| 欧美激情综合五月色丁香| 啪啪色区| 综合AV在线| 天天搞夜夜叫| 午夜天堂一区人妻| 婷婷精品性性性性性性性| 大香蕉综合网| 互月天综合| 停停五月色宗合| 99在线精品视频| 天天 青草 制服丝袜 在线| 五月天久久久| 婷婷五月天亚洲激情戏精品| 婷婷丁香五月天色色| 五月天开心网| 丁香五月婷婷亚洲色图| 婷婷五月天影院| 久草热视频在线观看| 色一情一乱一乱91Av| 五月天偷拍| 婷婷色成人| 2017人人操| 少妇做爰免费视看片| 中文字幕色色色| 黄色精品五月婷婷| 青青草免费公开视频| 亭亭五月激情亚洲在线| 色噜噜97视频在线观看| 婷婷中文字幕| 思思国产99| 亚州操操| 国产精产国品一二三在观看| 五月婷婷中文字幕AV| 久操热| 9999热在线| 五月丁香婷中文| 日批在线看| 色噜噜狠狠色综合网| 天天爽天天爽| 久久性爱视频| 亚洲综合婷婷| 午夜成人综合| 97啪在线观看视频| 猫咪伊人久久| WWW.99热| 天天狠天天狠| 黄色短视频在线观看| 天天爽天天| 激情五月天伊人av| 亚州激情在线视频| 五月天操逼网| 亚洲性爱AV在线| 久久激情综合| 青青草原精品久久| 2050人人操免费工开爱| 超碰93在线观看| 在线理论片| 91成人品| WWW,婷婷,COM| 激情的五月| 涩五月婷婷| 六月婷婷操逼| 超碰成人公开| 久久婷婷精品| 亚洲熟妇无码乱子AV电影| 婷婷五月婷婷五月| 婷婷九月| 成人欧美日韩| av操一操| 操大屄五月天视频| 久久激情视频| 婷婷五月大香蕉| www.97干视频| 丁香久久激情俄| 免费视频WWW在线观看网站| 色婷婷www| 婷婷99视频精品| 久久激情五月天| 色五月激情综合| 99色在线视频观看| 丁香五月性| 五月丁香啪啪啪综合网| 美女xx不卡| 九九久99免费视频| 91麻豆国产三级精品福利在线观看| 五月婷婷香| 丁香五月五婷| 6080av| 99热这里只有精品亚洲| 狠狠搞五月天| 综合视频久久| 亚洲视频二区| 深夜男女福利刺激影院一区完整| 中文字幕日本最新乱码视频| 国产精品涩涩涩视频网站| 色五月激情网| 久热九九| 丁香六月啪| 九九热re99re6在线精品| 99热只有| 久久综合影院| 婷婷五月色| 色综合五月| 婷婷亚洲色| 热99精品视频| 日日夜夜婷婷| 丁香成人视频| 亭亭五月丁香五月天激情| 激情五月影院| 99热综合网| 欧美啄木乌丝袜人妻系列| www.夜夜.com| 天天天天天色| 五月的婷婷六月丁香| 精品九九视频| 思思热精品在线观看| 五月婷婷视频28| 久久99网| 亚洲精品国产成人AV在线| 九色91视频| 久久99热这里只频精品6学生| 影音先锋91| 99九九在线精品热动漫| 五月丁香大香蕉| 丁香六月婷婷色XXXXX| 免费观看的av| 欧美日韩成人综合9| 婷婷五月综合丁香久久| av成人在线播放| 欧美精品999| 丁香六月婷月91婷月| 婷婷永久在线| 五月天综合在线观看| 色婷婷小说网| 天天色天天| 婷婷丁香91综合| 丁香五夜激情四射夜夜夜| 五月久久婷婷丁香| 久久综合热17c| 亭亭五月激情亚洲在线| 九九热最新| 色婷婷导航| 一起草AV入口| 狠狠爱夜夜| 婷丁五月| 99视频精品全部免费 在线| 丁香六月婷婷色XXXXX| 深爱五月激情| 亚洲精品白浆高清久久久久久| 北京熟妇搡BBBB搡BBBB| 婷婷丁香五月天色色| 男人天堂99| 怡红院精品视频久久久久久久久| 婷婷丁香水多多视频| 激情五月天激情综合网| 操操国产| 欧美怡红院黄站| 伊人五月天97| 婷婷六月丁香激情综合| 五月丁香六月色| 亚洲色网址| 肏日网在线看| 五月丁香猫咪久久婷婷综合视频激情四射网入口 | 中文字幕亚洲-区久久99婷婷| 激情婷婷五月| 黄色片avv| 操久久网| 99热只有精品在线观看| 久久婷五月婷| 91色综合网站在线| 日本久久婷婷| 色久激情在线| 精品人妻一区| 色综啪啪| 天天爽天天弄| 久久婷婷五月丁香网| 成人综合网站| 日本啪啪网| 巴基斯坦粉嫩无码视频| 婷婷九月激情| 91精品视频男人的天堂| 婷婷五月天AV激情| 色五月婷婷综合在线| www.丁香黄色五月天人与| 五月丁香久人妻中文| 久久超视频| 亚洲黄色网址| 色婷婷婷av| 天天操B| 色色综合网www| 开心激情色婷婷五月天| 日本熟妇精品99| 久久久9久| 99视频精品8| 99re久久| 91日婷婷在线| 很很干五月天| 国产激情综合五月久久| 激情床戏| 天天干 夜夜爽| 熟妇高潮一区av| 丁香亚洲婷婷五月| 91丨九色丨东北熟女| 成人在线网站| 噜噜视频| 久久婷婷五月综合色丁香花| 五月综合激情久久| 亚洲综合色色| 91精品婷婷国产综合久久| 夜夜躁爽日| 五月婷婷激情在线| 欧洲亚洲精品| 色狠狠图片| 五月色网| 99国产小视频2013| 综合色影| 亚洲综合五月天| 色婷婷播放| 99综合激情久久精品久久| 亚洲综合网在线| 青青热久精品视频在线观看| 九九热最新地址| 91精品综合久久久久久五月丁香| 精品九九在线观看| 五月婷婷影| 亚洲综合在线视频| 亚洲综合五月天| 色色色99| 天天弄天天操| 久久杏爱视频|