欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Elasticsearch數(shù)據(jù)清理實(shí)戰(zhàn):Shell腳本與索引生命周期管理

Elasticsearch數(shù)據(jù)清理實(shí)戰(zhàn):Shell腳本與索引生命周期管理 如果你在搜索引擎里敲下“shell刪除es數(shù)據(jù)”八成是遇到兩種情況要么ES集群磁盤(pán)告警要騰空間要么測(cè)試環(huán)境里灌了一堆臟數(shù)據(jù)想快速清理。別看這個(gè)需求聽(tīng)起來(lái)簡(jiǎn)單實(shí)際操作中翻車(chē)的人不少。有人用一條DELETE /*把整個(gè)集群的索引全刪了有人辛辛苦苦跑了半天_delete_by_query卻發(fā)現(xiàn)磁盤(pán)空間一點(diǎn)沒(méi)少還有人直接rm掉了ES的數(shù)據(jù)目錄導(dǎo)致節(jié)點(diǎn)起不來(lái)。這篇文章不打算復(fù)讀官方文檔而是把我實(shí)際處理ES數(shù)據(jù)清理時(shí)的完整思路、能直接抄的shell腳本以及踩過(guò)的坑一次性講清楚。適合運(yùn)維、后端開(kāi)發(fā)和所有需要跟ES打交道的人。1. 先分清你要?jiǎng)h的是“索引”還是“文檔”兩種清理思路差別很大很多人第一次接觸ES清理時(shí)腦子里想的還是MySQL那種DELETE FROM table WHERE ...的邏輯。但ES的存儲(chǔ)架構(gòu)決定了刪文檔和刪索引是兩條完全不同的路線性能和底層行為也天差地別。1.1 為什么說(shuō)刪除文檔不等于釋放空間ES底層是Lucene數(shù)據(jù)是按“段segment”組織的。段文件一旦寫(xiě)入就是只讀的后續(xù)的更新刪除操作不會(huì)直接改動(dòng)段文件而是靠標(biāo)記刪除.del文件來(lái)記錄。這么說(shuō)吧刪除一條文檔其實(shí)只是給這條數(shù)據(jù)打了一個(gè)墓碑標(biāo)記它占的空間還在那里。真正的空間釋放要等段合并merge發(fā)生把有刪除標(biāo)記的段文件重寫(xiě)一遍去掉那些死數(shù)據(jù)才可能回收空間。但merge本身需要額外資源ES不會(huì)因?yàn)槟銊h了幾條小數(shù)據(jù)就去觸發(fā)全局merge。這就是為什么你跑了delete_by_query返回的一堆任務(wù)都顯示成功但磁盤(pán)剩余空間幾乎沒(méi)變化的根本原因。反觀刪除索引它是直接把整個(gè)索引的全部分片文件都unreference掉數(shù)據(jù)段文件從磁盤(pán)上徹底摘除。在大多數(shù)情況下ES刪除索引后空間會(huì)立即釋放或者很快進(jìn)入可復(fù)用狀態(tài)。我對(duì)這個(gè)問(wèn)題的態(tài)度很簡(jiǎn)單如果只是要清理過(guò)期數(shù)據(jù)刪索引永遠(yuǎn)優(yōu)先于刪文檔除非業(yè)務(wù)對(duì)“索引還得保留”這件事有硬性要求必須按條件剔除部分?jǐn)?shù)據(jù)。1.2 什么時(shí)候該刪整索引什么時(shí)候該按條件刪我平時(shí)判斷的標(biāo)準(zhǔn)大概是這樣清理場(chǎng)景推薦手段原因日志型索引過(guò)期logstash-2024.01.01刪除整索引索引維度天然按時(shí)間段切分刪起來(lái)干凈利落空間釋放徹底同一索引內(nèi)混有多個(gè)業(yè)務(wù)的數(shù)據(jù)只需清掉某一小塊按查詢(xún)刪除_delete_by_query無(wú)法按索引隔離只能按條件刪但要接受“空間不是立即釋放”測(cè)試環(huán)境灌了一堆隨機(jī)數(shù)據(jù)刪除整索引并重建比delete_by_query快得多還能順便重置mapping需要保留索引結(jié)構(gòu)但刪除其中大量歷史數(shù)據(jù)新建索引 reindex然后切換別名刪索引再重建比在原索引上delete_by_query更可控看了這個(gè)表格你應(yīng)該能理解刪整個(gè)索引是ES親兒子操作delete_by_query更多是無(wú)奈之舉。千萬(wàn)不要圖省事在日志型索引里執(zhí)行按查詢(xún)刪除那相當(dāng)于“用大炮打蚊子”既慢又費(fèi)資源。2. 動(dòng)手前的三道“安全鎖”備份、權(quán)限、影響面確認(rèn)我見(jiàn)過(guò)最離譜的一次事故就是某運(yùn)維同學(xué)連備份都沒(méi)做直接按通配符刪了索引結(jié)果發(fā)現(xiàn)通配符寫(xiě)窄了一位日期刪的數(shù)據(jù)比預(yù)期多了一個(gè)月。所以不管你有多急下面三步別跳過(guò)。2.1 先看一眼集群健康再把快照備好動(dòng)手前先確認(rèn)集群狀態(tài)是不是健康的。curl -s http://localhost:9200/_cluster/health?pretty | jq .status返回green才能放心干。如果返回yellow意味著一定有副本分片沒(méi)分配這時(shí)候刪除索引會(huì)讓問(wèn)題更復(fù)雜。如果返回red那更要先解決深層次問(wèn)題別急著清理數(shù)據(jù)。接著做快照。已經(jīng)注冊(cè)過(guò)快照倉(cāng)庫(kù)的話直接執(zhí)行curl -X PUT http://localhost:9200/_snapshot/backup_repo/snapshot_before_cleanup_$(date %Y%m%d%H%M) \ -H Content-Type: application/json \ -d {indices:app-log-2024.01.*}沒(méi)注冊(cè)過(guò)倉(cāng)庫(kù)的話先注冊(cè)一個(gè)本地文件系統(tǒng)倉(cāng)庫(kù)curl -X PUT http://localhost:9200/_snapshot/backup_repo \ -H Content-Type: application/json \ -d {type:fs,settings:{location:/data/es_snapshots}}快照耗時(shí)跟數(shù)據(jù)量成正比。幾十GB的索引一般也就幾分鐘到十幾分鐘值得等。哪怕是測(cè)試環(huán)境我也建議快照做一遍再開(kāi)刪至少給自己留條后路。2.2 權(quán)限和索引匹配半徑的確認(rèn)如果ES集群開(kāi)了安全認(rèn)證用curl請(qǐng)求時(shí)要帶用戶(hù)信息curl -s -u elastic:yourpassword http://localhost:9200/_cat/indices?v刪索引需要delete_index權(quán)限執(zhí)行_delete_by_query需要對(duì)應(yīng)的索引寫(xiě)權(quán)限。實(shí)際工作中遇到最多的就是權(quán)限不足導(dǎo)致返回403排查起來(lái)又慢又煩。所以先隨手驗(yàn)證一下你當(dāng)前賬號(hào)能不能刪curl -s -u elastic:yourpassword -X DELETE http://localhost:9200/app-log-2024.01.15如果是403別掙扎了去找管理員給權(quán)限。注意刪除動(dòng)作不可逆建議新建一個(gè)只讀賬號(hào)先做查詢(xún)驗(yàn)證確認(rèn)清楚再換有權(quán)限的賬號(hào)執(zhí)行刪除。這里還有一個(gè)容易忽略的點(diǎn)。ES有很多點(diǎn)號(hào)開(kāi)頭的系統(tǒng)索引比如.kibana_*、.security-*、.monitoring-es-*。這些索引被隱藏保護(hù)但通配符包含.開(kāi)頭時(shí)也可能被誤匹配到。你手動(dòng)刪除時(shí)覺(jué)得自己寫(xiě)的是業(yè)務(wù)前綴萬(wàn)一前綴寫(xiě)錯(cuò)成了*系統(tǒng)索引很難閃開(kāi)。2.3 通配符殺傷半徑寧可多打幾次列出命令ES的索引通配符設(shè)計(jì)得很強(qiáng)大*、?都可以用。但也正因?yàn)閺?qiáng)大它成了誤刪事故的頭號(hào)來(lái)源。我養(yǎng)成一個(gè)習(xí)慣執(zhí)行刪除前先用通配符把所有會(huì)匹配到的索引列出來(lái)看一遍。curl -s http://localhost:9200/_cat/indices/app-log-2024.01.*?hindex,store.size,docs.countformatjson只看名字不過(guò)癮還可以加jq過(guò)濾把點(diǎn)開(kāi)頭的系統(tǒng)索引排除掉curl -s http://localhost:9200/_cat/indices?formatjson \ | jq -r .[] | select(.index | startswith(.) | not) | [.index, .store.size] | tsv這一步花不了半分鐘但能避免所有關(guān)于“到底匹配到了什么”的焦慮。確認(rèn)無(wú)誤后再走刪除動(dòng)作。那些敢直接執(zhí)行DELETE /*的同學(xué)一旦在生產(chǎn)集群上跑出來(lái)那種驚悚感會(huì)讓你終身難忘。3. 按索引刪除一個(gè)能上生產(chǎn)環(huán)境的清理腳本清了思路也加了安全鎖接下來(lái)進(jìn)入正題寫(xiě)一個(gè)真正能用的shell清理腳本。3.1 先手動(dòng)刪單個(gè)索引與通配符單個(gè)索引直接刪命令簡(jiǎn)單到不像話curl -s -u elastic:yourpassword -X DELETE http://localhost:9200/app-log-2024.01.15批量用通配符的情況比如要?jiǎng)h掉2024年1月所有日志索引curl -s -u elastic:yourpassword -X DELETE http://localhost:9200/app-log-2024.01.*這條命令會(huì)刪除所有匹配的索引。ES的通配符默認(rèn)會(huì)匹配所有分片狀態(tài)為open的索引正常業(yè)務(wù)下足夠了。不過(guò)我嚴(yán)重不建議你在生產(chǎn)環(huán)境直接這么干除非你已經(jīng)百分之百確認(rèn)過(guò)匹配范圍。更穩(wěn)妥的是用下面的腳本先算清楚再刪。3.2 按保留天數(shù)批量清理腳本邏輯詳解生產(chǎn)環(huán)境最常見(jiàn)的需求就一句話app-log-開(kāi)頭的索引只保留最近7天之前的一律刪除。下面這個(gè)腳本我一直在用邏輯不算復(fù)雜但把名字解析、系統(tǒng)索引過(guò)濾、dry-run都考慮進(jìn)去了。#!/usr/bin/env bash set -euo pipefail ES_HOST${ES_HOST:-http://localhost:9200} ES_USER${ES_USER:-elastic} ES_PASS${ES_PASS:-yourpassword} INDEX_PREFIX${INDEX_PREFIX:-app-log-} RETAIN_DAYS${RETAIN_DAYS:-7} DRY_RUN${DRY_RUN:-1} # 默認(rèn)打印不刪除確認(rèn)沒(méi)問(wèn)題再置0 # 取當(dāng)前時(shí)間戳 cutoff_timestamp$(date -d -${RETAIN_DAYS} days %s) # 用creation.date來(lái)判斷比解析索引名更穩(wěn) curl -s -u $ES_USER:$ES_PASS \ $ES_HOST/${INDEX_PREFIX}*/_settings?flat_settingstrueexpand_wildcardsopen \ | jq -r to_entries[] | select(.key | startswith(.) | not) | [.key, .value[index.creation_date]] | tsv \ | while IFS$\t read -r idx created_date_ms; do created_ts$((created_date_ms / 1000)) if (( created_ts cutoff_timestamp )); then if [[ $DRY_RUN 1 ]]; then echo [DRY RUN] would delete index: $idx else echo [DELETE] deleting index: $idx curl -s -u $ES_USER:$ES_PASS -X DELETE $ES_HOST/$idx echo fi else echo [KEEP] index: $idx fi done echo Cleanup job finished.腳本里幾個(gè)值得琢磨的點(diǎn)為什么用index.creation_date而不是解析索引名里的日期因?yàn)樗饕灰欢ㄒ?guī)整有的人用點(diǎn)分隔有的人用橫杠分隔還有人干脆不帶日期。creation_date是ES創(chuàng)建索引時(shí)打的時(shí)間戳不會(huì)騙人判斷是否超期更可靠。為什么開(kāi)頭就置DRY_RUN1先跑一遍看它打印哪些[DRY RUN] would delete index人工核對(duì)無(wú)誤再設(shè)置DRY_RUN0執(zhí)行真實(shí)刪除。這個(gè)習(xí)慣幫我擋掉了很多次“本來(lái)只想刪30天前結(jié)果把昨天的也算進(jìn)了刪除范圍”的烏龍。如果你確定索引名里就是標(biāo)準(zhǔn)日期格式也可以直接用索引名解析速度更快。下面這個(gè)函數(shù)兼容app-log-2024.01.15和app-log-2024-01-15兩種分隔方式parse_ts_from_name() { local name$1 local date_part${name#$INDEX_PREFIX} date_part${date_part//./-} date -d $date_part %s 2/dev/null || return 1 }把它替換掉腳本中的creation_date判斷也可以。不過(guò)我還是更推薦前者少繞彎子。3.3 實(shí)測(cè)刪除后磁盤(pán)空間多久釋放我在一套模擬的日志集群上做過(guò)測(cè)試索引總量80GB左右一共120個(gè)分片分布在三臺(tái)數(shù)據(jù)節(jié)點(diǎn)上。執(zhí)行完刪除命令后我從_cat/allocation觀察磁盤(pán)變化curl -s http://localhost:9200/_cat/allocation?v結(jié)果是這樣的刪除命令返回后每個(gè)節(jié)點(diǎn)上對(duì)應(yīng)的分片文件開(kāi)始清理。大約幾十秒到一兩分鐘磁盤(pán)剩余空間明顯回升。這說(shuō)明刪除整索引的空間釋放基本是即時(shí)的不需要額外觸發(fā)merge。但有一點(diǎn)要注意如果集群有自動(dòng)rebalance默認(rèn)開(kāi)啟某些節(jié)點(diǎn)的分片會(huì)重新平衡空間占用會(huì)有波動(dòng)。比如你刪了A節(jié)點(diǎn)上的大索引B節(jié)點(diǎn)可能馬上遷過(guò)來(lái)幾個(gè)分片導(dǎo)致看起來(lái)空間并沒(méi)有完全騰出來(lái)這是正常現(xiàn)象。4. 按查詢(xún)條件刪數(shù)據(jù)_delete_by_query的完整用法與調(diào)優(yōu)總有一些數(shù)據(jù)沒(méi)辦法按索引整體刪除比如用戶(hù)誤產(chǎn)生了大量錯(cuò)誤文檔或者測(cè)試數(shù)據(jù)混進(jìn)了核心索引但你又不想傷及整個(gè)索引。這時(shí)就要用_delete_by_query。4.1 同步刪與異步刪小任務(wù)和大任務(wù)要分開(kāi)處理最基本的請(qǐng)求是這樣curl -s -u elastic:yourpassword -X POST \ http://localhost:9200/app-log-2024.01/_delete_by_query \ -H Content-Type: application/json \ -d { query: { range: { timestamp: { lt: 2024-01-10T00:00:00 } } } }小數(shù)據(jù)量幾百M(fèi)B內(nèi)這么干沒(méi)問(wèn)題請(qǐng)求會(huì)同步等待完成返回后你能直接看到刪除了多少條。但如果是幾十GB甚至更大的數(shù)據(jù)量同步等待會(huì)卡住HTTP連接經(jīng)常超時(shí)。這時(shí)候要改成異步模式curl -s -u elastic:yourpassword -X POST \ http://localhost:9200/app-log-2024.01*/_delete_by_query?wait_for_completionfalsescroll_size5000slices4 \ -H Content-Type: application/json \ -d { query: { range: { timestamp: { lt: now-7d } } } } \ | jq -r .task加了wait_for_completionfalse之后請(qǐng)求會(huì)立刻返回一個(gè)task id真正的刪除動(dòng)作在后臺(tái)執(zhí)行。返回的task id長(zhǎng)這樣{ task: oGuC7ABgQqO4Zb9CQ6DvVQ:123456 }拿這個(gè)task id你就可以隨時(shí)查看任務(wù)的執(zhí)行進(jìn)度。4.2 觀察任務(wù)進(jìn)度不是用直覺(jué)而是查_(kāi)tasks后臺(tái)任務(wù)跑起來(lái)之后總有同事問(wèn)“刪完了嗎”“怎么還在刪”。別看感覺(jué)直接查curl -s -u elastic:yourpassword http://localhost:9200/_tasks/oGuC7ABgQqO4Zb9CQ6DvVQ:123456?pretty | jq .task.statusstatus里會(huì)有這些關(guān)鍵字段total本次刪除需要處理的總文檔數(shù)updated更新過(guò)的文檔數(shù)deleted已經(jīng)刪除的文檔數(shù)batches完成了多少批version_conflicts版本沖突數(shù)noops空操作數(shù)按照deleted/total就能算出進(jìn)度條。還有更高階的curl -s -u elastic:yourpassword http://localhost:9200/_tasks?actions*delete*detailed | jq .nodes這條命令能列出集群內(nèi)所有正在執(zhí)行的刪除任務(wù)適合多任務(wù)并發(fā)時(shí)統(tǒng)一排查。4.3 Scroll、slices、refresh這幾個(gè)參數(shù)到底怎么設(shè)_delete_by_query底層靠scroll游標(biāo)分批掃數(shù)據(jù)再刪。參數(shù)沒(méi)設(shè)好輕則慢重則把集群拖垮。我調(diào)過(guò)不少集群常用經(jīng)驗(yàn)如下參數(shù)建議值理由scroll_size500010000默認(rèn)1000偏保守?cái)?shù)據(jù)量大時(shí)批次太小網(wǎng)絡(luò)交互次數(shù)太多slices24或auto并發(fā)切片能明顯加速但不建議超過(guò)索引分片總數(shù)開(kāi)太多反而調(diào)度開(kāi)銷(xiāo)大refreshfalsedelete_by_query默認(rèn)就是false不用額外設(shè)置但你要知道它不會(huì)像普通刪單條那樣觸發(fā)refreshconflictsproceed慎用有并發(fā)寫(xiě)入時(shí)大概率出現(xiàn)版本沖突proceed會(huì)跳過(guò)沖突繼續(xù)刪但可能導(dǎo)致部分文檔漏刪requests_per_second-1不限速生產(chǎn)集群謹(jǐn)慎不限速建議設(shè)置合理的值例如5001000給業(yè)務(wù)留點(diǎn)IO當(dāng)數(shù)據(jù)量真的很大比如索引本身已經(jīng)幾十上百GB我不會(huì)直接在原索引上跑_delete_by_query。正確做法是新建一個(gè)干凈索引用reindex把需要保留的數(shù)據(jù)遷過(guò)去然后切換別名最后刪除舊索引。這樣做的效率遠(yuǎn)高于在原索引上delete還能順便壓縮段文件。我的個(gè)人判斷閾值是這樣的刪除量小于索引總量的20%可以考慮_delete_by_query超過(guò)20%就值得走“reindex 替換別名”的路線。別嫌麻煩刪幾十GB的同段數(shù)據(jù)所消耗的IO和CPU比你想象的大得多。5. 定時(shí)自動(dòng)清理cron方案和ILM方案怎么選一次性清理做完還得考慮以后怎么防不然磁盤(pán)再過(guò)一個(gè)月又要報(bào)警。自動(dòng)清理有兩條路一條是shell cron簡(jiǎn)單直接另一條是ES自帶的ILMIndex Lifecycle Management更加優(yōu)雅。兩條路我都部署過(guò)說(shuō)下差異。5.1 cron shell適合“想盡快看結(jié)果”的清理把上一節(jié)的腳本保存到/opt/scripts/es_cleanup.sh加個(gè)cron任務(wù)0 3 * * * /opt/scripts/es_cleanup.sh /var/log/es_cleanup.log 21每天凌晨3點(diǎn)跑一次把過(guò)期索引刪掉日志記錄到/var/log/。選凌晨是因?yàn)闃I(yè)務(wù)低谷IO壓力小。cron方案的好處是直觀出了什么問(wèn)題看日志就行。壞處是它不知道ES的分片狀態(tài)也不了解數(shù)據(jù)生命周期。而且腳本里如果有bug第二天可能就把不該刪的也刪了。所以這個(gè)方案適合數(shù)據(jù)量可控、索引命名規(guī)律、不復(fù)雜的環(huán)境。5.2 ILM適合長(zhǎng)期穩(wěn)定寫(xiě)入的日志型索引ILM是ES官方的生命周期管理功能。定義一個(gè)30天后刪除的策略curl -X PUT http://localhost:9200/_ilm/policy/log_30d_policy \ -H Content-Type: application/json \ -d { policy: { phases: { hot: { min_age: 0d, actions: {} }, delete: { min_age: 30d, actions: { delete: {} } } } } }然后把這個(gè)策略掛到索引模板上后續(xù)新索引自動(dòng)套用curl -X PUT http://localhost:9200/_index_template/app-log-template \ -H Content-Type: application/json \ -d { index_patterns: [app-log-*], template: { settings: { index.lifecycle.name: log_30d_policy } } }ILM的優(yōu)勢(shì)很明顯不需要額外腳本ES自己會(huì)在分片層面執(zhí)行滾動(dòng)和刪除。缺點(diǎn)是策略本身有一定學(xué)習(xí)成本而且遇到已經(jīng)存在的歷史索引需要手動(dòng)POST /app-log-2024.01.01/_ilm/explain確認(rèn)它有沒(méi)有被正確應(yīng)用。我的建議是持續(xù)寫(xiě)入的日志型數(shù)據(jù)上ILM才是正路一次性清理歷史臟數(shù)據(jù)用shell腳本更順手。兩者并不矛盾可以同時(shí)存在。5.3 兜底寫(xiě)一個(gè)刪除前的“最后確認(rèn)”無(wú)論哪種自動(dòng)方式我都強(qiáng)烈建議加上一道“最后確認(rèn)”的兜底邏輯。在腳本里加一個(gè)環(huán)境變量ALLOW_DELETEif [[ ${ALLOW_DELETE:-0} ! 1 ]]; then echo Deletion is not allowed. Set ALLOW_DELETE1 to execute. exit 1 ficron任務(wù)默認(rèn)不傳這個(gè)變量所以即使腳本被誤觸發(fā)也只會(huì)打印日志而不真正刪除。只有人工手動(dòng)確認(rèn)后才會(huì)帶著ALLOW_DELETE1執(zhí)行。這個(gè)設(shè)計(jì)可能看起來(lái)多此一舉但在生產(chǎn)集群上救過(guò)我的命。6. 踩過(guò)的坑別踩第二遍6.1 誤刪全集群索引的一場(chǎng)“演練”有次某同事給測(cè)試環(huán)境寫(xiě)清理腳本想刪掉前綴為test-的索引結(jié)果命令寫(xiě)成這樣curl -X DELETE http://localhost:9200/test*這個(gè)寫(xiě)在命令里沒(méi)問(wèn)題問(wèn)題是當(dāng)時(shí)測(cè)試環(huán)境里其他團(tuán)隊(duì)也創(chuàng)建了testing-、test-data-等前綴的索引甚至還創(chuàng)建了.test-infra這種系統(tǒng)索引。通配符一下把所有匹配到的全刪了。恢復(fù)過(guò)程非常痛苦幸好有快照但復(fù)盤(pán)時(shí)有個(gè)問(wèn)題其實(shí)很容易提前規(guī)避在刪除命令里同時(shí)排除非業(yè)務(wù)前綴。我個(gè)人后來(lái)的約定是生產(chǎn)環(huán)境腳本里永遠(yuǎn)不用裸通配符刪索引只用腳本內(nèi)的INDEX_PREFIX拼接匹配范圍并且跑之前先打印所有要?jiǎng)h的索引名。6.2 rm -rf 數(shù)據(jù)目錄的嚴(yán)重性這個(gè)坑我必須重點(diǎn)提。某同學(xué)覺(jué)得ES索引刪得慢直接登錄數(shù)據(jù)節(jié)點(diǎn)把data/nodes/下的索引目錄rm -rf了。結(jié)果節(jié)點(diǎn)進(jìn)程還活著Lucene文件卻被物理刪除索引狀態(tài)直接變得一團(tuán)糟部分分片怎么都恢復(fù)不了最后還是靠快照才把數(shù)據(jù)追回來(lái)。ES的數(shù)據(jù)目錄堅(jiān)決不能直接動(dòng)。它跟普通文件完全不一樣Lucene在節(jié)點(diǎn)上維護(hù)著大量的文件句柄和內(nèi)存映射rm刪除之后進(jìn)程雖然不會(huì)立刻崩但后續(xù)寫(xiě)入操作會(huì)在底層數(shù)據(jù)不完整的情況下繼續(xù)運(yùn)行最終大概率導(dǎo)致集群red狀態(tài)。如果你真的遇到“刪不掉、磁盤(pán)要爆”的情況別走極端。優(yōu)先考慮關(guān)掉rebalance、先把數(shù)據(jù)遷到其他節(jié)點(diǎn)再刪除索引。如果集群已經(jīng)無(wú)法響應(yīng)重啟節(jié)點(diǎn)后再說(shuō)。6.3 刪除后副本遷移引發(fā)雪崩很多人不會(huì)想到這個(gè)刪除一個(gè)大索引后集群的自動(dòng)rebalance會(huì)被觸發(fā)。假設(shè)一個(gè)節(jié)點(diǎn)上原有一大片分片現(xiàn)在空出來(lái)了ES會(huì)把其他節(jié)點(diǎn)的分片遷移過(guò)來(lái)補(bǔ)充平衡。這本身是好事但如果一次性刪了多個(gè)大索引rebalance會(huì)在短時(shí)間內(nèi)大量遷移分片IOPS飆升反而拖慢了業(yè)務(wù)查詢(xún)。我的處理辦法是刪除大索引之前在集群范圍暫時(shí)關(guān)閉rebalancecurl -X PUT http://localhost:9200/_cluster/settings \ -H Content-Type: application/json \ -d { transient: { cluster.routing.rebalance.enable: none } }等刪除完成、分片狀態(tài)穩(wěn)定下來(lái)再恢復(fù)curl -X PUT http://localhost:9200/_cluster/settings \ -H Content-Type: application/json \ -d { transient: { cluster.routing.rebalance.enable: all } }實(shí)測(cè)這個(gè)方法能顯著減少刪除大索引后的集群波動(dòng)。7. 一點(diǎn)操作心得寫(xiě)到這里把我在實(shí)際中摸索出來(lái)的幾條心得分享一下。第一條還是那句老話能用刪索引解決的事千萬(wàn)不要用刪文檔解決。ES的段合并機(jī)制決定了文檔刪除的空間釋放是滯后的刪索引才是干凈利落的做法。第二條是把所有清理腳本都做成“默認(rèn)dry-run、顯式確認(rèn)才執(zhí)行”的模式。初期可能覺(jué)得多此一舉但當(dāng)你凌晨三點(diǎn)被報(bào)警電話吵醒半睡半醒之間還能靠這層機(jī)制避免事故的時(shí)候你就知道它有多重要。最后一個(gè)小技巧無(wú)論用哪種方式清理記得在清理結(jié)束后順手看一眼_cluster/health確認(rèn)集群狀態(tài)恢復(fù)為green。如果返回的是黃色大概率有副本分片還沒(méi)分配這時(shí)候別急著關(guān)監(jiān)控等幾分鐘再查一次。數(shù)據(jù)清理看似只是幾條curl命令的事但背后涉及索引生命周期、段合并、分片分配這些機(jī)制。摸熟了這些機(jī)制你再遇到ES磁盤(pán)告警就不會(huì)慌按本文的流程走有備份、有確認(rèn)、有腳本基本不會(huì)出大問(wèn)題。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
大香av| 亚洲熟妇AV乱码在线观看| 秋霞成人毛片一级A片| 亚洲综合色网| 开心五月综合激情网| 亚洲激情图文小说| 婷婷丁香五月综合| 91婷婷色| 色色婷婷丁香五月天| 99色在线视频| 综合网色| 久久婷婷综合基地| 超碰日日操| 五月色无码| 97人人操人人| 亚洲色图五月丁香| 成人在线日韩欧美| 亚洲综合成人网站| 在线综合91| 欧美五月停| 九九热只有精品| 天天噜噜| 久久九九色| 很操日本7| 色综合网上班开心婷婷久久| 九月丁香亭亭| 亚洲综合无码| 黄网免费观看| 精品久久9| 色五月婷婷影视| 久久婷婷五月综合色欧美| 成人AV在线电影| www99在线观看视频| 婷婷五月天偷拍| 色色亚洲无码| 噜色精品| 5月丁香六月婷婷| 热99精品视频观看| 天天拍天天做视频| 五月天成人在线| 99re久热只有精品6在线直播| 久久婷婷综合网| 色婷婷啪啪| 日韩啪啪视品| 97日本在线播放| 成人中文网| www.夜夜操.com| 五月天丁香婷婷社区| 婷婷六月伊人| 色婷婷五月天偷拍| www.91操| 五月婷婷丁香| 91男同视频| 天天综合色| 99热精品在线观看| 97大香蕉五月天| 专区无日本视频高清8| 亚洲午夜AV| 大香蕉五月天婷婷| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 久久久久久激情| 十区av| 97干资源在线观看| 99噜噜| 激情九色| 婷婷欧美激情综合| 天天天天天天噜| 久久婷婷五月综合伊人| 激情婷婷久久| 欧美精品XXXXBBBB| 人人综合色| 99精品丰满| 日本在线观看91| 绿色小导航AV| 五六月婷婷| 五月丁香综合网色欲| 婷婷久久国产视频| 丁香桃色网| 天天综合天综合久久网| 丁香五月综合激情久久潮喷| 天天噜日日噜综合无码| 管管補管管紱| 五月婷婷av| 狠狠狠色激情综合适合| 国产成人网| 国产五月视频| 久9免费视频| 激情99热| 最新亚洲色色网| 深爱激情网综合| 激情小说婷婷| 99熟女| 超碰免费成人网站| 久久精品视频99| 婷婷在线观看五月天在线视频| 婷婷五月天AV激情| 91九色中文| 亚洲色频| 久久五月婷婷视频| 丁香五月天五码婷婷| 99亚洲色色| 丁香五月影院| 色婷青青| 丁香色五月直播| 99热精品一区| 超碰亚洲天堂| 色综合久久88色综合天天| 99热在线资源| 久久这里有精品视频| 久久综合首页| 婷婷综合在线网| 六月婷婷啪啪| 五月天婷婷偷拍| 涩玖玖免费视频| 欧美色图天堂网| 五月婷婷m| 丁香婷婷大香蕉| 婷婷久久综合| 97色色婷婷五月天| 国产暴力强伦轩1区二区小说| 乱精品一区字幕二区| 六月婷婷久久| 婷婷伊人五月天| 狠狠色成人影片| 噜噜干日本| 五月婷婷丁香深深爱| 狠狠色综合网站久久久久| XX色综合| 婷婷亚洲天堂| 99热精品在线| 亚洲精品成人| 欧美色色色色色| 丁香婷婷久久五月天| 丁香五月六月久久综合| 欧洲色| 骚五月婷婷| 亚洲九九在线| 一本婷婷丁香久久| 日日操夜夜操狠狠操| 伊人丁香婷婷东京| 激情综合五月婷婷| 亚洲色9| 亚洲欧洲午夜成人精品av| 99成人精品六| 色 免费网站视频| 91人人爽久久涩噜噜噜| 色婷婷91激情小说| 激情五月天影院| 久久五月婷天天干| 色综合射婷婷| 99热精品网| 99热这里只有99| 五月婷婷免费看| 久草热久草在线视频| 五月天综合在线| 六月丁香婷婷综合在线| 成人AV综合在线| www.99热视频| 伊人狼人干| 五月丁香亭亭| 五月婷婷久久综合| 日韩成人精品中文字幕| 色~性~乱~伦~噜| 色色热| 国产三级在线播放| 色婷婷五月在线| 婷婷五月综合中文字幕| 婷婷五月天免费视频| 香蕉影院色| ji'qing'luan'ren'lun| 亚洲色图欧美色图日本视频| www.五月激情红色| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 成人五月天婷婷| 日本久久天堂| 五月婷婷深深爱爱| 风流少妇A片一区二区蜜桃 | 少妇人妻偷人精品无码视频新浪 | 99热在线网站| 久久Xx| 久久99精品久久久久久青青AR| www.五月瑟| 五月J香蕉婷婷| 日日射天天射| 中文网婷婷字幕婷| 99热99色| 五月丁香六月婷婷中文版| 亚洲久热| www激情com| 第1影院之五月婷婷| 999影院成人在线影院| 天堂网亚洲色图| 色五月综合在线| 五月丁香六月婷婷久久| 色V狠狠的干| 久久婷婷五月天| 色色日韩| 日韩99视频| 五月激情站| 天天 青草 丝袜制服 在线| 五月婷婷婷色| 国产美女无遮挡裸体毛片A片| 狠狠五月天激情| 色综合久久88| 婷婷操无码| 影音先锋男人av资源站| 99热91| 79色色免费| 五月丁香花视频| 激情小说五月天| 色五月天成人| 开心五月婷婷在线| 成人精品一区二区三区四区五区| 六月丁香六月婷婷欧美| 日韩精品在线观看9| 日本不卡中文字幕| 午夜丁香婷婷| 婷婷五月天在婷| 五月天开心色情网| 婷婷欧美激情| 成片免费观看大全| 激情五月四色| 国产无套精品一区二区| 九九热精品在线| 五月丁香六月婷婷久久| 丁香五月23111| 五月婷婷性爱| 99自拍视频网站| 在线综合啪| 久久激情网| 碰99在线| 99久久9| 精品色| 99热最新地址在线| 亚洲AV电影美洲AV电影| 中文字幕欧美日韩VA免费视频| 五月婷激情| 欧美婷婷| 十区AV| 久久久天堂国产精品女人| 日本少妇AA一级特黄大片| 丁香五月激情网| 婷婷九月激情网| 综合一区二区三区| 任我肏| 国产91资源在线| 婷婷六月丁香五月| 91九色在线| 丁香五月婷婷香| 五月天综合视频| 狠狠草天天草| 国产精品人妻欲求不满| 亚洲色婷婷久久99精品91| 双性美人被调教到喷水A片| 97色天堂| www久| 玖玖综合网| 免费看成人747474九号视频在线观看| 另类视在线| 婷婷五月天激情小说| 97人人搞| 婷婷五月丁香综合瑟瑟| 婷婷五月天首页激情| 久久精品国产AV一区二区三区 | 人妻啪啪啪| 日日婷婷不卡| 五月香蕉婷婷| 爱超碰性| 国产毛片精品一区二区色欲黄A片| 天天干,夜夜爽| 婷婷五月天精品| 1024欧美看片| 另类小说五月天综合网| 婷婷开心青青草| av九九| 中文字幕综合| 六月久久婷婷| 丁香五月最新地址| 日本 欧美在线| 九九色区| 五月天婷婷操逼视频| 婷婷六月成人| 99热欲| 日本色啪| 久热这里只有精品6| 99热只有精品在线观看| 六月婷婷色综合| 91.com男女操| 五月天啪啪视频| 亚洲精品第一国产综合亚AV| 奇米色大香蕉| 色99婷婷五月天| 五月婷婷精品视频| 99亚洲色色| 99操逼| 丁香六月色婷婷| 婷婷色导航| 色五月av| 久久性操| 五月激情综合网| 99精品无码| 亚洲色啪| 成人AV在线中文版| 亚洲国产色婷婷| 99在线视频喷水| 97婷婷久久丁香| 丁香天堂夜| 久久狠婷婷| 99热欧美精品| 九九精品在线视频观看| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 欧美性二区| 激情五月综合色| VA日本视频| 婷婷色五月天第7色| 激情小说婷婷五月| 丁香啪啪| 丁香五月婷婷综合精品素人| 国产精品久久久丁香五月八戒视频| 99这里只有免费的小视频在线观看| www.狠狠操.con| 99热99精品在线观看| 日本激情五月天‘| 超碰在线免费9| 欧美日韩成人在线网站| 色婷婷综合网站| 亚洲精品白浆高清久久久久久| 日韩人妻AV在线| 超碰自拍天堂| 久久99久久99久久99人受| 立川无码av| 另类激情五月| 激情六月丁香| 俺也去五月婷婷丁| 久热91精品| 97色色色色色色色| 日本五月婷婷| 五月丁香六月婷| 成人αV视频免费观看| 久久ri精品视频| 婷婷少妇激情| 呦呦v线| 五月叮香啪| 九九综合色| 福利视频在线播放| 99男人天堂| 天天爱天天日| 欧美五月婷婷| 亚洲激情综合| 亚欧州精品视频| 二人电影免费版在线观看| 国产精品黑丝| 九九热这里只有精品556| 天天操天天操天天操| 岛国av网站| 97久久超碰| 国产AV网页| 人人爽天天莫| 开心婷婷中文字幕| 久久久av久av久片一区二区| 精品激情| 激情综合网五月婷婷| 免费看欧美成人A片无码| 少妇婷婷五月天| 久久成人性爱| 色婷婷网| 色婷婷在线影院| 天天摸,天天爽| 久久精热| 爱操天堂| 九月婷婷综合八月丁香在线观看| 激情综合网址| 婷婷激情综合色五月久久图片| 99热国品| av在线中文| 激情五月天免费视频| 婷婷五月天久久| 大香焦A∨| 久久婷婷成人视频| 久久婷婷色| www.久操| 欧美英丁香开心快乐六月天网| 在线播放成人网站| 99视频网址| 99精品22| 色99久草在线| 国产一级婬片毛片| 久久女婷| 思思久久99热| 激情性爱五月天| 婷综合六月| 婷婷丁香激情五月| 人妻体体内射精一区二区| 久操人妻| 九九aV| 怡红院91a√| 久久九九热re6这里有精品| 亚洲九区| 97在线视频观看| 六月激情婷婷综合| 99在线精品视频| 久久5 9视频免费观看| 久久精品爱爱| 久久性爱视频| 九九sese| www.夜夜| 激情婷婷丁香五月| 风流少妇A片一区二区蜜桃| 色婷久久| 婷婷丁香五月亚洲17cao| www.99久久久| 一级性爱视频| 思思久久99热| 丁香六月婷婷久久综合| 色丁香综合影院| 女人高潮内射99精品| 五月天激情小说| 强伦轩人妻一区二区电影| 国产9色在线/日韩| 狠狠干在线| 丁香色五月婷婷17C| 五月天色社区| 99视频地址| 色婷婷激情| 538在线| 色婷婷99| 五月丁香在线偷拍视频| av免费在线观看0| 色噜噜婷婷| ai97re99一本| 天天干天天做| 激情视频网址| 欧美99| 天天开心AV色综合婷婷五月天| 中文成人在线| 五月丁香淫淫婷婷婷| 亚洲av成人电影在线观看| 26uuu成人网| 九九综合网色全集 | av婷婷六月丁香社区在线观看| 丁香五月天欧美在线| 黄网在线免费观| 九九色热视频| 婷婷射图| 欧美S码亚洲码精品M码| 天天做好综合色| 五月丁香婷婷综合视频| 狠狠狠狠狠干| 日日夜夜小色哥| 五月丁香在线观看| 色婷婷久久久| 丁香五月五月婷婷欧美大香蕉| 99综合99| 九热...av| 天天日天天舔| 婷婷五月婷婷| 久久五月天大美女| 超碰自拍天堂| 99视频久久| 夜夜夜夜做天天天做无码视频| 在线不卡AC| 五月婷激情影院| 另类五月婷婷| 久久精品五月| 亚洲精品无码一区二区| 国产密乳av一区二区三区四区| 黄色五月婷婷| 在线观看日韩12345区| 久久看婷婷| 日日色五月天| 另类激情五月| 久久91久久精品久久| XX久久| 五月天欧美 另类小说| 久久五月情| 亚洲热视频在线| 26uuuuuuuu国产| 天堂色婷婷| 欧美日本免费一道免费视频 | 亚洲网站在线鸭子av| 99视频热99| 9 1超碰九色| 人妻操操色| 五月婷婷色影院| 色综合99无码 | 欧美色婷婷| www一区二区三区| 久久久久久综合88| 婷婷五月综合网激情| 激情开心五月天| 亚州操人在线视频| 婷婷色色播五月天| 蜜乳9188| 色域五月婷婷丁香| 亚洲AV成人无码电影| 亚洲情综合五月天| 五月激情婷婷在线| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 变态另类色图 | 2050人人操免费工开爱 | 久久HD| 99热免费18| 五月婷色| 激情综合网五月激情| 夜夜夜夜夜骑撸| 丁香婷婷五月天色播| 999婷婷综合| 亚洲中文AV网站| 粉嫩AV久久一区二区三区| 亚洲综合五月天婷婷丁香| 四月婷婷丁香| 少妇久久诱惑视频| 99re久热只有精品6在线直播| 大香蕉久久草| 成人视频在线免费播放| 综合久久六月| 九九成年视频| 久草免费福利视频| 久久九九激情五月天| 婷婷99狠狠躁天天躁| 激情丁香婷婷| 九月丁香婷婷| 五月天天天色| 色碰碰视频| 日本99在线| 六月激情综合| 六九色综合婷婷五月天| 激情伊人五月天| 久久九九在线视频| 婷婷综合色播网| 2w在线视频| 伊人久久婷婷五月天激情四射| 熟女激情网| 天天玩夜夜操天天爽| 激情四射五月天| 大香蕉网站,大香蕉综合| 丁香婷婷综合激情五月色| 久久伊人婷| 4438全国最大视频成人网站在线观看| 久久久久久久久久久jjjj| WWW.亚洲无码| 爱狠射| 丁香六月av| 色综合狠狠色| 色婷婷97| 亚洲第一综合| 青青草国产亚洲精品久久| 亚洲精品无码一区二区| 超碰在线网站9| 丁香五月之久操视频| 超碰av在| 99久久久久久久| 色婷婷AV在线| 五月丁香亚洲校园欧美| 天天色爽| 夜夜爽天天日| 五月婷婷五月| 狠狠香蕉| 99热在线观看| 色九九九综合| 全高清无码视頻| 婷婷99狠狠| WWW.五月天9999| 《》【无码】想被搞到爽AV应募而来的超M素人 西纯子 10musume-011723-01 | 五夜丁香| 天天五月香欧美| 婷婷五月丁香在线观看| 五月天久久综合婷婷丁香| 五月六月婷| 97色女人在线| 久久五月视频| 91 久热| 婷婷操久久| 99 热| 99re26视频| 激情五月天激情小说| 丁香五月首页| 1024在线一区| 任我鲁这里有精品视频| 五月天播播综合| Www,五月天| 97人人看| www.91av.com| 黄色三级日本| av人人操| 成人精品在线观看| 一级片无码| 伊人婷婷大香蕉| 成人欧美一区二区三区在线观看 | 五月丁香猫咪久久婷婷综合视频激情四射网入口 | 久久大国产香蕉| 91jiuseshunv| 爱爱色五月天| 日本色色网站| 91中文狠狠综合| 婷婷五月天AV在线| xxx综合在线| 99久久精品国产色欲| 丁香五月天堂网| 色原狠狠综合| 天天婷婷操| 超碰在线综合| 婷婷干| 久久久久这里都是精品| 九九99精品视频在线观看| 亚洲精品大片| 九九人人看| 色五月在线| 久久九九@| 激情婷婷狠狠干综合| 九九九热精品| 婷婷五月天小说网| 97精品人人A片免费看| AVV黄| 色婷婷综合五月| 97久久人人| 色婷综合| 99re这里只有精品首页| 夜夜撸天天操| 涩九九九九| 婷婷五月色综合| 久草热在线视频| 国产精品人妻在线网址| www.99热. com这里只有精品| 五月天开心激情综合网| www.婷婷,com| 婷婷婷婷婷开心无码播放| 少妇性BBB搡BBB爽爽爽电影| 天天做天天爱高潮片| 操逼巨乳91| 婷色综合| 婷婷丁香五月天亚洲| 激情综合色| 超碰成人在线观看| 26uuu丁香婷婷五月| 伊人超碰在线| 亚洲丁香五月在线观看| 99视频这里有精品| 狠狠五月天婷婷| 激情九月婷婷| 五月色视频| 中文字幕在线不卡| 任你爽精品免费视频6| 色五月天 丁香| 亚洲 小说 欧美 激情 另类| 五月丁香久久| 久久久久婷婷五月热综合| 在线视频你懂得| 91视频一起草| 五夜丁香| 久久综合无| 热99免费在线| 久久久性爱网| 999热在线视频| 久久久久网站| 久久婷婷网站| 国产精品大香蕉| 色婷婷狠狠爱| 综合狠狠伊人| 五月丁香综合激情| 婷婷亚洲丁香五月| 黄色国久久| 五月丁香五月天现场视频| 日韩黄色影院| 天天操电影院色狼性av| 青青草婷婷久久| 人妻久久久久久| 色婷婷色综合激情91| 91精品久久久久、久五月天| 色色九九五月天 | 九九黄色网| 激情五月婷婷色综合| 成人中文网| 丁香六月天之亚州热女 | 欧美大肥婆大肥BBBBB| 天天天天天操| 天天综合网~91| 丁香婷婷五月基地| 色99在线看| www.婷婷五月天| 婷婷五月丁香基地在线视频官网| 久久精彩视频| 中文字幕 久久9999| 色婷婷亚洲综合av| 久久婷婷网站| 五月丁香视频在线观看| 国产av第一专区| 天天日综合| 色综合久久综合中文综合网| 在线播放成人网站| 欧美久久婷婷| 开心五月婷婷| 91操碰| 欧美成人AAA片一区国产精品| 操丝袜视频影院导航| 亚洲久艹| 欧洲亚洲精品| 五月激情综合深爱| 九九婷婷综合| 亚洲情综合五月天| 丁香五月天堂| 日本女va| 六月丁香婷婷综合影院| 丁香五月天激情视频| 婷婷五月开心中文字幕在线| 伊人狠狠色婷婷综合丁香一区| 色色操| 色婷婷五月天堂资源| 久久九精品| 五月天色色网站| 六月婷婷九月丁香亚洲综合| 九九久久五月天综合伊人| 亚洲精品又粗又大又爽A片| 亚洲第一精品成人999久久精品| 五月激情网站| 清纯唯美 激情四射| 狠狠狠狠狠狠色| 另类婷婷丁香| 亚洲午夜一区二区| 男女啪啪做爰高潮无遮挡| 99精品综合| 欧美天天综合网站上去吧| 色色色色色综合| 激情五月天丁香| 五月天婷婷丁香| henhencao国产在线| 免费成人网在线观看| 五月丁香久久| 99这里有精品视频| 天天色综合综合| 黄色aaaaa| 99久久高清视频| 777影视理论片大全在线观看| 99热成人精品网站| 欧美综合激情五月| 婷婷五月天成人在线视频| 久久99免费视屏| 色婷婷小说| 亚洲AV网站| 五月天激情小说欧美激情| 樱花99视频| 中文字幕,综合,91| 97碰精品| 亚洲欧洲中文日韩久久AV乱码| 伊人久久大香蕉网| 五月婷婷丁香在线| 亚洲国产精品成人va在线观看| 色婷婷综合久久久久| www.婷婷五月天,com| 国外亚洲成AV人片在线观看| 婷婷狠狠干| 国产综合视频婷婷| 五月天堂六月丁香亚州中文字幕久久| 国产欧美性成人精品午夜| 久草大| 天天操夜夜操| 色色色免费视频| 激情久久五月网| 丁香婷婷六月婷婷六月婷婷六月婷婷 | 婷婷操久久| 日本高清综合网五月丁香| www 五月天 com| 六月婷婷之青青草| 这里只有精品在线视频精品| 男女99免费视频| 9有码中文| 久久婷婷资源| 91AV视频| 月色色综合婷婷网| 99丝袜精品视频网站| 婷婷五月天久草在线| 1024操逼| 激情图片亚洲| 日韩乱轮AV| 综合大香蕉| 九九色婷婷| 色婷婷亚洲婷婷| www.99热视频| 激情五月婷黄版| 99亚州综合精品成人网| 婷婷五月天偷拍| 99国产小视频| 狠狠激情五月天| 午夜婷婷五月天| 激情五月综合网最新 | 亚洲综合1024| 大香蕉久久久久| 久久92| 丁香五月在线自慰| 日韩啪| 五月天激情四射| 97精品综合| 夜夜操夜夜操| 五月综合色| 国产成人精品123区免费视频| 成人无码髙潮喷水A片| 青柠影视免费高清电视剧| 日韩中文字幕| 日本www免费九九| AV操一操| www.久久久久久| 丁香五月综合激情啪啪| 日本九九九九| 久一这里有精品国产| 夜夜天天久久婷婷| 99性爱精品| 国产无套精品一区二区| 97九色视频| www.色五月| 色噜噜狠狠色综无码久久合欧美| www.99热国产| 九九精品少妇| 久热黄色| 久热2025无码| 色五月综合婷婷| 色五月婷婷五月天激情综合| 99九九玖玖| 综合网天天| 亚洲精品无AMM毛片| 雪千夏麻豆| 五月丁香久久呀| 综合天天综合| 一区二区三区四区无码| 综合成人小说婷婷| 精品久久99码| 精品国产乱码久久久久久免费| 色吧网综合| 99色色| 亚洲成人免费电影| 激情又色又爽又黄的A片| 国产性爱大片久久| 五月天婷婷綜合院| 六月米奇色综合| 天天噜噜| 日韩一级片| 欧美人人草草| 久久久18| 五月丁香六月婷婷亚洲| 国产午夜精品一区二区| 综合网色| 久久99jiu9| 如何安全看伊人婷婷| 夜夜撸天天日| 综合色播| 久久丁香综合精品综合| 青青草色在线视频观看| 美女主播野战视步页| 午夜婷婷久久 | AA丁香综合激情| 婷婷五月天婷婷| 日本久久高清| 五月刺激丁香月综合| 9操在线| www开心激情网| 91人人操人人| 果冻传媒A片一二三区| 99操逼| 五月婷婷色激情| 激情五月天影院| 九九热99精品| 婷婷五月丁香在线观看| 婷婷五月综激情| 免费黄网不卡AV| 婷婷丁香五月综合| 五月丁香色| 成人做爰高潮A片免费视频| 久久丝袜婷婷| 色情综合网| 五月天伊人| 亚州操操| 99热最新| 亚洲午夜在线视频| 天天操天天爱天天日| 26uuu日韩| 激情5月婷婷| 久久婷婷青草五月天| 无码区婷婷五月花开| 韩日另类| 思思久ren热| 天天射综合网站| 97香蕉人人在线观看| 26uuu欧美亚洲日韩| 婷婷五月丁香基地| 亚洲无码yw| 国产26uuu| 91无码色色| 影音先锋xfplay资源男人网| 9久国产精品| 天综合日日夜综合7799| 影音先锋人妻出差| 午夜少妇在线观看视频| 另类在线| 九九色色网| 婷婷色色丁香| 999影院成人在线影院| 日韩一区二区A片免费观看| 热的国产99热| 五月色综合| 天天噜日日噜综合无码| 日韩淑女人妻luan伦激情精品一区二| 人人肏逼视频在线一区二区| 五月综合777| 五月丁香六月激情| 激情深爱综合| 狠狠综合网| 五月天婷婷综合久久| 丁香六月综合激情| 91热在线| 五夜婷婷| 99热自拍| 五月婷婷综合网| 久久久久久久97| 婷婷激情性爱| 99ri久久| 99热自拍| 亚洲综合激情五月久久| 亚洲激情av| 中文字幕在线播放视频| 激情性爱五月天| 久久精品视频99| 色婷婷九月| 另类天堂| 天天操天天插| 久久国产性爱A V| 99热思思| 这里只有国产精品在线| 国产99久| 五月丁香操亭亭网| 婷婷丁香综合| 色吧五月婷婷| 日韩欧美一级大黄网站| 天天色视频| 天天日狠狠| 色婷婷很很丝袜| 亚洲AV色婷婷人禽五月天| 五月婷婷狠狠久久| 久久婷婷内射| 丁香五月婷婷狠狠色| 色五月激情综合网| 99色色最新视频| yw国产AV| www.婷婷五月天| 91黄址| 久久婷婷五月综合| 人人操超踫| 大香蕉久久久久久久久| 日熟女| 丁香婷最新动态| 乱岳熟女50岁| 丁香婷婷激情网站| 色婷婷综合综合网| 婷婷五月综合网| 天天爽曰日爽| 色色丁香五月天社区| 丁香五月手机在线| 狠狠艹狠狠艹| 亚洲无码 图片区| 天天色天天日天天舔| 婷婷激情性爱| 五月丁香婷婷啪啪| 天天色天天色天天色天天色天天色| 狠狠色丁香婷婷| 亚洲综合色色| 天天在线天天综合网色| 色色综合五月| 99热啪啪| 色婷婷a三区麻| 黄色片精品| 欧美精品XXXXBBBB| 婷婷婷婷婷开心无码播放| 色婷婷AAA| 99热网精品| 精品久热69| 久久久久婷婷五月热综合| 琪琪狠狠干| 超碰99在线| 激情五月天www| 草草操操| 无码字幕中文| 99热91| 99综合一区| 91 九色 熟女| 亚洲AV成人精品网站在线播放| 991国产精选视频在线播放下载| 狠狠88综合久久久久噜噜噜| 色444综合网| 亚洲热综合| 丁香五月婷婷色情综合| 婷婷国产综合| 久人人操| 中文字幕丰满孑伦无码专区| 婷婷五月天AV在线| 开心五月丁香啪| 丁香综合网| 69人人操人人爽| 人人摸人人干| 成人va视频| 情五月亚洲婷婷| 久超超碰| 91干99| 少妇大叫太大太粗太爽了A片 | 妻久久久久| 天天日夜夜欢| 天堂二区| 熟妇无码乱子成人精品| 婷婷综合色| 五月天国产婷婷精品视频在线| 人人澡天天色天天做| 久热婷婷在线视频| 色五月婷婷在线观看第一页舔| PORNY九色9l自拍视频成人| 99热这里只有精品无码| 亚洲日韩国产黑丝黑丝AVAV一区二区三区| 97偷拍对白视频| 双性美人被调教到喷水A片| 性爱网五月天| 99爱在线免费视频| 大伊久久| 丁香女人五月天| 色色狼人综合| 伊人久久大香线蕉综合网站| 国产免费性爱| 久99| 婷婷五月色播放| 99在线视频资源| 思思热精品在线| 97五月天婷婷| 人人摸人人射| 精品人妻伦| 影音先锋按摩| 五月丁香婷草| www,超碰| www. 五月. com| 一本到不卡高清DVD| 国产AV一区二区三区最新精品| 五月天婷婷在线观看| 9久久久久| 婷婷五月在线视频| 久色视频| 深爱激情丁香| 激情五月天开心总和网| 丁香婷婷中文字幕| www色中色综合| 五月天成人手机在线视频| 五月丁香综合啪啪啪啪啪| 九九成人精品免费视频| 色色色999| 亚洲激情av| 婷婷丁香久久| 91丨九色丨东北熟女| 色色丁香婷婷| 九九香蕉网| av九九| 99精品激情| 天天做天天爱天天爽夜夜揉| 丁香5月激情网| 狠狠五月激情在线| 精品国产人人爱人人| 五月婷婷激情四季| 精品九九在线观看| 另类小说五月天综合| 亚洲激情丁香五月基地| 五月天婷婷色播在线网| 婷婷成人综合五月| 99热这里只有精品热| 伊人婷婷五月天av| 九九精品视频在线观看| 色偷偷色婷婷| 婷婷五月天天爽| 9久久婷婷国产综合精品性色| 久久婷婷综合国产| 亚洲啪啪啪啪| 亚洲色另类| 欧美性生交XXXXX无码小说| 婷婷情色开心五月天99| 五月婷婷伊| 人人操人人添人人摸97| 久久免费丁香| 国产成人网站在线观看| 久久婷婷激情五月天一区二区| 色热久资源| 欧洲日韩一区二区三区| 热成人网| 99久热| 激情五月天丁香| 九九这里只有精品| 久久婷婷原创视频| 色五月大| 九九热视频精品2| 欧美性爱特黄一级aaaassss| 99re最新地址| 国产激情av| 大香蕉五月天| 久操香蕉| 亚洲啪啪网| 狠狠色五月激情| 这里只有精品视频一区| 无码色| 色色色热| 欧美性爱丁香五月| 久99久视频免费观看| 九九视频网| 国产高清精品色| 91九色无码日韩| 久久综合九九| 丁香五月婷婷综合激情啪啪啪啪啪啪啪| 1999天天操夜夜操| 婷婷丁香视频在线观看免费| 久久久精久人妻| 九九热99熟女| 无码少妇高潮喷水A片免费| 另类图片五月天激情| 99在线精品观看99| 欧洲高清免费久久| 强伦轩人妻一区二区电影| 99色在线| 在线伦子99热| 色婷婷成人丁香| 亚洲天码视频www蛋播视频| 久久综合爱| 日碰日| 精品久久99| 色色色.COM| 婷婷丁香五月亚洲17cao| AV片在线观看| 久操婷婷| 五月天天爱| 亚洲精品亚洲人成人网| 超碰在线资源| 成人操呦av| 欧美黄色韩日网| 国产美女无遮挡裸体毛片A片| 亚洲av网址| 丁香五月激情月| 欧美综合五月丁香六月婷| 色视频色综合91| 色婷婷777狠狠| 五月婷久久在线| 97天堂| 色九九丁香九月色九九色| 色六月丁香婷婷狠狠干| 噜噜操操| 五月丁香婷久久| 美女天天久久| 夜夜干天天操| www,黄色在线,con| 99热这里是精品| 五月丁香婷婷欧美| 99久久亚洲国产| 五月丁香啪啪啪啪| 亚洲色啪| 六月色婷婷综合影视| 精品久久人妻热| 婷婷精品在线| 综合 蜜月 婷婷| 丁香五月婷婷亚洲另类| 五月天桃色深爱网| 婷婷综合在线播放| 丁香婷婷视频一区二区| 丁香五月婷婷啪啪| 色婷婷9| 第五色婷婷| 丁香五月婷婷社区| 99re这里只有精品视频6| 丁香五月91| 婷婷综合日本| 五月宗合激情网| 大伊香蕉精品视频在线| 五月欧美色播| av在线观看免费| 丁香五月天激情四射网| 夜夜综合色| 丁香五月狠狠在线观看| 五月丁香六月欧美综合| 婷婷丁香18| 在线色色| 成人版视频在线观看| 亚洲四色五月| 五月天,激情四射,婷婷频道| ..真实国产乱子伦毛片| 五月人人丁香婷婷五月人人丁香| 久久婷婷五月| 99在线视频色版| 五月天激情久久| 大香蕉大香蕉在线影院| 天天色噜| 久久婷婷资源| 久久久久久久久人妻| 五月婷婷综合在线视频| 婷婷丁香五月,狠狠综合| 天天躁日日躁狠狠躁日日躁2022年5月9日| 婷婷激情丁香五月天综合| 色婷婷影院| 成人午夜无码视频| AV电影在线播放| 99热都是精品| 99热综合| 婷婷激情伍月网| 热久久这里只有精品| 九九热这里有精品视频| 99久久综合网| 色99亚洲| 嫩BBB搡BBBB榛BBBB| 亚洲激情高潮| 老师的粉嫩小又紧水又多A片视频| 91精品电影18T| 97干在线| 丁香婷婷久久激情| 久热一区| 99热99热不卡| 国产色色小草视频| 色婷婷丁香五月天在线观看| 婷婷五月精品中文| 国产精品美女| 天天爽人人综合免费7799| 丁香午夜天| 综合久久婷婷五月丁香| 99热久久这里只有精品| 青青福利网| 日本99婷婷| 五月丁香激情婷婷| 大香蕉啪啪网| 五月婷婷激情| 可以直接看的AV网站| 色色色色色色色色色色色色色色,网站| 欧美日韩AAAA| 久热69| 五月综合无码| 激情五月天无码| 色婷婷色丁香色欲av| 日本3级片一区2区| 色综合色色| 亚洲无AV在线中文字幕| 欧美VA在线观看| 9l视频自拍九色9l视频在线观看| 99激情网| 五月丁香婷婷在线综合蜜桃| 色爽干| 婷婷爱五月| 热的五码久久精品| 性欧美大战久久久久久久83| 亚洲第一第二网站| 色欲天天综合| 99国产精品白浆在线观看免费| 狠狠色丁香久久婷婷综合五月| 狠狠色丁香久久婷婷综合五月| 性一交一乱一交A片久久四色| 99在线观看视频蜜臀| 黄色AAAAAAA| 久热婷婷| 色五月天激情| 九九狠狠干| 色欲一区二区三区精品A片| 婷婷五月天堂一本在线| 五月激情网站| 中文字幕日产A片在线看| 婷婷五月在线播放| 九九無碼| 亚洲岛国电影| 久久婷婷色| 99视频这里只有久久精品| 另类激情五| 国产精品成人AV在线观看春天| 婷婷爱五月天| 人人舔人人色人人高潮| 色五月婷婷大香蕉|