欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

UOS服務(wù)器版部署Rancher避坑指南:Kubernetes管理平臺(tái)搭建

UOS服務(wù)器版部署Rancher避坑指南:Kubernetes管理平臺(tái)搭建 上個(gè)月接了個(gè)活兒某單位一臺(tái)基于UOS服務(wù)器版的機(jī)器要求把Rancher部署上去用來(lái)接管后面新建的Kubernetes集群。一開(kāi)始我覺(jué)得這不算難——Rancher官方文檔寫(xiě)得很清楚Docker跑一個(gè)容器就完事。但實(shí)際動(dòng)手后發(fā)現(xiàn)UOS這套系統(tǒng)和普通的Ubuntu、CentOS還是有些不一樣的地方從軟件源到內(nèi)核參數(shù)再到內(nèi)網(wǎng)證書(shū)處處有坑。這篇文章就把我踩過(guò)的坑和最終跑通的完整路徑整理出來(lái)給要在國(guó)產(chǎn)操作系統(tǒng)上部署Rancher的朋友做個(gè)參考。先說(shuō)明一下適合誰(shuí)看如果你需要在UOS上搭一個(gè)Kubernetes管理平臺(tái)、要給業(yè)務(wù)方提供可視化的集群管理界面或者正在做內(nèi)網(wǎng)離線交付這篇文章基本可以照著操作。文中涉及的命令我都盡量給出完整版和逐參數(shù)解釋不只會(huì)告訴你“怎么跑通”還會(huì)說(shuō)清楚“為什么這么配”。1. 為什么有人要在UOS上裝Rancher先看清這個(gè)組合的價(jià)值1.1 UOS和Rancher各自解決什么問(wèn)題UOS是國(guó)產(chǎn)Linux操作系統(tǒng)服務(wù)器版主要跑在政務(wù)、金融、教育這些對(duì)自主可控有要求的場(chǎng)景里。它底層基于Debian體系用apt管理軟件包所以很多Debian系的經(jīng)驗(yàn)可以直接遷移過(guò)來(lái)但又不完全一樣軟件源是自有的內(nèi)核版本相對(duì)保守默認(rèn)啟用的安全模塊也和社區(qū)版有差異。Rancher則是Kubernetes的圖形化管理平臺(tái)。裸K8s最大的問(wèn)題就是管理門(mén)檻高裝好了還要面對(duì)一堆YAML、證書(shū)、Node節(jié)點(diǎn)狀態(tài)業(yè)務(wù)方一看就頭大。Rancher把這些東西封裝成了網(wǎng)頁(yè)操作創(chuàng)建集群、導(dǎo)入集群、部署應(yīng)用、看監(jiān)控日志、做權(quán)限隔離都能點(diǎn)鼠標(biāo)完成。把Rancher部署在UOS上等于在國(guó)產(chǎn)化的基礎(chǔ)上補(bǔ)齊了容器編排的運(yùn)維能力這在很多信創(chuàng)項(xiàng)目里是剛需。1.2 我在實(shí)際中遇到的三種部署訴求接需求的時(shí)候?qū)Ψ讲](méi)有說(shuō)得很細(xì)我在現(xiàn)場(chǎng)梳理下來(lái)大致是三類第一類先在一臺(tái)UOS上把Rancher Server跑起來(lái)后面再慢慢納管其他集群第二類整機(jī)離線機(jī)器不能上外網(wǎng)所有鏡像都得拷進(jìn)去第三類要求提供可重復(fù)執(zhí)行的部署文檔方便以后換機(jī)器重新部署。這三種訴求對(duì)應(yīng)的路徑不太一樣。第一種最簡(jiǎn)單在線拉鏡像就行第二種要花大力氣解決鏡像搬運(yùn)和私有倉(cāng)庫(kù)的問(wèn)題第三種則要求整個(gè)流程腳本化、參數(shù)化。下面我會(huì)按線上環(huán)境為主線來(lái)講離線部分單獨(dú)開(kāi)一節(jié)因?yàn)槟鞘遣瓤幼疃嗟沫h(huán)節(jié)。2. 環(huán)境準(zhǔn)備版本核對(duì)、內(nèi)核參數(shù)與容器運(yùn)行時(shí)選型2.1 先跑三個(gè)命令確認(rèn)機(jī)器底子部署前千萬(wàn)別急著裝Docker先確認(rèn)三件事系統(tǒng)版本、內(nèi)核版本、架構(gòu)。UOS服務(wù)器版常見(jiàn)的是v20系列內(nèi)核一般在4.19左右架構(gòu)通常是x86_64也有不少ARM機(jī)器。用下面三條命令看cat /etc/os-release uname -r uname -m我遇到的那臺(tái)機(jī)器是x86_64內(nèi)核4.19跑Rancher 2.7系列完全沒(méi)問(wèn)題。需要注意一點(diǎn)如果你的Rancher版本很新比如2.9、2.10開(kāi)始的部分特性對(duì)內(nèi)核和容器運(yùn)行時(shí)版本有更高要求建議先去官方release note里核對(duì)一下最低內(nèi)核版本。4.19跑老一點(diǎn)但還在維護(hù)期的2.7.x是最穩(wěn)妥的搭配。另外磁盤(pán)規(guī)劃是個(gè)容易被忽略的環(huán)節(jié)。Rancher的數(shù)據(jù)全部寫(xiě)在/var/lib/rancher目錄下包括配置、證書(shū)、etcd快照等。我習(xí)慣把數(shù)據(jù)目錄單獨(dú)掛一塊盤(pán)或者至少確保這個(gè)分區(qū)剩余空間在20GB以上。容器日志、鏡像、下游集群的kubeconfig都會(huì)堆在上面真到磁盤(pán)寫(xiě)滿的時(shí)候Rancher的表現(xiàn)是各種莫名其妙的報(bào)錯(cuò)排查起來(lái)非常被動(dòng)。2.2 Docker還是containerd單節(jié)點(diǎn)場(chǎng)景的選擇邏輯容器運(yùn)行時(shí)選哪個(gè)很多人會(huì)糾結(jié)。Rancher Server本身是作為一個(gè)容器跑起來(lái)的官方最推薦的單節(jié)點(diǎn)部署方式就是用Docker啟動(dòng)Rancher容器如果你走K3s或者RKE2的路子那用的是containerd。單節(jié)點(diǎn)部署Rancher Server我建議直接用Docker理由很實(shí)際排障簡(jiǎn)單docker logs、docker inspect這些命令大家都熟升級(jí)就是換個(gè)鏡像重新起容器邏輯直白Docker的生態(tài)和文檔也最全。containerd不是不能用只是當(dāng)你只想快速把Rancher跑起來(lái)時(shí)沒(méi)必要多繞一層。UOS上裝Docker有兩條路一是直接apt裝軟件源里的版本優(yōu)點(diǎn)是命令簡(jiǎn)單缺點(diǎn)是版本經(jīng)常偏舊可能低于Rancher要求的最低版本二是下載官方靜態(tài)包手動(dòng)安裝優(yōu)點(diǎn)是最新、可控缺點(diǎn)是要自己處理systemd服務(wù)文件。我實(shí)際用的是離線deb包方式具體操作在下一節(jié)展開(kāi)。2.3 初始化系統(tǒng)參數(shù)swap、時(shí)間同步、文件句柄裝完Docker先別急著拉鏡像有幾個(gè)系統(tǒng)參數(shù)先改了不然后面K8s集群初始化的時(shí)候會(huì)翻車(chē)。第一swap建議關(guān)掉。Kubernetes默認(rèn)要求節(jié)點(diǎn)上的swap是關(guān)閉狀態(tài)雖然這個(gè)要求主要針對(duì)下游集群的節(jié)點(diǎn)但Rancher Server所在的機(jī)器順手也關(guān)了省得后面出幺蛾子swapoff -a sed -i s/.*swap.*/#/ /etc/fstab第二開(kāi)啟IPv4轉(zhuǎn)發(fā)。容器和Pod之間的流量依賴這個(gè)參數(shù)默認(rèn)可能是0echo net.ipv4.ip_forward 1 /etc/sysctl.conf sysctl -p第三時(shí)間同步必須做。Rancher和K8s之間的通信很依賴時(shí)間一致性證書(shū)校驗(yàn)、token校驗(yàn)全都建立在時(shí)間正確的前提上。UOS服務(wù)器版一般自帶chrony但很多內(nèi)網(wǎng)機(jī)器沒(méi)配好NTP源我見(jiàn)過(guò)因?yàn)闀r(shí)間差了五分鐘導(dǎo)致Rancher頁(yè)面能開(kāi)、下游集群怎么都注冊(cè)不上的情況。建議盡早確認(rèn)chronyc sources -v date如果時(shí)間不對(duì)配好NTP源然后用systemctl restart chronyd重啟服務(wù)。這一步成本最低卻是最容易埋雷的。3. Docker單節(jié)點(diǎn)部署Rancher Server命令級(jí)拆解3.1 安裝Docker的兩種路徑與源的選擇在線環(huán)境下UOS的默認(rèn)軟件源如果已經(jīng)收錄了docker.io有些版本確實(shí)有直接apt-get update apt-get install -y docker.io systemctl enable --now docker這個(gè)方式適合快速驗(yàn)證但版本可能只有20.10左右跑Rancher 2.6及以上夠用。如果你對(duì)版本有要求也可以添加Docker官方的apt源來(lái)裝docker-ce不過(guò)這要求機(jī)器能訪問(wèn)外網(wǎng)內(nèi)網(wǎng)環(huán)境就得走離線包了。離線裝Docker的辦法是在一臺(tái)能聯(lián)網(wǎng)的同架構(gòu)機(jī)器上下載docker-ce的deb包包括containerd.io、docker-ce-cli、docker-ce這幾個(gè)依賴然后拷貝到UOS上執(zhí)行dpkg -i containerd.io_*.deb docker-ce-cli_*.deb docker-ce_*.deb依賴不全會(huì)報(bào)錯(cuò)缺什么就用apt-get install -f補(bǔ)齊。裝完驗(yàn)證一下docker version systemctl status docker這里有個(gè)實(shí)操細(xì)節(jié)UOS默認(rèn)可能啟用了AppArmor如果后面容器啟動(dòng)行為異常先看一眼dmesg | grep -i apparmor有時(shí)候需要給Docker的systemd服務(wù)額外加上容器的profile配置。不過(guò)多數(shù)情況下Rancher容器不會(huì)撞上這個(gè)先有個(gè)印象就行。3.2 啟動(dòng)Rancher的標(biāo)準(zhǔn)命令逐參數(shù)說(shuō)明Docker就緒后核心就是這一條命令docker run -d \ --name rancher \ --restartunless-stopped \ -p 80:80 \ -p 443:443 \ -v /data/rancher:/var/lib/rancher \ rancher/rancher:v2.7.9我逐個(gè)拆一下參數(shù)你就不用來(lái)回翻文檔了--name rancher容器名字后面查看日志、停止、刪除都用它。--restartunless-stopped機(jī)器重啟后容器自動(dòng)拉起除非手動(dòng)stop這是生產(chǎn)環(huán)境必須加的。-p 80:80 -p 443:443把宿主機(jī)的80和443映射到容器內(nèi)。Rancher的UI默認(rèn)走44380端口的用途是做HTTP到HTTPS的跳轉(zhuǎn)。如果你的UOS機(jī)器上已經(jīng)裝了Nginx或其他Web服務(wù)占了80/443這里要改端口比如-p 8080:80 -p 8443:443但后面訪問(wèn)地址也要跟著變。-v /data/rancher:/var/lib/rancher數(shù)據(jù)持久化。宿主機(jī)目錄建議用絕對(duì)路徑我習(xí)慣單獨(dú)建/data/rancher而不是默認(rèn)的/var/lib/rancher因?yàn)橄到y(tǒng)盤(pán)空間往往緊張單獨(dú)掛數(shù)據(jù)盤(pán)更靈活。rancher/rancher:v2.7.9鏡像名加版本標(biāo)簽。最好不要直接用latest版本固定下來(lái)升級(jí)和回滾都清楚。有些教程會(huì)加--privileged我個(gè)人不建議單節(jié)點(diǎn)Rancher Server這么干權(quán)限給太寬了出安全問(wèn)題難交代。Rancher容器本身不需要特權(quán)模式就能正常工作。3.3 初始化流程與Server URL的意義容器起來(lái)之后先看日志確認(rèn)啟動(dòng)進(jìn)度docker logs -f rancher看到類似“Rancher has been provisioned”之類字樣說(shuō)明初始化得差不多了然后瀏覽器訪問(wèn)https://UOS服務(wù)器IP/。第一次打開(kāi)會(huì)要求設(shè)置admin密碼還會(huì)彈一個(gè)Rancher Server URL的配置項(xiàng)。這個(gè)Server URL非常關(guān)鍵。它會(huì)被寫(xiě)進(jìn)kubeconfig和集群agent的連接信息里下游集群全靠這個(gè)地址回調(diào)Rancher Server。內(nèi)網(wǎng)環(huán)境就填https://IP:443或者你規(guī)劃的域名別填localhost也別填一個(gè)別人訪問(wèn)不到的內(nèi)網(wǎng)地址。我見(jiàn)過(guò)一個(gè)人填了公網(wǎng)域名結(jié)果內(nèi)網(wǎng)解析不到整整排查了一下午。初始化完成后主界面能看到“Add Cluster”、“Import Existing”等入口。到這里單節(jié)點(diǎn)的Rancher Server就算立起來(lái)了。但如果你后續(xù)要納管集群建議先做一件事把Rancher的system default registry設(shè)置好否則后面導(dǎo)入新集群時(shí)每個(gè)節(jié)點(diǎn)還要單獨(dú)配鏡像加速非常痛苦。4. 內(nèi)網(wǎng)離線部署才是重頭戲鏡像搬運(yùn)與私有倉(cāng)庫(kù)配置4.1 離線鏡像包的導(dǎo)出與導(dǎo)入很多UOS部署環(huán)境是徹底離線的服務(wù)器不能訪問(wèn)Docker Hub這時(shí)候在線拉鏡像這條路直接堵死。我的做法分兩步找一臺(tái)能聯(lián)網(wǎng)的機(jī)器做中轉(zhuǎn)把需要的鏡像打成tar包再拷進(jìn)UOS用docker load導(dǎo)入。最簡(jiǎn)單的單鏡像搬運(yùn)# 有網(wǎng)機(jī)器上 docker pull rancher/rancher:v2.7.9 docker save -o rancher-v2.7.9.tar rancher/rancher:v2.7.9 # UOS機(jī)器上 docker load -i rancher-v2.7.9.tar但生產(chǎn)環(huán)境遠(yuǎn)不止一個(gè)鏡像。當(dāng)你用Rancher建集群時(shí)它要拉一堆系統(tǒng)組件鏡像比如rancher/mirrored-pause、rancher/mirrored-coredns-coredns、各種kube-proxy、etcd的鏡像。一個(gè)個(gè)手動(dòng)pull/save不現(xiàn)實(shí)。正確做法是使用Rancher官方維護(hù)的離線鏡像清單和腳本。具體思路是在有網(wǎng)機(jī)器上拉取Rancher代碼庫(kù)里的rancher-images.txt配合官方提供的save/load腳本把所有需要的鏡像都導(dǎo)出來(lái)。大致流程是# 有網(wǎng)機(jī)器上執(zhí)行 ./rancher-save-images.sh --image-list ./rancher-images.txt # 會(huì)生成 rancher-images.tar.gz 和 rancher-images.txt然后把這兩個(gè)文件拷貝到UOS上執(zhí)行./rancher-load-images.sh --image-list ./rancher-images.txt --images rancher-images.tar.gzload腳本會(huì)自動(dòng)逐個(gè)docker load你只需要等它跑完。這個(gè)方式我實(shí)測(cè)過(guò)雖然耗時(shí)久幾十個(gè)鏡像每個(gè)都要解壓但比手動(dòng)一個(gè)個(gè)拉靠譜太多。4.2 配置私有鏡像倉(cāng)庫(kù)與registry地址離線環(huán)境只把鏡像load到本地Docker是不夠的因?yàn)镽ancher創(chuàng)建下游集群時(shí)每個(gè)K8s節(jié)點(diǎn)默認(rèn)還是會(huì)去拉公共倉(cāng)庫(kù)的鏡像離線節(jié)點(diǎn)根本拉不到。正解是搭一個(gè)私有鏡像倉(cāng)庫(kù)Harbor或者簡(jiǎn)單的registry容器都行把所有鏡像推上去然后讓Rancher的默認(rèn)拉取地址指向它。在UOS上快速起一個(gè)registry容器docker run -d --name registry \ -p 5000:5000 \ -v /data/registry:/var/lib/registry \ registry:2然后把tar包里的鏡像重新打標(biāo)簽并推送docker tag rancher/rancher:v2.7.9 內(nèi)網(wǎng)IP:5000/rancher/rancher:v2.7.9 docker push 內(nèi)網(wǎng)IP:5000/rancher/rancher:v2.7.9配置Rancher默認(rèn)registry我習(xí)慣在啟動(dòng)容器時(shí)直接注入環(huán)境變量docker run -d --name rancher \ --restartunless-stopped \ -p 80:80 -p 443:443 \ -e CATTLE_SYSTEM_DEFAULT_REGISTRY內(nèi)網(wǎng)IP:5000 \ -v /data/rancher:/var/lib/rancher \ rancher/rancher:v2.7.9每個(gè)人的鏡像命名規(guī)范不同這個(gè)環(huán)境變量主要影響Rancher系統(tǒng)組件鏡像的拉取地址前綴。如果你的私有倉(cāng)庫(kù)上鏡像路徑不是標(biāo)準(zhǔn)的rancher/mirrored-xxx結(jié)構(gòu)就需要在創(chuàng)建集群的高級(jí)設(shè)置里單獨(dú)配置。實(shí)測(cè)下來(lái)最省心的還是保持私有倉(cāng)庫(kù)路徑和官方一致只改成帶IP的完整前綴。4.3 證書(shū)處理內(nèi)網(wǎng)HTTPS信任鏈怎么搭在線部署Rancher默認(rèn)會(huì)給自己簽一個(gè)自簽證書(shū)瀏覽器第一次訪問(wèn)會(huì)跳警告這個(gè)還能接受。但內(nèi)網(wǎng)場(chǎng)景通常有企業(yè)CA或者客戶強(qiáng)制要求用正式證書(shū)這時(shí)候必須在啟動(dòng)時(shí)掛載證書(shū)。方法是在啟動(dòng)Rancher容器時(shí)把證書(shū)和私鑰放到宿主機(jī)的/data/rancher-certs目錄下命名為tls.crt和tls.key然后掛載進(jìn)去docker run -d --name rancher \ --restartunless-stopped \ -p 80:80 -p 443:443 \ -v /data/rancher-certs:/etc/rancher/ssl \ -v /data/rancher:/var/lib/rancher \ rancher/rancher:v2.7.9Rancher會(huì)優(yōu)先讀取/etc/rancher/ssl下的證書(shū)不再使用自簽證書(shū)。這里有個(gè)坑證書(shū)的Common Name一定要和訪問(wèn)的地址匹配包括IP SAN或者域名SAN否則瀏覽器照樣報(bào)錯(cuò)下游集群的agent連接也會(huì)因?yàn)樽C書(shū)校驗(yàn)失敗而注冊(cè)不上。另一個(gè)容易被忽略的是如果用的是企業(yè)內(nèi)網(wǎng)CA簽發(fā)的證書(shū)客戶端機(jī)器上要信任這個(gè)CA。UOS上操作很簡(jiǎn)單cp your-ca.crt /usr/local/share/ca-certificates/ update-ca-certificates這樣本機(jī)的curl、容器、以及其他工具訪問(wèn)Rancher時(shí)就不會(huì)因?yàn)椤癱ertificate signed by unknown authority”而中斷。這個(gè)步驟在部署文檔里經(jīng)常被漏掉但線上環(huán)境幾乎必然遇到。5. UOS特有的坑一套完整排查鏈路5.1 現(xiàn)象一頁(yè)面能開(kāi)下游集群連不上癥狀很明確Rancher頁(yè)面正常打開(kāi)但導(dǎo)入一個(gè)新集群到一半就失敗agent Pod一直P(pán)ending或者CrashLoopBackOff。先別查Node從網(wǎng)絡(luò)鏈路看起。第一步確認(rèn)UOS的防火墻狀態(tài)systemctl status firewalld ufw statusUOS服務(wù)器版可能默認(rèn)啟用了ufw也可能沒(méi)有防火墻但有些定制鏡像會(huì)在iptables層面加了限制。最直接的辦法是看443端口是否確實(shí)在監(jiān)聽(tīng)ss -tlnp | grep -E 443|80 iptables -L -n | grep 443我遇到的情況是443端口監(jiān)聽(tīng)正常但iptables FORWARD鏈默認(rèn)DROP導(dǎo)致Rancher訪問(wèn)下游集群的Pod網(wǎng)絡(luò)時(shí)被丟包。這個(gè)坑在Debian系上很典型因?yàn)镈ocker會(huì)往iptables里加規(guī)則但FORWARD鏈的默認(rèn)策略可能還是DROP。臨時(shí)改法iptables -P FORWARD ACCEPT永久生效還是在/etc/sysctl.conf里確認(rèn)net.ipv4.ip_forward1并檢查ufw如果開(kāi)著得放行ufw allow 443/tcp。5.2 現(xiàn)象二Rancher容器反復(fù)重啟這個(gè)問(wèn)題我是在離線導(dǎo)入鏡像時(shí)踩到的。表現(xiàn)為docker ps看到容器狀態(tài)一直在restarting頁(yè)面打不開(kāi)docker logs報(bào)錯(cuò)信息又不明顯。從經(jīng)驗(yàn)看優(yōu)先查三件事一是數(shù)據(jù)卷權(quán)限/data/rancher目錄的所有者必須是root如果之前用別的用戶拷過(guò)數(shù)據(jù)目錄權(quán)限不對(duì)容器起來(lái)就會(huì)崩用chown -R root:root /data/rancher修正二是磁盤(pán)空間df -h看看是不是分區(qū)滿了etcd寫(xiě)入失敗時(shí)容器會(huì)不停重啟三是內(nèi)存是否夠用UOS上如果內(nèi)存小于4GB同時(shí)跑Rancher和其他服務(wù)很容易觸發(fā)OOMdmesg | tail或者journalctl -k | grep -i oom能看出來(lái)。我之前一次部署問(wèn)題就出在離線導(dǎo)入鏡像時(shí)磁盤(pán)被解壓后的鏡像塞滿Rancher容器寫(xiě)到一半磁盤(pán)滿直接OOM。清了/var/lib/docker下沒(méi)用的鏡像和Build緩存重啟Docker再起容器就好了。5.3 現(xiàn)象三時(shí)間不同步導(dǎo)致的證書(shū)報(bào)錯(cuò)癥狀是頁(yè)面偶爾能打開(kāi)但登錄后操作很容易報(bào)401、403或者下游集群的Pod報(bào)x509: certificate has expired or is not yet valid。很多人的第一反應(yīng)是證書(shū)過(guò)期了翻來(lái)覆去找原因結(jié)果發(fā)現(xiàn)系統(tǒng)時(shí)間慢了十分鐘。這在物理機(jī)和內(nèi)網(wǎng)虛擬機(jī)上特別常見(jiàn)CMOS電池沒(méi)電、NTP沒(méi)配通都可能導(dǎo)致時(shí)間漂移。我用一條命令確認(rèn)timedatectl status如果顯示NTP service: inactive或者時(shí)間跟實(shí)際差得遠(yuǎn)立刻配chronyapt-get install -y chrony systemctl enable --now chronyd chronyc makestep等時(shí)間校準(zhǔn)后再訪問(wèn)Rancher證書(shū)問(wèn)題通常就消失了。Rancher對(duì)時(shí)間異常其實(shí)挺敏感的因?yàn)檎麄€(gè)認(rèn)證體系都是基于時(shí)間戳簽發(fā)的token時(shí)間一歪頁(yè)面和你以為的都正常但后端校驗(yàn)就是不通過(guò)。6. 部署完怎么驗(yàn)收驗(yàn)證清單與日常運(yùn)維要點(diǎn)6.1 我的驗(yàn)收清單可直接抄每次部署完我都會(huì)按下面這張清單過(guò)一遍免得交付了才發(fā)現(xiàn)漏配置檢查項(xiàng)操作方式預(yù)期結(jié)果頁(yè)面可訪問(wèn)瀏覽器打開(kāi) https://UOS_IP/出現(xiàn)登錄頁(yè)無(wú)證書(shū)告警或已信任容器穩(wěn)定docker psrancher容器運(yùn)行中無(wú)restarting日志無(wú)異常docker logs rancher --since 10m無(wú)ERROR級(jí)別刷屏數(shù)據(jù)持久化ls /data/rancher能看到配置、證書(shū)、audit日志等目錄時(shí)間同步chronyc tracking顯示已同步時(shí)間偏差小于1秒轉(zhuǎn)發(fā)已開(kāi)啟sysctl net.ipv4.ip_forward輸出1Server URL可回訪在下游節(jié)點(diǎn)curl https://UOS_IP/healthz返回200或類似健康響應(yīng)創(chuàng)建測(cè)試集群頁(yè)面上新建一個(gè)自定義集群集群節(jié)點(diǎn)狀態(tài)Active重點(diǎn)說(shuō)一下/healthz這個(gè)健康檢查路徑Rancher會(huì)返回200在下游節(jié)點(diǎn)上先curl通再去做集群導(dǎo)入能提前攔截百分之八十的網(wǎng)絡(luò)問(wèn)題。6.2 備份與升級(jí)的幾個(gè)實(shí)用經(jīng)驗(yàn)Rancher的備份我推薦在頁(yè)面上裝rancher-backup這個(gè)應(yīng)用它能把Rancher的CRD配置、RBAC、證書(shū)這些打包成壓縮文件支持上傳到S3兼容存儲(chǔ)恢復(fù)的時(shí)候也方便。但UOS離線環(huán)境要先把這個(gè)應(yīng)用的鏡像搬到私有倉(cāng)庫(kù)不然裝不上。如果不想裝應(yīng)用最低成本的備份方式是直接打包數(shù)據(jù)目錄systemctl stop docker # 或者 docker stop rancher tar -czf rancher-backup-$(date %F).tar.gz /data/rancher systemctl start docker注意備份前要么停容器要么確保數(shù)據(jù)目錄沒(méi)有并發(fā)寫(xiě)入否則etcd相關(guān)的文件可能備份出一個(gè)半成品恢復(fù)時(shí)怎么都起不來(lái)。升級(jí)Rancher就三步pull新鏡像、刪掉舊容器保留數(shù)據(jù)卷、用同一套掛載參數(shù)起新容器。官方文檔有明確的升級(jí)路徑切記不要跨大版本跳級(jí)升級(jí)。我上次從2.7升到2.8是直接換鏡像起的數(shù)據(jù)完全保留頁(yè)面提示遷移完成整個(gè)過(guò)程半小時(shí)內(nèi)搞定。當(dāng)然前提是數(shù)據(jù)目錄掛載沒(méi)變、證書(shū)沒(méi)動(dòng)、端口沒(méi)改。還有一個(gè)日常運(yùn)維細(xì)節(jié)Rancher容器所在的主機(jī)名不要隨便改它的kubeconfig和生成的證書(shū)可能包含主機(jī)名信息改完hostname可能導(dǎo)致集群狀態(tài)異常。我在UOS上就遇到過(guò)改了/etc/hostname重啟后Rancher頁(yè)面雖然能開(kāi)但內(nèi)部有些校驗(yàn)開(kāi)始報(bào)不匹配。所以主機(jī)名這種東西部署前定好部署后別動(dòng)。最后分享一個(gè)我自己的習(xí)慣每次部署UOS上的Rancher我都會(huì)先在虛擬機(jī)里完整跑一遍流程把每一步命令的輸出記錄下來(lái)包括docker run的參數(shù)、證書(shū)的路徑、私有倉(cāng)庫(kù)的地址。等上了生產(chǎn)環(huán)境基本就是照著記錄復(fù)現(xiàn)一遍很少出意外。這個(gè)習(xí)慣幫我省了不少半夜值班的麻煩建議你也試試。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久精品系列| 中文字幕在线免费看线人| 九九五月天| 日韩AAAAA| 五月婷婷影院| 91人人人人人人人| 丁香六月啪| 98毛片| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 成人网站av免费网站推荐| 大香蕉伊人99| 久久久五月激| 97干在线观看视频| 精品国产乱码久久久久久免费| 91色综合久久| 综合色色网| 久久er+| 婷婷五月天天aV| 久热这里只有| 99re6在线视频精品免费| 激情五月四色| www.婷婷六月天| 极品人妻VIDEOSSS人妻| 91要啪| 五月婷婷偷| 激情综合五月色丁香婷婷| 天天干电影| 日本色五月| 综合欧美五月婷婷| 第四色激情网| 六月丁香激情网| 五月丁香久久综合| 天天操天天插天天射| 殴美日比视频| 色综合久久88色综合天天| 日本美女上人| 久久综合站| 99日本精品视频热| 色色射| 99热只有| 亚洲一区国产传媒| 丁香五月激情综合啪啪| 狠狠狠狠狠| 青吴乐视频| 婷婷丁香97| 色播五月丁香婷婷| 涩涩五月天| 自拍视频99| 五月天无码| 丁香五月色欲| 51精品国自产在线| 色色色色热热| 丁香婷婷五月六月久久| 天堂在线婷婷| 五月六月激情| 国产小精品| 天天操加勒比| 色久丁香五| 色婷婷电影网| 日本久久高清| WWW.桔色成人.COM| 极品少妇婷婷五月| 天堂婷婷丁香六月网| 色婷婷九月| 久久免费高| 人妻久久做| 婷婷五月丁香六月| 亚洲色频| 婷婷第一页| 立川无码av| xx久久| 婷婷丁香五月视频| 美国天天日天天操| 欧美电影在线观看| 97色色色视屏| 色婷婷婷婷| 国产亚洲99久久| 国产精品久久久60086| 91久久婷婷| 婷婷丁香91| 亚洲性色XXXXX| 色色亚洲| 开心久久xxx色| 婷婷丁香五月综合免费视频百花| 狠狠综合久久综合| 婷婷丁香五月天狠狠| 六月激情综合| 丁香五月网站| 色播六月| 国产99久久久| 五月天亭亭俺也| 色噜噜狠狠色综合网| 婷婷五月天精品| 在线播放人妻| 九九色99| 久久密臀婷婷| 99精品网| 91人人操.COM| 9999三级片| 99热这里有精力| 色综合久久伊伊婷婷五月| 欧美va视频| 丁香熟女乱| 丁香五月婷婷综合啪啪| 怡红院AV亚洲一区二区三区H | 天天综合色| 五月综合激情视频| 开心五月婷婷99| 中文字幕无码人妻少妇免费视频 | 五月天婷婷爱| 69久久99精品久久久久| AV色婷婷| 99热大香蕉| 日韩性爱无码| 色综合色婷色基地| 久久精品噜噜噜成人A∨色欲| 乱精品一区字幕二区| 婷婷激情小说| 激情小说五月天| 99综合| 夜色综合网| 九九热最新视频| 99综合免费视频| 噜噜噜噜在线| 色狠久| 这里只有免费的精品| 综合逼五月激情婷婷| 五月五婷婷网| 91免费在线视频6| 五月丁香啪啪啪免费看| 丁香五月婷婷动漫视频| 天天爱天天做天天爽| www.狠狠操.con| 开心婷婷五| 五月婷婷xxx| 成人在线网址| 婷婷五月花免费视频在线| 天天干,天天舔| www.丁香五月| 国自产拍偷拍精品啪啪一区二区| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 99爱在线免费视频| 99性爱| 五月激情天| 色婷婷电影网| 97超碰,人人舔,人人操,人人摸| 免费看成人AA片无码视频吃奶| 亚洲乱码日产精品BD| 99在线精品免费视频| 免费无码毛片一区二区A片| 欧美性生交XXXXX无码小说| 99色在线| 五月婷婷很很色| www...com黄在线观看| 综合久久五| 婷久久久| 综激情网| 狠狠va| 一区二区三区四区无码| 99综合| 在线另类视频| 69精品人人人人| 拍真实国产伦偷精品| 99年操人人爽| 激情五月婷黄版| 啪啪丁香五月| 五月天大香蕉av| 色www99| 欧美婷婷精品激| 色情五月婷| 成人片在线播放| 欧美色图45678| 激情播丁香| www夜夜操wwwcon| 五月婷婷激情综合网 | 婷婷激情五月天小说校园| 九九激情| 国产免费一区二区在线A片视频| WWW.桔色成人.COM| av成人在线播放| 亚洲啪啪视频| 婷婷五月天成人影片| 狠狠色综合精品视频在线| 婷婷婷婷婷开心无码播放| 日本99在线视频| 九九热精品| 亚洲综合色婷| 五月婷婷久久综合| 99久久九九| 91狠狠色色丁香婷婷综合久久| 五月天成人综合| 丁香五月欧美婷婷综合| 99在线公开视频| ,99视频久久| 99爱免费视频| 性色五月天| 激情五月天天| 五月天婷婷综合久久| 人人看人人草人人摸| 99在线热视频| 成人五月丁香花| 五月丁香福利| 日本性视频| 久操无码| 丁香五月天在线| 超碰91在线| 久久色六月| 久久久久久久久久91| 色播播之激情五月婷婷| 91九色国产| 亚洲视频综合网| 一起草Av| 五月天涩涩| 99热| 超碰在线观看9| 精品色色网| 亚洲情色一区| 超级碰碰视频无码| 这里只有精品99www| 天天综合色丁香| 精品夜夜澡人妻无码AV| 日韩一级片| 激情婷婷五月天日本系列| 五月天国产| 96色婷婷| 亚洲色综久久五月| 777影视理论片大全在线观看| 色欲婷婷五月天丁香| 伊人丁香婷婷东京| 五月丁香六月婷综合成人综合| 丁香六月婷婷开心婷婷网| 国产性色蜜乳| 日本人妻伦在线中文字幕 | 综合色色五月| 青青久在线视频免费观看| 亚洲啪啪网| 天天舔天天插天天干| 久草大| 五月天丁香欧美激情| 开心五月婷婷激情网| 色五月丁香网| 99干日本| 日韩久热| 91精品人妻少妇无码影院| 丁香五月婷婷激情中文| 五月婷婷丁香91| 婷婷五月天成人在线视频| 久久九九国产精品怡红院| 丁香婷婷五月份| 激情综合五月激情17| 久久99激情| 中文字幕高清av| 五月欧美色色五月| 久久艹 五月天| 色五月婷婷成人视频| 亚洲操人| 久热9| 国产免费一区二区三州老师F1F1| 1024婷婷综合久久五月天| 婷婷五月丁香网| 爱iii做iiii日| 久久婷五月综合色| 三人荫蒂添的好舒服A片| 久久99网站| 精品99在线| 91热在线观看视频| 色五月在线播放| 五月亭亭直播| 1234操逼网| 婷婷夜夜操| 五月丁香久久综合91| 婷婷五月丁香五月天| 激情四射五月天| 思思热闹这里只有精品| 久久九九网| 久久久妻人人人| 亚洲色婷婷五月天| 九九视频精品在线免费| 久久婷婷超碰| 久久久这里有精品| 玖玖婷婷色五月| 中文久久婷婷| 99久久亚洲精品视频| 大香网伊人久久综合| 人妻中文在线| 蜜臀AV在线观看| 成人久久天天x资源站| 丁香五月激情综合| 久久五月激情| 五月久久网| 色热久| 色色色99| 乱岳熟女50岁| 久久五月综合| 操操人人| 粉嫩AV久久一区二区三区| 五月婷婷色男女| 亚洲精品V天堂中文字幕| 思思w99| 亚洲第一成人AV| 激情五月天激情五月天| 六月激情网| wuyuedingxiang99| 精品99*| 色五月AV| 99 热| 亚洲熟妇AV乱码在线观看| 2025最新亚洲激情在线| 人妻Av在线| 亚洲综合另类| site:wpjngj.com| 国产乱妇无乱码大黄AA片| 99精品视频免费观看,| 色色999三级片| www五月| 丁香大香蕉| 色区久久| 亚洲中文乱字字幕在线永久| 5月激情天| 蜜乳av一级av| 99久久99久久| 五月丁香综合啪啪対白| 大香蕉久久婷婷| www五月| 狠狠干五月丁香| 日韩xx在线| 大香蕉婷婷| 思思久久思思| 99这里有精品视频| 六六久久黄色| 亚洲超碰在线| 夜夜爽天操| 五月丁香久久久久| 九九色婷| 这里只有精品免费| 五月久视频| 日欧一片内射VA在线影院| 成人丁香五月天| 91精品久久久久久77777| 综合网色| 色五月激情网| 激情纯色婷婷五月天在线不卡视频| 久久婷婷五月综合一| 激情五月丁香五月| 五月综合激情视频| 91婷婷丁香五月天免费视频网站| 五月婷中文娱乐综合| 婷婷色五月天在线| 色五月播五月| 色播丁香婷婷五月激情| 天天做天天要天天爱| 在线视频区| 99人碰碰碰| 开心五月丁香啪| 色色色婷婷五月天| 国产永久一黄| 日本女色人人| 人妻人人操| 丁香婷婷五月天在线视频| www.91.com处女在线直播| 色婷婷啪啪| 午夜少妇在线观看视频| 色99网| 五月天婷婷中文字幕在线播放| 99无码视频| Www.Av网9| 五月丁香啪啪| 8区视频在线| 婷婷激情五月天小说校园| 五月天日日操夜夜操 | 天天爱天天操| 九九热av| 色情五月天。| 91久久精品视频| 激情网五月天| 色99色| 中文久久婷婷| 国产成人亚洲综合A∨婷婷| 亚洲五月天综合| 人人操91| 五月婷婷人人人操| 欧美伊人9| 91碰免费视频| 五月天丁香婷婷网| 日韩一区二区A片免费观看| 99超级碰免费视频| 狠狠五月激情丁香六月| 五月天偷拍| 五月丁香六月婷婷的女人| 色五月 激情婷婷 综合五月天| 色欲丁香| 六月丁香中文字幕| 99亚洲视频| 免费超碰在线| 激情骚五月| 热99视频精品在线| 久久精彩视频18| 国产人妻人伦精品一区二区| 国产FREESEXVIDEOS性中国| 99热在线精品观看| 丁香婷婷五月六月久久| 猫咪伊人久久| 色播婷婷大香蕉| 91九色在线视频| 九九热这里| 五月开行婷婷色五月| 五月开心啪啪| 人人色人人摸人人看| 4399精品一区二区| 综合AV在线| 青青操日本摸摸看看| 丁香五月婷婷激情97| 嫩BBB槡BBBB搡BBBB| av大香蕉| 琪琪色网在线| 无码人妻一区二区一牛影视| 五月亭久久无码视频| 大香蕉娱乐| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 丁香网站| 欧美色男人网站| 中文字幕成人网站| 日韩久久日| 九九色video| 丁香久久激情俄| 色婷婷女优有码五月亭| 99热综合色图| 婷婷综合欧美| 99热国产国产| 色婷婷丁香五月色综合网| 日日撸日日操| 久久久久久久人妻| 综合色久| 人妻熟人中文字幕一区二区| 五月激情婷婷偷拍| www激情网站| 中文字幕视频在线播放| 九九视频免费| 久久人人人人妻| 久久96热| 97色操| 久久久99久久| 国产成人精品123区免费视频| 1024在线一区| 狠狠色大香蕉| 天天色天天搡| 色五月天视频| 成人视频在线免费播放| 成人丁香| 中文AⅤ大全| 亚洲av成人一区二区电影在线| 五月丁香婷婷激情四射迷人| 激情久久久久久| 五月天色婷婷激情综合| 丁香五月在线观看完整版| 天天爱天天做天天| 五月天激情小说| 国产精品第一国产精品| 亚州婷婷五月激情综合| 亚洲一个色| 只有久久精品免费| 亚洲午夜电影| 亚洲亚洲人成综合网络| 伊人玖玖婷婷| 人人人人人人人人人草| 播五月开心婷婷欧美综合| 91久久婷婷| 超碰亚洲欧美| 热久久91| 五月婷婷久| 五月丁香六月香香蕉| 成人无码髙潮喷水A片| 性欧美大战久久久久久久83| 九九色院| 天天色天天噜| 91色色色| 9久热在线视频| 伊人干综合| 人妻 性久久久久久| 97五月天| 9色91视频| 免费看成人747474九号视频在线观看| www.夜夜夜| 色色色色色综合| 婷婷丁香成人| 好色婷婷| 色婷婷色五月综合| 99色在线视频| 日韩免费99| 久久五月天合网| 夜夜干天天操| 最新无毒无码AV| 六月婷婷激情| 5月婷婷激情在线| 色婷婷五月天| 91成人品| 五月丁香六月婷婷网| 久久久激情| 久久宗合影| 很很干在线视频| 激情久久久久久| 日本色色视频| 天天干天天日日| 久久与婷婷| 五月婷婷丁香日韩在线| 久久一热免费视频| 久久人人九九| 国产三级在线播放| 2023天天日夜夜爽| 丁香五月综合| 影音先锋噜一噜| 99无吗| 国产成人精品一区二三区熟女在线| 中文字幕丰满人妻无码专区| 五月婷六月| 一本色综合色| 99久99热| 久热无码| 日本熟妇精品99| 色色色热热热| 激情五月天情色| 女人天堂av| 99视频内射三四| 国产超碰人人| 免费亚洲婷婷五月| 丁香五月激情啪啪啪| 天天爱天天做天天爽| 中文字幕在线播放视频| 色婷婷色九月| 另类激情五月在线视频欧美| 五月婷久草| 激情五月亚洲| 日本视频不卡123区| 五月天天天综合| 久久综合激情| 五月天堂婷婷| 91视频精品99| 爆乳熟妇一区二区三区爆乳照片| 五月天激情视频| 99热免费18| 丁香五月激情视频| 综合色在线| 99久久综合网| 疯狂做受XXXX高潮A片| 国内婷婷丁香社区在线播放| 99热网站| 色色综合色视频| 啊v视频在线观看| 大香蕉婷婷色| 婷婷五月天小说| 久久一热免费视频| 五月婷婷色欲| 色五月婷婷久久| 色欲色欲久久宗合网| 五月婷婷影视| 五月婷婷很很色| 可以直接看的av网站| 色婷婷基地 | 丁香五月激情综合在线观看| 婷婷丁香成人色综合| 99热这里有精品2| 久久人人添人人爽添人人片αV| WWW激情五月天| 久草婷婷在线| 婷婷五月天小说网| 先锋资源婷婷| 涩涩涩五月天| 色婷丨日丨天丨综合久久| 国产FREESEXVIDEOS性中国| 天天做天天干天天综合网 | 人妻自慰在线| 欧美顶级少妇做爰HD| 午夜爱爱爱成人| 六月五月天婷婷涩播在线| 色欲资源网| 婷婷中文综合网| 夜夜操夜夜操| 五月大香蕉| av大香蕉| 99综合一区| 国产在线自| 91碰在线| 五月天婷婷在线啪啪视频| 狠狠爱深色婷婷综合| 五月深爱激情网| 一起草Av| 五月天开心激情网色欲无码| 这里只有精品视频| 五月激情网站| 五月丁香久久网| 婷婷久久综合久| 99re这里有精品手机在线| 丁香五月伊人| 九九热10| 五月丁香婷婷激情在线| 日日噜噜久久婷婷五月天| 色综合区| 新99思思视频| 婷综合六月| 大香蕉久| 五月丁香五月天现场视频| 九九综合网色全集| 老师的粉嫩小又紧水又多A片视频 粉嫩AV久久一区二区三区 | 人妻熟女一区二区AV| 99热综合网| 青青操绿aaa一区日v| 丁香五月婷婷www..com| 久久婷婷五月综合| 97色啪| 丁香五月婷婷五月| 五月天社区婷婷丁香社区| 色综久久久| 亭亭玉月丁香| 日日影院 | 91狠狠综合网| 五月草影视| 91丨九色丨熟女高潮| 香蕉视频性爱BB做爱| 丁香五月天啪啪| 蜜桃五月天| 丁香五月激情宗合| 久久玖玖综合| 五月丁香色停停啪啪啪| 亚洲婷婷五月天| 噜一噜在线| 79色色免费| 深爱婷婷基地| 性色婷婷| 99久久久精品| 少妇被下春药玩弄A片| 伊人网大香| 蜜乳中文字| 丁香五月在线视频| 婷婷激情性爱| 99少妇精品| 性欧美大战久久久久久久83| 久久婷婷视频| 激情六月丁香| 五月丁香啪啪| 婷婷丁香五月综合激情视频| 丁香婷婷六月天| 大香蕉五月天婷婷| 玖玖婷婷色五月| 欧美精品狠狠色丁香婷婷| 天天干,夜夜爽| 日韩欧洲亚洲| 久久99精品久久久久久三级| 日日噜狠狠色| 五月天婷婷黄色| 色综合久久五月| 另类专区在线| 免费97碰碰| 婷婷五月丁香人妻无码高清| 久久桃花网色婷婷| 欧美性猛交XXXX乱大交极品| 五月婷在线| 99免费在线| AV在线大香蕉| 大香蕉伊人99| 欧美大香蕉视频| 久久综合五月天| 日韩淑女人妻luan伦激情精品一区二| www.金莲av| 国产婷伊人| 亚洲精品白浆高清久久久久久| 婷婷久久五月| 激情av| 激情五月婷| 久久综合五月| 丁香激情五月| 五月婷婷激情网| 婷婷激情四射| 欧美大肥婆大肥BBBBB| 久久婷婷五月天| 夜夜干天天操| 99九九精品| 天天草天天爽| 九九视频在线观看视频6 | 婷婷久久久| 一起草av| 香蕉人妻AV久久久久天天| 日本熟妇乱妇熟色A片蜜桃| 六月婷婷综合| 欧洲MV日韩MV国产| 丁香六月丁香婷婷激情| 在线五月婷| 碰人人97| 99精品视频推荐| 97日在线视频| 爆乳熟妇一区二区三区爆乳照片| 97香蕉碰碰人妻国产欧美| 丁香激情网| 五月开心婷婷网| 五月色婷婷综合色| 五月丁香在线国产 | 五月天开心网| 九月婷婷在线视频| 狠狠色婷婷丁香五月| 久久超级碰视频| 婷婷综合亚洲| 99热国品免费| 6080av| 日操夜撸| www99在线观看视频| AV中文在线| 色色婷| 日韩专区五月天婷婷丁香| 啪啪操网| 手机在线日韩视频中文字幕| 天天爽夜夜爽夜夜爽精品| 六月亚洲| WWW,五月| 日日爱678| 午夜青草资源| 深爱激情婷| 亚洲欧洲国产精品| 99热免费| 激情淫乱男女| 五月天久久久| 色五月婷婷丁香婷婷| 5月丁香啪啪啪| 日本系列_4页_777FP| 91久久久久久久久18| 婷婷丁香九色| 任你搞网站| 婷婷欧美色| 国精产品一区二区三区| XX久久| 99热这里| 大香AV| 久久久久久xxxxx| 五月丁香欧美在线| 久99久在线| 日本不卡高字幕在线2019| 96色婷婷| 色视频2025| 婷婷五月激情在线视频| 婷婷五月丁香基地| 亚洲无码性爱| 久草大| 婷婷四色成人综合色视| 亚洲第一成人无码A片| 办公室少妇激情呻吟A片在线观看| 日韩AV一区二区三区| 五月婷婷性爱| 婷婷五月天激情综合深爱激情| 婷婷中文在线| 黄色激情网站在线观看| 日本久久精品| 九九热精品6| 天天爱天天操| 六月婷婷网| 亚洲丁香五月深爱五月| 亚洲无码yw| 久久久国产精品黄毛片| 欧洲综合视频| 久久激情五月天| 色五月婷婷五月天| 狠狠色丁香久久婷婷综合五月| 五月情四婷婷| 激情六月婷婷| 五月婷婷婷色| 婷婷在线五月天观看| 国产精品国产| 六月婷婷色色网| 综合色播| 五月丁香啪啪| 激情婷婷丁香| 日本a片网址| 丁香五月天激情综合| 麻豆AV一区二区三区| 99操中文视频| 婷婷免费视频| 丁香五月综合狠狠| 丁香五月网络网络| 五月婷婷啪啪网| 天堂va久久久噜噜噜久久Va| 亚洲精品操一操、噜一噜、摸一摸、爽| 五月综合激情网| www婷婷色| 丁香五月天欧洲在线| 久久超视频| 99视频日韩| 四五月婷婷| 天天玩夜夜操| 香蕉国产2013| 538在线精品| 新激情婷婷| 亚洲色五月天在线| 99色精品| 超碰人人艹| pacopacomama 070722_670 素人奥様初撮りドキュメント 103 大久保純子 | 踪合专区啪啪| 深爱激情六月天| 久久se 综合网| 99热国内| 五月婷婷久久综合| 91久久久久久久| 色婷婷激情四射视频| 婷婷日本色| 五月天婷婷中文字幕在线播放| 无码日本精品XXXXXXXXX | 婷婷六月激情小说网| 色欲久久综合| 婷婷丁香九月| 大香蕉精品视频| 99热这里| 丁香久月婷| 天天做天天爱天天爽综合网| 二区成人视频| 99热无码| 五月丁香色色色| 激情色情五月天| 婷婷香草网| 在线色五月婷婷| 亚洲成av人影院| 婷婷色无码| 日本天天色| 婷婷丁香五月激情综合站_久久五月丁香激情综合_开心五月综合激情综合五月_婷 | 九九成人电影婷婷| 人妻VideOssS人妻| 婷婷综合婷婷| 色5月婷婷| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 我淫我色婷婷五月天激情四射| 五月的丁香六月的婷婷| 任你躁XXXXX麻豆精品| 在线综合婷婷| 影音先锋高清无码资源网| 五月婷婷在线网站| 日韩久久系列| 婷婷.com| 丁香五月综合久久| 98色花堂98t.R| 99热免费精品| 91狠狠综合久久| 性爱先锋AV| 六月婷婷激情| 激情五月婷婷伊人| 99五月香婷婷丁香在线视频| WWW.色婷婷.COM| 亚洲国产网址| 天天插天天干| 六月婷婷激情| 久久婷婷视频| 6080av| 五月丁香久久激情综合| 五月天婷婷在线播放| 久9久成人精品视频| 婷婷精品免费久久| 色5在线| 亚洲字幕AV一区二区三区四区| 五月婷婷深爱六月| 亚洲殴洲精品Av在线| 中美月韩免费A片| 99热精品免费| 天天爽天天爽夜夜爽| 97婷婷五月丁香| 久久婷婷五月综合啪| 亚洲AV成人精品日韩在线播放| 五月天成人综合| 综合性视频99| 久久码久久无清| 色色色99| 五月丁激情| 婷婷综合伊人| 久久99网站| ji'qing'luan'ren'lun| 啪啪色激情五月天| 五月婷婷久久综合| 狠狠色丁香99| 婷婷性爱综合| 色情五月婷婷| 精品人妻久久久久久久| 在线观看亚洲AV| 狠狠色综合网| 99爱免费视频| 天天操B| 欧美69久成人做爰视频| 五月天亭亭俺也| 99色激| 丁香五月之久操视频| 婷婷色片| 亚洲婷婷五月草久| 中文字幕五月久久婷婷| 九九激情| 79精品视频| 五月激情视频| 99热每日| 色玖玖| 欧美婷婷色五月| 99综合久久| www日本熟妇99在线视频| 伊人狠狠丁香婷婷综合尤物| 天色综合网站| 五月丁香六月婷婷啪啪| 2025超碰| 狠狠综合网| 99热这里只有精品 搜| 97精品欧美91久久久久久久| 五月婷婷香蕉视频| 超碰九色| 79精品视频| 五月丁香婷婷无码中文| 色天堂操| 国产精产国品一二三在观看| 久久9精品视频| 五月天婷婷丁香视频| 天堂久久精品| www久久久久久久| 人人干人人看| 久久 天天| caopeng97日韩| 五月婷婷熟女| 好大好粗嗯啊-一级黄色大片免费观看-成人AV | 夜夜爱网站| 亚洲天堂AAA| 一区二区成人电影| 99精彩视频在线观看| 91精品丝袜久久久久久| 婷婷五月丁香综合激情| 超碰免费人人肏| 丁香五月天堂| 五月天综合激情网| 丁香成人色情五月天| 再次出发二| 久久激情五月天| 91色色色视频| 人妻内射一区二区在线视频| 另类图片天天影视在线观看| 人。妻久久| 九九婷婷五月天影视| 一起草AV| 日本女人久久| 色综合色综合色综合| 被强行糟蹋的女人A片| 99九九精品| 99热这里只有精品8| 激情开心五月亚洲| 精品网站99| 五月婷在线| 婷婷五月激情的图片| 墨西哥毛片内射精| 综合天堂AV久久久久久久| 五月亭亭开心网| 8区视频在线| 六月婷婷中文字幕| 99热99热99热99热| 热久久66| 久久亚洲精品成人无码网站导航| 中文字幕永久免费| 色色色地址| 超碰色女| www.91AV.COM| 丁香五月婷婷老师网站| 超级碰碰97在线| 开心五月天激情网| 五月天激情图片| 超碰九色| 婷婷九月激情| 99福利导航| 婷婷六月色开 | 九九热99精品| 在线日韩av| 任我干视频在线观看| 国产精品天天狠天天看| 一本道在线电影| 久久怡红院| 久久怡红院| 99成人在线观看| 天干夜夜操| 亚州色色色| 26uuu精品国产| 99九九久久| 久久女婷| 直接看的AV| 色婷婷久久综合中文久久一本| 九月激情网| 超碰人人色| 婷婷五月天激情网| 67194国产| 天天插综合网| www.五月天婷婷| 色婷婷激情| 超碰99在线观看| 六月天婷婷| 六月婷婷激情| 亚洲精品久久久久久久久久吃药| 思思热国产| 五月丁香另类网| 99热只有精| 婷婷五月天免费视频| 亚洲最大视频| 五月天婷婷综合网| 激情六月天婷婷| 99日本精品视频热| 婷婷香五月天| 综合激情五月天| 欧美精品中文字幕亚洲专区| AⅤ网站在线看| 婷婷综合国产| 亚洲人妻电影| 国产成人av在线播放| 天天五月丁香五月| 色婷婷丁香五月天在线视频 | Y11111111111少妇电影院| 美女91一起草| 婷婷99中文字幕| 丁香五月婷婷深爱综合激情| 99热在线里有精品| 色噜综| 婷婷天天婷婷天天澡| 五月色丁香| 九九热免费视频| 9国产在线视频| 九九久久玖玖爱| 色99色| 丁香五月婷婷色| 五月丁香六月婷婷不卡免费无码| 欧美综合激情五月天| 五月天婷婷小说| 婷婷五月丁香基地| 国产精产国品一二三在观看 | 99九九99九九九视频精彩| www.五月丁香| 激情网 久久| 69色婷婷| 人人爽人人射-美女久久久久久久久久-成人AV | 九九亚洲天堂| 亚洲在线视频321| 日本久久网| AV国产有码| 另类小说色婷婷| 天天干天天日天天操| 五月婷婷操操| 婷婷综合在线播放| 丁香六月婷婷一区| 五月丁香欧美在线| 8区视频在线| 亚洲无AV在线中文字幕| 9 大屁股在线视频精品| 婷婷亚洲影院| 伊人婷婷五月| AV成人在线播放| 国产亚洲精品久久久久久牛牛| 色碰97| 天天操天天爱天天日| 3www激情| 久久婷婷伊人| 天堂美国久久| 久久久8| 婷婷四色成人综合色视| 色热久| 色婷婷六月| 99热久草| 日日操,夜夜爽| WWW久久久| 婷婷操无码| 色五月激情网| 有哪些A片网站| 这里只有精品免费视频| 亚洲韩国日产综合AV| 激情AV| 26UUU欧美| 精品久热| 综合网啪| 丁香六月爱综合| 丁香五月婷婷超碰在线| 精品热青草| 激情欧美婷婷| 久久狠狠干| 亚洲综合激情五月久久| 五月天狠狠色| 人人干Av| 久久五月天婷婷| 99热久久日本| 天天操九九插| 美日韩成人| 久久婷婷五| 密臀久久| www久| 成人人操| 日日操日日射| 囯产精品久久欠久久久久久九大| se99热久久一本| 另类小说五月天综合网| 六月丁香五月婷婷首页| 66成人网| 久久婷婷原创视频| 婷婷丁香77777| 夜夜大香蕉婷婷丁香| 丁香五月色情av| 丁香综合伊人| 999婷婷综合| 久久99日本精品视频免费观看| 五月天六月天| 国产超碰在线| 五月婷婷丁香六月| 国产精品久久7777777精品无码| 99无码视频| 熟女网站久久| 99A片| 99re8热精品免费视频| 久久成人性爱| 天天日,天天插| 亚洲无码11| 99热国产这里只有精品| 丁香五月欧美婷婷综合| 久久久久久草黄色片AV在线观看| 五月丁香六月激情综合| 激情国产五月| 丁香婷五月| 极品少妇XXXX精品少妇偷拍| 五月婷成人| 97超碰人人操| 久久9久久| 五月婷婷综合丁香视频| 就爱日五月天| 色婷婷先锋| 一本大道伊人AV久久综合| 午夜理论片最新午夜理论剧| 开心五月激情网| www.91九色| 丁香激情五月| www一起操在线观看| 91人人爽久久涩噜噜噜| 日韩AC在线免费观看| 婷婷四色五月| 天天日天天久久青青| 五月天婷婷色播| 五月天综合| 午夜理论片最新午夜理论剧| 日韩成人综合网| 深爱女色婷婷丁香五月亚洲图区| 亚洲这里只有精品| 色性综合| 久久久久久久人妻| 婷婷五月综合婷婷| 色人久久| 亚洲第一色色色色| 欧美交换配乱吟粗大25P| 日本色婷婷五月天成人电影| 日本欧美成人片AAAA| 99区视频| 青草青草视频2免费观看| 五月天婷婷爱丁香中文字幕| 青青草免费公开视频| 五月丁香综合精品| 久久久天堂国产精品女人| 亚洲精品性色| 婷婷五月综合社区在线| 丁香涩涩爱| 色爱综合五月| 激情综合网五月婷婷| 亚洲天堂无码| 五月丁香啪综合| 日韩另类| 激情99| 激情五月综亚网| 婷婷大香焦| 老司机伊人| 偷偷操99| 99久热| 思思热99er在线视频| 婷婷不干网| 久久婷婷五月综合色和| 成人啪啪色婷婷久| 五月婷婷激情| 欧美五月丁香在线| 欧美内射AAAAAAXXXXX| 五月天婷婷永久免费视频| 五月婷色丁香| 99热这里都是精品| 大香蕉久| 欧美成人精品A片免费一区99| 丁香5月啪啪| 婷婷五月超碰| 五月婷婷成人| 天天想夜夜爽天天爽| 亚洲蜜桃精久久久久久久久久久久| 人妻操在线看| 久久嘟嘟丁香| 直接看的AV| 婷婷激情蜜桃玖玖丁香| 日本丰满久久| 久99综合婷婷| 七七九九色色| 中文在线成人| 婷婷五月天在线看| 艹B高清无码| 丁香在线视频| 女人露出p毛视频www网站| 亚洲电影在线观看| 婷婷色五月在线视频| 久久色区| 碰97 久| 五月婷婷激情综合av| 九九色逼| 婷婷丁香日韩五月| 第四色婷婷日本| 欧美日朝成人| 天天日夜夜夜操操操操| 超91在线视频| 五月婷婷激情久久| 婷婷色色网| 色情婷婷。| 国产精品国产成人国产三级| 久久99热久久99精品| 激情五月天视频| 丁香五月婷婷天激情| 色欧美影院| 袁子仪视频观看| 色99超碰| 激情综合五月婷婷| 久久人妻伊人| 九月丁香婷婷| 亚洲岛国电影| 久久久久9999| 五月天停停成人网| 亚洲综合五月天婷婷丁香| 黄色片久久| 99热播放| 五月天堂在线| 激情综合无码| 97人人妻人人艹| 欧美日韩999| 牛牛碰免费| 99热婷婷| 五月婷视频在线观看| 丁香婷婷啪啪| 欧洲色| 五月婷婷视频啪啪美女| 亚洲色人妻| 人人人操 超碰| 337p大胆噜噜噜噜噜91Av| 99热成人在线| 五月欧美色播| 久久伊人婷| 99在线精品免费视频| 五月天激情网站| 99爱最新免费视频在线观看| 碰超99| 色拍九九九| 五月天综合在线| 色婷婷69| 色综色五月天婷婷| 九九热在线亚洲免费视频| 99热 在线播放| 丰满少妇乱A片无码| 亚洲美女高潮久久久久久69| 天天综合网网欲色| 久久这里面只有精品视频| 五月天丁香综合久久国产| 91在线97视频| 五月丁香久久| www.五月婷婷| 五月天四色房丁香亭亭| 7777激情基地| 一起操 91N.com| WWW.久久.COM| 久久a热| 任你操精品免费| 午夜做爱影院| 六月婷婷色宗合| 99视频精品视频| 婷婷在线综合|