欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Oracle 19c RAC on Linux 7.6 安裝手冊與避坑指南

Oracle 19c RAC on Linux 7.6 安裝手冊與避坑指南 簡介這份Oracle 19c RAC on Linux 7.6安裝手冊面向Linux運維工程師與DBA重點解決RedHat 7.6環(huán)境從零搭建19c RAC的流程問題。內(nèi)容覆蓋GNS配置SCAN、Flex ASM機(jī)制介紹、12.2之后Standalone Cluster與Domain Service Cluster兩種集群模式差異并給出配置中典型報錯的原因分析與排錯思路。文檔為單個docx文件壓縮包約160KB按清晰目錄組織章節(jié)從OS環(huán)境檢查、關(guān)閉THP與開啟Hugepages、依賴軟件包安裝、內(nèi)核參數(shù)配置到固定IP/GNS網(wǎng)絡(luò)方案及時鐘同步逐項展開便于對照實施。已有716人學(xué)習(xí)下載適合需要理解GNS域名解析與SCAN工作機(jī)制、并希望獲得實用問題排查方法的初中級DBA參考。1. Oracle 19c RAC on Linux 7.6為什么值得照著這份手冊裝一遍數(shù)據(jù)庫凌晨兩點自動重啟就因為一臺物理機(jī)的內(nèi)存報警——這是沒上 RAC 之前最常見的夜班劇情。Oracle 19c RACReal Application Clusters把兩個節(jié)點的算力和內(nèi)存放進(jìn)同一個集群數(shù)據(jù)放在共享存儲上由 ASM 統(tǒng)一管理一個節(jié)點故障業(yè)務(wù)連接自動漂移到另一個節(jié)點應(yīng)用幾乎無感知。Linux 7.6 是跑 19c RAC 非常穩(wěn)妥的底包這份安裝手冊的落地路徑就是準(zhǔn)備系統(tǒng)、規(guī)劃網(wǎng)絡(luò)與共享盤、裝 Grid Infrastructure、裝數(shù)據(jù)庫軟件、建 RAC 庫。適合正在做高可用改造的 DBA、準(zhǔn)備從單機(jī)往集群遷移的運維以及第一次獨立裝 RAC 就要面對生產(chǎn)環(huán)境的人。它不是概念科普是我按生產(chǎn)環(huán)境標(biāo)準(zhǔn)反復(fù)走過的一整套可復(fù)現(xiàn)流程。2. 安裝前的準(zhǔn)備把 Linux 7.6 調(diào)成能跑 RAC 的狀態(tài)2.1 硬件與版本核對先確認(rèn)機(jī)器配不配RAC 對硬件的要求不高但對一致性要求很高。最怕兩節(jié)點配置不對稱比如一個節(jié)點 8 核 16GB另一個 4 核 8GB平時沒事故障切換時慢節(jié)點拖垮整個集群。我一般先做一輪最小配置核對CPU 至少 2 核生產(chǎn)建議 8 核以上、內(nèi)存至少 8GB生產(chǎn)建議 16GB 起步、/u01 目錄預(yù)留 100GB 以上、/tmp 至少 2GB。兩節(jié)點的主機(jī)名、內(nèi)核版本、架構(gòu)必須一致操作系統(tǒng)補丁級別也要對齊。uname -r free -g df -h /u01 /tmp lscpu | grep Model name這段命令看四件事內(nèi)核版本是否一致、內(nèi)存是否達(dá)標(biāo)、/u01 和 /tmp 是否夠用、CPU 型號是否統(tǒng)一。RAC 里有個隱藏的坑如果兩節(jié)點 /etc/hosts 里寫的主機(jī)名不同后續(xù) Grid Infrastructure 安裝時 gpnp 配置文件會生成兩套不同的節(jié)點身份root.sh 階段大概率翻車。所以第一件事是把主機(jī)名固定下來安裝全程不要改。我還會順手檢查時間同步。19c 集群對節(jié)點間時鐘偏差很敏感偏差超過一定閾值crsd 會主動踢節(jié)點。Linux 7.6 自帶 chronyd安裝前把時間源配好確認(rèn) chronyc sources 能看到同步源比裝完再折騰省事得多。systemctl enable chronyd --now chronyc sources -v timedatectl status2.2 內(nèi)核參數(shù)與系統(tǒng)限制一批 sysctl 搞定Oracle 官方對 Linux 7.6 跑 19c 有明確的 sysctl 建議但網(wǎng)上流傳的版本五花八門。我習(xí)慣把這組參數(shù)直接寫進(jìn) /etc/sysctl.conf前兩節(jié)點內(nèi)容保持一致執(zhí)行 sysctl -p 生效。下面這組是經(jīng)過生產(chǎn)驗證的重點是信號量和網(wǎng)絡(luò)緩沖區(qū)。cat /etc/sysctl.conf EOF fs.aio-max-nr 1048576 fs.file-max 6815744 kernel.shmall 1073741824 kernel.shmmax 4398046511104 kernel.shmmni 4096 kernel.sem 250 32000 100 128 net.core.rmem_default 262144 net.core.rmem_max 4194304 net.core.wmem_default 262144 net.core.wmem_max 4194304 net.ipv4.conf.all.rp_filter 2 net.ipv4.conf.default.rp_filter 2 net.ipv4.conf.all.accept_source_route 0 net.ipv4.conf.default.accept_source_route 0 vm.swappiness 10 vm.dirty_ratio 30 vm.dirty_background_ratio 3 vm.min_free_kbytes 524288 EOF sysctl -p參數(shù)說明kernel.sem 四個值分別是信號量數(shù)組最大長度、系統(tǒng)內(nèi)最大信號量數(shù)、每次操作最大信號量數(shù)、最大信號量集合數(shù)RAC 的集群進(jìn)程和 ASM 后臺進(jìn)程對信號量消耗很大這四個值不能省。net.core.rmem_max 和 wmem_max 決定集群節(jié)點間通信私有網(wǎng)絡(luò)的緩沖區(qū)上限19c 的 HAIP 和緩存融合都依賴它。vm.min_free_kbytes 設(shè)置為 524288約 512MB是為了防止內(nèi)存壓力過大時節(jié)點 hang 住這在 Linux 7.6 的內(nèi)核上尤其重要。rp_filter 設(shè)置為 2 是嚴(yán)格反向路徑過濾防止私有網(wǎng)卡收到異常源地址的包導(dǎo)致集群腦裂。2.3 用戶、組與環(huán)境變量把運行權(quán)限對齊RAC 安裝需要兩個操作系統(tǒng)用戶grid 和 oracle分別對應(yīng) Grid Infrastructure 和數(shù)據(jù)庫軟件。組的劃分有講究最少要建 oinstall、dba、asmadmin、asmdba、asmoper 五個組grid 用戶的主組用 oinstall附加組加上 dba、asmadmin、asmdba、asmoperoracle 用戶主組用 oinstall附加組加 dba、asmdba。這樣設(shè)計的目的是讓 ASM 實例歸 grid 管數(shù)據(jù)庫實例歸 oracle 管權(quán)限互不越界。groupadd oinstall groupadd dba groupadd asmadmin groupadd asmdba groupadd asmoper useradd -g oinstall -G dba,asmdba,asmadmin,asmoper grid useradd -g oinstall -G dba,asmdba oracle mkdir -p /u01/app/19.0.0/grid mkdir -p /u01/app/oracle chown -R grid:oinstall /u01/app/19.0.0/grid chown -R oracle:oinstall /u01/app/oracle19c 的 Grid Infrastructure 安裝目錄默認(rèn)是 /u01/app/19.0.0/grid和 oracle 用戶的 ORACLE_HOME 分開。目錄權(quán)限錯了安裝界面會在目錄檢查步驟報錯提前把屬主設(shè)對能省一次重跑。兩個用戶在 /etc/security/limits.conf 里還需要放開文件描述符和進(jìn)程數(shù)限制否則 RAC 跑起來后監(jiān)聽和后臺進(jìn)程可能報 too many open files。cat /etc/security/limits.conf EOF grid soft nofile 1024 grid hard nofile 65536 grid soft nproc 2047 grid hard nproc 16384 grid soft stack 10240 grid hard stack 32768 oracle soft nofile 1024 oracle hard nofile 65536 oracle soft nproc 2047 oracle hard nproc 16384 oracle soft stack 10240 oracle hard stack 32768 EOF環(huán)境變量我一般寫在每個用戶家目錄的 .bash_profile 里而不是 /etc/profile。ORACLE_BASE、ORACLE_HOME、PATH 這些變量指向清晰后面跑安裝腳本和 sqlplus 都不用手動 export。注意 grid 用戶和 oracle 用戶的 ORACLE_HOME 不一樣混著寫容易在 DBCA 建庫時報出奇怪的路徑錯誤。2.4 RPM 依賴核查少一個包安裝界面就停在預(yù)檢查Linux 7.6 最小化安裝后缺不少軟件包Oracle 的安裝向?qū)г陬A(yù)檢查階段會列出來但那時再回頭裝就慢了。我習(xí)慣提前把依賴一次性裝好。19c 在 Linux 7.6 上必須要 compat-openssl10這是最容易漏的包少了它 OUI 預(yù)檢查直接報錯。yum install -y bc binutils compat-libcap1 compat-libstdc-33 \ compat-openssl10 elfutils-libelf elfutils-libelf-devel \ gcc gcc-c glibc glibc-devel ksh libaio libaio-devel \ libX11 libXau libXi libXtst libXrender libXext make \ net-tools nfs-utils smartmontools sysstat libnsl rpm -qa | grep -E compat-openssl10|libnsl|sysstat最后一條 rpm 查詢是確認(rèn)關(guān)鍵包已經(jīng)裝上。libnsl 在 Linux 7.6 里默認(rèn)不裝而 19c 的客戶端工具在解析主機(jī)名時需要它沒裝會在運行 dbca 時碰上詭異的段錯誤。sysstat 提供 sar 命令后面排查性能問題要用它看歷史負(fù)載一次裝齊不后悔。如果公司內(nèi)部有統(tǒng)一的 yum 源建議在安裝前就把這些依賴固化到主機(jī)初始化腳本里每個新節(jié)點跑一遍即可。3. 網(wǎng)絡(luò)與共享存儲RAC 的血管和倉庫3.1 網(wǎng)卡與 IP 規(guī)劃public/private/VIP/SCAN 一張圖畫清RAC 網(wǎng)絡(luò)是整個集群最容易出問題的部分規(guī)劃階段畫一張清晰的 IP 分配表比任何配置都重要。每個節(jié)點至少需要兩塊物理網(wǎng)卡public 網(wǎng)卡承載業(yè)務(wù)連接、VIP 和 SCAN 監(jiān)聽private 網(wǎng)卡承載節(jié)點間心跳、緩存融合和集群消息。private 網(wǎng)絡(luò)絕對不能用 public 網(wǎng)段否則一旦 public 網(wǎng)絡(luò)抖動集群通信和業(yè)務(wù)流量互相干擾容易引發(fā)節(jié)點驅(qū)逐。節(jié)點網(wǎng)卡IP 地址用途node1eth0192.168.10.11public / 業(yè)務(wù)網(wǎng)node1eth110.0.0.11private / 集群心跳node1eth0:1192.168.10.21VIP由集群管理node2eth0192.168.10.12public / 業(yè)務(wù)網(wǎng)node2eth110.0.0.12private / 集群心跳node2eth0:1192.168.10.22VIP由集群管理--192.168.10.31-33SCAN IPDNS 或 hostsVIP 由 Grid Infrastructure 自動綁定到 public 網(wǎng)卡上不需要手工配 IP安裝向?qū)Ю锇?public 網(wǎng)卡選對就行。SCAN IP 在 19c 里建議配 3 個客戶端通過 SCAN 名稱連接時會在多個 IP 之間做負(fù)載均衡。如果沒有 DNS 環(huán)境也可以把 SCAN 寫在 /etc/hosts 里但必須保證集群內(nèi)所有節(jié)點和客戶端機(jī)器上的解析結(jié)果一致。3.2 hosts 文件與 SSH 互信裝到一半才配就晚了hosts 文件是 RAC 安裝里最基礎(chǔ)也最容易被忽視的文件。兩個節(jié)點必須包含完整的條目節(jié)點名、隨后是 VIP 名、private 名、SCAN 名。有一類典型故障是 private 主機(jī)名寫進(jìn)了公網(wǎng) hosts導(dǎo)致集群在解析內(nèi)部主機(jī)名時走了錯誤網(wǎng)段私網(wǎng)心跳時斷時續(xù)。cat /etc/hosts EOF 192.168.10.11 node1.example.com node1 192.168.10.12 node2.example.com node2 192.168.10.21 node1-vip.example.com node1-vip 192.168.10.22 node2-vip.example.com node2-vip 10.0.0.11 node1-priv.example.com node1-priv 10.0.0.12 node2-priv.example.com node2-priv 192.168.10.31 rac-scan.example.com rac-scan EOF配置完成后用 getent hosts 驗證每個名字解析出的 IP 是否正確。private 主機(jī)名盡量用 -priv 后綴區(qū)分不要和 public 名稱混用。SSH 互信是安裝向?qū)ё詣优渲玫牡崆笆謩优浜酶€(wěn)妥兩個用戶的公鑰都要互相分發(fā)否則 OUI 檢查 SSH 連通性那一步會卡住。ssh-keygen -t rsa -N -f ~/.ssh/id_rsa ssh-copy-id -i ~/.ssh/id_rsa.pub node1 ssh-copy-id -i ~/.ssh/id_rsa.pub node2 ssh node1 date; ssh node2 date最后一條命令同時驗證了 SSH 免密和時間一致性。注意 grid 用戶和 oracle 用戶都要各配一次別只配了 oracle 用戶的安裝 Grid Infrastructure 時用 grid 用戶執(zhí)行腳本會報權(quán)限錯誤。3.3 共享存儲與 ASM 磁盤udev 綁定避免漂移RAC 的數(shù)據(jù)庫文件必須放在共享存儲上。常見做法是兩臺機(jī)器通過光纖或 iSCSI 連接到同一套存儲劃分出若干 LUN 作為 ASM 磁盤。安裝前在兩臺機(jī)器上都執(zhí)行 lsblk確認(rèn)看到的 LUN 數(shù)量、大小一致。這里有個關(guān)鍵的玄學(xué)問題Linux 對 SCSI 盤的設(shè)備名分配不保證穩(wěn)定重啟后 /dev/sdb 可能變成 /dev/sdc直接裸用設(shè)備名做 ASM 盤重啟后磁盤權(quán)限和路徑全亂。解決辦法是用 udev 規(guī)則按磁盤的 WWID 綁定固定設(shè)備名。ls /dev/sd* udevadm info --queryproperty --name/dev/sdb | grep ID_SERIALcat /etc/udev/rules.d/99-oracle-asm.rules EOF KERNELsd?1, SUBSYSTEMblock, PROGRAM/usr/lib/udev/scsi_id -g -u -d /dev/$parent, RESULT3600a0b00000abc123, OWNERgrid, GROUPasmadmin, MODE0660 EOF udevadm control --reload udevadm trigger ls -l /dev/sd?1RESULT 后面跟的是通過 scsi_id 查到的 LUN 唯一標(biāo)識。生產(chǎn)環(huán)境的 LUN 數(shù)量多我習(xí)慣把規(guī)則文件按 WWID 一條條寫清楚每個磁盤對應(yīng)一個固定名稱避免靠設(shè)備名猜。寫在 99- 開頭的規(guī)則文件里確保不會被其他規(guī)則覆蓋。權(quán)限必須是 grid:asmadminMODE 660如果屬主不對ASM 實例在 OUI 里會發(fā)現(xiàn)磁盤但標(biāo)紅不可用。4. 裝 Grid InfrastructureRAC 的骨架和第一道坎4.1 用 runcluvfy.sh 做安裝前體檢預(yù)檢查就是后悔藥Grid Infrastructure 是整個 RAC 的骨架裝它之前先跑一遍 Oracle 自帶的集群驗證工具。這個工具會檢查硬件、內(nèi)核參數(shù)、依賴包、網(wǎng)絡(luò)連通性、SSH 互信等所有前置條件比人工逐項核對快得多。命令在安裝介質(zhì)解壓后的目錄下執(zhí)行。cd /u01/grid_setup ./runcluvfy.sh stage -pre crsinst -n node1,node2執(zhí)行完看輸出里的 Check passed 和 Check failed。遇到 failed 項目按它提示的路徑去修比如某個包沒裝、某個 sysctl 參數(shù)不匹配。有個小技巧先看 Summary 段不要盯著幾百行滾動輸出從頭看。如果這臺機(jī)器以前裝過其他 Oracle 軟件cvu 會提示環(huán)境變量殘留在 /etc/profile 里順手清掉再跑否則后面 OUI 會被舊配置干擾。4.2 gridSetup.sh 的關(guān)鍵選擇磁盤組、ASM、管理網(wǎng)絡(luò)圖形安裝界面用 grid 用戶啟動執(zhí)行安裝介質(zhì)里的 ./gridSetup.sh。整個安裝過程里最需要想清楚的是幾個關(guān)鍵點集群類型選 Oracle Standalone Cluster網(wǎng)絡(luò)配置界面會顯示檢測到的網(wǎng)卡把 public 網(wǎng)卡對勾選上private 網(wǎng)卡標(biāo)為專用SCAN 名稱填 rac-scan 對應(yīng)的解析名。19c 相比 11g 多了一個管理網(wǎng)絡(luò)選項如果沒有單獨的管理網(wǎng)卡選擇使用 public 網(wǎng)絡(luò)即可別勾選獨立的 management 接口否則安裝后網(wǎng)卡資源會處于錯亂狀態(tài)。ASM 磁盤組是另一個關(guān)鍵。磁盤組名稱常用 DATA冗余級別選 EXTERNAL外部冗余表示沒有鏡像生產(chǎn)環(huán)境一般用 NORMAL 冗余但前提是存儲底層的 LUN 數(shù)量足夠。我見過不少人在測試環(huán)境選 NORMAL 冗余卻發(fā)現(xiàn)只有一塊候選盤安裝界面直接灰掉。測試環(huán)境老老實實選 EXTERNAL一塊盤也能建磁盤組。ASM 的 SYS 密碼要記好后面 DBCA 建庫和日常維護(hù)都要用。安裝向?qū)谐?OS 組的映射OSASM 組選 asmadminOSDBA 選 dbaOSOPER 選 asmoper。這步如果選錯裝完后 asmcmd 和 sqlplus 的權(quán)限會很擰巴重裝 Grid Infrastructure 才能解決。全部確認(rèn)后向?qū)нM(jìn)入最后的執(zhí)行階段在進(jìn)度條跑到 100% 附近會彈出一個提示框要求分別在兩個節(jié)點用 root 用戶執(zhí)行 root.sh。4.3 root.sh 的執(zhí)行順序與日志兩個節(jié)點各跑一次root.sh 是 RAC 安裝里最容易卡住的一步也是排錯經(jīng)驗最集中的一步。執(zhí)行順序有硬性要求先在第一個節(jié)點完整跑完確認(rèn)沒有報錯再在第二個節(jié)點執(zhí)行。兩個節(jié)點同時跑可能導(dǎo)致集群配置信息互相覆蓋。# 節(jié)點1 [rootnode1 ~]# /u01/app/19.0.0/grid/root.sh # 節(jié)點2等節(jié)點1 跑完再執(zhí)行 [rootnode2 ~]# /u01/app/19.0.0/grid/root.shroot.sh 輸出里看到 The command completed successfully 才算真正完成。它的日志寫在 $ORACLE_BASE/crsdata/ 下具體位置是 /u01/app/grid/crsdata/node1/crs/trace/如果執(zhí)行過程卡住先看這個目錄下 ohasd.log 和 cssd.log 的尾部。root.sh 卡住最常見的三個原因/etc/oracle 目錄權(quán)限不對、DNS 反向解析失敗、私網(wǎng)路由異常。前兩個可以通過 chown -R root:oinstall /etc/oracle 和修正 hosts 解決私網(wǎng)路由異常要檢查 /etc/sysconfig/network-scripts/ifcfg-eth1 是否配置了 GATEWAY私網(wǎng)網(wǎng)卡絕不能配默認(rèn)網(wǎng)關(guān)。4.4 安裝后驗證集群狀態(tài)crsctl 查看在線狀態(tài)root.sh 全部執(zhí)行完后用 grid 用戶驗證集群層面是否健康。crsctl stat res -t 是核心命令它會列出所有集群資源的當(dāng)前狀態(tài)和目標(biāo)狀態(tài)。重點關(guān)注以下幾項ora.cssd、ora.crsd、ora.evmd、ora.asm、ora.cluster_interconnect.haip 必須 ONLINE掃描監(jiān)聽 ora.scan1.listener 和節(jié)點監(jiān)聽 ora.node1.vip 也要 ONLINE。crsctl stat res -t asmcmd lsdg crsctl check cluster -allasmcmd lsdg 看到 DATA 磁盤組的 State 為 MOUNTED說明 ASM 實例已經(jīng)正常起來。crsctl check cluster -all 輸出兩個節(jié)點的狀態(tài)全綠才算集群層面健康。這一步做完Grid Infrastructure 的骨架算是立住了接下來可以進(jìn)入數(shù)據(jù)庫軟件安裝。5. RAC 安裝避坑我在 Linux 7.6 上踩過的五個坑5.1 現(xiàn)象root.sh 卡在 ohasd 啟動失敗裝某套測試環(huán)境時root.sh 執(zhí)行到 Adding daemon to inittab 就停住等十幾分鐘也沒有后續(xù)輸出單獨進(jìn)程里 ohasd 根本不存在。原因是這臺機(jī)器的 /etc/oracle 目錄屬主在之前卸載舊環(huán)境時變成了 root:rootroot.sh 寫入 scls_scr 文件時權(quán)限校驗失敗又不會直接報錯退出而是反復(fù)重試。解決方式先檢查 /etc/oracle/scls_scr 下文件的屬主改成 root:oinstall然后把 root.sh 進(jìn)程中斷清理半成品狀態(tài)后重新執(zhí)行。清理命令用 $GRID_HOME/crs/install/rootcrs.pl -deconfig -force這會把已生成的集群配置清掉再次執(zhí)行 root.sh 時是干凈環(huán)境。這個坑的教訓(xùn)是接手別人裝過半截的機(jī)器時先看 /etc/oracle 目錄的屬主再動手。5.2 現(xiàn)象重啟后 ASM 盤權(quán)限漂移成 root:disk兩節(jié)點裝完 RAC 后一切正常某次機(jī)房計劃性重啟起來后執(zhí)行 asmcmd lsdsk 發(fā)現(xiàn)所有磁盤的路徑還在但權(quán)限變成了 root:diskASM 實例無法讀取磁盤組。原因是 udev 規(guī)則雖然寫了但規(guī)則觸發(fā)的條件依賴 scsi_id 命令的返回值這臺機(jī)器的 multipath 服務(wù)搶先占用了設(shè)備節(jié)點udev 規(guī)則沒有匹配到。解決方式確認(rèn) /etc/multipath.conf 是否存在存在則把 ASM 磁盤加入 blacklist讓 multipath 不要接管這些 LUN然后重新執(zhí)行 udevadm control --reload 和 udevadm trigger再檢查 /dev/sd?1 的屬主是否恢復(fù)成 grid:asmadmin。這類問題在混合了多路徑和本地盤的存儲環(huán)境里很容易出現(xiàn)裝完最好做一次帶重啟的完整驗證別等生產(chǎn)切換時才暴露。5.3 現(xiàn)象SCAN IP 解析導(dǎo)致客戶端連接報錯集群本身 ONLINE應(yīng)用側(cè) JDBC 連接串用的是 SCAN 名稱但連庫時報出 ORA-12545提示連接目標(biāo)不可達(dá)。排查看監(jiān)聽狀態(tài)正常、VIP 正常問題是客戶端所在的機(jī)器 hosts 文件里只寫了 SCAN 名稱對應(yīng)一個 IP而集群實際監(jiān)聽的是另外兩個 SCAN IP。SCAN 在 hosts 解析下不會自動同步客戶端必須能解析到集群配置里全部 SCAN IP。解決方式把客戶端機(jī)器的 hosts 補齊三個 SCAN IP或者在 DNS 里配置 SCAN 的輪詢解析。另一個做法是修改應(yīng)用連接串直接用某個節(jié)點的 VIP 做測試但生產(chǎn)環(huán)境不值得為省 DNS 配置犧牲 SCAN 的負(fù)載均衡能力。這個坑在純內(nèi)網(wǎng)環(huán)境最典型網(wǎng)絡(luò)組和 DBA 各管一段SCAN 的解析鏈路上沒有人整體兜底。5.4 現(xiàn)象crsctl stat res -t 顯示 OFFline手動 start 又報錯某節(jié)點資源整體處于 OFFLINE用 crsctl start resource 單獨拉起時報出與節(jié)點通信異常的錯誤。最直接原因是兩節(jié)點時鐘偏差過大節(jié)點間的心跳校驗不通過集群拒絕把資源調(diào)度到該節(jié)點。檢查 chronyc sources 發(fā)現(xiàn)時間源失聯(lián)節(jié)點時間已經(jīng)慢了兩分鐘。解決方式用 chronyc makestep 強制同步本節(jié)點時間等兩個節(jié)點時間差小于 1 秒后在任意節(jié)點執(zhí)行 crsctl stop cluster -all 和 crsctl start cluster -all讓整個集群重新拉起。RAC 對時鐘的要求不是玄學(xué)是硬性約束建議在每臺機(jī)器上配好 chronyd 的 fallback 時間源并加監(jiān)控盯時間偏移量。5.5 現(xiàn)象DBCA 建庫報 ORA-15095磁盤組成員讀不到建庫到 80% 突然報 ORA-15095提示 ASM 磁盤無法訪問。檢查 asmcmd lsdsk 能看到磁盤名稱但 ls -l 發(fā)現(xiàn) /dev/sdb1 的屬組是 oinstall 而不是 asmadmin。原因是 udev 規(guī)則在最后一次系統(tǒng)更新后被覆蓋掉了磁盤權(quán)限回歸默認(rèn)值而 ASM 實例是在權(quán)限正常時啟動的運行中突然失去權(quán)限磁盤組直接進(jìn)入不可用狀態(tài)。解決方式修正 udev 規(guī)則并重新 trigger然后用 asmcmd 確認(rèn)磁盤可讀如果磁盤屬于某個磁盤組的成員且無法正常 mount優(yōu)先在 ASM 實例里執(zhí)行 alter diskgroup DATA mount必要時把 offline 的磁盤 online 回來。這個坑告訴我們udev 規(guī)則文件要納入配置管理系統(tǒng)更新后主動檢查規(guī)則是否還在而不是等 ASM 報錯才想起它。6. 裝完怎么驗從 crsctl 到 sqlplus 的十分鐘體檢集群裝完不是看到 ONLINE 就結(jié)束了我習(xí)慣按一張固定清單驗收十分鐘跑完每一項都過一遍才敢交給業(yè)務(wù)方。下面這個表格就是日常用的體檢項目。檢查對象命令預(yù)期結(jié)果集群整體crsctl check cluster -all所有節(jié)點 ONLINE集群資源crsctl stat res -t關(guān)鍵資源 ONLINEASM 磁盤組asmcmd lsdgDATA 已 MOUNTED數(shù)據(jù)庫實例srvctl status database -d orcl兩個實例均 OPENSCAN 監(jiān)聽srvctl status scanscan listener ONLINE業(yè)務(wù)連接sqlplus 經(jīng) SCAN 連接連接成功且可查詢crsctl check cluster -all crsctl stat res -t srvctl status database -d orcl srvctl status scan最后一環(huán)也是我最看重的驗證故障切換實測。找一個維護(hù)窗口在 node1 上執(zhí)行 shutdown -rf 模擬主機(jī)掉電觀察 node2 上的實例是否自動接管業(yè)務(wù)連接是否能在數(shù)據(jù)庫 session 層面恢復(fù)。切換完成后用 srvctl status database -d orcl 確認(rèn)集群把 node1 的資源重新拉起兩個實例恢復(fù)到 OPEN。這套驗證做完RAC 才算真正交付。這是我裝 RAC 幾年養(yǎng)成的習(xí)慣每完成一套環(huán)境就把體檢命令存成 shell 腳本命名 check_rac.sh放進(jìn) /home/grid 下后續(xù)巡檢直接跑。安裝手冊寫再多都不如這套體檢腳本可靠。希望幫到你。本文還有配套的精品資源點擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
美日韩成人| 久月婷婷| 国产成人+亚洲+欧洲| 激情五月婷婷| 婷婷色网站| 激情综合五月天| 五月婷婷激情性爱| 爆乳熟妇一区二区三区爆乳照片| 五月婷婷六月丁香首页| 激情av| 五月丁香综合成人社区| 色婷另类| 人妻久久久久| 热思思九九| 亚洲AAAA网| 色涩视频久久| 美国十月色婷婷在线观看| 国产免费一区二区三区三州老师F1F1.CC| 婷婷五月综合网| 久久一级片| 另类小说色婷婷| 国产avapp 网| 免费视频WWW在线观看网站| 五月激情婷婷播播网| 国产肥白大熟妇BBBB视频| 亚洲婷婷婷| 夜色五月天| 五月天激情无码| 99色日本| 久久伊人大香蕉| 操日视频| 超碰AAAAAAV| 激情婷婷丁香色五月| 久色婷婷200| 综合激情五月婷婷| 五月天婷婷成人网| 丁香五月激情婷婷| 91婷婷在线| 欧美色色色色色| 丁香五月六月婷婷自拍| 九月婷婷色色| 嫩草极品| 天天干天天操| 成人AV在线电影| 六月丁香网| 五月天俺去也| 婷婷丁香在线| 热99视频精品在线| 99久久6| 插插干干干色| 综合亚洲AV| 久久精典| www.99热国产| 1区2区视频| 亚洲综合九九| 婷婷爱五月| 九九视频免费| www.久久色.com| 成人在线网址| 182tv992tv人之初午夜免费观看| 狠狠插狠狠插| 丁香六月激情综合| 开心五月激情五月丁香五月婷婷| 婷婷色导航| 亚洲午夜在线视频| 婷婷婷婷婷婷婷五月丁香| 综合色色婷婷| 婷婷玖玖五月天| 噼里啪啦在线观看免费完整版视频| 婷婷五月天亚洲丁香| 激情婷婷在线中文字幕| 日欧一片内射VA在线影院| 五月天婷婷亚洲| 99 r热| 久久九网| 五月婷婷激情网| 亚洲中文乱字字幕在线永久| 樱花99视频| 色五月婷婷影视| www.99色| 色偷偷五月天| 九九热婷婷| 五月激情四射婷婷丁香| 超碰人人操在线| 久久免费高| 婷婷五月亚洲综合| 91超级碰在线| 高清成人综合| 婷婷最新地址| 超碰99在线观看| 深爱激情六月| 日本激情五月天‘| www.色婷婷| 亚洲综合欧美色丁香婷婷888月图片 | 开心四月婷婷在线色播播| www.色情五月天.com| 激情五月婷婷| 亚洲爆乳无码精品AAA片蜜桃| 99热大香蕉| 五月综合色播播丁香婷婷| 五月天大香蕉| 久久综合性| 久久一伦| 一本狠婷婷综合| 欧美日韩91| 热久精品| 综合网亚洲| 欧美色色色| 五月丁香 六月婷婷a| 五月 成人 婷婷| 天天操天天插天天射| 色狠狠色噜噜AV天堂五区| 中文字幕黄色片| 99性爱| 99热这里只有精品官网| 丁香五月停停av| 久久九久久| 亚洲AV免费在线| 色99在线| 9l视频自拍九色9l视频自拍九色9l社区 | 三十路磁力链接| 99视频久久免费视频| 婷婷九月综合| 97干在线| 97色在线| 天天摸天天舔在线视频| 丁香婷婷综合五月天| 五月丁香爱婷婷深深| 综合久久影院| 变态另类9| 影音先锋 一区| 日本色色网| 免费亚洲婷婷| 五月天色图| 色综合com| 色婷婷免费观看| 久色激情| 噜噜网免费视频| 久久色五月| 天天做天天爱天天摸| 97操碰| 婷婷五月丁香基地在线视频官网| 亚洲婷婷五月天在线激情综合网| 五月天伊人av| 深夜男女福利刺激影院一区完整| 五月婷激情| 婷婷丁香成人| 亚洲精品又粗又大又爽A片| 可以免费观看的AV| 免费观看欧美成人AA片爱我多深| 在线免费视频caop| 中文字幕av久久爽| 国产ava| 激情久久综合| 操逼福利视频| 啪啪小说五月天| 五月丁香婷婷综合视频| 大香蕉婷婷丁香视频在线| 五月丁香av中文| 色综合婷婷| 五月天激情网图片| 嫩BBB搡BBBB榛BBBB| 99噜噜噜在线播放| 婷婷丁香成人五月天| 中文精品在| 久热成人| 日韩AAA| 色综合日日| 久色网五月| 这里只有精品网站| 伊人碰碰碰| 五月天婷婷小说| 久久综合激情| 六月婷在线| 色五月大香蕉婷婷| 草操AV在线| 婷婷综合网伊人| 色玖玖玖| 日韩综合久久| 亚洲爱爱无码婷婷色五月| 成人超碰Av| 99九九玖玖| 丁香五月婷久久| 国产成人精品一区二三区熟女在线| 国产69久久久欧美黑人A片| av操B网站| 婷五月天六| 99热主页日本| 操熟女成人网| 涩五月婷婷| 五月天开心色色网| 伊人久久大香天蕉亚洲特级| 无码一区二区三区四区五区| 亚洲va欧洲va国产va不卡| 五月天婷婷綜合院| 日本激情综合| 色婷婷色99国产综合精品| 婷婷五月天激情在线观看 | XX色综合| 色九月婷婷综合| 日本天天综合| 亚洲另类噜噜| 26uuu欧美| 日韩伊人大香蕉| 激情五月激情综合俺也去婷婷小说| 久久婷婷丁香五月一二三| av首页在线| 激情综合色图| 婷婷五月天狠狠| 综合色五月| 99无码视频| 日韩在线五月天婷婷| 五月丁香五月激情综合色综合| 国产精品久久7777777精品无码| 中文在线成人| 丁香色色五月| 亚洲在线激情婷婷五月| 六月丁香av| 婷婷伊人綜合中文字幕| 超碰在线人人| 99热思思| 99热伊人综合| 天天综合图片| 五月婷婷影院| 五月婷婷黄色| 丁香五月六月婷婷综合| 日本4399天堂中出| 丁香五月天色综合| 色五月大香蕉| 啪啪婷婷五月天激情| 中文字幕性爱丰满| 久久丁香五月天| 97碰碰电影| 操日本人妻视频| 欧美日韩成人在线| 九九综合色综合| WWW.99热| 大香蕉在九| 天天日夜夜拍| 久久婷婷综合基地| 日日天天干| 成人视频网| 在线色色| 久久久久久激情| www.一起草av| 激情五婷网| 三人荫蒂添的好舒服A片 | 婷婷六月激情| 国产真实乱了老女人视频| 久久停停超碰| 91九色精品熟女内射| 777久久久| 99热只有精品在线观看| 婷婷中合| 99r这里| 久久综合婷婷| 色五月涩涩婷婷蜜桃| 先锋资源婷婷| 手机旧版看人妻1025| 天堂草在线看www| 少妇性BBB搡BBB爽爽爽视頻| 久久综合热17c| AV中文在线| 色情丁香五月婷婷精品| 丁香五月手机在线| …亚洲黄色在线播放日韩、av中文a…| 色婷婷五月天视频在线| 无码九九九九| 人人摸人人操人人爽| 色色色区| www婷婷| 天天做夜夜爽| 国产亚洲在线观看| 99re在线观看| www婷婷亚洲| 五月丁香大香蕉| 99热伊人| 色婷婷五月天| 影音先锋 91工厂| 中文字幕精品无码一区二区| 婷婷五月天免费| 99热精品无码| 涩涩涩婷婷| 亚洲V国产V欧美V久久久久久| 掩去也综合五月视频| www.久久爱| 伦乱天堂| 开心久久xxx色| www激情网| 91919191919久久成人视频| 婷婷欧美激情综合| 色色综合网站| 午夜婷婷六月天| 婷婷丁香六月天激情四射网| 亚洲性视频| 中文字幕不卡+婷婷五月| 午夜色婷婷| 97精品综合| 99综合视频一体| 人妻久久久久久久久妻久久久久| 伊人天堂婷婷| 99热爱爱干干日| www.com.色色| 五月丁香亚洲综合| 思思99re这里只有| 69精品人妻不卡视频| 99无码精品| 狠狠色综合网站久久久久| 中文久久婷婷| 色色色在线播放| 人妻激情久久| 综激情网| 麻豆123区| 操b视频在线观看一区二区| 激情亭亭五月| 99小精品| 超碰京东热av男人的天堂| 五月丁香啪啪伦理电影| 九九热AV| 精品综合网在线| 欧美成人va| 99熟女| 狠狠操狠狠操AV| 91dy.av| aaaa.黄| 色五月激情综合网| 五月天另类小说久久小说网| 久婷久婷激情肉| 99九九视频| 蜜桃婷婷丁香| 噜噜噜狠狠色综合| 天堂va久久久噜噜噜久久Va| 五月天另类视频| 国产美女最新VA在线免费观看| 激情婷婷五月天丁香| 操一区| 99热这里只是精品| 99ri在线观看视频| 任我肏视频精品| 欧美久久婷婷| 色色婷婷综合网| 五月丁香六月婷| 色综合久久伊伊婷婷五月| 好叼操在线观看| 亚洲色综合| 亚洲丁香五月深爱五月| 91色色色| 色五月97| 久久精品A片777777| 色婷婷综合影院| 国产五月丁香在线| 91婷婷伊人牛牛| 99精品国产乱码久久久人妻| 激情综合色婷婷啪啪六月天| 狠狠狠五月婷婷六月丁香| 夜夜资源站| 665566 无码| 99久久久久久| 五月花在线观看视频| 五月婷婷在线视频免费观看| 日本一毛片| 婷婷视频在线| 欧美激情综合| 六月丁香久久| 伊人玖玖精品| 婷婷丁香五月在线播放| 2023天天日夜夜爽| 婷婷六月丁香激情| 狠狠99| 开心色色五月天综合| 狠狠色婷婷| 色色色热| 色五月婷婷久久大| 亚洲丁香五月美女| av婷婷丁香 六月| 99久久玖玖| 在线中文AV| 思思热精品在线视频| 久久开心五月天激情| 秋霞午夜理论| www九九| 九伊人网| 婷婷新网址| 福利视频在线播放| 婷婷丁香六月| 天天综合网在线| 丁香久久综合| 五月天成人在线播放| 大香蕉AV电影在线| 性av| 久九男女天堂| 天天色天天操天天射| 久久人妻精品| 天天舔天天爽| 五月天成人免费视频| 91操片| 丁香婷婷六月| 这里只有精品在线免费视频| 99er在线观看| 99热这里精| 久久久久亚洲A∨成人乱码电影| 日韩成人综合网| 天天射天天干天插色综合| 中文字幕性爱视频| 久久免费丁香| 色婷婷五月综合在线| 色色色宗合网| 丁香五月天亚洲综合| 国内熟女黄色系列| 一起草日本| 国产成人AV不卡| 色999;丁香五月| 亚洲午夜av| 激情九月婷婷| 久操大香蕉| 色婷婷69| 120分钟婬片免费看| 国产免费AV网站| 98永久精品| 久久色亭亭五月天| 九九精品综合| 婷婷中文字幕| 色色无码| 色色色色色色色五月| 欧美A片在线视频免费观看| 色啪久| 超碰免费观看| 激情五月天色色网| 天天影院色| 大香蕉520| 久久九九经典| 小色小蛇伊人婷婷色香五月| 色婷婷免费观看| 欧美熟女99| 色五月网址| 婷婷在线观看五月天在线视频| 久鲁鲁色网 | 亚洲精品**不卡在线播he| 伊人在线大香蕉网| wuyuedingxiang| 97艹| 天天搞夜夜爽夜夜爽| 婷婷大美在线| 色婷婷社区| www.色婷婷| 综合色播| 人人爽网| 天天干天天曰天天射| 久99视频| 色婷婷丁香五月丁香| 丁香婷婷综合激情五月色| 婷婷成年人免费视频| 国产精品香蕉| 综合五月婷婷| 色九九综合色| 大天天伊人| 91操操| 啪啪啪啪五月天| 婷婷综合精品视频97| 日本婷久久| 能看的AV| 婷婷五月综合网激情| 久综合| 丁香五月激情久久麻豆| 婷婷五月天AV| 玖玖伦理电影| 久久婷婷五月天激情四射| 99re思思热久久| www.99热这里精品| 激情五月综合亚洲另类| 五月婷婷婷色| 青996青| 色五月婷色彩免播放器| 天天夜夜爽| 婷婷五月丁香香蕉| 亚洲成人综合网在线免费观看| 久久色婷婷| 激情综合网五月天| 日韩精品一曲二曲三曲四曲五曲| 久久五月激情综合| 婷婷五月天首页| 五月婷婷激情综合| 91se精品国产| 九九人人操| 激情www.98com| 色噜噜狠狠色综合成人99| 国产SUV精品一区二区6| 免费国产视频| 开心五月婷| 日本三级日本三级99| 婷婷色色网站| 99综合色色色| 中文在线成人| 欧美久久久中文字幕| 9人人操人人看| 五月天婷婷青青草| 这里只有精彩视频| 国产首页在线| 就爱啪啪婷婷| 性爱综合网| 一级性感毛片| 在线观看玖玖资源免费观看| 色婷五月天| 欧美日韩国产一区二区| 俺去也在线www色官网| 超碰免费在线| 97丁香五月| 婷婷涩五月天综合| 成人做爰A片免费看网站找不到了 噼里啪啦在线观看免费完整版视频 | 色婷婷97| 91人人爽人人操| 丁香狠狠| 婷婷五月天成人网| 五月婷婷激情| 丁香五月天资源网| 婷婷狠狠青青| 黄页大全十八禁| 精品色色| 在线不卡视频| 色欧美影院| 大香蕉伊然在亚洲90| 天天拍夜夜爽日日| 开心久久爱五月天| 激情色色色| 99在线播放| 天天成人丁香美女AV| 天天干,夜夜爽| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 大香蕉五月天| 婷婷五月综合激情| 五月丁香久久综合| 久热黄色| 久久久精品AV| 91免费看片| 久久九九热视频| 婷色天堂| 天天干天天 亚洲| 91精品综合久久久久久五月丁香| 激情久久久久久久久| 色色色色网站| 91xxxx九色| 婷婷五月天欧美| 九月丁香八月婷婷加勒比| 日韩99色| 99网| 深爱开心五月天| 国产毛片精品一区二区色欲黄A片 欧美交换配乱吟粗大25P | 五月天丁香综合在线| 日日插日日干| AV网在线观看| 综合在线色婷婷| 欧美月久久| 五月天婷婷人妻| 五月天另类小说久久小说网| 草逼大片| 日韩AC在线免费观看| 国产精品色一哟哟| 伊人综合网站| 精品人妻久久久久久久| 丁香五月色情av| 精品成人无码A片观看香草视频| 日本激情五月天‘| 色狠狠婷婷| 精品,99| 综合久久十| 色七七色九九| 99在线资源| 久久久18| 亚洲俩性性爱图片久久第六页| 26uuu国产| 热99视频| 六月丁香开心婷婷欧美| 亭亭玉月丁香| 久久婷色| 欧美性猛交AAAA片黑人 | 日本的α片xxxwww| 鲁鲁色五月| 九一99| 9999热在线观看| 夜夜大香蕉婷婷丁香| 成人永久免费视频在线观看| 婷婷六月丁香五月| 九六五月天婷婷| 久久综合香蕉国产国产蜜臀AV| 五月天婷婷激情在线色图| 日本色色影院| 色激情五月| 免費亭亭成人| 丁香六月激情国产| 九九久久五月天| 激情五月丁香婷婷夜夜操| 成人精品视频99在线观看免费 | 狠狠色大香蕉| 五月丁香综合激情| 五月婷婷中文网| 久久全色| 思思久久99| 五月丁香伊人网| 婷婷激情五月视频| 91日韩在线| 99爱视频在线免费观看| 五月丁香婷色| AVDV久久| 亚洲aV写真天天综合网久久| 另类图片色五月| 国产成人精品一区二区三区视频| 色五月天电影| eeuus五月婷| 日木WWW视频| 亚洲99热| 色六月天天激情综合网| 99热最新国内| 精品久久久人妻| 色综合久久天天综合网| 美欧日韩国产成人在战| 国产熟妇乱子伦hd| 色婷天天| av在线色五月丁香婷区久| 婷婷娌伦网| 蜜桃人妻无码AV天堂三区| 色日本五月天| 婷婷久久国产视频| 手机在线日韩视频中文字幕| 亚洲三A| 91九色无码日韩| 99热这里精| 神马欧美精| 日产精品久久久久久久蜜臀| 五月花婷婷| 天天噪夜夜爽| 97综合在线| 超碰无码老师| 五月色综合| 开心激情站| 天天做天天双| 综合色情网| 亚洲9久久精品| 99爱爱| 五月天婷婷丁香导航| 能看的av片| 久久九九99桃花视频| 六月丁香网| 超碰日日操| 丁香五月婷婷骚视屏| 五月丁婷香| 99操网站| 在线观看免费观看在线9久| 五月天综合在线| 欧美综合丁香网| 亚洲五月激情| 婷婷WWW久久| 乱岳熟女50岁| 99精品在线| 久色激情| 丁香五月乱中文字幕| 色婷婷丁香六月| 欧美激情伊人| 青青久久91| 亚洲中文字幕在线观看| 人人爽天天爽| 色五月婷婷网| 橾逼网| 久久这里只有精品视频26| 综合激情啪啪| 六月丁香激情| 色都都狠狠色都都色综合色| 亚洲精品一二三| 五月天激情小说| 91精品久久久久| 日日干天天| 日韩精品二三区| 亚洲五月婷| 99啪啪网| 第四色五月婷婷| 日韩精品99久久| 五月婷狠狠| 综合AV网| 一级片操逼视频| 婷婷丁香五月综合| 久久9视频| 五月婷婷之综合激情| 伊人婷婷大香蕉| 九九热精品视频在线观看| 久久99性爱视频| 99er久久| jiqingliuyuetian| 久久少妇视频| 人人干人人操人人摸| 就爱干 在线| 亚洲 综合中文| 九九热视频精品2| 久久久久久久丁香五月天婷婷| 五月丁香啪啪激情| 伊人狠狠丁香婷婷综合尤物| 97视频91| 久久久激情| 色愛综合网| 亚洲视99| 婷婷激情另类| 色色亚卅| va婷婷| 99A片| 丁香五月婷综合网| 久久精品人妻| 伊人狠狠丁香婷婷综合尤物| 亚韩在线视频| 99视频精品在线| 玖玖综合色| 国产成人99久久亚洲综合精品| 激情五月丁香五月| 免费精品99| 亚洲精品无人区| 欧美日韩二区在线| 大香蕉久久视频久久视频| 婷婷在线日韩综合| 99噜噜噜| 99人人干人人操| WWW,五月| 九九热色视频| 激情久久天天| 久久这里都是精品| 色哟哟www| 中文av网站| 国产精品久久久久9999小说| 日噜噜色| 久久草中文日韩欧美| 另类天堂| 色婷婷五月综合在线| 欧美成人A片AAA片在线播放| 开心激情综合| 9热在线观看| 99这里都是精品6| 久碰视频| 色婷网站| a九九热www| 久久99这里只有精品| 深爱丁香激情| 人人操AV| 人人操AV| 丁香香蕉婷婷| 九九热这里只有精品7| 五月天婷婷色色| 天天舔天天| 人人摸人人| 五月丁香影院| 99久久超级| 国产操B视频| 狠狠色激情在线| 韩国天天婷婷| 深爱激情五月网| 久久综合66| 99热主页日本| 天插天啪天啪天啪| 日本一级一片免费视频| 嫩草AV久久伊人妇女超级A| 日韩成人影片在线观看| 欧美日韩成人在线| 五月丁香亚洲综合网| 激情婷婷久久| 国产婷婷婷| 青青草Avb在线| 在线成人网址| 五月婷婷丁香色播网| 婷婷伊人网| 日B日潘金莲BB| 久久婷婷色综合| 襙逼网| 综合五月天| 欧美内射AAAAAAXXXXX| 67194中文字幕| 日批在线看| 色播婷婷大香蕉| 亚洲情综合五月天| 激情六月丁香| 九一99| 日日干天天爽| 成片免费观看大全| 激情婷婷综合| 免费国产视频| 九九无毛| 亚洲性受XXXX五月丁香| 激情五月综合| 婷婷香草网| 大香蕉99| 色婷婷五月天综合网| 日韩aaaaa| 人人操婷婷| 99热这里有精品6| 亚洲网站999| 大香蕉丁香五月| 丁香色六月| 综合性爱网| 亚洲精品无码A片一区二区| 天天干,天天舔| 丁香五月天婷婷中文字幕| 八戒青柠影视剧在线观看| 丁香六月啪啪啪| 思思热精品在线视频| 男男野外做爰全过程69| 国产精品大香蕉| 激情无码网| 欧美激情综合五月色丁香| 久久婷婷青草五月天| 五月天激情婷婷| 亚洲精品第一国产综合亚AV| va婷婷在线| 久热免费| 五月婷网| 九热视频在线精品15| 色狠狠色综合久久久绯色aⅴ影视| 久久婷婷视频| 99九九99九九九视频精彩| 日韩AV免费电影在线播放| 97久久视频| 久热超碰91| 91性人人| 99re思思热久久| 99精品综合| 丁香五月婷婷激情123| 婷婷丁香六月| 91丨熟女丨首页| 超碰在线人妻| 狠狠色噜噜狠狠狠狠综合| 日日杆天天| 狠狠色丁香久久综合婷婷亚洲成人福利| 婷婷色色播五月天| 色欲一区二区三区精品A片| 婷婷五月精品| 中文字幕av久久爽一区| 色九月婷婷综合| 五月天婷婷基地综合网| www.日本91| 狼人婷婷综合| 六月丁香色色| 婷婷九月亚洲| 91热在线| 亚欧州精品视频| 99热99精品| 五月天激情综合网| 囯产精品久久欠久久久久久九大| 91色欲综合| 天天爽天天爽视频| 综合XX网| 人妻激情视频| 99热新网址| 色色爽爽天天| 中文字幕在线日亚洲9| 丁香五月中文字幕| 91 九色 熟女| 日韩成人AV在线| 99精品在线播放| 五月丁香六月在线欧美| 亚洲激情在线| 婷婷伊人久久| 亚洲色频| 插插插色综合网| 中文字幕视频色婷婷| 丁香六月天婷婷开心综合| 大香伊人久色| 五月六月婷| av在线不卡播放| 99热综合色图| 久久丁香五月综合六月激情红杏视频 | 一区二区三区视频| 婷婷综合激情五月中文字幕| 香蕉久久国产AV一区二区| 深爱激情网噜噜色| 激情五月天福利| 五月天天天天天天天天天天天婷婷婷| 超碰在线观看成人视| 91操片| 99re思思热在线视频| 日本欧美成人片AAAA| 婷婷五月天.com| 99网址在线观看| 人人色婷婷| 99视频精品| 亚洲精品又粗又大又爽A片| 成人欧美Va| 色婷婷影音| 九月丁香| 色婷婷六月开心中文字| 大香蕉人人网| 婷婷五月天久久| 丁香五月激情六月综合| 激情久久婷婷| 婷婷五月天色色| 久久久月丁香| 91亚洲免费片| 色色色色色色色色网站| 五月丁香六月情婷婷久久| 依人大香蕉在钱1| 五月色影院| 色综合中文| 成人国产欧美大片一区| 九九热视| 人妻爽爽爽久久久久久久久| 丁香五月综合狠狠| 日本一级一片免费视频| 熟女激情网| 31色区视频免费看| 丁香婷婷性爱| 丁香婷婷五月六月天| 99视频网址| 六月丁香五月天| 亚洲国产成人裸舞| 亚洲成人高清在线| 五月天色色无码| 99超级碰碰| 色五月在线| 91久久色| 五月天色小说| ww久久| 日韩综合大黄| 亚洲婷婷丁香五月| 色婷婷丁香五月天| 人妻久久久久久| 99热99热在线观看| 色一情一乱一乱91Av| 色屌丝中文字幕| 91精品综合久久久久久五月丁香| 久久久婷婷婷| 五月黄色婷婷| 任你爽视频| 天天骑天天操| 午夜爱爱爱成人| 99久久久免费| 啪啪啪丁香五月| 婷婷五月天基地| 六九色综合婷婷五月天| 综合久色五月| 影音先锋噜一噜| www.91av.com| 人人操五月天| 久久人妻视频| 色区域网站视频| 激情综合播播| 欧美日韩成人一区二区| 97色综合| 思思热在线播放| 这里只有精品视频免费在线观看| 久久杏爱视频| 超碰超碰在线| WWW.久久久久久久久久久久久| 亚洲精品久久久久久久久久吃药 | 亚洲乱码日产精品BD| 五月伊人网| 五月丁香六月情| 另类小说五月天激情| 激情综合网丁香| 色色激情五月| 91九九精品| 精品久久久91久久影视网| 天天干狠狠| 色五月丁香婷婷| 丁香亭亭久久| 五月丁香 啪啪| 日韩精品呦呦va| 国产熟妇乱子伦hd| 色色五月天激情| 日韩人妻无码专区| 五月天社区婷婷丁香社区| 丁香婷婷综合激情五月色| 婷婷六月综合在线| 婷婷操逼| 色丁香婷婷| 在线资源av-超碰中文在线-成人AV| 日日夜夜狠狠| 色五月播五月| 色五月激情网| 玖玖爱综合网| 五月婷婷激情| 夜夜撸夜夜骑| 婷婷性爱五月天| 日韩小视频在线99| 狠狠999| 国产色婷婷亚洲| 天天狠天天狠| 欧美成性色| 五月天日日操夜夜操 | 婷婷五月天成人网站| 国产探花AV在线| 天天做天天爰天天爽天天无遮挡| 色玖玖| 五月婷丁香| 色婷婷久久综合| 五月天丁香综合久久国产| 日本色色网站| 五月天婷婷Av| 久cao香蕉影院| 黄网在线免费| 日本黄色三级片内射| 99色色| 亚洲妇女熟BBW| 粉嫩AV久久一区二区三区| 午夜不卡久久精品无码免费| 激情五月综合婷婷| 五月丁香六月激情综合| 亚洲无码99| 激情五月婷婷综合| 乱岳熟女50岁| 久久99久久99精品,久国产,久久精品免费,99久在线,久久久久国产精品免费网站,9 | 狠狠色丁婷婷日日,伊人激情综合网| 五月丁香六月婷婷啪啪综合 | 思思热99热| 激情六月天| 激情婷婷五月| 五月丁香婷婷综合视频| 久操大香蕉| 六月激情网| 超碰av在| 特黄三级又爽又粗又大| se99热久久一本| 成人av在线网址| 吊色AV男人的天堂| 五月婷婷99热| 欧美天天干五月丁香| 在线观看玖玖资源免费观看| 国产婷婷色五月| 99这里精品| 久久99热精品a片在线观看| 五月天婷婷视频30| 亚洲五月色| 天天插天天干| 婷婷五月亚洲综合| 九色婷婷| 大香蕉五月婷婷丁香| 伊人成综合五月婷婷| 国产激情在线| 性爱AV天堂| 色五月天网| 丁香六月五月天| 天天操中文字幕| 激情综合久久| 少妇熟女视频一区二区三区| 久久桃花网色婷婷| 亚洲av成人电影在线观看| 日本一级一片免费视频| 怡红院 久久| 日日射天天射| 五月激情婷婷播播开心| 99在线精品观看99| 丁香五月影院| 亚洲视频在线网| 久久98热re| 久热2025无码| 99精品免费欧美小视频 | 婷婷四色成人综合色视| 亚洲成人婷婷| 久久婷婷六月综合| 久久久99精品免费观看| 婷婷综合偷拍| 99这里是99在线视频| 色色色色色爱| 殴美激情综合网| 国产亚洲精品AAAAAAA片| 国模狼狼| 99精品国产在热久久| 婷婷开心激情综合五月天| 色婷网| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 国产精品视频| 日逼免费视频| 久久新地址| 丁香五月激情五月| 五月天综合在线| WWW五月| 色色热| 极品另类| 99热日本| 九月婷婷综合| 99艹精品在线观看| 五月激情丁香久久综合网| 天天日天天爽夜夜爽| 51精品国自产在线| 国产激情在线| 五月丁香直播| 日本啪啪网| 9久热精品在线视频| 大香蕉综合| 天堂草在线观看| 蜜桃人妻无码AV天堂三区| 亚洲婷婷激情综合激情999精品| 亚洲综合网激情五月天| 婷婷丁香亚洲色综合91| 黄色高清无码| 丁香婷婷综合激情五月色,开心五月丁香花综合网,激情综合五月亚洲婷婷,五月天 | 久久激情网| 超碰99热精品| 人人操人人爱丁香五月| 79精品视频在线观看,| 亚洲无码激情| 亚洲AAAA网| 人人草人人舔| 久久综合影院| 五月天天爽| 日日做A爰片久久毛片A片英语| 色99在线视频| 色色日本| 99惹 精品在线| 国内裸舞二区| 五月天综合婷婷| 婷婷综合九月| 这里有精品2| 国产肥白大熟妇BBBB视频| 九九色中文| 伊人五月天| 999精品久久久久久久| 3p日韩网站视频| 中文字幕 码精品视频网站| 伊人久久大香线蕉av一区| 婷婷五月天久久| 99五月香婷婷丁香在线视频| 色五月婷婷少妇人妻| 黄网在线播放| 久久精品99久久| 亚州色色色| AV操一操| 五月欧美色色五月| 99精品偷自拍| www.激情在线| 九九热免费视频| www.99热视频| 超碰操网| 精品网站:999WWW| 99精品网| 九九综合五月欧美| 久久免费婷婷视频| 操碰色一区就去操| 五月婷在线色视频| 综合五月天| 激情综合色五月六月婷婷| 色五月婷婷基地| 五月色情婷婷| 国产免费一区二区在线A片视频| 亚洲 视频 导航 一区| 狠狠狠狠狠狠狠狠| 亚洲精品444久久久久久| 亚洲行行色色| wwwav大香蕉| 亚洲精品五月| 超碰在线网站9| 综合视频五月| 电影91久久久| 久久aaaa片一区二区| 激情五月丁香五月色| 996热re视频精品视频这里| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 亚洲小视频免费看| 亚洲色五月| 婷婷亚洲天堂| 婷婷五月天激情四射| 成人欧美一区二区三区在线观看| 激情综合五月天| www.婷婷五月天啪啪| 最近中文字幕大全免费版在线 | 五五月五月| 99热热热99精品婷婷| 操啊操av| 九九色网| 色日本综合| 中文字幕,综合,91| 91欧美| 婷婷五月天播| 牛牛热这里只有jingpin| 成人综合伍月天| 亚洲视频久久| 久久久.COM| 99啪啪视频| 国产精品色| 久久这里只有精品无码| 国产精品黑丝| 99视频精品全部观看10| 夜夜资源站| 丁香色五月天| 久久99热 这里有精品| 一区二区你懂的| 天天爽夜夜操| 思思热天天看| www.婷婷| 欧美一级操逼视频| 五月婷婷丁香啪啪| 99热这里只有精品9| 五月婷婷激情综合在线| 黄网在线免费观| 色婷婷五月天久久| 免费亚洲婷婷中文字幕| 欧亚成人A片一区二区| 思思热在线视频99| 国产精品国产| 色五月激情五月天| 夜夜夜叫天天天做| 蜜乳AV成人| 超碰超碰在线| 婷婷丁香五另类网站| 91夫妻网站九色| 狼人婷婷久久| 丁香五月天色综合| 色色色丁香| 超碰不卡在线| 婷婷丁香久久五月综合| 欧美性生交XXXXX无码小说| 99亚色色色| 婷婷.com| 久色| 婷婷亚洲激情在线观看视频| 丁香八月综合激情| 亚洲天堂久久| 久久这里只有精品无码| 看全色黄大色大片| 日本精品久久久久中文字幕| 国产精品五月天婷婷| 97色婷| 久久丁香综合香蕉| 国产激情AV| 青青草护士中出内射-欧美电影在线天堂新版 | 五月丁香色| 亚洲无码 图片区| 91啪啪网| 很很干在线视频| www.9797国产| 99久久66综合| 久久久大香蕉| 五月天婷婷伊人| 99久在线观看| 国内一级片| 午夜免费试看| 亭亭色天香| 99色视频在线观看最新| 五月天丁香婷婷久久九| 色吧五月婷婷| 婷婷五月天激情综合网| 激情六月婷婷| 任我肏视频精品| 九九碰九九爱97| 五月天色丁香| 亚洲 在线 性爱 | 婷婷五月深爱五月| 色婷婷基地在线| 久久91久久91色欲精品| 99网| 超碰在线人人| 伊人9999| 丁香婷婷性久久| 色婷婷小说| 极品精品一区二区三区在线| 色婷婷最爱五月| 色婷婷大香蕉| 日本97久久久精品| 国产成人+亚洲+欧洲| 亚洲无AV在线中文字幕| 99 热| 精品人妻久久久久久| 丁香六月丁香婷婷激情| 99久久网站| 激情网五月婷婷| 草美女在线观看视频在线播放| 国产9色在线/日韩| 五月婷婷婷色| 亚洲欧洲中文日韩久久AV乱码| 婷婷色在线播放| 色综合综合色| 狠狠操天天操天天操| 97干97色| 激情五月色婷婷| 丁香五月婷婷综合91|