欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Maven連接Nexus報(bào)錯(cuò)Connection refused?服務(wù)、配置、網(wǎng)絡(luò)全排查

Maven連接Nexus報(bào)錯(cuò)Connection refused?服務(wù)、配置、網(wǎng)絡(luò)全排查 在開(kāi)發(fā)交付群里被了一百次“連不上Nexus構(gòu)建全掛了”大概每個(gè)搞過(guò)Java后端、跑過(guò)Maven私服的人都有過(guò)這種經(jīng)歷。Maven連接Nexus報(bào)錯(cuò)的原因五花八門但報(bào)錯(cuò)信息翻來(lái)覆去就那么幾行Connection refused、ConnectException、Could not transfer artifact看著像是同一個(gè)問(wèn)題實(shí)際上可能差著十萬(wàn)八千里。這篇東西就是沖著“速查”兩個(gè)字去的把我在實(shí)際項(xiàng)目里遇到過(guò)的、以及幫別的團(tuán)隊(duì)排查過(guò)的連接被拒絕場(chǎng)景按根因類別全部列出來(lái)每一條都會(huì)問(wèn)你三個(gè)問(wèn)題服務(wù)到底起沒(méi)起、Maven這邊配置對(duì)不對(duì)、網(wǎng)絡(luò)到底通不通。配置文件、排查命令、坑位提醒都會(huì)給到適合正在被構(gòu)建報(bào)錯(cuò)折騰的開(kāi)發(fā)和運(yùn)維同學(xué)也適合剛接手Nexus私服、想搞明白連接機(jī)制的人。1. 連接被拒絕的第一根因Nexus到底“活著”沒(méi)有拿到任何“連接被拒絕”的報(bào)錯(cuò)我從來(lái)不會(huì)先去翻settings.xml而是先確認(rèn)一件事Nexus進(jìn)程到底在不在跑、IP和端口到底能不能通。因?yàn)镃onnection refused這個(gè)英文本身就已經(jīng)說(shuō)得很清楚了——你的請(qǐng)求被操作系統(tǒng)拒絕了也就是說(shuō)目標(biāo)機(jī)器上根本沒(méi)有程序在那個(gè)端口等著你。很多時(shí)候Maven報(bào)錯(cuò)只是表象真正的根因是Nexus服務(wù)壓根沒(méi)起來(lái)或者是起了但監(jiān)聽(tīng)地址不對(duì)。1.1 最容易被忽略的順序問(wèn)題先確認(rèn)服務(wù)狀態(tài)很多團(tuán)隊(duì)習(xí)慣把Nexus部署在專門的一臺(tái)服務(wù)器上或者放在某個(gè)虛擬機(jī)的容器里。Nexus沒(méi)起來(lái)的原因又特別多進(jìn)程被kill了、機(jī)器重啟以后忘了設(shè)置開(kāi)機(jī)自啟、磁盤(pán)滿了導(dǎo)致啟動(dòng)失敗。更隱蔽的情況是服務(wù)起來(lái)了但還沒(méi)完全就緒——Nexus啟動(dòng)過(guò)程中會(huì)有一段時(shí)間對(duì)外端口已經(jīng)打開(kāi)了但內(nèi)部應(yīng)用還沒(méi)準(zhǔn)備好這時(shí)候發(fā)過(guò)去的請(qǐng)求同樣可能被重置或者被拒絕。排查時(shí)用一條命令就能快速定位# 在Nexus服務(wù)器本機(jī)上檢查進(jìn)程 ps -ef | grep nexus # 或者查看端口監(jiān)聽(tīng)狀態(tài)Linux ss -lntp | grep 8081如果進(jìn)程存在但端口沒(méi)有LISTEN說(shuō)明啟動(dòng)過(guò)程卡住了或者配置的端口不是8081。如果端口在LISTEN但本機(jī)訪問(wèn)仍然失敗先懷疑是不是防火墻攔了回環(huán)地址。這里有個(gè)很經(jīng)典的坑很多人把Nexus裝好以后第一次啟動(dòng)一直報(bào)錯(cuò)后來(lái)發(fā)現(xiàn)是啟動(dòng)腳本參數(shù)里指定了低版本JDK路徑而Nexus版本要求JDK版本更高導(dǎo)致JVM起來(lái)后立刻崩掉進(jìn)程反復(fù)重啟。這類問(wèn)題不能光看Maven的報(bào)錯(cuò)得去Nexus的日志目錄看啟動(dòng)日志sonatype-work/nexus3/log/下面通常有nexus.log和jvm.log任何啟動(dòng)階段的異常都會(huì)寫(xiě)在這里。1.2 端口和地址確認(rèn)8081不是唯一答案Nexus3的默認(rèn)端口是8081但生產(chǎn)環(huán)境很多團(tuán)隊(duì)會(huì)改掉這個(gè)端口或者用反向代理把外部8080映射到內(nèi)部8081。排查連接問(wèn)題之前必須確認(rèn)Maven訪問(wèn)的地址和Nexus實(shí)際監(jiān)聽(tīng)地址完全一致。在Nexus服務(wù)器上執(zhí)行curl -v http://localhost:8081/service/rest/v1/status這行命令返回JSON并且HTTP狀態(tài)碼是200的話說(shuō)明服務(wù)正常。返回Connection refused說(shuō)明服務(wù)沒(méi)起來(lái)或端口不對(duì)。返回超時(shí)說(shuō)明端口被防火墻靜默丟棄了。需要注意的是Nexus3的REST API路徑在不同版本上略有差異但/service/rest/v1/status這個(gè)路徑從Nexus3.20以后一直很穩(wěn)定。提示如果你用Docker啟動(dòng)Nexus別忘記檢查端口映射。docker ps里顯示的宿主機(jī)端口和容器內(nèi)部端口都要確認(rèn)-p 8081:8081這種映射方式把宿主機(jī)的8081映射到容器的8081如果宿主機(jī)8081被別的進(jìn)程占用了容器可能啟動(dòng)成功但端口沒(méi)綁上。2. Maven側(cè)配置settings.xml里那些“自作主張”的坑如果Nexus這邊一切正常問(wèn)題就轉(zhuǎn)移到Maven這一側(cè)。Maven的settings.xml是全局配置文件里面配了mirror、server、proxy等一堆東西任何一個(gè)字段寫(xiě)錯(cuò)都能造成連接失敗。而且Maven報(bào)錯(cuò)經(jīng)常是嵌套的外層寫(xiě)著Could not transfer artifact內(nèi)層才藏著你真正需要看的異常信息。很多人只看前兩行就開(kāi)始懷疑網(wǎng)絡(luò)結(jié)果折騰半天發(fā)現(xiàn)就是URL少寫(xiě)了一個(gè)字母。2.1 mirrors和repositories的address糾錯(cuò)Maven查找依賴的順序是先讀settings.xml里的mirror配置如果不匹配再讀pom.xml里的repository。連接被拒絕最常見(jiàn)的原因是settings.xml里的mirror配置指向了一個(gè)錯(cuò)誤的倉(cāng)庫(kù)地址。mirror idlocal-nexus/id mirrorOf*/mirrorOf urlhttp://192.168.1.100:8081/repository/maven-public//url /mirror這段配置看起來(lái)人畜無(wú)害但出問(wèn)題的點(diǎn)往往不在格式而在URL本身。第一個(gè)坑末尾的斜杠。Nexus的repository路徑必須以斜杠結(jié)尾如果漏掉了Maven拼接路徑時(shí)會(huì)直接拼出一個(gè)奇怪的URL比如repository/maven-public/com/example/xxx.jar前者正常后者卻會(huì)報(bào)404而不是Connection refused。第二個(gè)坑協(xié)議。有人配了https://開(kāi)頭的URL但Nexus實(shí)際只開(kāi)了HTTP監(jiān)聽(tīng)這就會(huì)直接握手失敗報(bào)出來(lái)的錯(cuò)誤五花八門有時(shí)候是SSLHandshakeException有時(shí)候直接就是Connection refused。第三個(gè)坑hostname解析。你寫(xiě)的是域名但這個(gè)域名在構(gòu)建機(jī)上的DNS和hosts文件里根本沒(méi)有映射那請(qǐng)求就是往一個(gè)不存在的地址上發(fā)報(bào)錯(cuò)也經(jīng)常是Connection refused。排查方式很簡(jiǎn)單把配的URL直接復(fù)制到瀏覽器或curl里訪問(wèn)curl -I http://192.168.1.100:8081/repository/maven-public/如果返回HTTP/1.1 200說(shuō)明地址沒(méi)問(wèn)題。如果返回301或302說(shuō)明Nexus配置了HTTP→HTTPS重定向那你Maven里的URL也得跟著改成https。這個(gè)情況比大家想象中要多很多團(tuán)隊(duì)在Nexus前面掛了Nginx或者自己買了SSL證書(shū)HTTP的8081對(duì)外已經(jīng)不可見(jiàn)了。2.2 server認(rèn)證配置的坑Nexus默認(rèn)設(shè)置了匿名訪問(wèn)權(quán)限但生產(chǎn)環(huán)境通常都會(huì)關(guān)掉匿名或者只對(duì)特定倉(cāng)庫(kù)開(kāi)匿名。一旦Nexus要求認(rèn)證而Maven側(cè)沒(méi)有配置正確的server憑據(jù)報(bào)錯(cuò)可能就不是401 Unauthorized那么直白。Maven在某些版本、某些傳輸場(chǎng)景下會(huì)把401包裝成Could not transfer artifact甚至顯示為Repository blocked。正確的配置方式是servers server idlocal-nexus/id usernamedeployer/username passwordpassword/password /server /servers這里有一個(gè)極其隱蔽的坑id必須和mirror或者repository配置里的id完全一致。你看好了是“完全一致”包括大小寫(xiě)和字符。因?yàn)镸aven匹配憑據(jù)的時(shí)候就是通過(guò)這個(gè)id去servers列表里找對(duì)應(yīng)配置的。id對(duì)不上Maven根本不會(huì)把用戶名密碼帶上那Nexus返回401或403Maven這邊看到的就是連接失敗或者認(rèn)證失敗。另外密碼里如果帶有特殊字符比如、、在XML里必須做轉(zhuǎn)義否則settings.xml直接解析失敗Maven會(huì)報(bào)錯(cuò)“malformed POM”或者干脆無(wú)法啟動(dòng)構(gòu)建很多人遇到這種問(wèn)題還以為是Java環(huán)境壞了。2.3 HTTP/HTTPS與代理端口還有一個(gè)經(jīng)常被忽略的場(chǎng)景你所在的環(huán)境是內(nèi)網(wǎng)開(kāi)發(fā)環(huán)境但本機(jī)也配了HTTP代理比如公司辦公網(wǎng)絡(luò)要求所有HTTP請(qǐng)求走代理。settings.xml里的proxies配置會(huì)影響到Maven發(fā)起的所有連接。一旦代理服務(wù)器本身不通Maven訪問(wèn)Nexus也會(huì)報(bào)Connection refused但這個(gè)refused的對(duì)象其實(shí)是代理服務(wù)器而不是Nexus本身。proxies proxy idoffice-proxy/id activetrue/active protocolhttp/protocol hostproxy.company.com/host port8080/port nonProxyHosts192.168.1.*|localhost/nonProxyHosts /proxy /proxiesnonProxyHosts字段用豎線分隔多個(gè)地址支持通配符。如果這里沒(méi)把內(nèi)網(wǎng)Nexus地址加進(jìn)去那么每一次下載依賴都會(huì)繞路到外網(wǎng)代理既慢又容易失敗。很多項(xiàng)目連接Nexus時(shí)好時(shí)壞罪魁禍?zhǔn)拙褪沁@臺(tái)代理服務(wù)器偶爾抽風(fēng)。建議排查的時(shí)候直接先臨時(shí)把a(bǔ)ctive改成false再跑一把mvn構(gòu)建如果問(wèn)題消失那說(shuō)明就是代理配置的問(wèn)題。3. 網(wǎng)絡(luò)與環(huán)境從localhost到防火墻的層層關(guān)卡前面兩步都排查過(guò)了Nexus活著、Maven配置正確但依然連接失敗那問(wèn)題就出在請(qǐng)求路徑的中間環(huán)境里。這里的“中間環(huán)境”可能是真實(shí)的防火墻也可能是容器網(wǎng)絡(luò)、云平臺(tái)安全組、虛擬機(jī)網(wǎng)絡(luò)模式甚至只是一個(gè)寫(xiě)錯(cuò)了的hosts映射。這個(gè)階段的排查思路應(yīng)該分層進(jìn)行每次只“打通”一層逐步縮小故障范圍。3.1 同一臺(tái)機(jī)器 vs 遠(yuǎn)程訪問(wèn)bind addressNexus默認(rèn)會(huì)監(jiān)聽(tīng)所有網(wǎng)卡的8081端口但有些部署方式里啟動(dòng)參數(shù)會(huì)修改成只監(jiān)聽(tīng)某個(gè)IP。比如在nexus.vmoptions文件里或者啟動(dòng)腳本中設(shè)置了-Djava.net.preferIPv4Stacktrue或者Nexus的application.properties如果存在里指定了application-host參數(shù)。如果配置了只監(jiān)聽(tīng)127.0.0.1那么Maven從另外一臺(tái)機(jī)器來(lái)訪問(wèn)就是白搭報(bào)出來(lái)就是Connection refused。驗(yàn)證方式是在開(kāi)發(fā)機(jī)上執(zhí)行telnet 192.168.1.100 8081能通的話說(shuō)明Nexus對(duì)遠(yuǎn)程訪問(wèn)是開(kāi)放的。不通的話登錄服務(wù)器再執(zhí)行一次ss -lntp | grep 8081看看監(jiān)聽(tīng)地址是0.0.0.0:8081、*:8081還是具體的局域網(wǎng)IP。如果是127.0.0.1:8081說(shuō)明配置把綁定地址限制在回環(huán)接口上了。這時(shí)候可以到安裝目錄下檢查etc/nexus.properties或者啟動(dòng)時(shí)追加的JVM參數(shù)把a(bǔ)pplication-host的值改成0.0.0.0或者在啟動(dòng)命令里去掉這個(gè)限制。3.2 防火墻、安全組、容器網(wǎng)絡(luò)的排查思路Linux服務(wù)器上最常見(jiàn)的攔截者是iptables、firewalld或者ufw。很多服務(wù)器管理員會(huì)把默認(rèn)策略設(shè)為DROP沒(méi)有顯式放行8081端口的話外部的連接請(qǐng)求會(huì)被靜默丟棄表現(xiàn)不是Connection refused而是timeout。如果你看到的是refused說(shuō)明對(duì)方服務(wù)器對(duì)你的請(qǐng)求發(fā)了RST包也就是說(shuō)端口可能沒(méi)監(jiān)聽(tīng)但如果是timeout那大概率就是防火墻把包丟了。容器環(huán)境里還有一個(gè)額外的坑Nexus跑在某個(gè)Docker容器里容器網(wǎng)絡(luò)是bridge模式宿主機(jī)做了-p端口映射。此時(shí)從宿主機(jī)訪問(wèn)沒(méi)問(wèn)題但從另一臺(tái)機(jī)器訪問(wèn)就要看宿主機(jī)的防火墻、云安全組是否放行了8081端口。很多人遇到的情況是開(kāi)發(fā)機(jī)的telnet能通Nexus所在服務(wù)器IP的8081但是從另一臺(tái)網(wǎng)絡(luò)環(huán)境奇特的機(jī)器上就是不通最后發(fā)現(xiàn)是兩個(gè)子網(wǎng)之間的ACL規(guī)則沒(méi)放行或者云平臺(tái)安全組只允許了辦公網(wǎng)段訪問(wèn)。注意即使你用Docker跑Nexus也不要忘掉容器內(nèi)部還有一層網(wǎng)絡(luò)命名空間。進(jìn)入容器用docker exec -it [容器ID] curl http://localhost:8081/service/rest/v1/status可以驗(yàn)證容器內(nèi)部服務(wù)本身是否正常這能幫你區(qū)分是容器服務(wù)問(wèn)題還是端口映射問(wèn)題。3.3 用telnet/curl/nc快速定位故障層級(jí)連接問(wèn)題的排查一定要用“最小化命令”去定位不要一上來(lái)就mvn clean package。我自己習(xí)慣這樣一層層試# 第一層DNS/域名解析 ping my-nexus.example.com # 或者 nslookup my-nexus.example.com # 第二層端口連通性 telnet my-nexus.example.com 8081 # 或者 nc -vz my-nexus.example.com 8081 # 第三層HTTP服務(wù)可達(dá)性 curl -v http://my-nexus.example.com:8081/repository/maven-public/如果telnet都連不通說(shuō)明問(wèn)題出在網(wǎng)絡(luò)層再去糾結(jié)Maven配置沒(méi)有意義。如果telnet通但curl返回異常比如HTTP狀態(tài)碼是400或者500那就進(jìn)入應(yīng)用層排查看Nexus的后臺(tái)日志。還有一類罕見(jiàn)情況telnet能通curl也能通但mvn構(gòu)建依然報(bào)Connection refused這是因?yàn)镸aven在解析settings.xml或者pom.xml里的repository URL時(shí)做了變量替換實(shí)際請(qǐng)求的地址和你在curl里測(cè)試的地址根本不一樣。這時(shí)候要靠Maven的調(diào)試日志來(lái)定位mvn clean install -X -DskipTests日志里會(huì)打印出每個(gè)依賴下載的實(shí)際URL照著那個(gè)URL再去curl通常就能發(fā)現(xiàn)問(wèn)題。4. 常見(jiàn)錯(cuò)誤信息速查與一攬子解決方案做技術(shù)排障不能靠猜得靠“從現(xiàn)象反推原因”。這里把Maven連接Nexus時(shí)最常出現(xiàn)的幾類報(bào)錯(cuò)信息整理成一張速查思路表每條列出典型報(bào)錯(cuò)、可能的根因以及首選排查動(dòng)作。注意這里的報(bào)錯(cuò)信息只是“線索”最終診斷必須結(jié)合前文的排查流程綜合判斷。報(bào)錯(cuò)現(xiàn)象關(guān)鍵詞典型根因首選排查動(dòng)作Connection refused / ConnectExceptionNexus服務(wù)未啟動(dòng)、端口錯(cuò)誤、防火墻拒絕、監(jiān)聽(tīng)地址受限登錄服務(wù)器查進(jìn)程執(zhí)行 ss -lntpConnection timed out防火墻DROP策略、跨網(wǎng)段ACL攔截、服務(wù)器宕機(jī)檢查云安全組/防火墻規(guī)則ping和telnet逐步定位SSLHandshakeExceptionNexus使用的HTTPS證書(shū)過(guò)期或Maven側(cè)URL協(xié)議錯(cuò)誤換成http測(cè)試或更新JDK信任庫(kù)里的證書(shū)HTTP 401 Unauthorized認(rèn)證憑據(jù)缺失或服務(wù)器id不匹配檢查settings.xml中的servers配置確保id一致HTTP 403 Forbidden用戶權(quán)限不足登錄Nexus檢查該用戶是否有對(duì)應(yīng)倉(cāng)庫(kù)的訪問(wèn)權(quán)限HTTP 404 Not Foundrepository名稱或路徑拼寫(xiě)錯(cuò)誤在Nexus Web界面查看實(shí)際倉(cāng)庫(kù)名并核對(duì)URLCould not transfer artifact多種原因最常見(jiàn)是鏡像URL錯(cuò)誤或代理配置錯(cuò)誤查看Maven -X日志中打印的最終下載地址Repository blocked遠(yuǎn)程倉(cāng)庫(kù)被Nexus誤判為不可用登錄Nexus后臺(tái)查看倉(cāng)庫(kù)狀態(tài)嘗試重新連接遠(yuǎn)程倉(cāng)庫(kù)UnknownHostExceptionDNS解析失敗檢查hosts文件或DNS服務(wù)器配置MalformedURLExceptionURL地址中協(xié)議、端口或路徑格式錯(cuò)誤檢查settings.xml中url字段是否缺少斜杠或包含非法字符4.1 Connection refused 與 timeout 的語(yǔ)義區(qū)別這個(gè)值得單獨(dú)拎出來(lái)講。Connection refused和Connection timeout雖然都表現(xiàn)為“連不上”但底層邏輯完全不同。Connection refused是TCP層收到了對(duì)方的RST包換句話說(shuō)目標(biāo)主機(jī)的網(wǎng)絡(luò)棧是通的但它告訴你“這個(gè)端口我沒(méi)法連接”通常是服務(wù)沒(méi)監(jiān)聽(tīng)或者防火墻主動(dòng)拒絕。Connection timeout則是發(fā)出了SYN包但一直沒(méi)等到回應(yīng)多半是包被丟棄了典型場(chǎng)景是防火墻DROP策略、路由器ACL或者目標(biāo)主機(jī)宕機(jī)。所以當(dāng)你拿到報(bào)錯(cuò)時(shí)第一反應(yīng)應(yīng)該是看“關(guān)鍵字”。我的習(xí)慣是看到refused優(yōu)先查“服務(wù)是否啟動(dòng)”其次查“端口監(jiān)聽(tīng)地址”最后查“防火墻是否顯式REJECT”看到timeout優(yōu)先查“網(wǎng)絡(luò)路由是否可達(dá)”其次查“云安全組”最后查“目標(biāo)服務(wù)器是否宕機(jī)”4.2 401、403 等權(quán)限類錯(cuò)誤的聯(lián)動(dòng)排查權(quán)限類錯(cuò)誤看起來(lái)和“連接被拒絕”無(wú)關(guān)但在Nexus里這兩者經(jīng)常被串在一起。最典型的場(chǎng)景是匿名用戶沒(méi)有任何倉(cāng)庫(kù)的查看權(quán)限Nexus直接拒絕連接請(qǐng)求表現(xiàn)就是Maven下載依賴時(shí)連續(xù)報(bào)錯(cuò)看起來(lái)像網(wǎng)絡(luò)不可達(dá)。第二次遇到類似問(wèn)題時(shí)我會(huì)先打開(kāi)Nexus后臺(tái)看一下對(duì)應(yīng)倉(cāng)庫(kù)的“Anonymous Access”是否被勾選了。在Nexus3的管理界面中Settings → Security → Anonymous Access可以控制匿名訪問(wèn)而每個(gè)倉(cāng)庫(kù)的Repository → Settings → Security里還有細(xì)粒度的權(quán)限控制。生產(chǎn)環(huán)境建議關(guān)閉匿名但關(guān)閉的同時(shí)必須確保所有開(kāi)發(fā)機(jī)上的settings.xml都配了正確的server憑據(jù)否則所有人都會(huì)連不上那時(shí)候就別談什么“連接被拒絕”了那叫“權(quán)限管理事故”。4.3 快速檢查清單三步從報(bào)錯(cuò)到定位為了不讓自己在排障時(shí)漏掉細(xì)節(jié)我給自己擬了一張“三步走”清單每次都能在十分鐘內(nèi)從報(bào)錯(cuò)信息定位到根因跑一次帶調(diào)試日志的構(gòu)建把-X輸出的完整報(bào)錯(cuò)截圖或者復(fù)制下來(lái)重點(diǎn)看最底部的Caused by因?yàn)槟莻€(gè)才是真正的異常源頭。拿報(bào)錯(cuò)里的URL地址直接去telnet和curl測(cè)試服務(wù)是否真的“拒絕連接”用最小化手段復(fù)現(xiàn)不要帶著Maven的整個(gè)依賴解析流程去猜。逐項(xiàng)對(duì)照上面表格里的“典型根因”最可疑的候選先驗(yàn)證驗(yàn)證方式就是修改一處配置后重新跑一次構(gòu)建能復(fù)現(xiàn)就說(shuō)明沒(méi)改對(duì)不能復(fù)現(xiàn)就說(shuō)明命中根因。這三步的核心思想是“剝離層次、逐級(jí)排雷”。Maven構(gòu)建只是客戶端它的報(bào)錯(cuò)信息本質(zhì)上就是HTTP或者網(wǎng)絡(luò)層的異常包裝把包裝拆掉底層的真相并不難找。5. 實(shí)操記錄一次完整Nexus連接故障的排查復(fù)盤(pán)前面講了一堆方法不如直接看一次真實(shí)排查過(guò)程。這個(gè)案例發(fā)生在某公司的Java微服務(wù)項(xiàng)目里場(chǎng)景是十幾臺(tái)構(gòu)建機(jī)器分批執(zhí)行CI構(gòu)建某天早上突然大面積失敗報(bào)錯(cuò)全部是Connection refused。公司IT環(huán)境屬于內(nèi)網(wǎng)部署Nexus跑在一臺(tái)虛擬機(jī)里IP地址是192.168.10.20端口8081構(gòu)建機(jī)的Maven配置了統(tǒng)一的settings.xml鏡像指向它。5.1 從報(bào)錯(cuò)到定位分段排查的完整邏輯當(dāng)天早上故障一報(bào)出來(lái)我先看的是CI日志連續(xù)翻了十幾個(gè)都是同一個(gè)錯(cuò)誤——Could not transfer artifact ... Connection refused。第一反應(yīng)是Nexus服務(wù)掛了。于是登錄192.168.10.20服務(wù)器執(zhí)行ps -ef | grep nexus進(jìn)程存在但再執(zhí)行ss -lntp | grep 8081發(fā)現(xiàn)8081端口根本沒(méi)有監(jiān)聽(tīng)。當(dāng)時(shí)心里“咯噔”一下因?yàn)檫M(jìn)程在但端口沒(méi)綁定這通常意味著Nexus啟動(dòng)到一半卡住了。緊接著看了日志文件發(fā)現(xiàn)最后的記錄是ES索引初始化失敗導(dǎo)致整個(gè)應(yīng)用無(wú)法完成啟動(dòng)流程N(yùn)exus進(jìn)程雖然在跑但JVM內(nèi)部并沒(méi)進(jìn)入可用狀態(tài)。處理完索引問(wèn)題重啟Nexus端口正常監(jiān)聽(tīng)了。但CI重跑依然有部分機(jī)器報(bào)Connection refused。這時(shí)候我卻注意到報(bào)錯(cuò)機(jī)器和正常機(jī)器之間的差異——報(bào)錯(cuò)的都是最近新擴(kuò)容的構(gòu)建機(jī)正常的都是老機(jī)器。再一查發(fā)現(xiàn)新構(gòu)建機(jī)上的settings.xml是從另一個(gè)團(tuán)隊(duì)倉(cāng)庫(kù)里拷來(lái)的鏡像URL寫(xiě)的是http://192.168.10.21:8081/repository/maven-public/把地址寫(xiě)錯(cuò)了。高可用方案里Nexus有第二個(gè)節(jié)點(diǎn)新機(jī)器配置寫(xiě)的是故障節(jié)點(diǎn)的IP而故障節(jié)點(diǎn)已經(jīng)下線了。只改掉這一處配置后全部構(gòu)建恢復(fù)。這次排查其實(shí)踩了一個(gè)很典型的“思維定式”坑第一輪看到連接被拒絕我的注意力全在服務(wù)狀態(tài)上等確認(rèn)服務(wù)正常后沒(méi)有再重新審視“報(bào)錯(cuò)的都是哪些機(jī)器、它們和正常機(jī)器有什么區(qū)別”。如果把機(jī)器分組和配置差異核查提前到第二位至少能省出一輪CI重跑的等待時(shí)間。5.2 故障加固建議日志、監(jiān)控與公共配置在排查修復(fù)之后我還給團(tuán)隊(duì)做了三件事防止類似問(wèn)題再次造成大面積故障。第一給Nexus的啟動(dòng)和運(yùn)行狀態(tài)做基礎(chǔ)監(jiān)控不需要很復(fù)雜的系統(tǒng)只要能每分鐘探測(cè)一次/service/rest/v1/status接口并告警就行。第二修改統(tǒng)一分發(fā)settings.xml的方式不再允許各項(xiàng)目組自己復(fù)制粘貼配置而是走配置中心統(tǒng)一管理鏡像地址、server憑據(jù)全部做好版本控制。第三在構(gòu)建腳本里把Maven的調(diào)試日志默認(rèn)打開(kāi)一份輸出到固定目錄以后再有連接類報(bào)錯(cuò)別問(wèn)開(kāi)發(fā)同學(xué)“報(bào)什么錯(cuò)”直接讓他們把日志文件發(fā)過(guò)來(lái)手工定位的時(shí)間至少縮短一半。這套“監(jiān)測(cè)配置治理日志留存”的組合拳雖然不是解決“連接被拒絕”的直接操作但屬于事后避免同樣問(wèn)題再次發(fā)生的有效手段。真正負(fù)責(zé)Nexus或者CI基礎(chǔ)設(shè)施的同學(xué)我建議也照著這套思路做不然就算今天把問(wèn)題修好了下周換一批機(jī)器、換一個(gè)網(wǎng)段同樣的坑還會(huì)再踩一遍。寫(xiě)在最后我個(gè)人在實(shí)際排查Nexus連接被拒這類問(wèn)題時(shí)逐漸養(yǎng)成了一個(gè)強(qiáng)迫癥永遠(yuǎn)先問(wèn)“服務(wù)在哪、監(jiān)聽(tīng)在哪、通不通”再問(wèn)“配置寫(xiě)了什么、憑據(jù)對(duì)不對(duì)”最后才去懷疑代碼和構(gòu)建流程本身。這里有一個(gè)不太容易從官方文檔里學(xué)到的經(jīng)驗(yàn)——用mvn -X輸出來(lái)定位連接問(wèn)題時(shí)請(qǐng)同時(shí)關(guān)注Maven解析配置的“順序”和“結(jié)果”因?yàn)橛卸嗵诅R像、多個(gè)repository存在的時(shí)候Maven到底走了哪條路徑往往比報(bào)錯(cuò)內(nèi)容本身更能暴露問(wèn)題。以后再遇到Connection refused希望你第一反應(yīng)不是煩躁而是把這篇手冊(cè)里的速查表對(duì)照一遍。大部分場(chǎng)景下問(wèn)題都能在十分鐘內(nèi)水落石出。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
国产韩日亚洲美州欧亚综合在线| 思思热久久爱| 婷婷第六色| 久久999久久999久久999久久| 婷婷五月性感| 亚洲国产精品VA在线看黑人| 日韩操人| 色五月婷婷丁香五月| 天天艹夜夜艹| 天天激情站| 欧美毛片www| 欧美日韩91| 婷婷色色欧美| 任你干线上免费视频有3吗| 噼里啪啦完整版中文在线观看| 五月丁综合在线观看| 人人爱操| 丁香五月综合| 99ri在线| 久热91精品| 激情五月婷婷她| 激情五月天。| 666555。COm毛片| 99热这里有精品| 97干视频| √天堂资源在线人妻熟女| 久久A V无码视频| 99热久久最新地址| 激情涩涩网| 久久九九爽| 狠狠色色综合| 欧美在线视频免费播放| 99久久五月天| 日韩成人综合| 久碰久| 婷婷五月天免费99| 9久热精品在线视频| 婷婷成人视频| 丁香五月天电影| 欧日韩成人| 深爱五月婷婷| 激情五月婷婷五月丁香五月开心五月| 涩涩涩.com| 国产26uuu视频| 伊人婷婷青青cao| 色婷婷www| 情色婷婷五月天| 69人妻人人澡人人爽久久| www.lchjjc.com| 艳妇野外情欲放荡HD| 五月丁香啪啪啪| 丁香激情婷婷网| 婷婷五月天影视网址| 五月丁香综合啪啪啪啪啪| 高清成人综合| 六月婷婷色色色| 97超级操操| 91超级碰人人操| 超碰免费观看| 操操熟女| 亚洲午夜一区二区| 色玖玖导航| 久久综合首页| 日韩色五月| 日韩精品一区二区亚洲AV观看| 欧美日韩国产一区二区| 日本97在线| 99热欧美精品| 国产精品人妻在线网址| 婷婷九色| 97se视频在线| 99热这里只有精品1025| 草草视频91| 五月婷婷综合激情网| 97碰在线| 成人五月天在线观看| 激情网第九色| 玖玖在线资源视频| 五月婷婷免费在线观看| 久久精品亚洲一级牲爱综合| 强伦轩人妻一区二区电影| 免费无码毛片一区二区A片| 9l视频自拍九色9l视频自拍九色9l社区 | 玖热精品综合视频| 天天干夜夜操A片| 热的国产99热| 五月丁香六月婷婷不卡免费无码 | 五月婷婷欧美激情| 丁香五月手机在线| 亚洲操精品| 色婷婷婷婷| 9久精品| 人人操五月天| 丁香五月天啪啪| 色色色五月婷婷| 狠狠干,狠狠操| 激情又色又爽又黄的A片| 亚洲熟妇AV乱码在线观看| 江苏少妇性BBB搡BBB爽爽爽| 亚洲永远av在线播放| 国产高潮白浆一区二区| 99啪啪网| 久久98| 色婷五月婷婷| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 五月丁香六月婷婷视频| 日本欧美成人片AAAA| 欧美日比视频| 久久这里只精品| 成人免费120分钟啪啪| 被男人添B超爽视频| 夜夜爽77777妓女免费下载| 婷婷五月丁香激情| 大香蕉欧美在线| 99热碰碰热| ay2区| 色色色在线免费视频| 色婷婷六月开心中文字| 五月丁香六月婷婷网| 久久婷五月综合| 九九黄色网| 色婷婷视频| 日韩精品视频中文字幕| 激情婷婷护士激情| 99在线资源| AV激情五月| 91日本在线观看| 婷婷五月天成人五月天| 婷婷五月精品中文字幕| 婷婷激情人妻| 久久99综合| 丰满少妇猛烈A片免费看观看| 色啦啦视频| 97婷婷五月激情六月丁香伊人| 九九视屏| 伊人五月天日日夜夜久久久天天| 性天天中文网| 久热黄色| 99精品偷自拍| 青青草99热久久精品国| 国产精品大香蕉| 六月婷婷狠狠| 2025色婷婷| AV在线观看网站| 色情综合| 免费播放AV| 9久热在线视频精品| 婷婷综合另类小说| 免费观看欧美成人AA片爱我多深 | 日韩无码AV电影网站| 丁香97综合| 99ri精品| www.伊人天堂偷偷婷婷| 天天日天天插| 99综合网| 中文字幕性爱视频| 丁香五月婷婷啪啪| 五月丁香婷婷激情在线| 五月天狠狠色| 国产成人精品一区二三区熟女在线| 我淫我色婷婷五月天激情四射| 伊人五月天97| 热热久久精品视频| 色综合99| 婷婷网五月天| 日韩欧美成人一区二区三区| 久久久久亚洲AV成人无码电影| 亚色网站小视频| 色色网五月激情| 97人人干人人操| www激情| 91丁香色五月| 天天弄天天爽| 色色AV色色色东莞| 丁香六月婷婷综合| 殴美日韩成人| wwccc久久久| 丁香五月婷婷香| 狠狠搞狠狠操| 婷婷亚洲久久| 亚洲精品乱码久久久久久综合| 99综合色| 99免费在线视频| 久久久九九视频精品18| 99免费热在线精品| www五月天com| 成人做爰A片免费看视频| 久久久久久9热不雅视频| 九九99九九99| 亚洲色A| 六月激情婷婷| 97超碰色| 天天天天天天天干| 激情五月婷婷开心网| 亚洲五月天激情| 精品夜夜澡人妻无码AV| 综合色网站| www婷婷亚洲| 中文字幕激情综合| 日韩精品视频中文字幕| 超碰在线免费9| 色婷婷六月激情| 人妻少妇色综合| 久草热8精品视频在线观看| WWW色色色COM| 久热这里只有精品在线观看 | 亚洲无AV在线中文字幕| 日本一毛片| 婷婷视频网| 九九热区一区二区三区| 国产亚洲99久久精品| ai97re99一本| 天堂爱爱| 亚洲在线资源| 99热官网精品在线| 777丁香六月青青草婷婷综合久月| 久久婷婷五月综合啪| 天堂成人A片永久免费网站| 婷婷九月综合| 婷婷五月综合激情免费| 欧美搡BBBBB摔BBBBB| 日韩超碰在线| 性生活久久朋友人妻| 99热精品在线在线| 色五月色图| 五月伊人视频在线看| 在线观看欧美| 怡春院天天干| 天天操九九插| 九九热精品视频| Av在线资源| 小视频aaa久久久| 五月天天天天天天天天天天天婷婷婷| 依人大香蕉在钱1| 九九99在线观看视频| 丁香久久久| 夜色热久| 深爱激情五月天色婷婷| 深爱五月激情| 国产亚洲99久久| 五月丁香激情欧洲啪啪| 99re6在线视频精品免费| 婷综合| 亚州操人在线视频| 日韩在线观看网址| 另类图片激情五月天| 精品久久9| 激情网色五月| 五月天婷婷永久免费视频| 婷婷五月天av| 大香蕉伊人久久| 亚洲最大视频| 综合五月激情| 亚洲 日韩色色| 狠狠久久婷五月| 黄色高清无码| 天天艹夜夜爽| 色婷婷激情| 天天摸天天肏| 激情婷婷久久| 天堂爱啪啪| www夜夜操com| 无码碰碰| 大香蕉院线| 激情五月天婷婷| 婷婷中文在线| www.henhenl| 久久丁香九| 激情久久综合网| 亚洲乱码日产精品BD| 久色网| www.久久爱.com| 色色色宗合网| 九九精品在线网| 欧美成人AAA片一区国产精品 | 亚洲精品a成人在线播放| 79精品在线视频| 婷婷六月色| 日韩在线观看亚洲| 五月天另类激情在线| 人人综合色| 6月丁香婷婷激情| 思思99热| 五月婷婷五月丁香综合| 色五月首页| 操人无码| 性色婷婷| 天天操夜夜操| 五月丁香综合啪啪啪啪啪| AA丁香综合激情| 五月婷啪| 色激情综合| 日本色99| 色狠狠综合| 久久综合丁香| 成人短视频在线免费观看| 亚洲激情四谢| 天天日天天干天天插天天射| 久久久高清| 丁香五月丁香伊人| 色五月丁香A欧美com| 亚洲乱码成人| 国外亚洲成AV人片在线观看| 五月四色婷婷| 桃色成人网| 婷婷操逼网| 成人综合网站| WwW天天干| 国产又粗又大又爽又黄| 日本精品。999| 超碰在线99| 日韩五月婷婷| 天天干天天爽| 欧美毛片www| 欧美日本免费一道免费视频| 久热中文字幕在线线观看| 亚洲三A| 激情婷婷狠狠干| 嫩草极品| 五月天六月婷婷电影| www.色色色com| 亚洲精品五月| 亚洲成人av在线观看 | 99热精品在线观看| 在线综合婷婷| 另类丁香五月天区图| 99小精品| 香蕉97碰碰碰欧美| 俺也高清无码高清视频| 99免费青青蜜臀| 天天天天天天操| 97人人操人人拍| 色播激情五月天| 绿色小导航AV| 欧美激情综合色综合啪啪五月| 大香蕉伊人99| 任你草| av 一区三区四区| 狠狠干,狠狠操| 密臀久久| 婷婷亚洲在线| 亚洲操B| 婷婷丁香五月91| 综合婷婷久久| 干亚洲天堂| 香蕉久久国产AV一区二区| 久久婷婷激情五月天一区二区| 久热大香蕉| www.色婷婷。com| 淫五月停停| 综合五月激情| 麻豆精品| 99精品视频偷拍| 色综合色五月| 午夜丁香婷婷| 玖玖资源天天无码| 婷婷激情综合色五月久久图片| 久久在这里99| 久草久青福利| 丁香五月婷婷五月基地| 五月天激情网图片| 久久人妻久久久久| 婷婷六月激情综合| 夜夜爽天天爽| 欧美噜噜噜草| 一二线视频 另类| 五月婷综合网| 超碰无码318604| 色五月综合网| 婷婷五月天视频小说| 亚洲啪| 97五月天| www.xtbsty.cn.com蜜乳AV| 国产XXXX搡XXXXX搡麻豆| 五月婷婷开心丁香| 五月天婷婷免费| 久操人妻| 五月天激情Av| 99热欧美精品| 婷婷亚洲综合| 五月天色婷婷伊人网| 六月婷婷九月丁香| 伊人久久婷婷| 国产午夜精品久久久观看| 色婷婷国产精品综合在线观看| 99啪啪视频| 多精窝99在线视频| 97丁香视频| 91久久久久久久久| 激情五月天无码| 久热9热| 99性视频| 天天舔天天插天天干| 中文字幕丰满乱孑伦无码专区| 狠狠色狠狠操| 五月色婷婷亚洲| 人五月天婷婷喷水| 激情久久久久久| 五月天婷婷在线观看精品男人| 字母不卡码人逼| 99热国产精品| 五月花成人网| 大天天伊人| 激情综合五月婷婷| 五月丁香激情婷婷| 99热这里是精品| 综合天堂AV久久久久久久| 亚洲天堂色色| 热九九在线| 99ri精品在线观看| 99热这| 91小黄书网址在线观看| 97干免费视频| 色色色香蕉五月婷| 久99久视频| 五月丁香色婷婷基地| 99免费偷拍视频| 亚洲人妻av| 五月天久久丁香| 丁香五月另类色婷婷麻豆| 国产精品第一国产精品| 日韩 中文 欧美| 婷婷五月 丁香六月| 精品视频网| 五月天婷婷激情在线色图| 色色丁香激情五月| 日本三级日本三级99| 色婷婷综合久久| 成人五月天丁香| 开心五月色婷| 一区二区免费看| 国产日产亚洲系列最新| 大香蕉九操| 婷婷激情五月综合丁| 国产精品成人AV在线| 久在线88综合| 色色婷婷丁香| 五月WWW| 91超级碰| 婷久久综合| 亚洲成人综合在线| 亚洲精品婷婷| http://www.lingjunshare.com/| 大香蕉婷婷丁香| 欧洲第一无人区观看| 4438激情网| 婷婷丁香亚洲五月天| 九色自拍| 热99视频精品在线| 偷拍五月丁香| 九九热最新| AV 3P| 久久婷婷五月天蜜桃| 亚洲欧美在线观看| 99九九久久| 思思热久久婷婷五月天| 丁香色五月婷婷17C| 色五月婷婷天堂| 欧美交换配乱吟粗大25P| 人人操人人干AV| 中文不卡一二三区| 色综合久久久久| 色五月婷婷丁香凹凸| 日本99久久| 五月丁香激情综合啪啪| 丁香五月天天高清在线| 再次出发二| 色娸娸综合网| 色婷婷四虎| 精品一二三区久久AAA片| 色玖玖导航| 日本熟女内射| 五月开心婷婷极品激情| 99超碰人人| 丁香五月天成人| 五月丁香六月婷| 天天干夜夜谢| 狠狠狠狠操| 美女天天久久| 日本啪啪天堂| 久久天堂加勒比| 三十熟女| 亚洲精品视频在线播放| 亲子乱AV一区二区三区下载| 五月天综合视频网| 操啊操av| 五月丁香婷婷久久| 五月丁香六月婷婷亚洲天堂网站| 日韩精品超碰在线观看| 色婷大香蕉| 国产69久久久欧美黑人A片| 色五月激情婷婷| 丁香综合婷婷五月天| 五月综合777| 色婷婷综合网站| 激情五月天色婷婷综合| 久久婷婷网址| 国产在线网| 婷婷丁香五月综合| 六月色色| 97干婷婷| 亚洲va欧美va天堂v国产综合| 日日噜狠狠色综合久久| 久久6这里只有精品| 97资源碰碰| 二级黄色毛片| 狠狠色九月| 日韩熟女啪啪视频| 人妻丰满精品一区二区A片| www.色婷婷.com| 97久久人人| 天天干电影| 丁香五月天成人| 色综合五月在线| 婷婷久久婷婷色五月| 天堂A∨在线| 色婷婷久久综| 色色九九五月天 | 青青草大香| 99热免费| 日日噜噜夜夜狠狠久久丁香六月| 日本三级日本三级99| 99激情视频| 婷婷五月天狠狠| 婷婷五月天激情影片| 狠狠干在线视频| 久一这里有精品国产| 久久9视频欧美| 99热在线看片| 免费人人操| 青青艹b| 久草 tingting| 免看黄大片AA | 人人爱操| 婷婷香蕉| 人妻久久久久久| 五月婷婷影院| 噜噜噜久久| 婷婷天堂站| 五月丁香精品| 另类A片| av在线中文| 色色五月婷婷久久| 久久久久久久人妻| 99精品在这里| 丁香六月欧美| 日日操日日撸| 色五月亚洲| 天天插天天射| 欧美色97| 伊人玖玖婷婷| 久青操| 午夜爱爱网站| 欧美 日韩 成人在线| 亚洲AV综合网| 亚洲AV网站| 亚洲激情av| 丁香五月另类色婷婷麻豆| 久久婷婷网站| 久久性视频| 色色亚洲| 成人一级片| 五月丁香久久网| 午夜成人AV在线| 久久亚洲婷婷| 婷婷五月天电影网| 另类专区在线观看| 中国女人做爰A片| 色五月激情五月| 无码一区精品一区视频| 日日夜夜九九| 久操乱| 99久久网站| 久久人人看| 成人做爰A片免费看视频| 天天干天天插| 综合天堂AV久久久久久久| 婷婷丁香18| 婷婷狠狠青青| 99热99| 六月婷欧美| 激情综合区| 丁香 婷婷 激情 综合 五月| 女人天堂av| 五月天小说激情| 五月色俺婷婷| XX色综合| 久久大香蕉同僚| 99精品国产热久久91色欲| 五月香婷婷| 人妻av在线| 风流少妇A片一区二区蜜桃 | 天天干 夜夜爽| 婷婷丁香五月综合| 激情五月婷婷| 国产原创视频91九色| 亚洲精品中文字幕成人片| 九九大香蕉黄色影院| 九九九九国产| 这里只有精品99视频| 五月婷婷m| 五月丁香伊人网| 激情色情五月天| 五月天婷婷激情在线色图| 国产综合婷婷| 激情五月天影院| 大地9中文在线观看免费高清| 五月丁香久久久| 久99精品视频| 九九热av| 综合狠狠五月婷婷| 六月丁香影院| 综合久久久| 色婷婷综合网| 色婷婷丁香花五月天| 伊人久久大香线蕉亚洲五月天,| 六月丁香婷婷色狠狠久久| 日韩成人电影AV| 色婷婷精品小视频| 97婷婷五月| 色五月激情综合| 天天干天天操天天拍| 亚洲欧洲中文日韩久久AV乱码| 超碰自拍天堂| 久久久香| 丁香六月色情| 五月丁香综合在线| www.五月.com| 久久97久久99久久综合欧美| 久久综合婷| 日韩成人免费电影| 国产精品久久久60086| 婷婷九月丁香| 天天插天天爽| 日韩av在线播放综合网| 婷婷情色五月天| 青青草搞屄视频网站| 欧美色小说婷婷| 色色com| 五月开心久久| 国产精品男人AV不卡| 五月天伊人久久久久| 精品九九在线观看视频| 色婷亚洲| 婷婷五月丁香综合| 七七婷婷综合| 婷婷丁香五月天影院 | 中文字幕亚洲-区久久99婷婷| 成人在线精品| 久久99这里只有精品视频| 天天爱天天操| 婷婷综合激情| 欧美123区免| 深夜男女福利刺激影院一区| 中出内射的人妻视频| 综合一区二区三区| 色欲一区二区三区精品A片| 涩五月丝袜婷婷| 激情色播| 色噜噜婷婷| 色婷婷久久综合| 超碰免费成人网站| 五月丁香无码| 79色色免费| 9l视频自拍9l视频自拍九色学生| 超碰v| a在线免费v| 99操无码视频观看| 2025天天爽天天摸| www.天天干| 五月丁香久久| 六月激情婷婷综合| 天天综合.com| www.日本91| 熟女人妻一区二区三区免费看| 91丨九色丨老农村| 深爱激情九九五月天 | 96精品久久久久久久久| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 99爱视频免费| 夫妻超碰在线| 99热这里只有在线播放| 丁香五月中文字幕色播| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 久久性刺激| 九九爱看亚洲| 99热| 亚洲12p| 欧美综合123区| 五月婷综合性中心| 五月天色色网站| 丁香狠狠色婷婷久久无码视频 | 激情综合网激情五月欧美| 噜噜干日本| 婷婷丁香色五月天| 天天插天天插天天操| 五月激情综合美女久久| 图片区 小说区 区 亚洲五月| 日本WWW九九九| www,五月丁,com| 婷婷午夜| 五月丁香婷久久| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 五月婷婷先锋| 久久这里只有精品07| 97色操| 丁香综合日产精品久久| 丁香五月激情宗合网| 丁香五月天资源网| 97 天堂| 久久曰曰| 99久久网站| 日本啪啪视频HD| 91丨九色丨国产打屁股| av人人干| 久久五月婷天天干| 婷婷第六色| 91人操人人人操人| 丰滿爆乳一区二区三区| 色噜噜五月丁香婷婷| 天天在线久久综合 | 888久久久| 青青草六月丁香| 综合网激情| 99玖玖在线视频| 婷婷五月图片小说视频| 国产成人片| 熟女网站久久| 亭亭五月色男人| 国产精品第一国产精品| 婷婷久久五月| 久久99精品久久久久久三级| 婷婷五月天丁香综合网| 五月丁香啪啪激情| 国产欧洲欧洲精品久久| 久久五月天视频| 99热.com| 婷婷五月天综合亚洲| 日本女天天爽| 国产熟女一区二区三区五月婷| 日笨久久网| 欧美婷婷五月天综合| 大香蕉九九| 99色在线观看视频| 99无吗| 五月天综合在线网| 五月丁香久久| 另类激情五月| 亚洲狠狠婷婷| 色吧五月婷婷| 色啦啦视频| 九九热只有这里是精品| www.五月.com| 91玖玖| 久久思思热| 月丁香久久久| 国精产品久久| 强辱丰满人妻HD中文字幕| 丁香六月色香蕉视频| 97人人干人人操| 五月天婷婷色色网| 野战毛片三一3| 嘿嘿视频免费看9| 新激情五月天色播| 欧美性猛交XXXX乱大交极品| 怕怕av| 丁香婷婷基地| 五月天另类小说久久小说网| www.人人操人人看人人想人人摸 人人人人操,COM | 亚洲人成网站999久久久综合| 青草激情在线| 538在线精品| 色日本丁香婷婷| 五月婷婷色综图片| 五月丁香网站| 久久小视频| 丁香五月 性爱| 淫荡综合网| 一区二区三区四日本| 色七色九九| 五月丁香综合激情网| 伊人久久大香网| 亚洲综合五月天| 色婷婷狠狠18yy| 亚洲十月婷婷综合| 国产午夜成人免费看片无遮挡| 婷婷五月色花丁香社区| 99在线精品视频| 亚洲六月婷婷| 99ri国产在线| 五月婷婷色影院| 亚洲精品视频电影| 激情综合网站| 色五月婷婷一二| 大香蕉视频99| 五月天激情AV| 一区=区操屄高清大全av| 亭亭五月天成人| 五月天久久小说| 天天天摸夜夜夜玩| 亚韩精品视频1区| 色婷婷五月天堂资源| 色哟呦av| 99热这里只有精品 搜| 超碰操日| 日日夜夜爽| 欲色人妻| 97热这里只有精品| 日韩AV中文字幕在线| 五月丁香婷婷综合网| 熟女强人妻一区二区三区四区无| 这里只有免费的精品| 婷婷丁香色五月天| 婷婷五月图片小说视频| 日韩精品一曲二曲三曲四曲五曲| 超碰1999| 99视频91| 99九九在线精品热动漫| 日韩久久色| 成人婷婷| 激情综合网五月婷婷| 人妻啪啪啪| 激情com| 图片区 小说区 区 亚洲五月| 色五月av伊人| 伊久大香蕉| 热99精品视频| 久艹久| www.9797国产| 五月婷婷影院| 久久这里有精品| 草美女在线观看视频在线播放| 国产69久久久欧美黑人A片| 日韩av干| 日韩人妻在线播放| 亚洲色五月婷婷| 婷婷六月综合| 91丨九色丨东北熟女| 丁香五月情| 欧美色婷婷| 琪琪秋霞| 色婷婷丁香A片区毛片区女人区| 五月丁婷婷| 婷婷五月另类网站| 综合婷婷五月天| Av九九| 六月色色| 激情五月天色| 成人免费120分钟啪啪| 天堂婷婷丁香六月网| 99热免费18| 天天综合色| 九九热黄色| 五月婷婷综合在线| 六月丁香五月激情网| 日本97人人| 久色激情| 天堂网色色| 国产操碰| 国产日韩欧美性生活| 综合 激情 婷婷| 久久九九热视频| 人人人操| 99热这里是精品| 色婷五月丁香久亚洲| 久久九九99.www| 综合久久久| 日韩久久视频| 99精品偷自拍| 这里只有精品网站| 色哟哟www| 九九热在线精品视频| 可以直接看的av网站| 五月激情婷婷四射| 色婷婷五月色| 五月天婷综合网站| 99在线视频网址在线观看| 五月天久久综合婷婷| 日本久久天堂| 人与禽A片啪啪| 激情深爱综合网| 在线成人网址| 色99色| 婷婷五月成人系列| 日韩人妻在线观看| 嫩草AV久久伊人妇女超级A| 毛片毛片毛片毛片| 六月撸婷婷| 大地9中文在线观看免费高清| 伊人色综在线| 99热综合色图| 九九久久精品| 思思热精品在线观看| 久久激情五月婷婷| 538在线精品| 亚洲欧美另类在线23p| 欧美 日韩 成人| 色五月在线观看| 五月婷六月天| 成人AV综合在线| 999热在线视频| 色丁香综合影院| 波多野结衣成人作品在线| VA色婷婷| 甈你aaaaa| www久久艹| 亚洲妇女熟BBW| 日本操逼九九九九58日本操逼| 五月天婷婷激情四射综合| 91色色色| 五月天色狠狠| 狠狠狠狠青草| 亚洲五月天婷婷| 米奇影视五月天| 久久久久8888| 亚洲精品一区中文字幕乱码| 色色A| 丁香五月天激情| 激情AV综合| 无码人妻激情| 婷婷五月天xxx| 一起肏在线视频| 97婷婷色| 五月天啪啪啪| 第2色五月婷| 综合日本婷婷| 亚洲天堂久久| 成 人 色 色| 91久久99久久91熟女精品| 97色精品视频 | 小泽玛利亚视频一区二区| 国产日韩欧美性爱| 激情二色月| 成人Av在线大片| 国产偷人爽久久久久久老妇APP| 少妇人妻人伦A片| 激情五月综合色婷婷| 久草a片| 香蕉久久国产AV一区二区| 国产精品色婷婷久久久精品| 五月丁香婷婷久久| www.九月婷婷丁香.com| 亚洲AV成人片无码网站| 日韩人妻操逼视频| 狠狠爱综合网| 在线亚洲综合网| 婷婷五月天网| 激情五月天婷婷在线网址发给我| 婷婷爱综合| 久久综合伊人77777蜜臀| 精品人妻一区二区三区在| 99精品久久久久久久婷婷| 五月天久久综合婷婷丁香| 色情性爱视频网址| 久re热视频| 变态 另类 在线 | 天天插天天插天天插天天插| 亚洲激情高潮| 99在线视频资源| 99精品在线| 182TV大香蕉| 天天操天天日天天操| 男人的天堂999| www.97干视频| 丁香五月花影院| 夜夜骑夜夜撸| 五月婷无码| 婷婷丁香激情综合色情| 九九色情网五月天| 欧美交换配乱吟粗大25P| 超碰人人超碰| 亚洲色情网站| 青草视频在线蜜臀| 91美女被操| 五月做爱| 九九成人| 69久久99精品久久久久婷婷| 性天天中文网| 九九热只有这里是精品| 色色色国产| 97婷婷久久丁香| 操操操B| 色香欲综合| 五月天淫乱视频| 99re这里只有精品在线观看| 五月天开心激情网色欲无码| 日韩啪| 五月婷婷丁香综合,亚洲天堂| 欧美顶级少妇做爰HD| 五月天啪啪| 婷婷五月激情的图片| 一级操逼内射在线视频| 伊人国产婷婷五月天| 91久操| 丁香五月综合久久综合| 色色丁香婷婷五月天| 夜精品无码A片一区二区蜜桃| 九九视频这里只有精品| 伊人五月综合网| 婷婷色五月色| 狠狠操在线视频| 91精品熟女| 亚洲精品国产成人AV在线| 婷婷色五月大香蕉在线观看| 天天久久九九| 无码AV免费精品一区二区三区 | 人妻AV在线| 9l视频自拍9l九色9l成人| 极品五月天| 婷婷综合中文字幕| 激情五月激情综合网| 五月天色丁香| 久久婷.com| 思思热高清在线观看| 婷婷丁香人妻久久在线观看| 五月天六月天| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 久久激情天堂| 激情五月婷婷六月丁香| 99精品7| 五月社区丁香| 午夜色色色极品视频| 婷婷免费无马| 97超碰在线免费观看| 九九综合五月欧美| 亚州第一黄网| 狠狠五月婷婷| 婷婷香草网| 99热免费| 99色婷婷| 99re8在这里只有精品| www.激情| 婷久久| 色噜噜五月天| 26uuu成人网| 亚洲婷婷免费| 人人摸人人干人人做| 五月天激情图| 五月丁六月香av| 深爱激情四射| 婷婷五月天色丁香| 日日夜夜狠狠婷婷色| 啪啪啪大香蕉| 无码se| 亚洲综合九九| 色婷婷狠狠爱| 丁香婷婷五月天激情四射| 九色 在线| 2022人人操人人看| 久9热插入| 国产人人操| 91热视频| 91chinese在线| 99热新网址| 99日在线视频| 激情四射婷婷| 九九色欲网| 天堂中文国产| PORNY九色9l自拍视频成人| 看全色黄大色大片| 97性视频| 任你搞网站| 91成人视频| av在线观看网站| 9l视频自拍九色9l视频自拍九色9l社区| 9九色首页| 色婷婷免费视频| 97色欧美| 丁香五月天黄色片| 婷婷五月天黄色| AV电影在线播放| 天天色播| www婷婷| 99免费视频| 中文字幕人妻熟女在线| 国产亚洲精品久久久久久牛牛| 青青草国产亚洲精品久久| 99在线精品免费视频| 欧美特大片黄| 日本WwW色偷偷丁香花久久久京东热| 操精品9| www.色欲丁香婷婷| 久热9热| 91丨九色丨老农村| 色婷婷69| 天堂爱啪啪| 女婷久久| 亚洲激情av| 天天色综合天天| 99这里精品| 天天综合天天做天天综合| www.热99热| 婷婷五月丁香综合人妻| 99久久极情精品一区| 99久视频| 91偷拍视频| 午夜大香蕉| 人人爱操| 国产AV一区二区三区最新精品| 五婷婷综合网| 人人操超碰| 91丨九色丨老农村| 六月婷欧美| 久操热线| 天天综合激情| 激情校园 亚洲| 亚洲AV成人无码久久精品老人法拉利| 丁香六月婷婷综合啪啪| 97精品自拍视频| 亚洲激情综合网| www久| 免费看欧美成人A片无码| 草榴视频黄色网| 99日视频在线| 久热AA| 男人的天堂999| 婷婷五月天少妇| 色噜噜婷婷| 婷婷五月天电影网| 亚洲成人影视在线观看| 婷婷俺去也| 色www久视频| 久热精彩视频98| www久久艹| 69精品人人人人| 激情丰满熟妇五月| 色五月婷婷影院| 91九色视频在线观看| 丁香五月香蕉| 亚洲精品久久久无码| 99国产97在线,| 丁香五月婷婷综合精品素人| 人人爱操| 激情五月天之六月婷婷| 天天天操天天天日| 夜夜大香蕉婷婷丁香| www.天天干| http://www.com久久久精品一区| 另类国产欧美视频| 亚欧州精品视频| 久久婷婷五月国产色综合激情| 五月婷六月丁| 久久久精品人妻| 久久综合人妻| 激情内射人妻1区2区3区| 婷婷丁香五月天色色| 日熟女| 久久久婷婷| 天天操,天天插| 噜噜吧天天爱| 色色色色色色网站| 桃色成人网| 久久日韩婷婷五月| 婷婷久草| 26UUU在线观看| 激情综合五月婷婷| 丁香五月影院| 97成人操| 亚州操操| 婷婷大美在线| 五月婷在线播放| 91一起操| 97色婷婷| 色天堂97| 青青操avbb| 99思思热只有在这里看 | 日日夜夜干| 亚洲欧美在线观看| 热九九九九| 天天操无码| 五月婷婷综合色啪首页| 亚洲热视频| 亚洲成人在线播放| 丁香激情综合| 怡春院久操| 五月婷婷综合激情| 色女伊人| 婷婷色五月天在线| 超碰天堂网| www..999热久| 欧美性爱特黄一级aaaassss| 26uuu| 九九热精品视频在线观看| 婷婷五月综合丁香久久| 超碰在线精品| 五月四色婷婷| 91九色欧美| 极品少妇XXXX精品少妇偷拍 | 国产SUV精品一区二区6| 久草五月婷| 婷婷五月天激情文学小说| 九九99视频| 丁香五月色| 丁香婷婷影院| 久久六月天| 一级A片天天操夜夜操| 在线观看欧美| 少妇性BBB搡BBB爽爽爽电影| 九九视屏| 丁香五月婷婷动漫| 色五月综合资源推荐| 天天日夜夜爽| 一级性感毛片| av在线超清中文| 99亚州综合精品成人网| 91九色首页| 一区二区传媒视频| 五月天开心激情网色欲无码| 欧美五月丁香| 丰满人妻一区二区三区| 人妻五月天激情开心网| 99惹在线精品免费观看| 六月婷婷五月天| 婷婷中文字幕| 亚洲AV无码成人精品区电影网| 六月综和久久| 国产日韩欧美性爱| 日本欧美成人片AAAA| 亚洲六月色婷婷| 九九久久综合网站| 成人精品在线观看| 丁香五月婷婷香| 五月婷丁香花| 婷婷深爱五月| 青青青在线视频国产| 色婷婷天堂| 99热6这里只有精品6| 五月婷激情影院| 久婷婷视平| 色色婷婷五月天| 丁香六月情| 成人国产欧美大片一区| 操日视频| 亚洲性爱区无码区| 激情www| 五月婷婷丁香网| 色欲日日躁| 久久久久久久97| 97自拍视频网| 九九热在视频| 五月丁香自拍| 色色五月天 亚洲| 99热 这里只有精品 国产 日韩| 色色亚洲视频| 久久99最新地址| 99久久99久久综合| 婷婷六月综合激情| 国产午夜精品AV一区二区麻豆| 97人人操人人| 噜噜精品| 久草热久草在线视频| 日本熟妇精品99| 九热视频| 欧美性猛交XXXX乱大交极品| 九月激情网| 五月丁香五月婷婷| 99人妻碰碰久久久禁片| 婷婷中文字幕| 天天综合色| 五月桃花网综合| 天天舔夜夜操www com| 综合网亚洲| 天天插操| 99成人网站| 久久新地址| 久激情|