欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

C++多線程抓取網(wǎng)頁實(shí)戰(zhàn):基于WinINet與生產(chǎn)者消費(fèi)者模型

C++多線程抓取網(wǎng)頁實(shí)戰(zhàn):基于WinINet與生產(chǎn)者消費(fèi)者模型 簡(jiǎn)介C多線程抓取網(wǎng)頁的完整示例代碼面向正在學(xué)習(xí)網(wǎng)絡(luò)爬蟲、數(shù)據(jù)抓取或網(wǎng)頁批量下載的C開發(fā)者尤其適合有一定C基礎(chǔ)但尚未接觸過多線程與HTTP庫配合的初學(xué)者。壓縮包共包含十六個(gè)文件其中主要有五個(gè)頭文件類與接口聲明、三個(gè)源文件核心抓取與界面邏輯、一個(gè)工程文件、一個(gè)對(duì)話框資源文件等整體僅二十二KB結(jié)構(gòu)精簡(jiǎn)可快速打開工程閱讀。目前已有一百七十人瀏覽學(xué)習(xí)屬于小巧實(shí)用的入門級(jí)參考。代碼基于標(biāo)準(zhǔn)線程庫創(chuàng)建抓取線程配合libcurl發(fā)送HTTP請(qǐng)求并使用pugixml解析返回的HTML同時(shí)演示了線程的join與detach、共享數(shù)據(jù)保護(hù)、curl全局初始化與清理等關(guān)鍵細(xì)節(jié)。讀者可從中理解多線程與網(wǎng)絡(luò)I/O協(xié)作的模式并在此基礎(chǔ)上擴(kuò)展任務(wù)隊(duì)列、限速策略或分布式抓取邏輯構(gòu)建自己的爬蟲工具。1. C 多線程抓取網(wǎng)頁這個(gè) VC 工程把并發(fā)抓取做成了能直接跑的樣本C 多線程抓取網(wǎng)頁這件事最大的門檻不在 HTTP 協(xié)議而在并發(fā)本身隊(duì)列誰來維護(hù)、線程怎么退出、抓下來的 HTML 怎么避免亂碼。這個(gè) VC 工程把整條鏈路做成了一個(gè)能直接編譯運(yùn)行的 MFC 對(duì)話框程序——界面上貼一組 URL設(shè)好線程數(shù)點(diǎn)開始幾個(gè)工作線程就從共享隊(duì)列里取任務(wù)、發(fā)請(qǐng)求、把頁面按原始編碼保存到本地。代碼量不大但線程同步、狀態(tài)碼判斷、編碼轉(zhuǎn)換這些坑都踩過一遍。它適合兩類人想學(xué) VC 下 WinINet 與多線程配合的初學(xué)者跟著把數(shù)據(jù)流跑通就能理解生產(chǎn)-消費(fèi)模型要做 Windows 桌面抓取工具的開發(fā)者改一改隊(duì)列和解析模塊就能當(dāng)爬蟲底座。下面按架構(gòu)、核心代碼、踩坑、改造四個(gè)方向拆。2. 項(xiàng)目架構(gòu)與數(shù)據(jù)流界面、抓取核心、協(xié)議封裝三層怎么協(xié)作2.1 文件結(jié)構(gòu)與依賴關(guān)系拿到工程先別急著按 F7把源碼文件過一遍會(huì)更省事。這個(gè)抓取工程沿用了 VC 對(duì)話框工程最常見的分法界面層、抓取核心層、協(xié)議封裝層各放各的避免網(wǎng)絡(luò)請(qǐng)求和界面刷新攪在同一個(gè)文件里。我拆到的這份源碼文件組織大致如下文件職責(zé)被誰依賴SpiderDemo.sln / SpiderDemo.vcxproj工程文件VS2015 及以上可直接打開-SpiderDemoDlg.cpp / .h主對(duì)話框URL 輸入?yún)^(qū)、線程數(shù)設(shè)置、開始/停止按鈕、日志列表頂層入口SpiderCore.cpp / .h抓取核心持有 URL 隊(duì)列、啟動(dòng)/停止工作線程、協(xié)調(diào)整個(gè)抓取流程被對(duì)話框依賴UrlQueue.cpp / .h線程安全的 URL 隊(duì)列內(nèi)部封裝 CRITICAL_SECTION被 SpiderCore 依賴Fetcher.cpp / .h基于 WinINet 的 HTTP 請(qǐng)求封裝對(duì)外只暴露一個(gè) Fetch 方法被 SpiderCore 依賴HtmlParser.cpp / .h輕量 HTML 解析提取 charset、標(biāo)題、頁內(nèi)鏈接被 SpiderCore 依賴resource.h / SpiderDemo.rc對(duì)話框資源、圖標(biāo)與版本信息編譯期依賴關(guān)系是單向的SpiderCore 依賴 UrlQueue 和 Fetcher、HtmlParser而對(duì)話框只依賴 SpiderCore。注意一個(gè)反向約束——SpiderCore 里不能出現(xiàn)任何 CWnd 控件調(diào)用它對(duì)外通知結(jié)果只通過 PostMessage 投遞自定義消息這是后面 4.1 節(jié)那個(gè)假死問題的根源所在代碼里從一開始就切斷了這條線。模塊拆這么細(xì)是為了改造時(shí)不用動(dòng)全局。你想把 WinINet 換成 libcurl只需要重寫 Fetcher隊(duì)列和線程邏輯一行不用動(dòng)想做斷點(diǎn)續(xù)抓在 SpiderCore 里加一個(gè)已抓集合就夠。我一般接手這類工程第一件事就是畫一張這樣的依賴圖確認(rèn)網(wǎng)絡(luò)層和 UI 層沒有直接握手再往下讀代碼。2.2 技術(shù)選型VC 環(huán)境下抓 HTML 的三種常見路子Windows 桌面上用 C 抓網(wǎng)頁繞不開三套東西WinINet、WinHTTP、libcurl。這個(gè)工程選的是 WinINet理由很實(shí)際MFC 對(duì)話框工程天然帶afxinet.hInternetOpenUrl一個(gè)函數(shù)調(diào)用就能拉起請(qǐng)求不需要額外集成第三方庫編譯環(huán)境干凈對(duì)個(gè)人抓取工具來說功能完全夠用。方案優(yōu)點(diǎn)缺點(diǎn)適合場(chǎng)景WinINet系統(tǒng)自帶、API 簡(jiǎn)單、自動(dòng)讀系統(tǒng)網(wǎng)絡(luò)設(shè)置HTTP/2 支持有限、偏客戶端形態(tài)MFC 桌面抓取工具WinHTTP服務(wù)端場(chǎng)景和并發(fā)表現(xiàn)更強(qiáng)API 更底層要自己處理的細(xì)節(jié)更多Windows 服務(wù)、后端組件libcurl跨平臺(tái)、功能最全、協(xié)議支持完整需要配置 include/lib 路徑工程變重跨平臺(tái)爬蟲、需要雙向認(rèn)證等高級(jí)特性選 WinINet 還有一個(gè)細(xì)節(jié)抓取場(chǎng)景最怕拿到 IE 緩存里的舊頁面WinINet 的INTERNET_FLAG_RELOAD | INTERNET_FLAG_NO_CACHE_WRITE組合正好解決這個(gè)問題強(qiáng)制重新拉取并且不寫緩存。WinHTTP 也有類似標(biāo)志但寫起來比 WinINet 繁瑣不少。對(duì)這個(gè)項(xiàng)目來說少引入一個(gè)第三方庫就少一類版本沖突問題編譯不過的概率低很多。WinINet 有個(gè)天生的限制要提前知道它的會(huì)話和 IE 共享一部分緩存和代理設(shè)置所以在做高頻抓取時(shí)不建議在一個(gè)進(jìn)程里反復(fù)創(chuàng)建銷毀 HINTERNET 會(huì)話句柄最好復(fù)用。這個(gè)工程的做法是在 SpiderCore 啟動(dòng)時(shí)創(chuàng)建一次會(huì)話所有工作線程共用抓完關(guān)閉。后面 3.3 節(jié)的代碼里也能看到這個(gè)思路。2.3 生產(chǎn)者-消費(fèi)者模型與線程編排整個(gè)程序運(yùn)行起來就是一條典型的生產(chǎn)者-消費(fèi)者流水線。主線程UI是生產(chǎn)者用戶在編輯框里粘貼一批 URL點(diǎn)開始后SpiderCore 把每行解析出來逐條 Push 進(jìn) UrlQueue。N 個(gè)工作線程是消費(fèi)者搶到一個(gè) URL 就做一次 請(qǐng)求 → 解析 → 落盤 → 通知主線程然后繼續(xù)搶下一個(gè)。這里有兩個(gè)關(guān)鍵設(shè)計(jì)。第一個(gè)是任務(wù)信號(hào)的傳遞隊(duì)列不能只有鎖還得有一個(gè)事件對(duì)象Push 的時(shí)候 SetEvent 喚醒等待中的線程否則線程只能靠輪詢空轉(zhuǎn)會(huì)白白耗 CPU。第二個(gè)是退出協(xié)議停止按鈕做的事不是強(qiáng)行殺掉線程而是把 m_bExit 置 TRUE 并 SetEvent讓每個(gè)線程在處理完手頭 URL 后自己檢查退出條件。這段邏輯放在 3.2 節(jié)是整份代碼里最值得細(xì)讀的部分。線程數(shù)量一般默認(rèn) 4 到 8。不是越大越好因?yàn)樽ト∑款i通常在網(wǎng)絡(luò) IO 和對(duì)端服務(wù)器的承受能力而不是本地 CPU。線程開多了反而會(huì)被目標(biāo)站點(diǎn)限流這個(gè)問題會(huì)在 4.4 節(jié)展開。把這套模型想清楚抓取工具的核心骨架就有了后面所有功能都是往這條流水線上掛東西。3. 核心代碼拆解一個(gè) URL 從入隊(duì)到 HTML 落盤的完整鏈路3.1 線程安全的 URL 隊(duì)列CUrlQueue隊(duì)列是多線程抓取的第一個(gè)共享資源所有工作線程都從這里取任務(wù)所以鎖和容器必須綁在一起封裝而不是在 SpiderCore 里散著放一個(gè) CList。如果鎖在外面很容易出現(xiàn)某個(gè)線程 Push 時(shí)忘了加鎖、另一個(gè)線程又在 Pop 的場(chǎng)景臨界區(qū)就形同虛設(shè)。// UrlQueue.h - 線程安全的 URL 隊(duì)列 #pragma once #include afxwin.h class CUrlQueue { public: CUrlQueue() { InitializeCriticalSection(m_cs); } ~CUrlQueue() { DeleteCriticalSection(m_cs); } void Push(const CString strUrl) { EnterCriticalSection(m_cs); // 入隊(duì)必須持鎖 m_listUrl.AddTail(strUrl); LeaveCriticalSection(m_cs); } BOOL Pop(CString strUrl) { BOOL bRet FALSE; EnterCriticalSection(m_cs); if (!m_listUrl.IsEmpty()) { strUrl m_listUrl.GetHead(); m_listUrl.RemoveHead(); bRet TRUE; } LeaveCriticalSection(m_cs); return bRet; } int GetCount() { int nCount 0; EnterCriticalSection(m_cs); nCount m_listUrl.GetCount(); LeaveCriticalSection(m_cs); return nCount; } private: CListCString, CString m_listUrl; // MFC 鏈表容器 CRITICAL_SECTION m_cs; // 臨界區(qū)對(duì)象 };三個(gè)方法的邏輯都不復(fù)雜但要注意兩個(gè)細(xì)節(jié)。一是 Pop 的返回值語義隊(duì)列為空時(shí)返回 FALSE調(diào)用方必須區(qū)分「隊(duì)列暫時(shí)沒任務(wù)」和「全部抓完」這個(gè)返回值是退出協(xié)議的一部分。二是持鎖時(shí)間要短Push 和 Pop 內(nèi)部只做鏈表操作絕不在鎖里面發(fā)起網(wǎng)絡(luò)請(qǐng)求或?qū)懳募駝t一個(gè)慢操作會(huì)把所有線程卡在同一把鎖上。這個(gè)封裝的調(diào)用方根本接觸不到鎖加鎖解鎖全部收斂在三個(gè)方法里是我處理共享容器的一貫習(xí)慣。真出了問題排查范圍也只在這一個(gè)文件里不用去幾十個(gè)調(diào)用點(diǎn)找哪處忘了 LeaveCriticalSection。3.2 工作線程事件驅(qū)動(dòng)的主循環(huán)與退出協(xié)議線程入口用 AfxBeginThread 拉起每個(gè)線程跑同一個(gè) FetchLoop。這個(gè)循環(huán)的設(shè)計(jì)直接影響程序能不能干凈退出是整份源碼里最容易寫錯(cuò)的地方。// SpiderCore.cpp - 啟動(dòng)工作線程 void CSpiderCore::Start(int nThreadCount) { m_bExit FALSE; // 手動(dòng)重置事件有任務(wù)到達(dá)或需要喚醒線程時(shí)觸發(fā) m_hEventData CreateEvent(NULL, TRUE, FALSE, NULL); for (int i 0; i nThreadCount; i) { // CREATE_SUSPENDED 先掛起拿到指針后再恢復(fù)避免線程搶先跑 CWinThread* pThread AfxBeginThread(FetchThreadProc, this, THREAD_PRIORITY_NORMAL, 0, CREATE_SUSPENDED); m_pThreads.push_back(pThread); pThread-ResumeThread(); } } // 線程入口轉(zhuǎn)發(fā) UINT CSpiderCore::FetchThreadProc(LPVOID lpParam) { CSpiderCore* pCore (CSpiderCore*)lpParam; pCore-FetchLoop(); return 0; } // 線程主循環(huán) void CSpiderCore::FetchLoop() { while (TRUE) { // 超時(shí) 3 秒是為了讓線程周期性醒來檢查退出標(biāo)志 DWORD dwWait WaitForSingleObject(m_hEventData, 3000); // 退出條件收到退出指令并且隊(duì)列已經(jīng)清空 if (m_bExit m_queue.GetCount() 0) break; if (dwWait ! WAIT_OBJECT_0) continue; // 超時(shí)醒來回去繼續(xù)檢查 m_bExit CString strUrl; while (m_queue.Pop(strUrl)) // 一次把當(dāng)前隊(duì)列取完 { FetchAndSave(strUrl); // 請(qǐng)求 - 解析 - 落盤 } ResetEvent(m_hEventData); // 清掉任務(wù)信號(hào) // 防止 ResetEvent 把剛 SetEvent 的新任務(wù)信號(hào)誤清掉 // 清完后如果隊(duì)列又有數(shù)據(jù)直接回到循環(huán)頭部繼續(xù)取 if (m_queue.GetCount() 0) continue; } }這段主循環(huán)有兩個(gè)要點(diǎn)。第一退出條件是「m_bExit 為 TRUE 且隊(duì)列為空」兩者同時(shí)滿足不能只看 m_bExit。如果隊(duì)列里還有任務(wù)就退那批 URL 就丟了如果只看隊(duì)列為空就退那線程可能永遠(yuǎn)不會(huì)結(jié)束。第二WaitForSingleObject 的 3 秒超時(shí)不是給抓取限速用的它存在的意義是讓線程在事件永遠(yuǎn)不觸發(fā)的情況下也能醒來檢查退出標(biāo)志——否則停止按鈕按下后線程會(huì)一直阻塞在等待上進(jìn)程退不干凈。信號(hào)量這里有個(gè)常見的糾結(jié)ResetEvent 和 Push 里的 SetEvent 存在競(jìng)爭(zhēng)可能把新任務(wù)信號(hào)誤清掉導(dǎo)致任務(wù)在隊(duì)列里躺到下一個(gè) 3 秒超時(shí)。代碼里在 ResetEvent 之后又檢查了一次隊(duì)列計(jì)數(shù)并 continue把最壞情況壓縮到幾乎不發(fā)生。這是手動(dòng)重置事件和自動(dòng)重置事件之間權(quán)衡后的方案邏輯稍繞但比自動(dòng)重置事件在 8 個(gè)線程下漏喚醒要可靠。3.3 請(qǐng)求封裝CFetcher 與狀態(tài)碼校驗(yàn)抓取線程真正干活的地方是 FetchAndSave它先調(diào) CFetcher 發(fā)請(qǐng)求拿到 HTML 原始字節(jié)再做編碼轉(zhuǎn)換和落盤。Fetcher 是整個(gè)工程里最獨(dú)立的模塊完全不知道多線程的存在這也是它能被替換的前提。// Fetcher.cpp - 基于 WinINet 的 HTTP 請(qǐng)求封裝 #include afxinet.h #pragma comment(lib, wininet.lib) BOOL CFetcher::Fetch(const CString strUrl, CStringA strRaw, int nStatus, CString strContentType) { // 1. 創(chuàng)建會(huì)話句柄 HINTERNET hSession InternetOpen( _T(Mozilla/5.0 (Windows NT 10.0; Win64; x64) SpiderDemo/1.0), INTERNET_OPEN_TYPE_PRECONFIG, NULL, NULL, 0); if (!hSession) return FALSE; // 2. 打開 URL強(qiáng)制刷新且不寫緩存 HINTERNET hFile InternetOpenUrl(hSession, strUrl, NULL, 0, INTERNET_FLAG_RELOAD | INTERNET_FLAG_NO_CACHE_WRITE, 0); if (!hFile) { InternetCloseHandle(hSession); return FALSE; } // 3. 取 HTTP 狀態(tài)碼非 200 直接判失敗 DWORD dwStatus 0; DWORD dwSize sizeof(dwStatus); HttpQueryInfo(hFile, HTTP_QUERY_STATUS_CODE | HTTP_QUERY_FLAG_NUMBER, dwStatus, dwSize, NULL); nStatus (int)dwStatus; if (dwStatus ! 200) { InternetCloseHandle(hFile); InternetCloseHandle(hSession); return FALSE; } // 4. 取 Content-Type后面編碼探測(cè)要用 TCHAR szType[128] { 0 }; DWORD dwTypeLen 128; HttpQueryInfo(hFile, HTTP_QUERY_CONTENT_TYPE, szType, dwTypeLen, NULL); strContentType szType; // 5. 分塊讀響應(yīng)體 char szBuf[8192] { 0 }; DWORD dwRead 0; while (InternetReadFile(hFile, szBuf, sizeof(szBuf), dwRead) dwRead 0) { strRaw.Append(szBuf, dwRead); dwRead 0; // 每次循環(huán)清零防止最后一次殘留舊值 } InternetCloseHandle(hFile); InternetCloseHandle(hSession); return TRUE; }分塊讀是這里最值得講的地方。InternetReadFile 的行為是在一次調(diào)用里返回盡可能多的數(shù)據(jù)但不會(huì)超過緩沖區(qū)大小所以必須用循環(huán)讀到 dwRead 為 0 為止。8192 字節(jié)的緩沖區(qū)是速度與內(nèi)存的折中對(duì)普通 HTML 頁面來說一次循環(huán)能裝下大半個(gè)頁面也不至于讓棧壓力過大。狀態(tài)碼校驗(yàn)是很多入門抓取翻車的重災(zāi)區(qū)。InternetOpenUrl 返回句柄只代表 TCP 連接建立成功不代表頁面真的存在404 頁面照樣會(huì)返回一段正文。HttpQueryInfo 取到的 HTTP_QUERY_STATUS_CODE 才是服務(wù)器真實(shí)意圖這里只放行 200其余狀態(tài)全部走失敗分支。默認(rèn)情況下 InternetOpenUrl 會(huì)自動(dòng)跟隨 301/302 重定向所以最終拿到的狀態(tài)碼一般是落地頁的不需要自己處理 Location 頭。還有一個(gè)細(xì)節(jié)Fetcher 返回的是 CStringA 原始字節(jié)而不是直接轉(zhuǎn)好的 CString。這是故意的——編碼探測(cè)在 3.4 節(jié)做Fetcher 只負(fù)責(zé)把字節(jié)原樣拿回來職責(zé)單一轉(zhuǎn)換邏輯集中在 HtmlParser 里避免兩個(gè)模塊各轉(zhuǎn)一遍導(dǎo)致行為不一致。3.4 字符集探測(cè)與統(tǒng)一落盤抓回來的 HTML 是字節(jié)流要正確顯示必須先知道它的字符集。老站點(diǎn)大量是 GBK/GB2312新站多是 UTF-8如果統(tǒng)一按 UTF-8 解碼GBK 頁面轉(zhuǎn)出來就是「錕斤拷」。正確順序是先探測(cè)、再轉(zhuǎn)換、最后統(tǒng)一以 UTF-8 落盤。// HtmlParser.cpp - 探測(cè)字符集 CString CHtmlParser::DetectCharset(const CStringA strHtml, const CString strContentType) { // 1. 優(yōu)先看響應(yīng)頭 Content-Type 里的 charset int nPos strContentType.Find(_T(charset)); if (nPos 0) { CString strCharset strContentType.Mid(nPos 8); strCharset.Trim(); return strCharset; } // 2. 再看 HTML 前部的 meta charset... // 只取前 1024 字節(jié)做匹配避免整個(gè)頁面轉(zhuǎn)小寫浪費(fèi)內(nèi)存 CStringA strHead strHtml.Left(1024); strHead.MakeLower(); CStringA strKey charset\; int nMetaPos strHead.Find(strKey); if (nMetaPos 0) { CStringA strValue strHead.Mid(nMetaPos strKey.GetLength(), 32); int nEnd strValue.Find(\); if (nEnd 0) return CString(strValue.Left(nEnd)); } return _T(utf-8); // 都找不到就按 UTF-8 兜底 } // 落盤原始編碼 - 寬字符 - UTF-8 BOOL SaveHtml(const CString strFile, const CStringA strRaw, const CString strCharset) { CFile file; if (!file.Open(strFile, CFile::modeCreate | CFile::modeWrite)) return FALSE; // GBK 等單字節(jié)編碼走 CP_ACPUTF-8 走 CP_UTF8 int nCodePage (_tcsicmp(strCharset, _T(gbk)) 0) ? CP_ACP : CP_UTF8; CStringW strW CA2W(strRaw, nCodePage); CStringA strOut CW2A(strW, CP_UTF8); // 統(tǒng)一轉(zhuǎn)成 UTF-8 保存 file.Write(strOut.GetString(), strOut.GetLength()); file.Close(); return TRUE; }探測(cè)優(yōu)先級(jí)要記牢響應(yīng)頭里的 Content-Type 最可信因?yàn)樗欠?wù)器在協(xié)議層面聲明的HTML 里的 meta 標(biāo)簽是頁面自己說的可能和實(shí)際編碼不一致都找不到才用 UTF-8 兜底。這里簡(jiǎn)化成了只匹配 charset 的形式實(shí)際工程里還會(huì)遇到 http-equiv 寫法比如meta http-equivContent-Type contenttext/html; charsetgb2312需要再加一個(gè)分支去解析 content 屬性。為什么落盤前要繞一圈轉(zhuǎn)成寬字符再轉(zhuǎn)回 UTF-8因?yàn)轫撁嬖甲止?jié)可能是 GBK直接以 UTF-8 方式落盤文件會(huì)保存錯(cuò)誤的字節(jié)序列先按正確代碼頁轉(zhuǎn)成 UTF-16 的 CStringW再轉(zhuǎn)成 UTF-8 輸出相當(dāng)于做了編碼歸一。這樣不管源站是 GBK 還是 UTF-8本地所有文件都是同一種編碼后面接解析、接入庫都不用再關(guān)心每個(gè)文件自己的編碼是什么。這段代碼用的是 CA2W/CW2A 轉(zhuǎn)換宏它會(huì)在棧上分配內(nèi)存對(duì)幾百 KB 的小頁面沒問題。如果你要抓幾 MB 的大頁面建議改用 MultiByteToWideChar 配合堆內(nèi)存避免棧溢出。這也是 Fetcher 用 CStringA 傳字節(jié)、把轉(zhuǎn)換推遲到這個(gè)環(huán)節(jié)的好處——轉(zhuǎn)換策略隨時(shí)可以換不影響請(qǐng)求層。4. 多線程抓取避坑記錄假死、亂碼、被封的排查實(shí)錄這一章是我實(shí)際跑這個(gè)工程時(shí)踩過的坑每條都是真實(shí)翻車現(xiàn)場(chǎng)?,F(xiàn)象、原因、解決三段式寫清楚不一定全記住但遇到類似癥狀時(shí)知道往哪個(gè)方向查。4.1 現(xiàn)象點(diǎn)開始沒幾秒整個(gè)程序假死抓取線程里直接調(diào)用 m_listResult.AddString 或者 SetDlgItemText 去刷新界面結(jié)果運(yùn)行幾秒后窗口完全卡死任務(wù)管理器看到 CPU 某個(gè)核接近 100%。原因MFC 的 CWnd 方法不是線程安全的。AddString 底層會(huì)向窗口發(fā)送消息多個(gè)工作線程同時(shí)操作同一個(gè)控件內(nèi)部鏈表和 UI 線程自己的消息處理互相踩窗口消息隊(duì)列就被鎖死了。這不是偶發(fā)的線程越多越容易觸發(fā)。解決抓取線程一律不碰 UI。抓完一條就 PostMessage 一條自定義消息由主窗口在自己的消息處理函數(shù)里刷新列表。我在 SpiderCore 里留了一個(gè)通知窗口句柄線程完事后這樣投遞// 工作線程中只投遞消息不直接操作控件 ::PostMessage(pCore-m_hWndNotify, WM_SPIDER_RESULT, bOK ? 1 : 0, (LPARAM)new CString(strUrl));wParam 帶成功失敗標(biāo)志lParam 帶一個(gè)堆上 new 出來的 CString 指針UI 側(cè)收到消息后取出來刷新日志并 delete。用 new 是因?yàn)?PostMessage 是異步的不能傳棧上地址。從那以后我寫多線程抓取第一行注釋就是「線程內(nèi)禁止碰任何控件」。4.2 現(xiàn)象抓到一堆 404 和攔截頁面日志里卻全標(biāo)成功一批 URL 抓完成功數(shù)很高打開文件一看全是對(duì)應(yīng)錯(cuò)誤頁的 HTML或者正文只有一小段提示腳本。原因只判斷 InternetOpenUrl 返回了句柄沒查 HTTP 狀態(tài)碼。服務(wù)器對(duì) 404、503 一樣會(huì)正常建立連接并返回正文連接成功不代表內(nèi)容有效。另一類是反爬返回 200但正文是驗(yàn)證或攔截腳本。解決兩層校驗(yàn)。第一層是 3.3 節(jié)的 HttpQueryInfo 狀態(tài)碼判斷非 200 全部算失敗。第二層是正文兜底校驗(yàn)——統(tǒng)計(jì) html 和 標(biāo)簽是否成對(duì)正文長度是否超過一個(gè)最小閾值比如少于 500 字節(jié)直接判無效。我一般把最小正文長度定義成一個(gè)常量每頁抓完先過這道關(guān)卡再落盤能擋掉大部分「假成功」。4.3 現(xiàn)象頁面抓到本地打開全是亂碼文件確實(shí)存下來了但內(nèi)容顯示成「錕斤拷」「燙燙燙」之類的亂碼或者英文字符正常、中文全花。原因頁面編碼和轉(zhuǎn)換代碼頁不一致。老一點(diǎn)的內(nèi)容站點(diǎn)大量是 GBK 編碼如果 Fetcher 里統(tǒng)一按 UTF-8 解釋字節(jié)GBK 的中文字節(jié)序列就會(huì)被錯(cuò)誤解析轉(zhuǎn)出來的寬字符自然全錯(cuò)。解決按 3.4 節(jié)的順序做字符集探測(cè)先看響應(yīng)頭再看 meta最后才兜底。血淚經(jīng)驗(yàn)是不要相信所有服務(wù)器都會(huì)在響應(yīng)頭里返回 charset相當(dāng)一部分老站只寫了 HTML meta還有一部分站 meta 寫的是 utf-8實(shí)際內(nèi)容是 GBK這種只能靠抓下來的字節(jié)做啟發(fā)式判斷。最笨但有效的兜底是先按 GBK 轉(zhuǎn)一次看轉(zhuǎn)換后是否出現(xiàn)大量無法映射的字符是的話再換 UTF-8 重轉(zhuǎn)。4.4 現(xiàn)象線程數(shù)調(diào)大抓取速度沒上去反而被斷開連接從 4 線程調(diào)成 16 線程速度非但沒翻倍還開始大量超時(shí)日志里陸續(xù)出現(xiàn) 403 和 429最后直接被目標(biāo)服務(wù)器掐斷連接。原因服務(wù)器有連接頻率限制。16 個(gè)線程同時(shí)往同一個(gè)域名打請(qǐng)求相當(dāng)于同一秒內(nèi)發(fā)起十幾次連接站點(diǎn)的防護(hù)邏輯直接判定異常流量。抓取是 IO 密集型不是計(jì)算密集型線程數(shù)超過網(wǎng)絡(luò)瓶頸后只會(huì)加劇限流。解決加兩個(gè)節(jié)流手段。一是每個(gè)線程抓完一條后隨機(jī) Sleep 一段可配置的時(shí)間比如 300 到 800 毫秒讓請(qǐng)求波形打散而不是整齊地一排出去。二是按域名拆分隊(duì)列同一個(gè)域名最多分配 2 個(gè)線程把并發(fā)壓力分?jǐn)偟讲煌军c(diǎn)。遇到 403/429 時(shí)做退避該域名 30 秒內(nèi)不再發(fā)起請(qǐng)求。這兩個(gè)手段加到工程里都不復(fù)雜但能把抓取成功率從 60% 拉回 95% 以上。4.5 現(xiàn)象點(diǎn)了停止界面響應(yīng)了但進(jìn)程一直退不干凈停止按鈕執(zhí)行后窗口能關(guān)但進(jìn)程在任務(wù)管理器里掛著一兩個(gè)線程不消失或者進(jìn)程退了但日志文件還沒寫完。原因m_bExit 置位后線程還阻塞在 InternetReadFile 等網(wǎng)絡(luò)調(diào)用上沒有設(shè)置超時(shí)阻塞可能長達(dá)幾十秒或者對(duì)話框收到 WM_CLOSE 后直接退出沒等線程收尾就銷毀了資源和文件句柄。解決兩件事都要做。一是給 InternetReadFile 設(shè)置操作超時(shí)常見做法是先用 InternetSetOption 設(shè)置 INTERNET_OPTION_RECEIVE_TIMEOUT 和 CONNECT_TIMEOUT把阻塞上限控制住讓線程能及時(shí)醒來看到退出標(biāo)志。二是在對(duì)話框的 OnDestroy 里遍歷工作線程句柄對(duì)每個(gè)線程 WaitForSingleObject 一小段時(shí)間確認(rèn)線程真正結(jié)束后再釋放隊(duì)列和事件對(duì)象。這里切忌用 TerminateThread 強(qiáng)殺它會(huì)跳過析構(gòu)、不釋放鎖留下一個(gè)處于鎖定狀態(tài)的臨界區(qū)下次啟動(dòng)必崩。5. 跑通與二次開發(fā)編譯調(diào)試、斷點(diǎn)續(xù)抓與入庫改造5.1 編譯與運(yùn)行驗(yàn)證工程用 VS2015 及以上打開即可字符集建議設(shè)成 Unicode——代碼里 CString 默認(rèn)按寬字符處理轉(zhuǎn)碼邏輯依賴_T宏和 CA2W/CW2A多字節(jié)字符集下這些地方的行為會(huì)不一樣。依賴只有系統(tǒng)庫不需要安裝任何第三方包。運(yùn)行驗(yàn)證按四步走準(zhǔn)備一個(gè) urls.txt每行一個(gè) URL填入對(duì)話框線程數(shù)先填 4點(diǎn)開始后觀察日志逐條增長輸出目錄下生成同名 HTML 文件。重點(diǎn)檢查三件事抓取條數(shù)和文件數(shù)一致、頁面無亂碼、停止后進(jìn)程能正常退出。我每次會(huì)用本地起的測(cè)試服務(wù)先跑一遍確認(rèn)邏輯沒問題再對(duì)真實(shí)站點(diǎn)操作。5.2 三個(gè)實(shí)用的改造切入點(diǎn)第一個(gè)是 BFS 擴(kuò)散抓取在 HtmlParser 里提取a href鏈接通過 Push 再入隊(duì)抓取就會(huì)從單頁變成整站爬取。注意在 Push 前要加去重集合我用 CMapStringToPtr 存已抓過的 URL8 個(gè)線程并發(fā)時(shí)同一鏈接一旦重復(fù)入隊(duì)訪問量就放大 8 倍。第二個(gè)是結(jié)果入庫把落盤文件改成寫 SQLite。sqlite3 是 C API封裝一個(gè) CSqliteSaver每抓完一條做一次 INSERT表的字段至少要覆蓋 url、title、http_status、fetched_at、content 這五列。多條線程同時(shí)寫 SQLite 時(shí)建議先寫進(jìn)一個(gè)內(nèi)存隊(duì)列由單條線程批量提交減少事務(wù)次數(shù)和鎖沖突。第三個(gè)是線程模型升級(jí)把 AfxBeginThread 換成 std::thread 加 condition_variable讓 SpiderCore 不依賴 MFC抽成純 C 類之后移植到服務(wù)端或命令行工具都不用改業(yè)務(wù)邏輯。改造時(shí)保持 CUrlQueue 接口不變內(nèi)部把 CRITICAL_SECTION 換成 std::mutex 即可調(diào)用方完全無感。5.3 改造后的驗(yàn)證清單改動(dòng)后不要直接上 16 線程按照「單線程 → 4 線程 → 8 線程」逐級(jí)驗(yàn)證。每個(gè)階段確認(rèn)三件事抓取結(jié)果集合和單線程版本一致、內(nèi)存不隨時(shí)間線性增長、任務(wù)管理器里句柄數(shù)和 GDI 對(duì)象數(shù)穩(wěn)定。特別是句柄數(shù)——WinINet 的 HINTERNET 句柄忘記關(guān)閉是這類工程最常見的資源泄漏點(diǎn)跑 1000 個(gè) URL 前后對(duì)比一次就心里有數(shù)。從那以后我每次接手類似的 C 抓取工程都會(huì)強(qiáng)制先跑一遍「開始 → 停止 → 退出 → 查句柄」四個(gè)動(dòng)作確認(rèn)線程能干凈收?qǐng)鲈匍_始動(dòng)業(yè)務(wù)邏輯。這套習(xí)慣幫我擋掉了好幾次線程泄漏和假死問題。希望幫到你。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
丁香视频| 5月婷婷六月丁香| 五月天丁香| 五月香蕉网| 另类综合国产| 久久亚洲天堂| 日韩在线观看亚洲| 另类综合国产| 五月综合婷婷五月| 久热亚洲| 99九九久久| 日本精品干| 激情九色| 人人爽人人射-美女久久久久久久久久-成人AV| 91久久久久久| 久热视频这里只有精品| 五月婷六月| 丁香五月日韩| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 新久久五月天激情| 色色婷婷综合网| 丁香色色网| 激情婷婷五月女| 欧美人与性动交CCOO| 丁香五月婷婷成人色区| 激情久久网 | 五月婷婷综合久久| 色婷婷五月天| 丁香婷婷色五月合集| 天天日色情| 这里只有精品免费观看网占| 91精品视频男人的天堂| 五月天亚洲色| A短视频免费在线观看| 热这里| 91精选国| 97碰在线视频| 丁香六月婷婷综合在线| 大香蕉久操| 六月激情网| 色五月激情基地| 婷婷五月天成人基地| 日夜夜久久| 日操熟女| 999精品乱码77777| 夜夜夜叫天天天做| 操人无码| 99色免费观看全部| 亚洲欧美综合7777色婷婷| 欧美精品999| 婷婷色播色五月五色五月天色妇| 青青草婷婷久久| 伊人久久婷婷| 99爱视频免费看| 91综合色| www.99操| 伊人无码高清| 婷婷射丁香| 激情五月天婷婷图| 四射综合网| 99热在线这里只有精品| 在线观看国产高清视频免费网站| 五月丁香六月婷婷激情视频在线观看免费| 婷婷五月天成人娱乐| 99操不停| 亚洲无码99| 嫩草AV久久伊人妇女超级A| 99这里只有精品| 99色最新在线视频网站| 三区激情四射av| 婷婷综合国产| 天天综合网站| 超碰com| 色播五月丁香综合| 色色自拍视频网站| 变天就操逼婷婷五月| 五月丁香爱婷婷深深| 色五月婷婷777| 天天干天天拍| 丁香五月综合在线视频| 久久996re热这里只有精品无码| 人妻Av在线| 亚洲第一第二网站| 熟女网站久久| 亭亭五月丁香五月天激情| 日韩色色小视频| 五月丿香啪啪| 久久日本wwww色| 天天爽夜夜操| 99精品国产在热久久| 色色五月婷婷久久| 激情图片五月天| 五月婷婷激情网| 丁香五月天堂婷婷| 成人国产欧美大片一区| 超碰成人免费| 人人摸人人摸| www婷婷| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 99网| 日韩色五月| 五月婷婷久久综合| 都市激情蜜桃婷婷五月天 | 五月丁香色婷基地综合久久| 丁香五月婷婷激情蜜桃| 丁香综合日产精品久久| 色五月情| 五月天激情图片| 开心激情综合| 女人天堂AV| 99热这里只有精品搜| 婷婷五月天777| 九九国产视频| 大香蕉人妻| 丁香五月婷婷偷拍| 久久婷婷五月综合伊人| 99久.| 性爱五月婷| 五月丁香久久综合91| 亚洲激情五月天| 免费视频99| 26uuu国产激情视频| 深爱激情小说五月婷婷| 欧美丁香六月激情视频| 亚州AV超碰人人操| 青草少妇激情| 色五月丁香伊人五月| 激情久久天天| 五月婷婷开心丁香| 香蕉AV777XXX色综合一区| 亚洲VA在线| 五月天婷婷青青| 狠狠香婷婷五月| 丁香婷最新动态| 亚韩在线视频| 人妻久久久久久久久妻久久久久久久久| 久热无码| 色五月xxx| 开心五月婷婷五月| 婷婷五月成人有| 天天色情站| 中文字幕婷婷五月天| 大香蕉手机视频| 亚洲在线综合| 噜综合| 色婷婷五月影视| 欧美va亚洲va| 99视频一区| 亚洲热久久| 五月天亚洲综合网| 色噜噜综合网| 大地9中文在线观看免费高清 | 婷婷九月| 天插天啪天啪天啪| www.婷婷五月| 天天干天天操天天拍| 五月天婷婷成人网| 亚洲一区二区色图-亚洲精品国产精品乱码-成人AV | 九久9精品| 色噜噜狠狠色综| 综合欧美五月婷婷| 日韩一区二区在线播放| 色五月色五天色情网| 丁香激情婷婷网| 久久婷婷六月综合综合色| 播播网色播播| 久久机热/这里只有精品| 五月丁香六月综合激情| 亚洲色99综合天堂| 丁香激情久久| 激情五月天小说视频| 五月丁香五月婷婷在线观看| 五月丁香777| 国产FREESEXVIDEOS性中国| 婷婷色五月91啪啪| 99re久热只有精品6在线直播.com| h亚洲| 色婷婷基地| 日本成人噜噜噜噜噜| 国产成人+亚洲+欧洲| 久久五月天网| 精品久久人妻| 九月大香蕉| 玖玖在线| 五月丁香六月花| 夜色综合网| 婷色五月| 久久亭亭电影| 97亚洲色 torrent magnet| 插插插色综合网| 久久婷婷六月综合| 婷婷综合视频| 超碰色婷婷| 欧美激情丁香五月| 婷婷五月天AV| 久久久天堂国产精品女人| avh片在线观看| 久久综合影院| 99久久思思| 四月婷婷五月丁香| 五月丁香婷婷成人网| 亭亭五月基地在线| 婷婷激情啪啪| 精品久久久人妻| 色婷婷性爱网| 丁香五月欧美激情| 婷婷激情五月综合| 中文字幕网伦射乱中文| 激情五月天情色| 五月激情啪啪| 激情开心五月天| 俺去也婷婷| 成人无码精品1区2区3区免费看| 欧美超碰亚洲| 色情五月天首页| 婷婷午夜天| 99精品在线观看| 天天日,天天插| 99久久婷婷国产综合| 亚洲狠狠爱婷婷| 91黄址| 四虎成人精品永久免费AV九九| 五月综合婷婷开心网| 五月丁香成人小说| 日产精品一线二线三线芒果| 91狠狠综合久久久| 久久99热这里只有精品| 无码少妇高潮喷水A片免费| 五月婷婷玖玖综合玖玖爱| 永久免费视频| 91蜜桃婷婷狠狠久久综合9色| 五月婷av| 色婷婷在线电影| 欧美婷婷六月丁香综合色| 丁香美女主播视频在线观看| 成人国产欧美大片一区| 婷婷五月丁香综合激情小说| 婷婷丁香五月亚洲17cao| 五月刺激丁香月综合| 五月丁香日本片| 久久婷婷国产| 99精品久| 少妇人妻综合色6699| 五月天综合网| 五月丁香色| 综合噜噜| 色色丁香色五月| 五月婷婷熟女| 99热这里有精品| 九九伊人网| 91综合色| 9久久久久久久久久久| 激情综合丁香五月| 国产亚洲成人综合| 色色色色av色色色色| 五月激情综合网| 色99在线| 国产精品久久..4399| 久热re在线视频| 五月久久亚洲| 91狼友视频在线观看| 久久久18| 超碰av在线| 99啪视频在线观看| 五月天天天天天天天天天天天天天天天婷婷婷| 国内精品免费一区二区2009| 这里只有精品9| 99网| 99免费视频精品| 99久久国产宗和精品1上映| 欧美日韩99| 日日夜夜久| 欧美日韩精品一区二区三区钱| 另类激情五月| 9999热精品| 狠狠999| 丰满少妇猛烈A片免费看观看| 婷婷六月综合在线| 久久婷婷五月天激情新地址| 99亚洲日韩| 激情98色婷婷五| 2025最新亚洲激情在线| 超碰日韩成人| 欧美一级操逼视频| 天天综合网91| 丁香六月婷婷久久综合| 亚洲丁香网| 七七久久综合| 五月丁香亭亭操逼| 色狠狠五月天| h在线看免费版在线看| 另类天堂| 成熟妇人A片免费看网站| 天天天天天天天操| 大香蕉人人人| 开心五月深爱五月| 热99这里只是精品| 成人在线观看国产| 99色| 在线va网站| 日本不卡一区二区三区| 天天色综合网1| 日韩AV一区二区三区| 99综合网| 99热亚洲精品| 婷婷瑟五月天久久综合| 日本少妇AA一级特黄大片| 第四色大香蕉| 思思99精品视频| 26uuu日韩| 日操五月婷| 人人操人人妻| 婷婷久久免费| 无码G高清天| 日韩成人中文| 五月天操逼网| 久久五月丁香激情综合| 久久九九99桃花视频| av中文在线| 久久婷婷五月综合色播| 亚洲无码成人网| 五月六月激情| 色五月婷婷老师| 九九亚洲| 超碰男人色| 国产精品久久久60086| 婷婷的色色五月天| 亚洲av电影在线| 91久久| 婷婷五月视屏| 狠狠爱青青草| se色99| 婷婷五月天基地| 国产av天堂| 97se视频在线| 久久婷婷六月综合综合色| 五月丁香人妻| 五月丁香网站| 色婷婷五月天视频网站| 丁香婷婷五月份| 色婷婷五月综合| 天天骑天天操| 99丁香婷婷综合网| 九九久久99| 丁香五月大香蕉| 色色色色色日韩午夜激情 | 六月欧美综合色情| 色色免费网站| 69久久99精品久久久久| 色欲一区二区三区精品A片| 五月婷婷激情网| 99人人干人人操| \\五月天婷婷激情| 九九色婷婷| 情色婷婷五月天| 色五月首页| 被强行糟蹋的女人A片| 任你爽免费视频| www.夜夜操| 国产色色小草视频| 五月婷婷,六月激情| 天天综合网站| 五月色亭丁香| 99热在线播放| 狠狠狠狠狠狠狠狠狠狠狠色宗合图片| 久久精品99| 久热9| 综合啪啪| 色综合爽| 亚洲无AV在线中文字幕 | 丁香五月色色| 99re最新地址视频| 欧美久热| 伦99热| 久久9热好| 五月天激情小说电影| 激情五月天色色网| 天天综合插插| 琪琪色综合网站| 久久 这里只有精品1| 中文字幕无码人妻少妇免费视频| 六月天无码网址| 五月天激情国产综合婷婷婷| 免费在线观看av网站| 欧美噜噜噜草| 97香蕉久久超级碰碰高清版| 伊久大香蕉| 深爱女色婷婷丁香五月亚洲图区| 婷婷久久99| 久久丁香综合精品综合| 五月天色官网| 日日干夜夜干| 97色久| 亚洲va欧美va国产综合久久久| 久草五月天| 97丁香视频| 69er小视频| 99视频这里有精品| 色欲婷婷五月天| 丁香五月婷婷影院| 岛囯综合激情网| 五月婷婷久久激情| 人妻久久久久久久| 涩 五月 婷婷 狠狠| 五月天伊人日日噜影片AV| 天天干天天干天天干天天干天天干| 亚洲成Av人片乱码色第1集| 五月丁香久久网| 久久久久久97| 久热99热| 99在线视频播放| 色五月激情综合网站| 色综合性视频| 刘玥av在线| 天天爽天天弄| 色五月激情五月| 三区激情四射av| 国产欧洲欧洲精品久久| 99精品久久| 日韩九区| 国产中文亚洲欧美日韩性交| 色婷婷五月在线| 91se在线视频| 日本色婷婷| 五月丁香六月香香蕉| 一级黄色尤物综合视频手机在线观看| 久久婷婷五月丁香蜜桃网| 丁香五月天激情五月天激情五月天激情网| 日本色婷婷| av国产精品偷| 综合网五月| 在线国产精品色| 色五月激情网| 色高清无码视频| 777久久精品| 五月婷深深爱激情网| 色六月天| 丁香五月婷婷五月天| 超碰免费人妻| 99热久久这里只有精品| www.色欲丁香婷婷| 婷婷综合97| 色情综合网| 五月停停99| 五月丁香成人| 亚洲欧美国产A片免费观看| 九九久久网| 操逼六区| 亚洲av午夜精品一区二区| 久久伊人五月天| 久久五月视频| 成人噜噜网| 亭亭丁香97| 国产午夜精品一区二区三区四区| 99视频九九热| 亚洲精品亚洲人成人网| 婷婷五月色花丁香社区| 激情婷婷五月基地| 9色视频在线| 内射爽无广熟女亚洲| 丁香操逼| 成人做爰A片免费看网站找不到了| 五月天色综合服务平台| 国产小网站| 十月丁香九月婷婷综合| 无码人妻电影| aV直接看| www.精品99| 五月天婷五月天综合网在线观| 婷婷五月激情基地| 五月丁香综合激情| 色色色在线免费视频| 亚洲五月六月婷婷| 婷婷五月深爱五月| 97人人超| 久久久潮喷-久久久九九-成人AV| 99久热在线精品| 狠狠色狠狠干| 99久在线精品99re5热视频| 超碰人人艹| 色综合久久88色综合中文字幕| 激情婷婷综合网| 久久大香蕉同僚| 丁香婷婷久久激情| 婷婷午夜激情| 丁香婷婷婷婷十二月在线观看视频| 婷婷五月天资源| 国产亚洲精品久久一区二区三区| 九九九九操逼| 天天五月丁香五月| 五月天婷婷久久| 狠狠综合| 色色色色五月天| 欧美久久五月婷婷| 99久| 青青热视频| 五月天色丁香| 六月丁香网| 天天骑日日爽| 五月丁香在线综合| 婷婷丁香六月| www.久久久久| 激情五月婷婷开心网| 婷婷操逼| 日韩成人电影AV| 噜噜色com| 色色色综合| 久久狠婷婷| 五月丁香久久呀| 狠狠色婷婷777| 色偷偷人人| 嫩草视频在线观看| 久久久27操| 淫视馆av三区| 亚洲成av人影院| 亚洲网站999| 久久五月天色| 亚洲九九99精品视频在线播放| 久久婷婷六月天| 99热网站| 大香蕉久久久久久久久| 我要看激情五月天| 欧美顶级少妇做爰HD | 免费试看小视频 99| 思思久久精品| 光棍影院日韩精品| 99久在线精品99re8| 欧美性生交xXxX久久久| 九九视频精品这里只有| 久久久com| 综合亚洲六月婷婷在线| 天天天天天久久久久久| 欧美这里只有精品| 丁香五月天社区婷婷| 日日夜夜噜噜爽爽| 亚洲亚洲人成综合网络| 日日干日日s| 日本三级中国三级99人妇网站| 色婷婷精品视频| 欧美va在线| 香蕉曰比| 夜夜综合色| 老美AA片| 久久久久久9热不雅视频| 五月婷婷啪啪| 久久婷婷亚洲| 青草五月天| 亭亭五月色男人| 色婷婷影院| 99亚洲天堂| 91狠狠综合久久久久久| 久久网日本| 欧日韩成人| 97丁香婷婷| 日本美女上人| 99热这里只有精品22| 色婷视频| 91色婷婷综合久久中文字幕二区| 国外亚洲成AV人片在线观看| 激情色播| 丁香五月六月久久综合 | 日本美女上人| 九九色热| 开心五激情网| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 99色综合久久| 亭亭五月色男人| 中文字幕在线不卡视频| 久久99热这里只频精品6学生| 婷婷五月丁香人妻无码高清| 99噜噜| 日韩无码专区| 9l视频自拍9l九色成人| 大香蕉伊人99| 九九在线视频| 五月婷无码| 五月丁香色五月| 蜜乳中文字| 色欲婷婷五月天丁香| 五月天婷婷色色| 无码人妻少妇色欲AV一区二区| 国产成人精品一区二区三区视频 | 色色色视频免费无码| 久久久99精品| 丁香婷婷九月| 亚洲综合激情五月久久| 五月色综合网欧美网| 国产精品人成A片一区二区| 热99只有里视频| 七七色色综合| 亚洲色另类| 亚洲99在线| 99热黄| 久久婷婷国产| 五月综合777| 极品五月天| 97资源欧美日韩大香蕉超碰一区| 五月婷婷播| 东京热人妻一区二区三区在线| 99ri国产在线| www.五月激情红色| 伊人婷婷色| 五月激情视频| 日本成人噜噜噜| 99惹 精品在线| 五月婷婷丁香网| 激情久久四色| 99热这里只有精品5| 亚洲成人免费电影| 操逼国产91| 激情99。| 9久久婷婷国产综合精品性色| 免费视频WWW在线观看网站| 五月婷婷 婷婷五月 一区二区 久久久 | 国产精自产拍久久久久久蜜 | 日韩在线观看亚洲| 亚洲国产精品VA在线看黑人| AV成人在线播放| 色五月丁香五| 丁香五月中文字幕| 丁香六月婷婷综合激情欧美| 亚洲激情五月| 内射干少妇亚洲69XXX| 久久视频婷婷| 亚洲性色XXXXX| 久久伊人婷婷| 噜噜五月天综合| 五月激情小说| 26uuu精品国产| www.minyis.com【JT】实力收量可预付QQ2101460746 | 五月天激情中文字幕| 亚洲人人操| 国产精品18久久久| 色婷婷黄色网络| 噜噜在线| 国产女生爱爱AA| 射久久丁香五月| 五月丁香婷婷导航视频| 激情五月婷婷在线区| 久9久9热久热| 任我干视频在线观看| 很很干天天干| 综合色色婷婷| 丁香色综合| 三区激情四射av| 久久久久8888| 99九九99九九九视频精品| 五月激情视频| 嫩草视频在线观看| 丁香美女五月天婷婷| 亚洲国产成人裸舞| 婷久看人爽| 思思热久久艹| 色色色色色色色色色色色色色五月天| 日本色色色色色色色色一色二色| 婷婷之六月丁香| 99热自拍| 99久久99久久综合| 国产97色在线 | 日韩| 99婷婷色| 99热激情| 人妻中文字幕网| 亚亚州久久高潮| 婷婷激情五月天在线| 国产AV国片偷人妻麻豆| 激情五月天开心网丁香无码| www.久久| 热五月婷婷| 玖玖婷婷五月天| 色婷婷五月中文字幕在线dvd| 六月婷婷狠狠色在线观看| 丁香五月天在线观看视频| 成人版视频在线观看| 丁香六月婷婷社区| 97人妻人人| 青吴乐视频| 99色热综合| 香蕉久久国产AV一区二区| 久久久18| 丁香午夜天| 日本欧美在线| 26UUU精品一区二区| 开心激情播播五月天| 这里只有精品免费视频在线观看| 丁香婷婷啪啪啪| 99热只有国产在线精品| 色情久久久| 久久婷婷亚洲五月天| 成年人99热| 日日夜夜爽爽| 亚艹艹| 九九色热视频| 色婷婷丁香| 久久丁香五月| 激情综合网激情五月天| 午夜亚洲国产精品av一区二区| 色爱综合网| 黄色五月婷婷| 人人草成人视频| 操人妻AV| 久久ww| 亭亭色色五月天| 五月丁香综合在线| 夜夜操狠狠操| 丁香五月婷中字在线| 俺也去五月婷婷丁| 91伦| 九色 在线| 亚洲AV成人无码电影| 婷婷色在线播放| 操逼视频一区| 五月激情丁香五月| 天天天天天操| 五月婷中文娱乐综合| 五月婷婷激情日本| 婷婷六月色开| 久久aaa| 森林影视大全,最好看的2019年视频 | 桃色激情婷婷伊人网| 丁香婷婷婷婷十二月在线观看视频| 大天天伊人| 亚洲开心激情网| 91在线看免费 九九九九| 婷婷五月天AV| 五月天激情网开心网| 97操在线视频| 第四色色六月色综合| 大香蕉婷婷丁香天堂AV| 五月香六月婷| 97人人干| 狠狠色噜噜色狠狠狠综合色| 婷婷五月天小说| 99色综合网| 草美女在线观看视频在线播放| 区区欧美你爱| 久久精品99久久久久久| 天天爱天天操| 久久久久久久五月| 99热99色| 婷婷激情5月| 大香蕉婷婷久久| www.狠狠| 777久久久| 狠狠色丁香久久久婷| 色婷婷五月天综合网| 激情综合网五月天| 五月天另类激情在线| 香蕉视频性爱BB做爱| 9久久婷婷国产综合精品性色| 色婷婷精品小视频| 色婷婷精品视频| 色吧五月婷婷| 精品久久艹| 色噜噜狠狠色综合AV兰草影视| 日本久久9| 亚洲三A| 99亚洲视频| 五月丁香婷婷爱| XXXX岛国| 97色干| 99操免费视频| 99啪视频在线观看| 无码少妇高潮喷水A片免费| 婷婷在线免费| 亚洲AV无码一区二| 亚洲成人无码专区| 在线观看av网站| 五月丁香啪啪激情| 综合五月激情网| 五月丁香狠狠爱| 九月停停| 久久精品在线| 日韩综合天堂| 九月丁香婷婷网| 久久色五月天| 五月天激情四射网站| 天天干人人奸97| 婷婷月五天在线在线看| 五月婷综合| 亚洲A片成人无码久久精品青桔| 色色五月天丁香婷婷| 人人做人人看人人摸| 婷婷五月天精品| 色色丁香色五月| 日日干日日s| 色色色色色色色色五月先| 丁香婷婷综合影院| 色人五月婷婷| 一级黄色影片| 色综合网址| 五月天六月色| 99热精品9| 天天射天天射一道本日本社区 | 久9综合| 操日本99| 熟女人妻一区二区三区免费看| 九月丁香| 婷婷五月色| 国产精品18久久久| 蜜臀AV在线观看| 超碰在线91| 国产成人精品一区二三区熟女在线| 99久久99久久综合| 国产精品久久久久久久久久久久 | 国产精品人妻在线网址| 五月激情网站| 91九色偷拍| 婷婷久久五月| se99视频| 九九九九毛片| 五月天婷婷丁香| 婷婷色色网站| 丁香色情五月天| 天天狠狠夜夜狠狠2023| √天堂资源在线人妻熟女| 五月婷婷影| 极品少妇高潮啪啪AV无码| www激情| 精品婷婷| 九九热视频在线观看| www网站在线观看| 色欲资源网| 色五月丁香com| 深爱 五月天| 这里只有精品在线观看视频| 婷婷大香焦| 色婷婷成人色网| www99xxxx五月丁| 五月综合丁香婷婷| 中文字幕丰满乱孑伦无码专区 | 丁香五月激情宗合网| 日本啪啪网| 九久9精品| 婷婷丁香成人在线视频| 五月天精品视频| 综合激情在线视频| 狠狠综合| 99热人人艹| 99人人操人人操人人精| 成人va在线观看视频| 就去涩涩丁香五月天| 色五月大| 丁香五月婷婷基地| 丁香五月天大香蕉啪啪| 久久综合热17c| 日日夜夜天天综合| 熟女婷婷网站一婷婷五月一丁香婷婷一婷婷激情网| 亚洲九区| 久鲁鲁色网| 狠狠操狠狠| 六月丁香综合网| 99网址在线观看| 婷婷金品综合视频| 啪啪夜久久| 91黄操| 天天综合情| 五月激情综合网| 久久成人性爱| 国产又色又爽又黄又免费| 日日射天天射| 国产婷伊人| 五月天激情亚洲| 欧洲S级在线观看| 五月天婷婷色色| 99精品这里只有免费视频| 99久久九九视频| 欧洲S级在线观看| 超碰人人操在线| 六月婷五月丁香| 99这里只有精| 丰满老熟妇BBBBB搡BBB| 丁香五月婷婷网| 深爱婷婷丁香五月激情| 久久久久久性爱视频| 人人摸人人| 丁香五月av| 婷婷五月俺要去| 大香蕉福利导航| 色五月 五月婷婷| 日本久久综合| 国产欧美熟妇另类久久久| 婷婷五月综合啪| 百度4399有码精品V在线观看 | 五月丁香中文| 国产成人网| 99热国产免费| 色色综合网络| 久久婷婷综合网| 超碰v| 五月天天爱| 99自拍视频在线| 日韩在线观看网址| 日本WWW九九九| 婷婷亚洲丁香五月| 日hao1区| 久久性爱视频| 99爱在线免费视频| 久久这有这里精品| 精品一二三区久久AAA片| 99精在线| 日韩精品超碰在线观看| CHINESE熟女老女人HD视频| 婷婷五月天电影网| 干亚洲天堂| 国精产品一区二区三区| 丁香色五月 97干| 亚洲视频色婷婷| 另类五月婷婷| 久久久五月婷婷| 丰满老熟妇BBBBB搡BBB | 色婷婷丁香女女| 久99综合婷婷| 久久99热这里只有精品23| 久久aaaaa| 国产精品扒开腿做爽爽爽A片唱戏 亚洲爆乳无码精品AAA片蜜桃 | 久草五月婷婷| 超碰在线99| 婷婷深爱五月天| 五月婷婷久久开心网| 91在线操| 婷婷丁香五月综合网| 激情婷婷色色| 情婷婷五月天| 深爱激情网五月| 婷婷内射视频在线| 五婷婷综合网| 看片视频在线免费日产在线看| 五月激情六月婷婷| 99热国产国产| 伊人网大香| 97在线/日本| 熟女少妇内射日韩亚洲| 丁香五月性爱| 婷婷激情图片| 极品五月天| 亚洲激情丁香五月天色| 激情人妻综合| 欧洲区自拍| 操丝袜视频影院导航| 99久视频| www.99热在线| 久久久.www| 大香蕉久操| 伊人五月婷婷| 日本丁香五月| 亚州性爱99| 婷婷激情五月天色| 人妻22p| 97色色综合| 婷婷五月丁香国产| 欧美大肥婆大肥BBBBB| 天天干 夜夜爽| 中文久久婷婷| 免费观看的av| 日本五月天一页| www,婷婷五月天777me,com| 久久五月婷婷电影| av首页在线| 婷婷五月永远18免费久久久| 九九热狼人| 日欧大屏操| 99久久99九九99九九九| 中文字幕成人| 综合综合网| 五月婷婷久久大香蕉| av狠狠操| 这里只有精品9| 色哟哟性爱av| 99热在线观看免费精品| 五月丁香激情婷婷综合| 久久9RE热视频精品98| 天天日日夜夜| 丁香五月天成人| 婷婷五月天免费视频在线观看| 一级A片天天操夜夜操| 午夜九九电影| 另类小说婷婷色| 亚洲婷婷丁香五月亚洲| 激情丰满熟妇五月| 人人干AV| 久久成人综合五月天| 五月婷婷在线网站| 性爱电影科技贸易有限公司| 激情黄色五月天| 婷婷伊人激情婷婷| 六月色狠狠色| 午夜无码精品色综合久久| renrencaoav| 婷婷丁香激情五月天色色| 99.色| 99热在线观看这里只有精品| 婷婷五月天在线观看免费| 色综合色综合色综合| 欧美婷婷成人| 久久性爱视频| 96精品久久久久久久久| 九九这里有精品| 五月开心激情| 激情六月天婷婷| 啪啪综合| 噜噜五月天综合| 伊人五月天| 荫道BBWBBB高潮潮喷| 亚洲在线免费成人| av操B网站| Av在线资源| 亚洲Av成人在线观看| 日韩在线视频网站| 欧美色色色| 色五月涩涩婷婷蜜桃| 99色丁香婷婷综合网| www.minyis.com【JT】国内CDN落地页保证转化QQ2101460746 | 丁香激情四射| 亚洲中文字幕AV| 人人操Av| 中文字幕 久久9999| 丁香五月激情婷婷婷婷在线观看| 991精品在线视频| 丁香色婷婷| 少妇性BBB搡BBB爽爽爽视頻| 婷婷丁香中文字幕| 丁香五月婷婷婷桃花影院| 91九色熟女| 五月婷婷在线视频免费观看| 俺去也在线www色官网| 99热最新| 婷婷丁香成人| 丰满人妻妇伦又伦精品国产| 大香蕉久久视频久久视频| 精品导航在线x不卡| 极品九九九九九九| 欧美日朝成人| 色大综合| 99久视频| 激情五月天视频| 国产精品VIDEOSSEX久久发布| 超碰狠狠干99| 日韩另类在线观看| 婷婷五月天激情四射五月天激情| 天天狠狠色噜噜| XX久久| 香蕉综合网| 婷婷黄色网| 97久久精品| 欧美亚洲999| 色色A| 丁香婷婷六月| 碰99在线| 91碰| 狠狠干思思热| 综合色五月天| 第四色在线观看| 97碰碰在线观看视频| 亚洲激情在线| 91九色国产在线| 日日操天天操| 九九婷婷网五月天| 五月欧美丁香在线观看| 久播影院免费观看电视剧大全最新网| 久久成人综合五月天| 激情 婷婷 插| 天天摸天天高潮天天爽| 天天天摸夜夜夜玩| 久久久久久久久久人妻| 天天干天天操天天爱| 99愛国产| 开心婷婷丁香五月| 亚洲操操操| 欧美性猛交99久久久99| 婷婷五月综合色拍| 激情丁香九九五月综合网| 六月丁香色婷婷| 色五月婷婷基地| 日韩国产在线精品| 91狠狠综合久久久| www天天爽| 99久久国产宗和精品1上映| 一本久婷婷综合| 久久欧洲久久| 激情久久丁香| 亚洲精品a成人在线播放| 狠狠色噜噜狠狠狠狠综合| 丁香五月天天高清在线| 五月天综合久久| 丁香色影院| 婷婷夜夜夜夜| 97色色色色色| 亚洲 欧洲 国产 伦综合| 南京搡BBBB搡BBBB| 91九色无码日韩| 9热超碰| 人人澡天天色天天做| 五月婷婷色综图片| 国产亚洲99久久精品熟| 开心五月激情| 亚洲中文乱字字幕在线永久| 97干在线视频| 五月丁香婷婷色| 亚洲AV免费国产电影| 婷婷激情六月中文| 99色| 99在线爽| 人妻尝试久久久久久久久久久久| 夜夜骑天天玩天天日| 99热这里只有精品无码| 激情婷婷五月天| www夜夜操| 欧美婷婷| 久热爱大香蕉在线蜜臀悦色 | 五月天婷婷激情小说电影| 99毛片| 五月天久久久| 日本玖玖在线| 综合综合网| 亚洲乱码精品久久久久..| 婷婷五月AV| 婷婷内射视频在线| 综合99在线| 热热久久久久久久久| 色色色com| 六月婷婷激情图片| 天堂久久精品| 99干在线| 狠狠搞亚洲| 疯狂做受XXXX高潮A片动画| av色婷婷| 欧美色频| 日本黄色在线观看| 天天综合网网欲色| 岛国在线观看91| 激情网开心网| 五月丁香六月激情| 日韩在线观看亚洲| 超碰高清在线| 久艹伊| 色丁香综合影院| 国产精产国品一二三在观看| 久碰视频| 九九这里有精品| 九九操操| 91九色熟女| 久久精品婷婷| www.婷婷五月| 久久er视频6| 99色在线| 小视频aaa久久久| 伊人久久婷婷| 九九热超碰| 人妻久久久久久| 日本a片网址| 九九热精品在线| 99热精在线九九久久保| 婷婷五月婷婷| 色之综合网| 黄桃AV无码免费一区二区三区| 婷婷丁香五月天综合网| 亚洲精品字幕在线观看| 天天撸夜夜爽| 婷婷丁香五月综合网| 五月天婷婷深深爱| 97干在线免费| 五月婷婷,六月丁香| 久久婷婷人人| 99毛片| 99ri视频| 久久婷五月| 97深爱伊人综合| 人人操人人妻| 六月丁香综合| 色婷婷综合成人| 五月丁香啪| 国庆精品久久| 琪琪布丁香社区激情五月天| 成人精品99| 五月花激情网| 丁香五月天激情| 久久久久久xxxxx| 婷婷97狠狠成人网站| 五月丁香六月婷婷综合网缴情| 久七香蕉| 五月天激情图片| 99色综合网| 九九九九九999999| 婷婷综合精品视频97| 婷婷婷久久久| 夜夜操狠狠操| 狠狠色综合网站| 99啪在线视频| 五月丁香狠狠爱| 色 五月婷婷基地| 青青操成人福利| 九九五月天| 五月永久激情| 国产操肏网站| 激情四射五月天| 久久五月丁香综合17C| 男人天堂AV在线一区二区| 色热久| 亚洲综合五月天综合| 97碰在线免费观看| 99精品在线| 插少妇综合网| 久激情| 91久久久久久| 欧美激情-区二区三区| 婷婷五月综合在线| 另类图片激情五月天| 超碰免费人人肏| 亚洲 视频 导航 一区| 综合色天天| 99久久久久久www| 99操| 婷婷五月天在线一区| 丁香五月婷婷深爱综合激情| 激情小说色五月| 思思99久久| 日日干综合| 91伦| 天天色综网| 97深爱伊人综合| 超碰三级片| 情欲禁地| 99在线免费视频| 一二三区视频韩国| 天天射天天干天插色综合| 人妻丰满精品一区二区A片| 五月天天天天天天天天天天天婷婷婷| 五月伊人综合| 婷五月天| 蜜桃成语时李时珍 免费| 成人在线日韩欧美| AV天堂淫乩| 婷婷五月色情| 中文字幕有多少字| 啊V视频在线观看| 综合五月激情| 欧美噜噜噜草| 欧美综合五月天婷婷tin| 亚洲色小说在线综合| 九九在线91| 国产操碰| 丁香五月激情站| 免费99色| 黄色三级日本| 天天在线久久综合| 亚洲视频1区| 99国产在线| 丁香六月婷婷高清| 丁香五月婷婷色偷偷| 六月婷婷中文字幕| 丁香香五月激情免费视频| 人人色人人弄人人操| 九九这里有精品| 丁香婷婷精品视频| 综合色五月亭亭| 婷婷激情综合| 成人色站,在线视频,看片-SS1AV| 97人人操人人拍| 99啪| 色综合久久伊伊婷婷五月| 欧美超碰人人| 婷婷综合五月天| 五月天婷婷婷| 99热老网站| 五月九九综合| 日韩aaa|