欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

嵌入式Linux WiFi SDIO -110超時錯誤分析與實(shí)戰(zhàn)排查

嵌入式Linux WiFi SDIO -110超時錯誤分析與實(shí)戰(zhàn)排查 1. 先搞清楚 -110 是誰遞出來的做嵌入式 Linux 的尤其是做 WiFi 模塊適配的基本都會在某塊板子上撞見mmc0: error -110 whilst initialising SDIO card這一行日志。我第一次見到它是在一塊國產(chǎn) SoC 的評估板上WiFi 模塊型號剛換驅(qū)動也剛合進(jìn)去開機(jī)跑十次能成三次剩下七次全部停在枚舉階段dmesg 里翻來覆去就是這一句。當(dāng)時第一反應(yīng)是驅(qū)動的問題折騰了兩天把驅(qū)動換回舊版本、換了固件、換了 nvram 配置最后發(fā)現(xiàn)是板子上 SDIO 的 1.8V 電源軌在瞬時負(fù)載下塌了。這件事之后我才算真正把wifi sdio -110 錯誤分析這套東西從頭捋了一遍。這篇內(nèi)容想做的事情很明確把-110這個錯誤碼從它的誕生點(diǎn)一路拆到最終現(xiàn)象講清楚它是誰返回的、什么時候返回、在 SDIO 通信的哪一環(huán)觸發(fā)然后給出一套我自己在項(xiàng)目里反復(fù)用過的分層排查方法。不管你是剛接手 WiFi 模塊適配的新人還是已經(jīng)在調(diào) SDIO 時序的老手都能從里面找到能直接抄的操作。整篇偏實(shí)戰(zhàn)涉及設(shè)備樹、內(nèi)核配置、調(diào)試開關(guān)、硬件量測這幾塊都會給到具體命令和參數(shù)。1.1 從錯誤碼到調(diào)用棧-110 就是 ETIMEDOUTLinux 內(nèi)核里的錯誤碼沿用了一套固定的負(fù)數(shù)體系-110對應(yīng)的就是ETIMEDOUT。你可以在內(nèi)核頭文件里直接查到grep -n ETIMEDOUT /usr/include/asm-generic/errno.h # define ETIMEDOUT 110注意這里有個容易混淆的點(diǎn)用戶態(tài)errno是正數(shù) 110內(nèi)核態(tài)函數(shù)返回值是負(fù)數(shù)-110。所以在內(nèi)核日志里看到的error -110翻譯成人話就是等超時了。那到底是誰在等、等什么、等了多久順著 MMC 子系統(tǒng)往下扒最短的一條鏈路大概是這樣上層驅(qū)動比如brcmfmac、rtl8xxxu、aic8800之類調(diào)用sdio_readb()或sdio_writel()SDIO 公共層把它封裝成一個或多個mmc_request交給mmc_wait_for_req()mmc_wait_for_req()把請求下發(fā)給 host 控制器驅(qū)動常見的是sdhci然后wait_for_completion()等一個完成量Host 控制器發(fā)命令、發(fā)數(shù)據(jù)理應(yīng)產(chǎn)生中斷中斷服務(wù)程序里complete()喚醒等待者如果指定時間內(nèi)沒有中斷到來超時分支觸發(fā)把mrq-cmd-error或mrq-data-error置成-ETIMEDOUT也就是-110。在sdhci這顆最常見的 host 控制器里超時打印通常有兩處。命令超時走定時器sdhci_timeout_timer打印mmc0: Timeout waiting for hardware interrupt.數(shù)據(jù)超時走sdhci_timeout_data_timer打印內(nèi)容類似但緊接著會 dump 一整塊寄存器mmc0: sdhci: SDHCI REGISTER DUMP mmc0: sdhci: Sys addr: 0x00000000 | Version: 0x00001002 mmc0: sdhci: Blk size: 0x00000200 | Blk cnt: 0x00000008 mmc0: sdhci: Argument: 0x00000... | Trn mode: 0x00000012 mmc0: sdhci: Present: 0x01f70000 | Host ctl: 0x00000007 ...這塊 dump 是排查的核心線索之一后面第 4 章會專門講怎么讀它。1.2 為什么偏偏是 SDIO 接口的 WiFi 模塊高發(fā)同樣掛在 SDIO 上的設(shè)備比如 SD 卡、eMMC、SDIO 藍(lán)牙穩(wěn)定性通常比 WiFi 模塊好一大截。原因不復(fù)雜WiFi 是這幾個里面最不像存儲設(shè)備的那一個。SD 卡和 eMMC 的數(shù)據(jù)流是塊設(shè)備模型讀寫有明確的分界請求之間相對規(guī)整。而 WiFi 模塊在 SDIO 上跑的是三層?xùn)|西命令層CMD52讀寫寄存器、數(shù)據(jù)層CMD53做塊傳輸、帶外中斷DAT1 上的 SDIO 中斷。一次 WiFi 掃描可能觸發(fā)幾十上百次 CMD53中間還夾著固件下載、nvram 寫入、中斷上報(bào)。請求密度高、突發(fā)性強(qiáng)、時序敏感任何一環(huán)抖一下都可能超時。更要命的是功耗。WiFi 模塊在發(fā)射瞬間的電流峰值可以到 300mA 甚至更高如果電源設(shè)計(jì)余量不足、退耦電容放得不夠電壓跌落會直接反映到 SDIO 的信號電平上。而很多硬件同事在畫板子的時候是拿平均功耗去算電源的峰值這一下就被忽略了。再疊加一層因素SDIO 的時鐘頻率。為了追吞吐很多人上來就寫max-frequency 50000000甚至開 UHS-I 模式跑到 100MHz 以上。頻率越高對走線阻抗、端接、驅(qū)動能力的要求就越苛刻邊界條件下出-110的概率也就越大。所以你會看到一種很典型的現(xiàn)象——同一份軟件換一塊板子就好了或者在實(shí)驗(yàn)室好好的一到產(chǎn)線批量就零星報(bào)-110。2. SDIO 一次讀寫到底走過了哪些環(huán)節(jié)想把-110定位到具體環(huán)節(jié)得先把 SDIO 一次完整的傳輸拆開看。不然你只能看到超時了看不到在哪一步超時了排查就會變成碰運(yùn)氣。2.1 命令、響應(yīng)、數(shù)據(jù)的三段式時序SDIO 協(xié)議在物理層上和 SD 卡共享同一套機(jī)制一共用到三根信號線組CLK時鐘、CMD命令線、DAT0~DAT3數(shù)據(jù)線。一次操作大致分三段。第一段是命令段。Host 在CMD線上發(fā) 48 位的命令幀卡在收到后于規(guī)定時間內(nèi)回響應(yīng)。命令分兩類無響應(yīng)比如 CMD0、有響應(yīng)48 位短響應(yīng)或者 136 位長響應(yīng)。SDIO 的寄存器讀寫用的是 CMD52一個命令幀里就能帶地址和數(shù)據(jù)非常輕量塊傳輸用 CMD53命令幀里帶塊長度、塊數(shù)量、寄存器地址。第二段是響應(yīng)段??ū仨氃谝?guī)范規(guī)定的窗口內(nèi)把響應(yīng)拉回來這個窗口按時鐘周期計(jì)算。如果 host 在規(guī)定周期里沒采到響應(yīng)起始位硬件層面就是響應(yīng)超時軟件層看到的就是-110。第三段是數(shù)據(jù)段只有 CMD53 有。數(shù)據(jù)傳輸方向由命令里的 bit 決定讀的時候卡驅(qū)動 DAT 線寫的時候 host 驅(qū)動。數(shù)據(jù)段結(jié)束靠 CRC 狀態(tài)和結(jié)束位判定。數(shù)據(jù)線在傳輸期間是 busy 的卡會通過拉低 DAT0 表示我還沒準(zhǔn)備好這時候 host 必須等。三段之間還有間隙規(guī)范里叫 Ncr、Nrc 之類的時序參數(shù)都是按CLK周期定義的。這里有個關(guān)鍵結(jié)論時鐘頻率越高這些以周期計(jì)數(shù)的窗口在絕對時間上就越短對硬件邊沿質(zhì)量的要求就越嚴(yán)。這也是為什么降速能解決很多-110——它把時間窗口按比例放大了。2.2 誰在計(jì)時硬件超時與軟件超時是兩套東西很多人排查時會誤以為只有一個超時其實(shí) SDIO 上有兩層超時在同時工作搞清楚它們的區(qū)別非常關(guān)鍵。第一層是硬件超時由 host 控制器和卡之間的時序規(guī)定決定。SDHCI 這類控制器里有個 Data Timeout Counter值是根據(jù)當(dāng)前SDCLK頻率算出來的。核心代碼大致是/* drivers/mmc/host/sdhci.c 里的思路 */ count sdhci_calc_timeout(host, cmd, too_big);計(jì)算邏輯是拿期望的超時時間去除以時鐘周期再取 2 的冪次。這里有個容易踩的坑timeout 寄存器的值域很小最大只能表示到 2 的某次冪。如果當(dāng)前時鐘頻率太低、而要等的絕對時間又太長算出來的 count 就會溢出內(nèi)核會打印mmc0: Too large timeout 0x%x requested for CMD%d!看到這行說明你的時鐘低到了不正常的程度或者有人手動改了超時參數(shù)。第二層是軟件超時在 MMC 核心層。mmc_wait_for_req_done()會用一個固定的毫秒數(shù)去wait_for_completion_timeout()等不到就返回失敗。這一層是兜底防止硬件層面徹底死掉的時候內(nèi)核永遠(yuǎn)卡住。所以你在日志里可能看到兩種措辭Timeout waiting for hardware interrupt主機(jī)控制器定時器先到和request timeout核心層軟件等待先到。這兩個指向的排查方向不完全一樣。2.3 不同階段超時的日志長相日志是分階段定位的第一手證據(jù)。我把常見的幾種面貌列一下方便你對照。枚舉階段的失敗通常長這樣mmc1: new high speed SDIO card at address 0001 mmc1: error -110 whilst initialising SDIO card有時候前面會先有一行mmc1: Timeout waiting for hardware interrupt。這種情況說明卡已經(jīng)被識別到address 0001拿到了但是在后續(xù)功能初始化的時候掛了。固件下載階段的失敗往往在 WiFi 驅(qū)動的日志里brcmfmac: brcmf_sdio_download_firmware: dongle nvram file download failed brcmfmac: brcmf_sdio_bus_rxctl: resumed on timeout mmc1: Timeout waiting for hardware interrupt.這類錯誤的特點(diǎn)是枚舉過了接口通了但是大塊數(shù)據(jù)傳輸?shù)臅r候崩。運(yùn)行階段隨機(jī)抽風(fēng)日志零散且沒有規(guī)律mmc1: card 0001 removed mmc1: new high speed SDIO card at address 0001 wlan0: firmware crashcard removed后面緊跟new ... card是卡被重新枚舉了一次說明 host 控制器或者驅(qū)動判定卡掉線了。這種通常和電源瞬態(tài)或者信號完整性有關(guān)。休眠喚醒階段日志會出現(xiàn)在 resume 之后mmc1: Timeout waiting for hardware interrupt. mmc1: error -110 whilst initialising SDIO card這類問題八成和電源管理有關(guān)尤其是mmc-pwrseq和keep-power-in-suspend沒配好的時候。3. 按階段切分把問題圈死在某一層有了上面的日志分類第一步就不是急著改代碼而是先確定問題落在哪個階段。這個判斷做完能省掉一大半無效嘗試。3.1 枚舉階段CMD5 之后就不動了SDIO 卡的枚舉流程是CMD0 復(fù)位 → CMD5 查詢 IO 能力 → CMD3 拿到 RCA → CMD7 選中 → CMD52 讀寫 CCCR 寄存器 → 使能功能。如果-110出現(xiàn)在枚舉階段重點(diǎn)懷疑兩個方向。一是CMD5 的響應(yīng)超時。CMD5 是 SDIO 獨(dú)有的命令卡必須在規(guī)定時間內(nèi)回響應(yīng)。如果卡本身沒上電、復(fù)位沒釋放、或者 3.3V 電源還沒穩(wěn)那 CMD5 必然超時。這時候你要做的第一件事是量電源而不是改代碼。我在項(xiàng)目里遇到過一次mmc-pwrseq里的post-power-on-delay-ms只寫了 10ms而模塊手冊要求至少 100ms結(jié)果就是十次里成功三次。二是CMD52 讀寫 CCCR 失敗。這一步已經(jīng)在用 1 位總線通信了如果還超時說明信號質(zhì)量或者時鐘已經(jīng)出了問題。此時可以嘗試把max-frequency降到 400kHz 再試一次。400kHz 是 SD 規(guī)范里定義的識別階段默認(rèn)時鐘絕大多數(shù)硬件在這個頻率下都能通。如果 400kHz 還通不過那基本可以判定是硬件問題軟件怎么調(diào)都白搭。3.2 固件下載階段寫塊寫到一半崩WiFi 模塊尤其是 Broadcom、Realtek 那幾家的方案上電后需要 host 把固件和配置寫進(jìn)模塊內(nèi)存再啟動 CPU。這個過程通常幾萬到幾十萬字節(jié)靠 CMD53 分塊傳輸完成。這一階段出-110通常有三個原因第一個是塊大小設(shè)置不合理。SDIO 的塊大小受 CCCR 里的 FBRFunction Basic Register限制最大一般是 512 字節(jié)。但實(shí)際能跑多大還要看 host 控制器的能力和板級信號質(zhì)量。有些驅(qū)動默認(rèn)用 512實(shí)測在邊界板子上必須降到 256 甚至 128 才穩(wěn)。第二個是總線寬度。初始化階段通常用 1 位總線功能使能后切到 4 位。切換動作本身涉及寫 CCCR 的 Bus Interface Control 寄存器如果切換失敗或者切完沒生效后續(xù)大塊傳輸會異常。第三個是電源瞬態(tài)。固件下載是一個長時間高負(fù)載過程模塊電流持續(xù)在幾十毫安到上百毫安如果用的 LDO 響應(yīng)慢中間可能掉一下表現(xiàn)就是傳到一半超時。/* 一個比較保守的 WiFi 節(jié)點(diǎn)配置示例 */ sdmmc1 { status okay; bus-width 4; max-frequency 25000000; non-removable; cap-sdio-irq; keep-power-in-suspend; no-1-8-v; mmc-pwrseq wifi_pwrseq; vmmc-supply vcc_wifi; vqmmc-supply vcc_io; }; wifi_pwrseq: wifi-pwrseq { compatible mmc-pwrseq-simple; reset-gpios gpio1 29 GPIO_ACTIVE_LOW; post-power-on-delay-ms 200; power-off-delay-us 20000; };這套配置我一般拿來做基線。確認(rèn)能穩(wěn)定跑起來之后再逐項(xiàng)往上加頻率、加特性。3.3 運(yùn)行階段隨機(jī)抽風(fēng)最難纏運(yùn)行階段出-110是最讓人頭疼的因?yàn)椴豢蓮?fù)現(xiàn)??赡芘芤徽鞗]事也可能半小時來一次。這類問題我總結(jié)下來絕大多數(shù)不落在協(xié)議層而落在環(huán)境上。一個典型的場景是中斷風(fēng)暴。WiFi 模塊在 SDIO 的 DAT1 線上發(fā)中斷如果 host 這邊的 IRQ 處理不當(dāng)或者模塊固件在高負(fù)載下瘋狂上報(bào)DAT1 會長時間處于低電平導(dǎo)致數(shù)據(jù)線被占住。這種時候你會看到寄存器 dump 里 DAT0~DAT3 的狀態(tài)位一直不變。另一個場景是并發(fā)沖突。有些方案藍(lán)牙和 WiFi 共用一根 SDIO 總線SDIO 上掛兩個 function如果兩個驅(qū)動的 runtime PM 沒有協(xié)調(diào)好一個在做 suspend 另一個在傳輸就會出現(xiàn)請求超時。這種情況要去看mmc_pm的日志或者干脆先關(guān)掉 runtime PM 驗(yàn)證一次。最后一個高頻原因是供電紋波。前面提過 WiFi 發(fā)射瞬間的電流峰值如果此時 SDIO 恰好也在傳輸電壓跌落會直接打亂時序。這個問題在實(shí)驗(yàn)室輕負(fù)載下看不出來一上產(chǎn)線跑壓力測試就批量冒出來。3.4 休眠喚醒階段resume 后第一槍就啞火休眠喚醒階段的-110有個很明顯的特征——系統(tǒng)睡下去之前一切正常醒來之后第一次訪問模塊就超時。根因基本集中在兩處。第一處是電源在 suspend 期間被切掉了但驅(qū)動層面不知道卡已經(jīng)掉電醒來后直接發(fā)命令卡當(dāng)然不回。解決辦法是配好keep-power-in-suspend保持供電或者配好mmc-pwrseq讓它在 resume 時重新走一遍上電時序。第二處是resume 時序競爭。電源恢復(fù)了但模塊內(nèi)部還在啟動此時 host 已經(jīng)開始發(fā)命令。這個窗口期要靠post-power-on-delay-ms拉開。我一般會把初期調(diào)試的值直接給到 200ms確認(rèn)穩(wěn)定后再往下壓到手冊標(biāo)稱的最小值加 30% 余量。4. 硬件側(cè)電源、時鐘、走線這三件事軟件調(diào)到底還是解決不了的時候就要回到硬件。根據(jù)我的經(jīng)驗(yàn)-110里真正根因在硬件的比例比大多數(shù)人想象的要高得多。4.1 供電與上電時序先看三個電源參數(shù)VDD模塊主電源通常 3.3V、VDDIOIO 電源可能 3.3V 或 1.8V、以及復(fù)位信號。量測方法很直接把示波器調(diào)到電源軌上觸發(fā)條件設(shè)成下降沿閾值設(shè)在標(biāo)稱值的 90%然后讓 WiFi 跑起來。觀察有沒有瞬時跌落。判定標(biāo)準(zhǔn)不是平均電壓對不對而是最低點(diǎn)有沒有跌破模塊手冊的 minimum 值。我見過一個典型案例3.3V 軌在 WiFi 發(fā)射瞬間掉到 2.9V掉的時間只有幾微秒萬用表完全看不出來但 SDIO 時序已經(jīng)被打亂了。解決辦法是在模塊電源腳旁邊補(bǔ)一顆 22uF 陶瓷電容加一顆 1uF 高頻電容位置盡量靠近引腳。上電時序也是重災(zāi)區(qū)。模塊手冊一般會規(guī)定VDD穩(wěn)定后至少 N 毫秒才能釋放復(fù)位復(fù)位釋放后至少 M 毫秒才能通信。這兩段時間在設(shè)備樹里分別對應(yīng)post-power-on-delay-ms和mmc-pwrseq的時序控制。千萬不要憑感覺寫一個 10ms 就算完一定要查手冊或者實(shí)測。注意有些模塊的復(fù)位腳是低有效有些是高有效設(shè)備樹里GPIO_ACTIVE_LOW和GPIO_ACTIVE_HIGH寫反了現(xiàn)象就是永遠(yuǎn)枚舉不過。這個坑很基礎(chǔ)但很常見。4.2 時鐘頻率與驅(qū)動能力max-frequency是設(shè)備樹里最能直接影響穩(wěn)定性的一項(xiàng)。它的取值要和三個東西匹配host 控制器的能力、模塊支持的最高頻率、以及板級走線質(zhì)量。調(diào)試策略是從低往高試試跑頻率適用場景說明400kHz最小驗(yàn)證識別階段默認(rèn)頻率幾乎必通12.5MHz保底可用吞吐偏低但穩(wěn)定性最好25MHz常規(guī)選擇大多數(shù)板子在 4 位總線下能跑通50MHz高性能需要走線阻抗控制良好100MHzUHS-I對硬件和電源要求都極高除了頻率還有一項(xiàng)容易被忽略的是時鐘相位phase和驅(qū)動能力drive strength。不少 SoC 的 SDIO 控制器支持調(diào)節(jié)這兩項(xiàng)通過 pinctrl 或者專門的寄存器配置。當(dāng)走線比較長超過 5cm的時候適當(dāng)調(diào)整采樣相位往往能救回一批板子。/* 調(diào)整時鐘相位的典型寫法具體屬性名取決于 SoC */ sdmmc1 { pinctrl-names default, state_uhs; pinctrl-0 sdmmc1_b4_pins_a; pinctrl-1 sdmmc1_b4_od_pins_a; };4.3 走線與信號完整性走線這塊軟件工程師通常插不上手但你有必要知道該向硬件提什么要求。CLK是最關(guān)鍵的一根。它是單向的從 host 到卡全程應(yīng)該做阻抗控制參考地完整。CLK上的過沖和振鈴會直接導(dǎo)致采樣錯誤。CMD和DAT0~3是雙向的需要上下拉。SDIO 規(guī)范里要求 host 側(cè)提供上拉如果板子上漏了信號在空閑態(tài)就會浮空表現(xiàn)是隨機(jī)超時。等長也很重要。4 位模式下DAT0~3加CMD這五根線的長度差要控制住具體數(shù)值看你的目標(biāo)頻率。25MHz 以下可以放寬到 5mm 以內(nèi)50MHz 就要壓到 2mm 級別。最后一個實(shí)用技巧如果你懷疑信號完整性問題可以先降頻驗(yàn)證再飛線驗(yàn)證。降頻能讓問題消失基本就鎖定是信號問題如果再換一塊 PCB 就好了那就是板廠工藝波動。5. 軟件側(cè)調(diào)參與設(shè)備樹逐項(xiàng)過硬件排查完還是一頭霧水的時候軟件側(cè)還有不少能擰的旋鈕。這一章把設(shè)備樹屬性和內(nèi)核調(diào)試手段挨個過一遍。5.1 降速驗(yàn)證法最省事的第一刀不管問題出在哪我建議第一刀永遠(yuǎn)是降速。理由很簡單它能用最小的代價把時序類問題和邏輯類問題分開。# 修改設(shè)備樹 max-frequency 后重新編譯 dtb # 從 50MHz 降到 25MHz再降到 12.5MHz make dtbs降速后如果問題消失了說明是時序或者信號相關(guān)如果降速后問題依舊那多半是邏輯配置問題比如 pwrseq 時序不對、功能沒使能、固件路徑錯。這一刀的性價比極高我?guī)缀趺看味枷茸觥=邓衮?yàn)證做完之后還有第二個驗(yàn)證動作關(guān)掉 SDIO 中斷。sdmmc1 { /* 注釋掉這一行 */ /* cap-sdio-irq; */ };cap-sdio-irq打開時模塊通過 DAT1 發(fā)中斷給 host關(guān)掉之后走輪詢模式。如果關(guān)掉中斷后就不超時了說明問題出在中斷線路上重點(diǎn)去查 DAT1 的走線和上拉。5.2 設(shè)備樹里那些和 SDIO 穩(wěn)定性強(qiáng)相關(guān)的屬性我把實(shí)際項(xiàng)目里最常調(diào)的幾項(xiàng)整理成表附上取值邏輯。屬性常用取值影響bus-width1 或 44 位吞吐高但要求四根 DAT 都合格max-frequency25000000 起調(diào)直接決定時序余量non-removable加上避免 host 反復(fù)做卡檢測cap-sdio-irq視情況關(guān)掉可排除中斷線路問題keep-power-in-suspend視電源設(shè)計(jì)保持供電避免 resume 異常no-1-8-v視 IO 電平禁掉 1.8V 電壓切換mmc-pwrseq必配控制復(fù)位和上電延時disable-wp加上避免寫保護(hù)檢測干擾關(guān)于no-1-8-v多說一句。這一項(xiàng)是禁掉 1.8V 信令電壓切換。默認(rèn)情況下UHS-I 模式會把 IO 電壓從 3.3V 切到 1.8V 來換更高的速度。如果你的板子沒有做 1.8V 供電或者模塊不支持就一定要加上這一項(xiàng)。沒加的話host 會嘗試切換電壓切完通信直接崩日志就是一堆-110。5.3 抓現(xiàn)場debugfs 與 dynamic debug設(shè)備樹的配置是一回事跑起來之后當(dāng)前狀態(tài)是另一回事。想確認(rèn)實(shí)際生效的參數(shù)看 debugfs。# 掛載 debugfs如果還沒掛 mount -t debugfs none /sys/kernel/debug # 查看當(dāng)前總線狀態(tài)時鐘、總線寬度、時序模式 cat /sys/kernel/debug/mmc0/ios # 輸出示例 # clock: 50000000 Hz # vdd: 21 (3.3 ~ 3.4 V) # bus mode: 2 (push-pull) # chip select: 0 (dont care) # power mode: 2 (on) # bus width: 2 (4 bits) # timing spec: 2 (sd high-speed) # signal voltage: 0 (3.30 V) # driver type: 0 (driver type B)這個輸出很有用。如果signal voltage顯示 1.80V 而你的板子其實(shí)是 3.3V說明電壓切換出問題了。如果bus width顯示 1 位說明 4 位切換沒成功。再看 MMC 層的動態(tài)調(diào)試。只要內(nèi)核編譯時開了CONFIG_DYNAMIC_DEBUG就可以在運(yùn)行時打開某個文件或模塊的調(diào)試輸出# 打開 sdhci 的所有調(diào)試信息 echo module sdhci p /sys/kernel/debug/dynamic_debug/control # 打開 MMC 核心層 echo file core.c p /sys/kernel/debug/dynamic_debug/control # 打開 sdio 層 echo file sdio.c p /sys/kernel/debug/dynamic_debug/control # 查看當(dāng)前已打開的調(diào)試點(diǎn) grep -c p /sys/kernel/debug/dynamic_debug/control打開之后配合dmesg -w實(shí)時看日志能拿到比默認(rèn)詳細(xì)得多的信息包括每一次請求的地址、長度、方向。這個手段在做壓力測試抓偶發(fā)問題的時候特別有用。還有個更有針對性的一招用strace或者自己寫個腳本反復(fù)觸發(fā) WiFi 操作把復(fù)現(xiàn)概率拉高。#!/bin/sh # 壓力腳本反復(fù)掃描和連接放大偶發(fā)問題 while true; do iw dev wlan0 scan /dev/null 21 sleep 0.5 ping -c 2 -W 1 192.168.1.1 /dev/null 21 sleep 0.5 done我之前遇到一個半天才復(fù)現(xiàn)一次的-110用這個腳本跑了二十分鐘就穩(wěn)定復(fù)現(xiàn)了。6. 常見問題速查表與我的踩坑記錄前面幾章講的是方法論這一章把實(shí)際高頻問題整理成速查表再補(bǔ)幾個印象比較深的案例。6.1 常見問題速查表現(xiàn)象大概率原因快速驗(yàn)證方法處理方向每次開機(jī)必報(bào)-110上電時序或復(fù)位查 pwrseq 的 delay 值加大post-power-on-delay-ms十次里成幾次電源余量不足示波器量電源軌最低點(diǎn)補(bǔ)退耦電容、換 LDO降速后正常信號完整性把頻率降到 12.5MHz查走線、調(diào)相位、調(diào)驅(qū)動能力關(guān)中斷后正常DAT1 中斷線路去掉cap-sdio-irq查 DAT1 上拉和走線只在高溫下報(bào)錯器件溫漂加熱臺升溫測試換器件或降低工作頻率resume 后報(bào)錯電源被切但驅(qū)動不知情看 suspend 期間電流配keep-power-in-suspend大塊傳輸才報(bào)錯塊大小或總線寬度把 block size 降到 128調(diào) CCCR 配置或驅(qū)動參數(shù)并發(fā)時隨機(jī)報(bào)錯runtime PM 競爭關(guān)掉 runtime PM 測試協(xié)調(diào)兩個 function 的 PM6.2 幾個印象深刻的坑第一個坑是關(guān)于mmc-pwrseq的。有一次項(xiàng)目上換了新模塊代碼完全照搬舊模塊的設(shè)備樹結(jié)果新模塊十次開機(jī)只成功兩次。查了兩天最后發(fā)現(xiàn)舊模塊的復(fù)位是高有效新模塊是低有效設(shè)備樹里那個GPIO_ACTIVE_LOW沒改導(dǎo)致復(fù)位電平一直是反的。改完之后問題立刻消失。教訓(xùn)是換模塊的第一步是逐項(xiàng)核對硬件差異表不要想當(dāng)然地復(fù)用配置。第二個坑是關(guān)于-110和塊大小的關(guān)系。某方案默認(rèn)塊大小 512 字節(jié)實(shí)驗(yàn)室跑了三天沒問題。一到客戶現(xiàn)場同樣的板子開始零星報(bào)-110而且都是運(yùn)行一段時間之后。后來發(fā)現(xiàn)是客戶環(huán)境溫度比實(shí)驗(yàn)室高十幾度高溫下信號裕量變小512 字節(jié)的長傳輸更容易在中間出錯。把塊大小降到 256問題解決。這類環(huán)境差異觸發(fā)的邊界問題最容易被忽略因?yàn)樗桓淖冘浖壿嬛皇前延布A繅旱搅伺R界點(diǎn)。第三個坑關(guān)于寄存器 dump 的讀法。很多人看到Timeout waiting for hardware interrupt后面那一大坨 dump 就直接跳過其實(shí)里面信息量很大。重點(diǎn)看Present這一行也就是 PRNSTS 寄存器。里面有幾個關(guān)鍵位如果CMD Inhibit位一直是 1說明命令還在發(fā)host 沒收到響應(yīng)如果DAT Inhibit位一直是 1說明數(shù)據(jù)線還被占著卡沒釋放總線如果Command Complete位沒置起來說明卡壓根沒回響應(yīng)如果這幾個位都在合理狀態(tài)但中斷沒來那可能是控制器自己的中斷屏蔽或者路由問題。我有一次就是靠讀Present寄存器發(fā)現(xiàn) DAT0 一直是低電平最后定位到是模塊的某個 GPIO 復(fù)用配置錯了把 DAT0 拉死了。第四個坑關(guān)于降速的假陽性。降速之后問題消失很容易讓人得出硬件沒問題軟件降速就行的結(jié)論。但如果這是批量產(chǎn)品降速意味著吞吐下降可能根本達(dá)不到產(chǎn)品要求。**降速只是定位手段不是最終方案。**正確的做法是降到能穩(wěn)定的頻率然后往上找到臨界點(diǎn)再回頭去優(yōu)化硬件讓臨界點(diǎn)提高上來。6.3 一份可以直接抄的排查流程最后把我自己用的排查順序整理出來從零開始遇到-110可以照這個走。第一步抓完整日志。dmesg -w全程掛著復(fù)現(xiàn)一次把從卡識別到報(bào)錯的所有行完整保存。特別注意報(bào)錯前的最后幾條那是關(guān)鍵。第二步判斷階段??词敲杜e階段、固件下載階段、運(yùn)行階段還是 resume 階段。這一步?jīng)Q定后面往哪個方向走。第三步降速驗(yàn)證。把max-frequency降到 12.5MHz重啟測試。如果好了走信號完整性方向如果還壞走配置方向。第四步關(guān)中斷驗(yàn)證。去掉cap-sdio-irq重啟測試。用來區(qū)分是數(shù)據(jù)通道問題還是中斷通道問題。第五步量電源。示波器掛上主電源軌觸發(fā)在下降沿跑壓力測試。看最低點(diǎn)和持續(xù)時間。第六步看寄存器 dump。重點(diǎn)看Present和Error兩個狀態(tài)寄存器判斷是命令階段掛還是數(shù)據(jù)階段掛。第七步換板對比。同一份軟件換一塊板子如果換板就好那基本可以定性為硬件批次差異走硬件方向。這七步走完絕大多數(shù)-110都能有個明確的歸屬。剩下的極少數(shù)通常是多因素疊加比如電源和信號問題同時存在那就需要一項(xiàng)一項(xiàng)隔離工作量會大一些但思路是一樣的。我自己踩過的這些坑告訴我一件事-110這個錯誤碼本身不含任何指向性它只是說超時了。真正有價值的線索全在它前后的日志、寄存器狀態(tài)和你能測到的物理信號里。與其花時間猜不如花時間把這些證據(jù)收齊。收齊了答案往往就擺在那里。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
婷婷五月丁香久久| 激情纯色婷婷五月天在线不卡视频| 成年视频免费观看| 免费亚洲婷婷五月| 色愛综合网| 激情综合五月| 97久久视频| 色色色9| 丁香婷婷久久 | 中文字幕无码AV| 青青草a在线| 丁香五月偷拍| 六月丁香综合999| 亚洲欧美在线观看| 婷婷五月丁香久久| 丁香五月婷婷香| 内射激情在线| 91男人资源站| 欧美色性色好| 嫩草视频在线观看| 婷婷色网| 最新五月天婷婷影| 欧美乱码国产一级A片| 狼人伊人天堂| 婷婷亚洲综合| 天天舔天天| 39视频第二区| 大香蕉九九| 欧美噜噜免费观看 | 婷婷六月综合基地| 国产阿姨日皮艹逼内射视频 | 狠狠香婷婷五月| 五月天丁香婷婷网| 99久久综合| 五月丁香va| 亚洲综合视频八| 久久这里有精品视频| 欧美性久| 天天综合精品| 婷婷伊人网| 六月丁香成人| 色综合色色| 色欲人妻综合aaaaaaaa网| 风流少妇A片一区二区蜜桃| 狠狠干夜夜干| 婷婷九月色| 亚洲精品无AMM毛片| 淫荡工a| 香蕉五月婷婷| 夜夜爽日日躁| 色99色| 思思99热| 久久五月天网| 99热20| 99久高清视频| 亚洲热综合| 色欲天天综合| www.99久| 色yeye欧美| 国产成人+综合亚洲+天堂| 狠狠狠激情网| 色婷婷电影网| 五月色丁香婷婷综合| 久色大| 丁香五月另类小说在线阅读| 婷婷五月丁香91| 熟女少妇内射日韩亚洲| 国产亚洲在线观看| 亚洲热视频| 国产免费AV网站| 日本欧美成人片AAAA| 婷婷五月天成人小说| 俺来也综合网精品一区| 91久久国产自产拍夜夜91久久精品文字>91麻豆精品国产 | 欧美久久久中文字幕| 婷婷五月天奸女| 色婷婷欧美在线| 狠狠狠婷婷五月综合| 九九九九成人| 色网五月婷婷| 97久久视频| 欧美久久网| 这里只有精品99www| 国产五月天婷婷| 婷婷综合性爱网| www.zbzhongsen.com| 99热这里只有精品免费观看| 国产五月婷| 婷婷激情四射五月天| 亚洲综合激情五月久久| 丁香五月婷婷色| AV色五月婷婷| 婷婷五月无码| 婷婷六久久| 色色色国产| 丁香成人综合| 欧美噜噜久久久XXX| 天天综合色丁香| 九九丁香社区欧美激情| 婷婷色导航| 丁香婷婷综合激情五月色,开心五月丁香花综合网,激情综合五月亚洲婷婷,五月天 | 激情五月丁香五月| 九九综合久久| 五月婷婷综合热| 日本丁香久在线| 伊人喵咪a V| 99热e| 天天爽天天摸人妻综合网| 超碰女人天堂| 99黄色在线视频精品熟女| 1024在线视频| 亚洲精品又粗又大又爽A片| 色情婷婷五月天| 国精产品一区二区三区| 五月开心婷婷| 激情五月天激情网| 久9热视频在线观看| 色情终和网| 97人人超| 97久久精品| www,婷婷五月天,com| 婷婷五月激情六月丁香 | 色综合久网| 亚洲黄色操逼| 热久久999| 欧美性猛交AAAA片黑人 | 六月婷婷八月丁香| 国产精品视频免费看| 人妻久久人妻久久第一区| 五月婷婷啪啪| 九月丁香婷婷| 久久五月视频| 色婷婷综合网站| 99热青青草原| www.思思99热| 色性日本| 丁香婷婷视频| 丁香婷五月天开心六月| 欧美丁香五月| 激情四射网| www五月| 婷婷色情五月| 四虎婷婷五月天| 天天肏屄夜夜爽| av在线资源| 久久婷婷色色| 激情婷婷丁香五月天小说| 9久精品视频| 天堂久久大香蕉| 性爱五月婷| 99在线精品免费视频| 欧美性爱五月天| 九九热九九| 97人人射| 九九99精品视频在线观看| 综合色色综合| 99视频免费播放 | 色五狠狠| 亚洲成人五月天| 色五月激情五月天| 色5月婷婷色| 六月婷婷在线| 婷婷丁香五月亚洲免费| 人人干人人操人人摸人人做| 婷婷五月AV| 久色成人| 色综合五月婷婷狠狠干| 五月天色五月天| 婷婷玉月丁香五月在线视频| 99 这里只有精品| 婷婷久久婷婷| 五月丁香激| 婷婷五月综合色中文字幕| 99久久超级| 免费播放AV| 涩 五月 婷婷 狠狠| av成人在线播放| 日韩一级A片黄色| 久久亚洲天堂| 狠狠五月激情丁香六月| 五月婷婷六月丁香激情深爱| 激情五月婷黄版| 九热精品| 五月婷婷综合色啪首页| 欧美VA在线| 这里只有精品免费观看网占| 人人摸人人摸| 97啪啪| 天天天天干| 天天操天天操天天操天天操天天操| 精品色色| 天天草女人| 亚洲爱婷婷| 4399成人黄A片| 狠狠色性| SESE无码AV| 免费视频99| 99热在线看| 欧美三级欧美一级| 99热这里只有精品免费| 一本久久婷婷| 丁香狠狠操| 亚洲AV中文在线| 婷婷六月啪啪| 色波激情五月天| 亚洲激情综合五月婷婷啪啪| 成人在线网| 六月丁香激情婷婷| 六月丁香社区| 免费观看的av| 91免费看片| 天天操天天操天天操天天操天天操| 青柠影视免费高清电视剧| 99燥99日| 色五月天堂| 久久之人妻| 丁香五月宝贝激情网| 狠狠做深爱婷婷久久综合一区| 欧美色宗和激情| 啪啪一区| 97操碰日本女人| 色一情一乱一乱一区9| www色色com| 久久婷婷五| 婷婷六月色开| 五月婷婷自拍| 久久久99免费视频| 丁香五月天堂婷婷| 小泽玛利亚视频一区二区| 久久五月婷婷电影| 五月天六月色| 俺也去五月婷婷丁| 99久久.www| 色情·com| 婷婷五月天激情免费在线观看| 婷婷天天婷婷天天澡| 涩综合婷婷| 五月 婷 久| 日本人妻操| 高清无码.com| 婷婷少妇激情| 亚洲成人AV高清字幕| 亚洲热久| 五月天婷婷影院影院| 激情四射婷婷| ww超碰在线| 国产精品人妻在线网址| 天天天操天天天爰| 六月丁香综合| 成片免费播放| 激情五月色综合网| 狠狠色婷婷丁香六月| 成人丁香婷婷| 人人爽人人爽人人爽人人爽| 五月丁香激情综合网| 色色色综合色| 九九九九操逼| 色婷婷五月天天天天天| 另类图片激情五月| 婷婷狠狠爱| 伊人青草成人| 网色99| 婷婷五月六月丁香| 91丁香色| 久久激情综合| 五月婷激情影院| 少妇激情基地| 五月五婷婷| 欧美三级A做爰在线观看| 九九99精品视品| 99久久婷婷国产综合精品草原| 天天爽夜夜爽夜夜爽精品视频 | 一区=区操屄高清大全av| 久久老码第一| 五月丁香六月天| 五月久久丁香| 激情五月丁香色婷婷| 网色99| www.玖玖婷婷在线| 怕怕av| 五月花在线观看视频| 中文字幕丰满孑伦无码专区| 成人网站av免费网站推荐| 免费色色色| 另类激情五月| 欧美日韩国产伦精品日韩人妻一| 色综合激情| 91中文狠狠综合| 79亚洲精品少妇| 婷婷丁香五月激情| 国产性爱在线| 提提热五月天婷婷| 天天色色天天| 超碰伊人碰婷婷五月| 新五月天婷婷激情电影| 99精品国产在热久久| 婷婷六月激情小说网| 97热在线精品| www网站在线观看| 五月丁了香蕉综合| 99色色色色| 激情性爱五月天网页| 五月天婷婷三级黄| 狠狠色婷婷777| 久久9视频| 欧美草久久五月天91| 人妻丰满精品一区二区A片| 九九热自拍| www.色婷婷.com| 色很久综合| 亚洲婷婷激情五月天| 婷婷丁香在线| 日韩啪啪网| 五月色综合网| av线电影| 五月丁香啪啪综合| 国产91视频| 欧美精品999| 中文在线视频久9| 丁香五月欧美激情| 婷婷丁香九色| 5月婷婷性视频| 校花娇喘呻吟校长陈若雪视频| AV在线资源| 丁香五月婷婷激情网| 天堂综合久久| 51XX午夜影福利| 99re免费精品视频| 五月婷婷成人| 管管補管管紱| 91呦呦呦| 激情五月天婷婷在线网址发给我| 夜夜躁婷婷AV| 91丨九色丨大屁股| 激情涩涩网| 超碰色综合| 99欧州偷拍视频| 狠狠爱综合| 成人版视频在线观看| 色欲Av五月天| 色一色综合| 六月丁香好婷婷| 狠狠色色| 五月婷婷丁香深深爱| 九九热在线视频| 色很很96| 免费黄网不卡AV| 婷婷五月天国产手机在线视频观看| 色婷婷久久综合| 人人操操| 色无码| 激情综合色五月六月婷婷| 国产黄色在线观看| 五月天播播| 五月天婷婷激情四射综合| 亚洲精品永久久久久久| 日本99视频精品免费播放| 激情久久久久久| 爱射综合| 九九在线视频| 激情性五月天免费小说视频| 人人操人人爰人人一天天碰夜夜拍夜夜爽-中国A级毛片天天看天天谢… | 丁香五月激情宗合网| www.精品99| 激情AV| 99re这里只有| 色婷婷五月天天天干天天操天天爽| 1囯产午夜仑鲁鲁| 99视频激情四射| 五月婷婷综合激情网| 在线成人网址| 天天曰夜夜爽| 色综久久久| 天天爽天天| 丁香九月婷婷综合| 少妇性BBB搡BBB爽爽爽视頻| 天天插天天爱| 婷婷久久午夜网| 亚洲欧洲另类图片| 久久 婷婷 五月天| 九九色图| 天堂爱爱| 丁香激情五月| 日韩99色| 91啪啪啪啪| 亚洲欧美成人在线| 国产99精品免费视频| 丁香色婷婷色手机免费在线| 天堂中文国产| 五月天婷爱综合| 真实的国产乱XXXX在线91| 五月精品免费XXX| 无码字幕中文| 97人人草| 五月www| 激情久久综合网| 五月婷婷成人| 思思热在线精品视频网站| 香蕉AV777XXX色综合一区| 日日夜夜久| 色色色色综合网| 成人.在线日韩| 成人免费高清在线播放| 欧美综合丁香网| 色色999三级片| 婷婷在线免费| av中文网站| 色色五月婷婷| 九月大香蕉| 99色在线视频| 九九色大香蕉| 开心五月婷| 激情综合五| AV色色天堂中文| 五月丁香龟婷婷| 久久99大全| 久久久激情| 思思热再线视频| 五月激情啪啪啪| 中字幕视频在线永久在线观看免费| 色综合日日| 婷婷综合激情| 正宗黄色毛片| AA片在线观看视频在线播放| AV在线大香蕉| 99综合色| 99热最新地址在线| 亚洲殴洲精品Av在线| 97人人搞| www.日日夜夜.com| 九九视频这里是精品五月| 97五月天婷婷综合激情网| 亚洲这里只有精品| 天天做天天爽| 亚洲免费99| 18av天堂| 51成人| 99热 日韩| 丁香六月综合激情| 人人人操| 久热这里只有| 激情综合综合综合| 久久婷婷的综合色丁香五月| 玖玖色综合色| 成年人丁香五月| 色婷婷激情五月天| 26uuuu精品一区二区| 亚洲人妻av| 五月天丁香久久综合| 综合久久人妻| 婷婷五月丁香伊人网| 手机旧版看人妻1025| 黄色激情网站在线观看| 在线看的免费网站| 亚洲AV综合在线观看| 中文aV网| 婷婷丁香五月天欧美| 亚洲愉拍99热成人精品| 亚洲成人日韩无码精品| 五月婷婷啪啪啪| 99热在线观看这里只有精品 | 色一情一乱一乱一区9| Www.sesese丁香| 亚洲激情综合| 99热这里只有精品1| 人人九色| 狼人婷婷综合| 99热首页| 丁香五月电影| 五月天天天色| 日日夜夜噜噜爽爽| 婷婷五月天,影院| 五月丁香怕啪啪| 久久久久9999| www超碰| 婷婷丁香五月天操逼| 亚洲中文字幕在线观看| 六月丁香婷| 婷婷五月丁香六月| 色婷婷色婷婷五月| 婷婷五月天视频小说| 色五月综合激情| 久久久大香蕉| 五月婷婷日| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 播播网色播播| 另类小说五月天| 五月婷婷天堂| www夜夜操com| 五月天堂在线| 婷婷综合色播网| 色五月婷婷少妇人妻| 久久五月天合网| 久热视频A.| 五月丁香爱婷婷深深| wWwCom夜操wwW| 色五月婷婷五月天| 九九伊人网| 熟女人妻视频| 深爱激情综合网| 97婷婷丁香五月天激情图片| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 丁香五月综合激情啪啪| 色婷婷亚洲婷婷在线观看| 五月婷婷激清网| 久久这里只有欧美| 婷婷综合网| 男人的天堂五月丁香| 密臀久久| 97久久人人操| 五月天另类小说亚洲| 久这里只有精品| 色五月天综合| 新精品99| 五月天婷婷综合免费| 婷婷99综合| 五月婷婷丁香伦理网| 色婷婷另类| 激情五月天综合婷婷网| 亚洲第79页| 丁香五月六月欧美| 久久人妻在线| 色五狠狠| 26uuu欧美宗合| 六月婷婷狠狠色在线观看| 五月四色色| 丁香涩涩爱| 丁香六月久| 五月婷AV| 91九色首页| 美女天天久久| 五月丁香婷色| 日日射天天射| 特级西西4444www无码| www.五月.com| 婷婷操逼| av操逼网| 国产乱人偷精品人妻A片| 狠狠色婷| 久久婷婷东京热大香樵| 日韩成人无码人妻| 亚洲Av入口| 久久激情五月网| 五月亭亭综合五码| 《蜘蛛女》梁铮1995| 日本一级| 婷婷五月在线视频| 五月婷综合| 婷婷九月激情| 六月色色婷婷| 91无码高清| 99干视频| 日本人妻伦在线中文字幕| 91人人爽人人操| 久久久婷婷婷| 伊人影音无码一区二区三区| 伊人五月天日日夜夜久久久天天| 五月天婷婷在线播放免费| 性视频久久| 国产午夜成人AV在线播放| 人妻五月天激情开心网| 婷婷综合性爱网| 国产成人片| 99爱视频在线| 天天综合色| 婷婷五月在线| 啪啪色激情五月天| 天天综合天天玩夜夜玩天天玩夜夜玩| 婷婷五月天狠狠色| 国产精品VIDEOSSEX久久发布| 伊人大香久久| 激情精品久久| 66精品成人免费网站在线观看| 日韩另类在线观看| 99国产精品白浆在线观看免费| 久热伊人在91| 久久婷婷五月综合伊人| 天天拍久久| 色婷婷成人| 大香蕉99热| 欧美成人精品A片免费一区99| 狠狠操狠狠色| 天天操天天日天天爱| 丁香五月天网友自拍啪啪啪视频| 丁香五月综合激情啪啪| 91丁香色| 丁香色五月婷婷17C| 色情丁香五月婷婷精品| 日本啪啪天堂| 思思热在线播放| 99碰超| 国产午夜精品AV一区二区麻豆| 久久xxxx| www久久久| 无码G高清天| 成人午夜天| 五月天激情婷婷久久| 五月婷三级片| 九九这里都是精品| 啊v视频在线观看| 99这里有精品视频| 亚洲色无码| 久久网日本| 婷婷丁香五月综合| 六月婷婷综合| 亚洲色激婷| www:99热视频| 婷婷久热| 香蕉曰比| 五月丁香黄色视频| av中文网站| 婷婷色九月| 91五月天| 久久少妇视频| 亚洲AV激情五月综合网| 婷婷色基地在线看 | 丁香五月婷婷色情综合| 婷婷开心六月| 九九久久99精品免费观看www| 亚洲第一成人无码A片| 婷婷丁香六月天| 婷婷色播综合五月| 五月丁香成人| 一本色道久久综合狠狠躁小说| 99久热| 五月中旬婷婷丁香六| 日本一级黄色电影| 色色色com| 五月天综合网| 婷婷六月色开| 婷婷五月天无码视频| se99热久久一本| 五月激情综合网婷婷| 日本高清久| 色丁香婷婷美女视频网站| 一区二区三区视频| 成人网页在线观看| 亚洲色频| 丁香六月狠狠| 日日夜夜干| 超碰成人电影| www.夜夜操.com| 婷婷成人视频| 五月天com| 久久婷婷综合五月天| 99色综合| 日熟女| 综合视频久久| av在线免费网站 | 开心五月综合| 婷婷丁香久久五月综合| 天天干天天日天天插| 美英法精品无码免费视频| 九九99视频精品| 亚洲超碰在线| 激情综合综合综合| 亚洲婷婷视频| 精a品a视a频| 岛国资源网| 五月丁香好婷婷姑娘综合网| 五月天无码视屏播放| 青青热久久综合| 丁香六月婷婷五月天| 五月天丁香啪啪综合| 国产精品-第3页-91JQ就要激情网91JQ5.JQJQ926.XYZ | 五月天婷婷av| 99免费在线| 狠狠操狠狠操| 日韩成人无码| 丰滿爆乳一区二区三区| 91男人资源站| 97碰碰在线观看视频| 色吊丝永久访问网址| 五月婷激情影院| 99色激| 97色色-99久久| 超碰碰碰碰| 五月丁香六月婷婷手机无线| 婷婷五月天高清无码| 99热只有| 免费看成人AA片无码视频吃奶| 日本欧美成人片AAAA| 激情骚五月| www.五月天色色色| 激情五月天在线观看色婷婷| 五月婷婷网站| 五月丁香六月婷婷操操操| 婷婷五月精品在线| 激情五婷网| 五月婷婷av| 色一情一乱一伦一区二区三区| 国产亚洲99久久精品熟女| 97艹| 99热这是里只有精品| 婷婷丁香五月欧美人| 这里只有精品免费视频| 久久9精品| 国产婷伊人| 久久98热re| 婷婷激情五月综合丁| www.99热. com这里只有精品| 五月天开心网| 亚洲一二三网| 草综合网| 99热精品无码| 天天色情站| 色五月婷婷综合在线| 亚洲精品久久久久久久久久吃药| 99热网址| 国产精品久久久久9999小说| 久久久www| 色播丁香婷婷五月激情| 久久精品人妻| 六月婷基地| 国产性色蜜乳| 色情综合| www.91操| 婷婷五月天成人网站| 狠狠操狠狠爱| 九热...av| 婷婷五月激情视频在线| 日韩色色色色| 丁香五月天欧美| 香蕉久久国产AV一区二区| 色五月婷婷五月天激情综合| 五月婷婷,六月激情| 色五月播五月| 综合99综合久久久久久久| 另类天堂| 97av在线视频| 丁香五月网| 丁香婷婷五月天在线视频| 八戒青柠影视剧在线观看| 99久久66| 婷婷99| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 久久黄A片| 停停五月天激情网| 婷婷五月精品| 激情五月小说婷婷| 激情综合五月丁香六月婷婷| 午夜 外网 精品 在线| www.天天干| 色色综合成人网| 久久九九色| 成人视屏在线观看| 91丨九色丨东北熟女| 丁香五月天殴美激情| 婷婷五月天网| 久久久五月激| 婷婷婷久久| 无码人妻丰满熟妇奶水区码| 九月丁香久久网| 九九热在这里只有精品| 无码激情AAAAA片-区区| 五月婷婷在线观看| 丰滿爆乳一区二区三区| 深爱激情四射| 涩丁香91| 国产精品日日躁夜夜躁| 六月丁香啪啪| 亚洲九九视频| 凹凸7777操操操| 色九四色| 99热日| 激情婷婷五六月天| 99ER热精品视频| 亚洲五月婷婷| 国产精品18久久久| 综合久久五| 欧美啪啪五月天| 五月丁香少妇| 久操人妻| 婷婷丁香五月激情中文字幕版| 久久这里99| 99热精品在线| 97操碰| 久久曰9| 狠狠色噜噜狠狠| 高清无码.com| 五月天婷婷黄色| 婷婷色导航| 色狠狠综合| 337久久| 亚洲精品久久久无码| 91精品久| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 99视频精品| 五月激情六月| 久一网站| 中文字幕不卡网站| 天天干天天干天天| 五月丁香婷婷视频| \\五月天婷婷激情| 在线成人网址| 草了bav视频在线观看| 超碰免费人人| 色屌丝中文字幕| 在线五月色播| 婷婷丁香五月天综合AV| 欧美超碰亚洲| 北条麻妃九九九国产精品视频| 综合AV在线| 无月播播激情在线观看视频| 婷婷五月天激情偷拍| 9l久久久视频| 激情五月天色播| 色五月色五天色情网| 99热97| 婷婷六月色播| 天天射射夜| 五月婷婷xxx| 五月丁香欧美综合| 久久99看免费| 丁香久久九九99| www99精品亚| 丁香婷婷五月激情四射网| 天天爱天天操| 九九九九这里只有精品| 色婷婷视频在线| 色婷婷电影网| 爱操人妻| 色吧五月婷婷| 亚洲色视频| 久久久91| 午夜成人AV在线| 亚洲综合色色色| 五月天色婷婷伊人网| 久热最新视频| 操射国产日本| va婷婷| 五月六月激情| 日本五月婷| 久久婷婷六月综合| www天天色天天射| 五月丁香六月色| 欧美影院| 色播五月婷婷| 六月丁香激情网| 久99久视频| 三级三久久线久久99久目本WW| 午夜丁香婷婷| 欧美三级A做爰在线观看| 婷婷婷狠狠| 高清a片基地| 中文字幕操比影片| 午夜丁香久久久久久| 色99www.| 丁香婷婷久久| www,欧美干干干干干干| 婷婷丁香色情五月天| 丁香五月五月婷婷| 激情图片婷婷| 色婷婷久久| 婷婷久久五月| 五月丁香 狠狠爱| 亚洲一区国产传媒| 丁香婷婷五月天色综合| 婷婷久久国产视频| 九九热在线视频观看| 丁香五月天堂| 性无码专区无码| 97超级碰碰碰久久久| 夜夜爱影院| WWW色五月天| 欧美久久婷婷| 色屌丝中文字幕| 婷婷色在线观看| 被男人添B超爽视频| 久久青草国| 五月婷九月| 玖玖在线视频福利| 思思热高清在线观看| 五月婷婷综合在线| 热婷婷在线视频| 亚洲天堂亚洲色色色| 操操操Av| 亚洲V国产V欧美V久久久久久| 超碰免费人人肏| 五月丁香婷草| 俺去也在线官网| 91ncom.色| 亚洲电影中文字幕| 色五月丁香五月激情五月激情| 色五月婷婷五月| 欧美精品XXXXBBBB| 国产精典视频在线观看| 99热 在线观看| 97人人操人人爽| 丁香深五月婷婷| 色99视频| 99精品综合| 久久96热| 亚洲操人| 色婷婷AⅤ| 99久久九九| 国产SUV精品一区二区6| 精品99在线| 九九热99精品在线| 五月婷婷激情网| 九九色院| 激情图片五月天| 亚洲乱码日产精品BD| 91丨熟女丨首页| 99爽视频| 91视频免费后入强操| 操操自拍| 五月丁香六月欧美综合网站| 999热视频精品99免费在线| 日日干夜夜撸夜夜骑 | 在线va网站| 97狠狠色| 久久98| 月婷婷婷婷五月| 91jiuseshunv| 色色色com| 男人天堂 久久| 亚洲操b| 亚洲啪| 操啊操av| 色婷婷五月综合激情中文字幕| 婷婷五月天在线综合导航| 大香蕉综合网| 色婷婷亚洲婷婷| 色丁香五月婷婷| 美女丁香五月天| 五月天伊人| 激情综合丁| 久久爱综合| 中文av网| 97香蕉久久超级碰碰高清版 | 狠狠色综合网| 99这里只有精品8| 无码AV免费精品一区二区三区 | 五月亭亭六月色| 人妻人人操| 久久黄A片| 极品少妇XXXX精品少妇偷拍| 婷婷色五月天综合网| 丁香五月-激情综合| 丁香六月激情综合| 啪啪啪大香蕉| 91 欧美| 欧美激情综合五月色丁香| 第五婷婷伊人丁香色| 久久综合丁香激情五月| 国产丁香五月天婷婷| 九九综合五月欧美| 丁香五月婷婷啪啪啪| 2014天天爽| 亚洲无码影片| 色九月婷婷综合| 情欲综合网| 亚洲精品网址| 婷婷五月色| 六月丁香婷婷六月激情综合| 久久超视频| 色偷偷综合| 国产阿姨日皮艹逼内射视频| 婷婷不卡基地| 91九色网| 99re热免费观看视频精品| 九伊人网| 99热这里只有精品首页| 99色播| 激情综合99| CHINESE熟女老女人HD视频| 五月婷婷六月丁香在线视频| 操操人人| 亚洲在线网站| 五月天久久久| 日本成人噜噜噜| 99热6这里只有精品6| 99色色| 五月婷婷狠狠干| 九九综合九九| chaopeng在线人人| 天天日天天舔| 五月激情在线| 99色区| 99玖玖免费视频| 免费观看日韩成人av| 色婷婷99| 中文色婷婷| 五月天激情啪啪| 九九热这里只有精品556| 五月天婷婷激情在线色图| 九九综合| 大香蕉五月天婷婷| 国产精品电影| 久久五月网| 婷婷五月中文在线视频| 99精彩视频在线观看| 99热超碰在线| 亚洲在线操| 六月丁香色色色| 久久色9| 色五月天丁香婷婷色| 婷婷丁香五月综合久久| 国精产品一区一区三区免费视频| av色色国产| 五月天社区| 射琪琪| 成人va在线观看视频| 久久这里只有精品1| 色婷婷a v| 在线视频区| 成人av在线电影| 思思久热| 大地9中文在线观看免费高清| 亚洲性视频| 婷婷六月伊人| 五月激情六月综合| 99视频在线啪| 丰满人妻一区三区三区| 色婷婷亚洲精品天天综| 成人免费网站免费看| xx综合网| 久久小视频| 色九月欧美| 色色免费网战视频| 97色色网| 亚洲精品又粗又大又爽A片 | 国产精品久久久久9999小说| 久久综合五月情| 亲子乱AV-区二区三区| www.日本91| 337p大胆噜噜噜噜噜91Av| 色五月开心婷婷| 色五月五月天| 婷婷久久亚洲| 99精品综合| 26UUU欧美| 婷婷丁香五月天综合激情| 999九九九久久久99HD| 中文字幕AV在线| 这里只有视频精品| 激情婷婷综合五月少妇| 性爱网六月丁香| 国产视频福利| 深爱激情AV| 精品国产va久久久| 天天肏在线观看| 色99在线视频| 国产乱子轮XXX农村| 婷婷中文字幕在线| 激情五月天久久丁香| 婷婷五月天欧美图片在线播放电驴| 五月丁香色| 天天综合精品| 激情五月天第四色| 激情五月丁香五月| 人人干Av| 成人在线网| 国产精产国品一二三在观看| 97色碰碰公开视频| 欧洲激情网站| 香蕉AV777XXX色综合一区| 天天日天天色| 色婷婷五月天无码视频| 九九99精品视频| 亚洲色色色色| 婷婷丁香在线| 99热黄| 日本色噜| 中文网av| 99热综合| 99色色爰| 亚洲综合五月| 亚洲V国产V欧美V久久久久久| 五月婷婷天堂| 免费观看的婷婷五月视频在线| 久草热在线视频| 青青日韩| 五月综合缴情网| 婷婷色情 | 五月天啪啪| 婷婷成人五月天| 婷婷丁香五月天之开心少妇| 国产六月婷婷| 91操人视频| 9999综合99综合人| 激情五月色综合国产精品| 六月激情综合| 91九九| 人妻激情综合| 大香蕉九操| 99国产精品久久久久久久久久久| 丁香五月婷婷香| 五月天激情综合10p| 丁香六月综合激情| 久久婷婷青草五月天| 久久九九爽| 国产免费一区二区三区三州老师F1F1.CC | 黄急一级视频| 色五月婷婷五月久久| 综合网亚洲| 五月停停色| 天天做天天爱天天高潮| 亚洲成人中文字幕| 日韩十国产极品久久| 色99综合色88| 天天cha成人综合网| 国产成人+综合亚洲+天堂| 美女亚洲五月丁香| 欧美经典片免费观看大全| 这里只有精品视频国产| 久久九九免费视频| wuyuedingxiang99| 少妇性按摩无码中文A片| 色色色精品无码区| 丁香五月激情综合| 人人干AV| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 五月停停激情网| 欧美性爱专区| 99热在线只有精品| 99网址在线看| 色噜噜狠狠色综无码久久合欧美| 丁香无五月网| 大香蕉福利导航| 看全色黄大色大片| 亚洲啪视频| 性爱综合网| 天天做天天爱天天要| 国产精品美女| 思思热99热| 能直接看的AV网站| 婷婷五月激情的图片| 婷婷五月激情网| 九九精品片一| 婷婷香蕉视频| 婷婷五月色情天| 色色色色五月天| 国产精品涩涩涩视频网站| 狠狠做婷婷| 思思热闹这里只有精品| 色婷婷在线电影| 五月丁香色情| 亚洲第一色区| 国产ava| 成人AV在线电影| 五月激情网络| 色三级色三级| 亚洲综合网在线| 超碰狠狠操| 99热在线这里| 婷婷久久亚洲| 婷婷五月丁香性爱| 亚洲无码影音| 538在线精品| 国产人妻人伦精品一区二区| 夜精品无码A片一区二区蜜桃| 天天操夜夜操| 婷婷五月丁香久久| 婷婷九月综合| 亚洲精品国产setv| 1024人妻| 婷婷在线精品| 亚洲中文字幕在线观看| 9热网站| 碰碰碰97国产| 婷婷五月欧美AA片免费| 色亭亭九月| 国产精品成人网站| 色婷婷五月在线| 大香蕉婷婷丁香天堂AV| 国产日产成人亚洲欧美国产VA| 五月丁香综合网色欲| 天天做天天爱天天爽在| 久久99色色| 婷婷五月天激情影片| 亚洲五月停停| 91要啪| 成人看片网站| 午夜天堂一区人妻| www久久久久久久| 97成人在线视频精品| 情色婷婷五月天| 综合一本道| 婷婷狠狠色| 久久婷婷五月天懂色| 人妻丰满精品一区二区A片| 九九色逼| 九九色黄色| 偷拍91九色| 操一区| 伊人婷婷激情| 九热视频| 九九精品热| 国产欧美日韩综合精品一区二区| www.金莲av| 激情视频91| 26uuuavcom| www.色九月| 色色五月天激情| 婷婷六月综合基地| 那里有AV网址| 五月天综合视频网| 五月天激情小说| 麻豆123区| 色综久久AV| 天天碰夜夜爽| www.五月天婷婷| 激情丁香五月天图片| 日日天天天| 欧美性色视频| 国产国产乱老熟女视频网站97| 色九综合| 婷婷精品在线| 五月丁香婷婷色色| 久久5 9视频免费观看| 大香蕉啪啪啪| 五月丁香中文| 一区二区三区四日本| 久久婷五月婷| 色五月婷婷五月天激情综合| 国产精品国产成人国产三级| 久久精品63| 99热这里有精品2| 婷婷久久综合久| 另类激情综合| 久久婷婷五月天| 激情五月天。| 97狠狠色| 五月天开心网| 亚洲中文AV| 六月丁香婷婷网| 99碰碰| 亚洲色色五月| 伍月婷婷六月丁香| 亚洲中文字幕在线观看| 日韩色色色色色| 中文在线成人| http://www.com久久久精品一区| 婷婷激情五月天网站| 色五月婷婷操逼| 丁香五月婷婷Av| 丁香五月天AV| 91传媒无码人妻精| w婷婷五月婷婷w| 亭亭玉月丁香| 久久综合激情五月天| 91一起艹| 大香蕉五月天婷婷丁香91| 天天综合中文| 五月综合激情久久| 夜夜操天天爽| 九九色网专区| 这里只有精品在线免费视频| 丁香五月激情啪啪| 精品色情一区二区三区四区| 噜噜五月天综合| 丁香色色网| 婷婷激情图片| 久热精品视频在线观| 综合网激情| 激情伍月 欧美| www久久久久久久久久久| 啪啪啪五月天| 色99久草在线| 五月六月伦理| 一区中文字幕电影| 五月天播播| 九月综合| 直接看的av|