欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

嵌入式固件進(jìn)階:啟動(dòng)流程拆解與OTA升級工程化實(shí)戰(zhàn)

嵌入式固件進(jìn)階:啟動(dòng)流程拆解與OTA升級工程化實(shí)戰(zhàn) 1. 從一條實(shí)際故障說起為什么芯片“跑起來”了系統(tǒng)卻不工作前陣子處理一個(gè)量產(chǎn)階段的現(xiàn)場問題現(xiàn)象很典型設(shè)備上電后指示燈反復(fù)重啟串口只能抓到零散的引導(dǎo)日志。幾個(gè)剛?cè)胄械耐碌谝环磻?yīng)是“看門狗復(fù)位了”于是反復(fù)查喂狗代碼查了一個(gè)下午沒結(jié)果。后來我把啟動(dòng)日志和復(fù)位狀態(tài)寄存器拉出來對比發(fā)現(xiàn)復(fù)位原因不是獨(dú)立看門狗而是上電復(fù)位后固件跳轉(zhuǎn)到了未初始化完成的RAM區(qū)取指異常直接觸發(fā)了硬件錯(cuò)誤。這件事對我觸動(dòng)挺大的。很多嵌入式工程師把“啟動(dòng)流程”當(dāng)成芯片手冊里最簡單的章節(jié)覺得無非是從復(fù)位向量開始、初始化時(shí)鐘、設(shè)置堆棧、跳轉(zhuǎn)main但這恰恰是量產(chǎn)階段最容易出幺蛾子的環(huán)節(jié)。尤其是現(xiàn)在芯片越來越復(fù)雜MCU和SoC的啟動(dòng)路徑差異、NOR Flash的XIP映射、安全啟動(dòng)的鏡像校驗(yàn)、多級BootLoader的跳轉(zhuǎn)條件任何一環(huán)沒吃透出了問題都很難定位。所以我把嵌入式固件進(jìn)階里最核心的這部分內(nèi)容整理成專欄連載本期聚焦三塊啟動(dòng)流程的深度拆解、故障定位的方法論、OTA升級的工程化實(shí)戰(zhàn)最后附上篇思考題的解析。整個(gè)專欄面向的是已經(jīng)有基礎(chǔ)開發(fā)經(jīng)驗(yàn)、想往中高階走的嵌入式工程師或者正在做量產(chǎn)維護(hù)、被現(xiàn)場問題折騰得焦頭爛額的朋友。文章里講到的思路和代碼級細(xì)節(jié)都是我在實(shí)際項(xiàng)目中驗(yàn)證過的不是教科書式的流程復(fù)述。2. 啟動(dòng)流程不是“從復(fù)位到main”這么簡單2.1 從”上電瞬間“到”第一條指令“中間發(fā)生了什么很多人會(huì)說芯片上電后第一條指令從復(fù)位向量取出來然后就開始執(zhí)行了。這個(gè)說法在ARM Cortex-M處理器上勉強(qiáng)成立但在更復(fù)雜的場景下已經(jīng)不夠用了。嚴(yán)格來說從Power On到CPU真正執(zhí)行用戶代碼中間要經(jīng)過好幾層路徑每一層都有它自己的“啟動(dòng)過程”。以Cortex-M為例芯片上電后硬件會(huì)自動(dòng)從地址0x00000000讀取初始堆棧指針MSP從地址0x00000004讀取復(fù)位向量然后跳轉(zhuǎn)執(zhí)行。這是硬件固定的行為但問題在于“地址0x00000000”在芯片內(nèi)部映射到了哪里。很多帶內(nèi)部Flash的MCU比如STM32會(huì)把Flash映射到0x08000000而0x00000000只是這個(gè)區(qū)域的別名如果芯片支持從System Memory也就是BootROM啟動(dòng)那0x00000000又映射到了BootROM。這時(shí)候啟動(dòng)引腳BOOT0、BOOT1的選擇就直接決定了第一條指令從哪里來。對于更復(fù)雜的應(yīng)用處理器SoC級別比如全志、瑞芯微、NXP i.MX系列上電后的第一段代碼通常是固化在芯片內(nèi)部的BootROM它負(fù)責(zé)初始化最基礎(chǔ)的時(shí)鐘、DDR控制器有些芯片這一步在SPL階段然后根據(jù)啟動(dòng)引腳或燒寫在OTP一次性可編程存儲(chǔ)器里的啟動(dòng)源配置從SD卡、eMMC、NOR Flash或SPI NAND中加載下一級鏡像。這個(gè)過程通常叫BROM啟動(dòng)或啟動(dòng)設(shè)備選擇。這里要特別提醒一點(diǎn)不要只看“最終跳轉(zhuǎn)到APP”這個(gè)結(jié)果要把啟動(dòng)過程拆成“芯片級啟動(dòng)”和“應(yīng)用級啟動(dòng)”兩層。芯片級的啟動(dòng)代碼用戶改不了但它的行為決定了鏡像加載順序、校驗(yàn)方式、FUSE硬件熔絲狀態(tài)應(yīng)用級的啟動(dòng)代碼比如早期的匯編初始化、SystemInit()、main之前的__main才是用戶真正能干預(yù)的部分。很多啟動(dòng)問題的根因就出在兩層之間的銜接處——比如BootROM已經(jīng)把外置DDR初始化好了但因配置位錯(cuò)誤跳轉(zhuǎn)到SPL后又重新初始化了一遍DDR導(dǎo)致時(shí)序錯(cuò)亂。2.2 MCU和SoC啟動(dòng)流程的典型差異對比我在給團(tuán)隊(duì)做內(nèi)訓(xùn)的時(shí)候經(jīng)常拿一張表來梳理MCU和SoC啟動(dòng)流程的差異。這張表來自多個(gè)項(xiàng)目的實(shí)操經(jīng)驗(yàn)不同廠商芯片細(xì)節(jié)不同但框架一致。對比維度典型MCU如STM32系列典型SoC如i.MX6ULL、全志V3s第一條代碼來源片內(nèi)Flash/System Memory/BootROM片內(nèi)BootROM固化代碼啟動(dòng)介質(zhì)選擇啟動(dòng)引腳電平組合啟動(dòng)引腳或OTP熔絲配置讀eFuse決定是否需要初始化DDR一般不需要無外部DDR或由應(yīng)用初始化BootROM/SPL階段必須初始化DDR鏡像加載方式Flash映射XIP直接執(zhí)行從介質(zhì)拷貝到RAM/DDR再執(zhí)行也可XIP安全啟動(dòng)支持部分型號支持TrustZone, Secure Boot普遍支持且有獨(dú)立的安全硬件和密鑰管理多級BootLoader通常單級IAP方式除外常見BootROM SPL U-Boot Kernel的多級結(jié)構(gòu)把這個(gè)差異理清楚你就能理解為什么MCU項(xiàng)目里“直接跳APP”的寫法很常見而SoC項(xiàng)目里U-Boot的bootcmd和bootargs會(huì)涉及大量的地址搬運(yùn)和校驗(yàn)。一個(gè)典型的失誤是在SoC平臺做MCU式的思維把整份固件編譯成一個(gè)bin設(shè)置好鏈接地址后直接燒寫進(jìn)NOR Flash結(jié)果發(fā)現(xiàn)BootROM不識別——因?yàn)锽ootROM期望的鏡像是帶特定頭部信息的格式比如i.MX的IVT頭部或是全志的TOC0格式它需要知道鏡像長度、加載地址、校驗(yàn)和甚至簽名信息。這不是Flash里有沒有代碼的問題是格式不匹配的問題。2.3 向量表重映射和應(yīng)用鏡像分級加載的底層邏輯ARM處理器的向量表是個(gè)容易被忽視但極其關(guān)鍵的結(jié)構(gòu)。默認(rèn)情況下Cortex-M的向量表放在0x00000000但應(yīng)用代碼運(yùn)行時(shí)中斷響應(yīng)要正確就必須讓硬件能找到異常向量表。常見的辦法是把向量表放到Flash的實(shí)際起始地址比如0x08000000然后通過VTOR寄存器告訴CPU“向量表換地方了”。如果你在做OTA或者多分區(qū)BootLoader向量表重映射幾乎是必答題。比如BootLoader放在0x08000000APP放在0x08020000APP啟動(dòng)前必須設(shè)置SCB-VTOR 0x08020000。這一步漏了APP跑起來看似沒問題但任何一個(gè)中斷來了CPU都會(huì)跑到錯(cuò)誤的地址去取向量輕則中斷不響應(yīng)重則直接HardFault。這種問題在調(diào)試器下很難復(fù)現(xiàn)因?yàn)檎{(diào)試器連接時(shí)可能默認(rèn)做了處理但斷開調(diào)試器獨(dú)立運(yùn)行時(shí)問題就暴露了。更工程化的做法是分四個(gè)層次設(shè)計(jì)鏡像加載鏡像頭部Image Header包含魔數(shù)、版本號、鏡像長度、CRC32校驗(yàn)值、簽名信息、目標(biāo)加載地址等。OTA升級時(shí)BootLoader先解析頭部校驗(yàn)通過才放行。BootLoader主體負(fù)責(zé)硬件初始化、跳轉(zhuǎn)條件判斷、固件校驗(yàn)、升級流程調(diào)度、備份恢復(fù)。APP1/APP2雙鏡像區(qū)OTA方案中常見的A/B分區(qū)布局BootLoader根據(jù)啟動(dòng)標(biāo)志位選擇啟動(dòng)哪個(gè)區(qū)。獨(dú)立存儲(chǔ)區(qū)如EEPROM/Flash末尾保存啟動(dòng)計(jì)數(shù)、升級狀態(tài)、回滾計(jì)數(shù)等運(yùn)行時(shí)信息。這個(gè)分級加載的好處在于任何一級出現(xiàn)問題都能定向排查。頭部解析失敗優(yōu)先查固件生成工具BootLoader跳不過去查啟動(dòng)標(biāo)志位和地址映射APP運(yùn)行異常查向量表和運(yùn)行時(shí)環(huán)境。系統(tǒng)性方法遠(yuǎn)勝于拿到板子就瞎猜。3. 故障定位方法論用“分層抽絲”代替“四處亂試”3.1 一個(gè)被我反復(fù)安利的定位框架NBOOT四步法我給團(tuán)隊(duì)定的故障定位框架叫NBOOT不是某個(gè)專利方法而是從實(shí)際排障中總結(jié)出來的一套習(xí)慣。四個(gè)字母分別對應(yīng)Noting記錄現(xiàn)象、Breaking拆分層次、Observing觀測數(shù)據(jù)、Testing驗(yàn)證假設(shè)。這套方法在啟動(dòng)問題、偶發(fā)復(fù)位、OTA失敗等場景中都很管用。做嵌入式故障定位最容易犯的毛病是拿到板子就改代碼。改了一行試試不行再改一行再試。運(yùn)氣好碰對了就收工運(yùn)氣不好一天下來代碼改得面目全非問題還在。NBOOT的初衷是讓你先建立一個(gè)“事實(shí)清單”再去動(dòng)代碼。以我接手的一個(gè)實(shí)際案例為例某設(shè)備低溫環(huán)境下偶發(fā)啟動(dòng)失敗大約二十臺里有三臺會(huì)出現(xiàn)。故障現(xiàn)象是“上電后電源指示燈亮但串口無輸出LED狀態(tài)燈不進(jìn)入工作模式”。如果不做記錄直接上手很可能會(huì)懷疑電源模塊、懷疑時(shí)鐘芯片、懷疑Flash虛焊改來改去沒有結(jié)論。按NBOOT走一遍Noting記錄故障板卡批次、故障溫度點(diǎn)、供電電壓測量值、復(fù)位引腳波形、串口完整數(shù)據(jù)流。結(jié)果發(fā)現(xiàn)低溫時(shí)3.3V電源正常但復(fù)位釋放時(shí)間比正常板卡慢約280ms且串口完全沒有引導(dǎo)打印。Breaking把啟動(dòng)過程拆成電源域建立、時(shí)鐘穩(wěn)定、復(fù)位釋放、BootROM執(zhí)行、鏡像加載、APP初始化六個(gè)環(huán)節(jié)逐一判斷哪個(gè)環(huán)節(jié)現(xiàn)象缺失。Observing用示波器抓取Flash片選和時(shí)鐘信號發(fā)現(xiàn)復(fù)位釋放后約5msFlash CS有動(dòng)作但持續(xù)時(shí)間極短疑似讀取了錯(cuò)誤的地址區(qū)域。Testing將故障板卡的固件手動(dòng)重?zé)_認(rèn)CRC一致后重新上電問題偶發(fā)依舊。最終定位到外部復(fù)位看門狗芯片在低溫下復(fù)位延遲參數(shù)漂移與啟動(dòng)時(shí)序沖突。這個(gè)案例說明一個(gè)問題邊界不清晰的故障硬擼代碼是無效的。記錄現(xiàn)象、拆分層次、觀測數(shù)據(jù)、驗(yàn)證假設(shè)這四步反復(fù)循環(huán)每一步都會(huì)縮小排查范圍。3.2 啟動(dòng)日志設(shè)計(jì)決定你排查效率的隱形投資很多裸機(jī)項(xiàng)目沒有日志系統(tǒng)出了問題只能用調(diào)試器打斷點(diǎn)這在開發(fā)階段可能夠用一旦到了量產(chǎn)和現(xiàn)場維護(hù)階段就非常痛苦。我對啟動(dòng)日志的要求是“四有原則”有層次、有時(shí)間、有結(jié)論、有上下文。有層次的意思是日志要分級別至少要分ERROR、WARN、INFO、DEBUG。啟動(dòng)階段的關(guān)鍵節(jié)點(diǎn)用INFO記錄比如[I] RAM size check passed, size128KB [I] Flash magic word check OK (0xAA55AA55) [I] Image CRC32 verify OK, len0x1F400 [I] Jumping to APP at 0x08020000, VTOR setting done有時(shí)間的含義是日志要帶時(shí)間戳哪怕是最簡易的計(jì)數(shù)器遞增序號也行。當(dāng)你要把兩份日志對齊分析時(shí)沒有時(shí)間戳是災(zāi)難。很多RTOS項(xiàng)目啟動(dòng)階段還沒創(chuàng)建系統(tǒng)節(jié)拍可以用一個(gè)遞增的32位計(jì)數(shù)器模擬順序時(shí)間。有結(jié)論指的是日志要輸出“我成功做了什么”或“我在哪一步失敗了”而不是只輸出“Im here”。比如// bad UART_Print(Init 1 done); UART_Print(Init 2 done); // good UART_Print(W25Q64 ID read 0xEF4018, detection OK); UART_Print(LVGL framebuffer addr0x30020000, size310KB, alignment OK);有上下文的意思是關(guān)鍵錯(cuò)誤打印時(shí)要把現(xiàn)場數(shù)據(jù)一并輸出。比如CRC校驗(yàn)失敗光一句“CRC Fail”是沒用的要輸出當(dāng)前分區(qū)、期望CRC、實(shí)際CRC、讀取的Flash地址范圍這樣才方便分析是數(shù)據(jù)被篡改還是讀取邏輯出錯(cuò)。提示啟動(dòng)日志要設(shè)計(jì)成“雙通道輸出”。串口打印輔助人工調(diào)試同時(shí)寫入一塊獨(dú)立的日志分區(qū)或RAM環(huán)形緩沖區(qū)配合崩潰轉(zhuǎn)儲(chǔ)機(jī)制可追溯最后一段現(xiàn)場狀態(tài)。這是工業(yè)級產(chǎn)品很常見的做法。3.3 崩潰現(xiàn)場的信息存檔從HardFault到問題閉環(huán)故障定位的高階階段是不要等故障發(fā)生后再去“現(xiàn)場看”——而是在崩潰瞬間把所有關(guān)鍵狀態(tài)記錄下來下次啟動(dòng)時(shí)上報(bào)。這個(gè)思路在汽車電子里叫故障快照在通用嵌入式里可以做得輕量很多。Cortex-M的HardFault處理程序里有幾個(gè)關(guān)鍵寄存器BFAR總線錯(cuò)誤地址寄存器、MMFAR存儲(chǔ)器管理錯(cuò)誤地址寄存器、以及壓棧到當(dāng)前棧幀里的PC和LR。正確的做法是在fault handler的最開始把這些值保存到靜態(tài)變量里然后嘗試寫到備份寄存器或Flash末尾的日志區(qū)然后軟復(fù)位。復(fù)位后的啟動(dòng)日志階段把上次崩潰信息打印出來。我在專欄的課里給過一個(gè)精簡但可用的架構(gòu)void HardFault_Handler(void) { uint32_t pc __get_PSP(); // or MSP // 解析壓棧幀提取PC/LR保存到備份區(qū) // 寫入復(fù)位原因寄存器快照 // 觸發(fā)系統(tǒng)軟復(fù)位 }這里有個(gè)容易忽略的細(xì)節(jié)HardFault_Handler里的另一個(gè)CPU模式可能已經(jīng)切換到線程模式也可能還在處理器模式。如果異常發(fā)生在線程模式且使用了PSP需要按PSP去解棧如果發(fā)生在MSP則從MSP解棧。很多新手踩過這個(gè)坑解析出的PC完全是垃圾值。在專欄第3講“崩潰轉(zhuǎn)儲(chǔ)機(jī)制設(shè)計(jì)”中我做了一個(gè)完整的示例將PC、LR、PSP、MSP、BFAR、MMFAR、以及出錯(cuò)前后的32字節(jié)內(nèi)存快照寫入外部Flash的專用區(qū)域啟動(dòng)時(shí)通過串口協(xié)議CRASH_DUMP:PC0x08001234,LR0x08001100輸出。這個(gè)過程一拿到現(xiàn)場日志直接就能還原95%以上的崩潰現(xiàn)場不必再復(fù)現(xiàn)故障。4. OTA升級工程化穩(wěn)定回滾比順利升級更重要4.1 OTA整體架構(gòu)從“能用”到“好用”的幾個(gè)關(guān)鍵設(shè)計(jì)很多人做OTA的第一版是“能升級就行”BootLoader檢測到標(biāo)志位把新固件寫入APP區(qū)跳轉(zhuǎn)。但量產(chǎn)之后就會(huì)發(fā)現(xiàn)最危險(xiǎn)的不是升級失敗而是升級失敗的后果不可控設(shè)備變磚、無法回滾、長期離線。工程化的OTA架構(gòu)至少要包含以下要素升級包格式設(shè)計(jì)包含頭部魔數(shù)、版本、目標(biāo)地址、長度、CRC、固件數(shù)據(jù)、尾部填充、可選簽名信息。雙區(qū)A/B或者雙備份APP Recovery的存儲(chǔ)布局。BootLoader驗(yàn)簽和校驗(yàn)邏輯升級后才能跳轉(zhuǎn)。升級狀態(tài)機(jī)和斷點(diǎn)續(xù)傳機(jī)制如果走網(wǎng)絡(luò)傳輸?;貪L策略和失敗恢復(fù)路徑。升級過程中的防斷電設(shè)計(jì)數(shù)據(jù)先寫緩沖區(qū)校驗(yàn)后再整塊寫入。我見過很多團(tuán)隊(duì)一開始就上復(fù)雜的A/B系統(tǒng)車規(guī)級方案全套照搬結(jié)果開發(fā)周期拖長還因?yàn)榇鎯?chǔ)空間不夠頻繁調(diào)整分區(qū)。更好的策略是先判斷產(chǎn)品形態(tài)如果是物聯(lián)網(wǎng)設(shè)備有網(wǎng)絡(luò)傳輸條件一定要做A/B分區(qū)哪怕是A/B其中一個(gè)是壓縮鏡像如果是U盤或本地工具升級空間緊張時(shí)可以做單區(qū)域備份恢復(fù)區(qū)方案。一個(gè)實(shí)用的折中方案是APP區(qū) Recovery區(qū)。Recovery區(qū)放一個(gè)極簡的、功能完整的固件支持最基本的網(wǎng)絡(luò)通信和重新升級能力。APP區(qū)崩潰或校驗(yàn)不過時(shí)BootLoader跳RecoveryRecovery嘗試聯(lián)網(wǎng)拉取最新固件。這個(gè)方案比A/B省空間又比“裸奔”可靠得多。4.2 雙A/B鏡像與“寫失敗即回滾”的代碼級實(shí)現(xiàn)很多同事一聽到A/B升級就怕覺得復(fù)雜度高。實(shí)際上A/B的思路很樸素系統(tǒng)有兩個(gè)可用的應(yīng)用槽位一個(gè)叫slot A一個(gè)叫slot B。BootLoader永遠(yuǎn)有一個(gè)“當(dāng)前活動(dòng)槽”的概念。升級時(shí)把新固件寫到非活動(dòng)槽寫完校驗(yàn)通過后通過修改啟動(dòng)標(biāo)志位切換活動(dòng)槽。如果新固件啟動(dòng)失敗比如多次重啟都沒成功BootLoader自動(dòng)回滾到另一個(gè)槽位。關(guān)鍵實(shí)現(xiàn)點(diǎn)有三個(gè)。第一分區(qū)表如何定義。以STM32H750為例內(nèi)部Flash雖然標(biāo)稱2MB但實(shí)際有效可用空間可能有坑外擴(kuò)Flash更常見。我的做法是把Flash劃分為| BootLoader (64KB) | slot A (512KB) | slot B (512KB) | AppInfo/標(biāo)志區(qū) (4KB) |AppInfo區(qū)存儲(chǔ)三個(gè)關(guān)鍵變量boot_attempts啟動(dòng)嘗試次數(shù)、active_slot當(dāng)前活動(dòng)槽、upgrade_pending是否有待完成升級。第二BootLoader的啟動(dòng)決策邏輯可以精簡為if (is_valid(active_slot)) { if (boot_attempts MAX_ATTEMPTS) { active_slot other_slot(active_slot); boot_attempts 0; } jump_to(active_slot); } else { rollback_to(other_slot()); }這里MAX_ATTEMPTS通常設(shè)為3或5。每次啟動(dòng)時(shí)boot_attempts加一App正常工作后比如運(yùn)行超過5分鐘清零。如果新固件有問題導(dǎo)致頻繁復(fù)位boot_attempts會(huì)持續(xù)增加到閾值就觸發(fā)回滾。第三App側(cè)的“運(yùn)行成功確認(rèn)”邏輯。這個(gè)比BootLoader側(cè)更隱蔽。很多團(tuán)隊(duì)的App在main函數(shù)一開始就清標(biāo)志位但這等于告訴BootLoader“我成功了”——實(shí)際上模組串口都不一定初始化完。我的建議是清標(biāo)志位放在一個(gè)“應(yīng)用就緒檢查點(diǎn)”例如網(wǎng)絡(luò)連接成功、文件系統(tǒng)掛載成功、自檢通過之后寧可多等幾秒再清也別過早確認(rèn)。void app_main(void) { hardware_init(); // ... 關(guān)鍵外設(shè)自檢 if (all_self_tests_passed()) { ota_mark_boot_successful(); // 清 boot_attempts } // 繼續(xù)運(yùn)行 }4.3 加簽驗(yàn)簽汽車嵌入式軟件OTA的底線防線標(biāo)題里有“汽車嵌入式軟件ota加簽驗(yàn)簽”這個(gè)熱搜詞確實(shí)反映了行業(yè)趨勢。以前MCU固件不怎么關(guān)心簽名因?yàn)槲锢斫佑|燒錄器就能刷。但OTA普及后固件包在網(wǎng)絡(luò)傳輸若沒有簽名機(jī)制中間人攻擊或者惡意固件植入就成了真實(shí)威脅。簽名方案不是加一個(gè)函數(shù)就完事。硬件存儲(chǔ)條件、密鑰管理、升級包格式都要配套設(shè)計(jì)。我常用的方案是固件發(fā)布時(shí)用私鑰對固件哈希做簽名比如ECDSA或RSA-PSS簽名和固件一起打包。芯片內(nèi)部或外部安全芯片預(yù)置公鑰固件。BootLoader在驗(yàn)簽時(shí)先計(jì)算固件的SHA-256哈希再用公鑰驗(yàn)證簽名。驗(yàn)簽通過后才繼續(xù)做CRC校驗(yàn)和跳轉(zhuǎn)。在實(shí)際代碼里簽名驗(yàn)證的耗時(shí)是個(gè)需要重視的工程問題。一個(gè)512KB的固件在Cortex-M7 400MHz下算SHA-256大概幾百毫秒到1秒加上RSA驗(yàn)簽本身幾十到幾百毫秒不等如果升級包還做了AES加密解密總時(shí)間可能達(dá)到數(shù)秒。這塊時(shí)間在升級流程總時(shí)間里的占比要提前評估否則用戶會(huì)以為設(shè)備卡死了。另外簽名的密鑰管理比算法本身更容易翻車。私鑰一旦泄露整個(gè)產(chǎn)品線的信任鏈就垮了。我在專欄里專門講過分級密鑰體系開發(fā)密鑰、測試密鑰、生產(chǎn)密鑰分離生產(chǎn)密鑰存HSM硬件安全模塊編譯服務(wù)器和開發(fā)機(jī)用不同的簽名工具鏈。這聽起來“過度設(shè)計(jì)”但做過汽車電子或智能門鎖類產(chǎn)品的朋友一定明白密鑰泄露帶來的返廠維護(hù)成本有多恐怖。4.4 斷點(diǎn)續(xù)傳、斷電保護(hù)和異常分支OTA失敗的六個(gè)隱藏坑總結(jié)一下我做過和踩過的OTA相關(guān)坑很多坑不是功能不跑而是跑到一半出幺蛾子。這里列六個(gè)發(fā)生率最高的第一個(gè)是斷電寫Flash。升級過程中如果突然斷電Flash正在擦寫的那一個(gè)扇區(qū)很可能損壞?;謴?fù)策略是“寫前備份舊固件”或“升級過程先寫副本完成后再切換”。如果存儲(chǔ)空間不允許做副本至少要在擦除扇區(qū)前把舊數(shù)據(jù)備份到另一個(gè)介質(zhì)外擴(kuò)Flash、SD卡否則斷電即變磚。第二個(gè)是網(wǎng)絡(luò)下載的“斷點(diǎn)續(xù)傳”沒有做完整。很多人只在傳輸層做了續(xù)傳比如HTTP Range但沒考慮Flash層的續(xù)寫如果下載了一半斷電Flash里已經(jīng)寫入了部分新固件下次重新升級時(shí)要先擦除再從頭寫。而如果沒做版本號管理重啟后BootLoader可能誤以為該分區(qū)已經(jīng)有了完整固件直接跳過去。第三個(gè)是升級完成后的校驗(yàn)位置不對。有些團(tuán)隊(duì)只在下載完成后校驗(yàn)一次但忽略了解壓、解密的校驗(yàn)。OTA包經(jīng)過壓縮或加密后實(shí)際寫入Flash的內(nèi)容和傳輸包內(nèi)容不一致必須對“最終寫入的鏡像”再算一次哈希。第四個(gè)是升級狀態(tài)標(biāo)志位存儲(chǔ)介質(zhì)選錯(cuò)。比如放在主Flash的某個(gè)地址這個(gè)地址在BootLoader升級時(shí)恰好被擦除或者放在沒有電源掉電保護(hù)的EEPROM里。正確做法是獨(dú)立分區(qū)冗余存儲(chǔ)寫兩份互為備份啟動(dòng)時(shí)多數(shù)據(jù)源仲裁。第五個(gè)是升級過程被用戶的“正常操作”打斷。比如用戶升級到90%時(shí)手動(dòng)斷電了系統(tǒng)沒有足夠快的恢復(fù)機(jī)制導(dǎo)致BootLoader無法判斷“這次升級是否完成”。解決思路是每個(gè)分區(qū)頭部增加狀態(tài)機(jī)字段IDLE、DOWNLOADING、READY、并配合超時(shí)機(jī)制BootLoader在每次啟動(dòng)時(shí)做狀態(tài)清整。第六個(gè)是“升級成功的確認(rèn)標(biāo)準(zhǔn)”定義不清晰。是代碼跳轉(zhuǎn)成功就算成功還是外設(shè)全部初始化完畢、業(yè)務(wù)跑通才算成功如果只要跳轉(zhuǎn)就確認(rèn)成功新固件業(yè)務(wù)邏輯錯(cuò)誤導(dǎo)致反復(fù)重啟你也無法自動(dòng)回滾。所以行業(yè)共識是“業(yè)務(wù)級成功確認(rèn)”即新固件跑起來后主動(dòng)上報(bào)一個(gè)心跳或業(yè)務(wù)就緒標(biāo)志給BootLoader或云端。5. 上篇課后思考題完整解析一道啟動(dòng)流程題的四種解法5.1 題目回顧與常見錯(cuò)誤上篇專欄我在文末留了一道思考題“某基于Cortex-M4的物聯(lián)網(wǎng)終端BootLoader位于0x08000000用戶APP鏈接地址為0x08020000。系統(tǒng)上電后從BootLoader跳轉(zhuǎn)APP發(fā)現(xiàn)所有串口中斷都能正常觸發(fā)但SysTick定時(shí)器中斷不工作。已知代碼中已設(shè)置SCB-VTOR 0x08020000。請分析可能原因并給出最少兩步排查方案?!边@道題很多人第一反應(yīng)是“VTOR設(shè)置不對”或“中斷優(yōu)先級沒配”但從題目給的條件看VTOR已經(jīng)設(shè)置了中斷也能觸發(fā)優(yōu)先級問題不至于只影響SysTick。這道題真正想考察的是“中斷向量表正常運(yùn)行需要的完整前置條件”。來分析常見錯(cuò)誤回答“NVIC沒使能SysTick中斷”的邏輯上不確切。SysTick中斷由SysTick控制器自身控制和NVIC的使能位不是一個(gè)概念。回答“時(shí)鐘沒配置”的方向沾邊但不能解釋為什么串口中斷正常。如果SysTick的時(shí)鐘源有問題SysTick確實(shí)跑不了但題目沒給出配置細(xì)節(jié)?;卮稹癝ysTick優(yōu)先級配低了被其他中斷打斷”的這個(gè)有可能但題目說“中斷不工作”通常是完全不觸發(fā)而不是觸發(fā)被延遲。5.2 關(guān)鍵原理SysTick的時(shí)鐘源與向量表偏移的關(guān)系要徹底解釋這個(gè)問題需要回到SysTick的工作機(jī)制。在Cortex-M4上SysTick定時(shí)器的時(shí)鐘源可以選處理器時(shí)鐘HCLK或者外部參考時(shí)鐘如HCLK/8。這部分配置在SYST_CSR寄存器的CLKSOURCE位。如果你代碼里初始化SysTick時(shí)依賴了某個(gè)時(shí)鐘源而這個(gè)時(shí)鐘源在APP區(qū)鏈接地址下沒有被正確初始化那么SysTick就會(huì)失效。但這道題更想考察的其實(shí)是一個(gè)隱蔽點(diǎn)如果應(yīng)用代碼使用了__enable_irq()或NVIC_EnableIRQ(SysTick_IRQn)來開啟SysTick中斷其實(shí)往NVIC里寫的是中斷使能這沒有問題。然而向量表重映射后中斷服務(wù)函數(shù)里SysTick_Handler的地址必須出現(xiàn)在新的向量表地址處。如果你的鏈接腳本或中斷處理函數(shù)定義有誤比如中斷函數(shù)被編譯器優(yōu)化掉了、或者使用了弱符號覆蓋即使向量表地址正確中斷來了也找不到處理函數(shù)。另一種可能是SysTick的異常優(yōu)先級和FAULTMASK/PRIOMASK沒有理清。Cortex-M處理器在執(zhí)行某些臨界區(qū)保護(hù)代碼時(shí)會(huì)暫時(shí)屏蔽中斷如果SysTick_Handler里正好有這類操作比如用__disable_irq做互斥保護(hù)忘了恢復(fù)也會(huì)出現(xiàn)“中斷進(jìn)不去”的現(xiàn)象。但這類問題通常是代碼邏輯層面的偶發(fā)不是一上電就完全不工作。5.3 最少兩步排查方案從復(fù)現(xiàn)到定位這道題我給出參考答案的思路是“先用最小系統(tǒng)復(fù)現(xiàn)再對比差異”。第一步寫一個(gè)最小SysTick測試函數(shù)不依賴任何外設(shè)和RTOS直接初始化SysTick并開中斷回調(diào)里翻轉(zhuǎn)一個(gè)GPIO。如果這個(gè)最小系統(tǒng)能跑證明向量表、SysTick時(shí)鐘源、中斷使能鏈路都沒問題。如果還是不能跑就要懷疑向量表本身或鏈接腳本的符號分配。第二步在SysTick_Handler的第一行設(shè)置一個(gè)軟件斷點(diǎn)或打印比較跳轉(zhuǎn)前與跳轉(zhuǎn)后、調(diào)試模式下與獨(dú)立運(yùn)行下SysTick是否一致。關(guān)鍵觀察點(diǎn)是如果調(diào)試模式下OK獨(dú)立運(yùn)行不OK大概率是啟動(dòng)代碼中某個(gè)外設(shè)或時(shí)鐘初始化順序問題如果兩個(gè)模式都不OK回到第一步逐層確認(rèn)。實(shí)際操作中我還會(huì)加一個(gè)驗(yàn)證手段反向測試。用一個(gè)已知能正常運(yùn)行SysTick的官方示例工程把APP地址從0x08000000改到0x08020000用同一個(gè)BootLoader跳轉(zhuǎn)觀察是否能運(yùn)行。如果官方示例能運(yùn)行說明問題在自己的工程鏈接或初始化代碼里如果也不能運(yùn)行則要懷疑BootLoader跳轉(zhuǎn)時(shí)的處理器狀態(tài)沒有完全準(zhǔn)備好。5.4 從思考題擴(kuò)展三種“邊界情況”在實(shí)際項(xiàng)目里的對應(yīng)思考題不止是考試我把它的考察點(diǎn)對應(yīng)到實(shí)際項(xiàng)目里三種高頻邊界情況方便大家“連點(diǎn)成線”。第一種是“跳轉(zhuǎn)前外設(shè)狀態(tài)未清理”。BootLoader用過UART、DMA、Flash控制器跳轉(zhuǎn)前必須把這些外設(shè)復(fù)位到默認(rèn)狀態(tài)否則APP初始化時(shí)會(huì)基于臟狀態(tài)工作。比如BootLoader開啟了DMA并啟用了緩存跳轉(zhuǎn)后APP如果沒重新初始化可能會(huì)出現(xiàn)“數(shù)據(jù)錯(cuò)亂但寄存器看起來正常”的詭異現(xiàn)象。解決辦法是在跳轉(zhuǎn)函數(shù)里執(zhí)行SystemReset()之前先復(fù)位外設(shè)并關(guān)閉全局中斷。第二種是“編譯器和鏈接腳本的段布局問題”。APP鏈接地址改了但中斷向量表所在段可能被鏈接器安排到了別的位置0x08020000處一開始并不是向量表。這種情況下即使設(shè)置了VTORCPU也會(huì)從錯(cuò)誤的內(nèi)存位置去取向量表導(dǎo)致中斷行為異常。排查方法查看Map文件確認(rèn)__Vectors符號的實(shí)際地址是否等于0x08020000。第三種是“啟動(dòng)代碼里的全局變量初始化依賴外部條件”。比如有些啟動(dòng)代碼在__main階段會(huì)執(zhí)行C庫的初始化這個(gè)過程可能依賴某個(gè)外設(shè)地址的訪問如果BootLoader階段把該地址寄存器鎖死了或設(shè)置成不同的模式則會(huì)造成啟動(dòng)失敗。處理思路是區(qū)分“啟動(dòng)代碼所需最小外設(shè)集合”和“應(yīng)用外設(shè)集合”在BootLoader中避免碰觸后者。6. 寫在后面一套適合多數(shù)項(xiàng)目的啟動(dòng)與OTA自檢清單專欄連載的時(shí)間線拉得挺長最后這期我想把前面幾講的核心結(jié)論濃縮成一份可以直接拿來自檢的清單。這份清單并不是放了生產(chǎn)環(huán)境就萬事大吉而是用來在項(xiàng)目設(shè)計(jì)階段、代碼評審階段、以及量產(chǎn)問題排查階段快速對表找差異。啟動(dòng)流程相關(guān)確認(rèn)復(fù)位向量和初始SP地址存在于Flash映射的正確地址鏈接腳本符合芯片內(nèi)存布局。確認(rèn)BOOT引腳或啟動(dòng)源配置與預(yù)期啟動(dòng)介質(zhì)一致特別是多介質(zhì)切換的項(xiàng)目。CPU上電后最先執(zhí)行的是BootROM/芯片固件還是應(yīng)用代碼各自的職責(zé)邊界是否清晰。向量表重映射和SCB-VTOR設(shè)置是否在對外設(shè)進(jìn)行任何中斷操作之前完成。全局變量初始化、堆棧設(shè)置、C庫初始化是否不依賴未初始化外設(shè)。啟動(dòng)日志有層次、有時(shí)間戳能回答“跑了幾步、卡在哪一步”。HardFault現(xiàn)場能保存PC/LR/SP/異常狀態(tài)并能在下一次啟動(dòng)時(shí)上報(bào)。故障定位方法論相關(guān)拿到的每一塊異常板卡都有唯一編號和故障現(xiàn)象記錄。排查時(shí)遵循“先記錄現(xiàn)場、再分析代碼”的順序不要上來就改代碼。能畫出啟動(dòng)階段狀態(tài)機(jī)明確每一步的“成功條件”和“失敗出口”。日志和崩潰信息有統(tǒng)一的輸出協(xié)議方便自動(dòng)化解析。OTA升級相關(guān)升級包格式里包含版本號、CRC32、目標(biāo)地址、長度、簽名信息。BootLoader具備校驗(yàn)失敗不跳轉(zhuǎn)、多次啟動(dòng)失敗自動(dòng)回滾的邏輯。App側(cè)“啟動(dòng)成功標(biāo)志”在業(yè)務(wù)就緒后才清而不是一進(jìn)main就清。分區(qū)表里有獨(dú)立的狀態(tài)區(qū)斷電不會(huì)破壞狀態(tài)字段的完整性。升級流程中每一步都有超時(shí)和失敗分支不會(huì)被“卡死”在半路。私鑰由專人管理開發(fā)、測試、生產(chǎn)環(huán)境隔離簽名工具鏈獨(dú)立。做個(gè)簡單的統(tǒng)計(jì)就能發(fā)現(xiàn)產(chǎn)品在現(xiàn)場出的啟動(dòng)類和OTA類問題絕大多數(shù)屬于“設(shè)計(jì)時(shí)沒有考慮異常路徑”或者“日志信息不足以支撐定位”。這些不是硬件缺陷也不是編譯器的鍋而是工程化經(jīng)驗(yàn)的沉淀。我在專欄里反復(fù)強(qiáng)調(diào)的一個(gè)觀點(diǎn)是嵌入式固件不能只追求“功能正確”要追求“可觀測、可維護(hù)、可回退”。功能正確是及格線后面這三個(gè)才是真正的進(jìn)階方向。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月丁香婷婷色色| 国产亚洲色婷婷久久99精品91 www.riverspirits.org www.hnnun.com www.changh | 久久久99视频| 色色色综合网| 五月婷婷香蕉| 色婷婷五月综合在线| 五月丁香激情四射| 天天做天天干天天综合网| 日日射天天射| 六月久久婷婷| 成人做爰A片免费看视频| 艹B高清无码| 色五月色开心开心五月| 国产激情久久久| 99精品无码| 懂色av粉嫩AV蜜臀AV| 久久99久久久久久久噜噜| 九月激情综合| 五月天久久婷婷| 亚洲俩性性爱图片久久第六页| 狠狠色五月激情| 东北婷婷五月天| 婷婷五月视频| 亚洲综合激情五月久久| 香蕉视频性爱BB做爱| 丁香婷婷综合激情五月色| 亚洲综合久| 人人爱干人人爱草| 色色com| 色播综合| 丁香六月婷婷激情| 丁香午月AV中文字幕| 婷婷五月天在婷| 欧美日本国产欧美日本韩国99| 婷婷综合久久| 国产成人AV| 在线看AV| 99ri视频| www.99热这里精品 | 超碰资源在线| 成熟妇人A片免费看网站| 久re在线| 玖玖爱伊人| 人人爱天天摸摸天天爱| 婷婷五月综合网| 99爱精品| 99黄色在线视频精品熟女| 天天爱天天做综合| 色八月婷婷| 思思热在线视频99| 婷婷丁香六月| 九九色色色| 欧美色播综合在线观看| 五月丁香av中文| 亚洲精品V天堂中文字幕| 婷婷色操| 99精品免费欧美小视频| 熟女人妻一区二区三区免费看 | 丁香在线视频| 色婷婷中文| 欧美日韩成人| 色婷婷69| 一级性爱大片| 岛国av电影网站| 色色色成人网| 国产色网站| 久久机只有这里精品| 中文字幕视频在线播放| 久久婷婷东京热大香樵| 天天干天天射色综合| 99这里只有精品视频| 天堂亚洲 在线| 婷婷五月天激情偷拍| 五月婷视频在线| 第四色在线观看| 国产avapp 网| 直接看的av| 国产成人一区二区三区在线观看| AV色五月婷婷| 色99网| 久久九九一區| 99这里只有精品99| 淫视馆av三区| 这里只有精品视频国产| 人妻久久久久久| 婷婷色五月天色| 99热日| 99热这里只有精品2| 玖玖婷婷婷丁香五月| 成人网丁香五月| 五月丁香综合激情| AV在线观看网站| 看片视频在线免费日产在线看| 激情五月综合网丁| 色综合久久天天综合网 | 五婷婷六月合| 色婷婷丁香五月| 久久永久视频| 五月婷色色| 国产探花一片区| 五月中旬婷婷丁香六| 人妻av在线| 色色色色综合网| 九九婷婷综合| 丁香五月激情五月| 9久久精品| 超碰在线中文字幕| 国产婷婷五月天| 激情五月婷婷综合| 九九久久高清| 热99精品视频五月| 91婷婷丁香| 九九色大香蕉| 色色色色色色色色五月先| 97碰人人操| 九九热99久久99| 婷婷五月天激情亚洲小说| 久碰视频| 美女100%露全身无挡网站| 99亚州综合精品成人网| 99热无码精品| AV在线不卡播放| 丁香婷婷射| 天天综合精品| 亚洲精品久久久久久久久久吃药| 91久久网站| 五月婷六月丁香| 草草女人亚洲| 婷婷欧美激情| 另类视屏| 国产无套精品一区二区| 五月情丁香色| 成人做爰高潮A片免费视频| 色五月亚洲| 强奸幻女毛片| 久久99精品久久久久久三级| 欧美在线干| 99热超碰在线| 色婷婷深爱五月| 国产精品久久久久久久久久久久 | 婷婷丁香激情五月天色色色| 99精品在这里| 久99久视频| 激情影院丁香五月| 色五月五月丁香| 好叼操在线观看| 人人操人人添人人摸97| 婷婷色中文字幕| 国产精品18久久久| 婷婷五月噜噜| 97成人超碰免| 婷婷亚洲天堂| 色五月开心五月激情五月| XX色综合| 色色com| 色久女| 丁香五月久久| 天天日,天天射,天天舔| www.91操| 丰满少妇猛烈A片免费看观看 | 综合AV在线| 久久曰曰| 97人人操人人插| 99视频在线观看网址| 大香蕉99| 久草热8精品视频在线观看| 婷婷爱五月天人人爱| 中文成人在线| 可以看的av| 99热精品9| 六月丁香婷婷大香蕉| 9热视频在线观看| 激情五月开心五月在线视频| 色色综合网www| www.夜夜操.com| 超碰在线免费| 大伊香蕉精品视频在线| 丁香六月五月天| 六月婷欧美| 99热在线播放| 夜夜爽天天干| 五月婷婷开心爱| 亚洲区1| 五月丁香久久久久| 成人九九视频| 婷婷色综合| 国产性爱在线| 超碰成人电影| 婷婷玉月丁香五月在线视频| 久久性刺激| 日本99久久| 综合色综合| 在线观看av网站| 欧美激情综合| 成人五月丁香社区| 五月天激情.com| 丁香五月网| www.天天干| 久久性爱视频网站| 少妇激情五月婷婷| 69色婷婷| 久99久视频精品| 色婷婷伊人| 久久久99精品| 五月婷婷 欧美| www.久9| 91久久久久久| 婷婷丁香九月| 99热这里只| 天天做天天爱天天日| 丁香五月天社区婷婷| 丁香五月色| www激情五月天| 人人干天天舔| 大香蕉网站,大香蕉综合| 婷婷D区| 欧美日韩成人免费在线| 久久99热久久99精品| 欧美色图天堂网| 欲色人妻| 五月天婷久久| 五月激情综合网| 婷婷久久精品| 开心五月深爱婷婷| 五月婷婷,六月激情| 久久婷婷五月天激情| 亚洲无AV在线中文字幕| 婷婷五月在线视频| 五月香婷婷| 六月丁香六月婷婷欧美| 色五月婷婷久久大| 亚洲无码成人性爰网| 亚洲超碰在线| 九色激情网| 91日在线视频| 国产99久久久国产精品免费看| 成人网址在线观看| 操逼六区| 97热在线精品| 99热亚洲| 丁香激情综合| 婷婷五月天综合小说网| 婷婷丁香五月,狠狠综合| 婷婷五月天成人娱乐| 色天堂A| 永久天堂日本| 强辱丰满人妻HD中文字幕| 色色五月婷婷| 久久99综合| 狠狠狠狠狠干| 五月婷婷婷婷| 欧美五月丁香| 26uuu亚洲欧美日本| 五月婷综合性中心| 开心五激情网| 丁香婷婷六月天| 67194国产| 欧洲亚洲免费视频9| 97人妻碰碰碰久久久久-最近国语高清| 五月婷婷影视| 亚洲成人网址在线观看| 婷婷综合中文字幕| 精品日本视频444| 熟女人妻一区二区三区免费看| 激情五月丁香五月| 六月婷婷开心| 狠狠色噜噜狠狠狠888| 99精品久久久久久久婷婷| 开心激情站| 色偷偷综合| 婷婷五月天欧美图片在线播放电驴| 中文aV网| 久久这里只有精品22| 密乳视频| 天天操天天爽天天爱| 婷婷伊人无码| 国产VA播放| 婷婷综合久久| 六月婷婷五月丁香首页| 色播五月丁香婷婷| 岛国av电影网站| 99热这里只有国产精品| 婷婷噜噜| 天天弄天天操| 丁香五月影视| 性爱视频99| 色屌丝中文字幕| 天天综合网在线| 色丁香五月婷婷| www.91久久| 午夜天堂啪啪| 青草视频在线播放| WWW.HENHENL.| 天天色综| 91热99| 日韩色色色色色| 婷婷五月天激情文学小说| 激情网战码亚洲A| 人人干人人干骚美女| 激情五月天啪啪视频| 婷婷色五月天第7色| 五月丁香六月婷婷免费视频| 色综合色综合色综合| 无人精品在线视频| 99九九久久| 免费视频无码| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 99视频35精品视频在线观看| 丁香婷婷性爱| 久久婷婷五月综合色奶水99啪| 综合色色色| 人人摸人人澡人人| 激情五月天 婷婷| 中文字幕永久在线| 草久私拍| 五月天久久www| 成人午夜无码视频| 欧美五月丁香| 久久9热| 久9久9久9久9久9久9| 亚洲综合激情五月久久| 久热久| 五月婷婷在线丁香| 五月J香蕉婷婷| 噜噜噜狠狠色综合| 天天操天天日天天爱| 日本色频| 成人九九视频| 日本99在线| 开心深爱激情网| 99re6在线视频精品免费| 婷婷碰碰| 91免费试看| 98色丁香五月婷婷综合网| 51成人| 六月丁香基地| 色爱五月天| 色婷五月天| 疯狂做受XXXX高潮A片| 丁香五月 性爱| 色情婷婷。| 5月婷婷综合| 免费观看的AV| 狼友视频在线观看18| 99视频内射三四| 真实熟女-91九色| 超碰操网| 欧美成人五月天| 色欲久久综合| 狠狠色综合图片| 五月丁香激情四射综合| 色5月婷婷| 国产成人+综合亚洲+天堂| 人妻第九页| 激情久久久久久久久久久| 婷丁香五月天| 69色婷婷| 91狠狠色丁香婷婷综合久久狠丁香综合久久精品| 加勒比久热| 玖玖资源站国产| 婷婷五月天99| 91精品婷婷国产综合久久| 男男野外做爰全过程69| 亚洲久久日| 婷婷五月天激情综合婷婷五月天激情综合 | 综合婷婷| 碰97久久| 色情一区二区播放| 女人天堂AV| 91xxxx九色| 婷婷激情五月天7| 五月色综合网| 亚洲乱码日产精品BD| 婷婷六月综合基地| 99精品7| 四色永久成人网站| 91色逼| 欧洲色区| 欧美日韩999| 久久久久久人妻久久久久久久久久人妻久久久 | 婷婷五月综合社区| 色欲五月婷婷| 婷婷中文字幕| 成人丁香色| 色婷婷丁香五月天| 大战熟女丰满人妻AV| 人人操操| 色色哒五月婷婷六月丁香| 99久久久久| 91人人超碰在线| 五月婷婷丁香综合网| 久久五月激情| 色五月首页| 在线观看996精品| 99爱无码| 欧美怡红院黄站| 91久久99久久91熟女精品| 开心激情播播五月天| 大学生高潮无套内谢视频| 97碰| 丁香五月婷婷亚洲色图| 99视频啪啪| 伊人五月久久| 五月丁香六月婷| 亚洲啪啪啪啪| 丁香五月影视| 婷婷五月欧美| 婷婷五月丁香综合人妻| 亚洲深喉aV| 久久婷婷五月国产色综合激情| 99色五月| 丁香五月天日韩无码| 婷婷五月丁香婷婷| 亚洲精品久久久久AV无码| 丁香花色色网| 五月丁香婷婷在线| www.色婷婷.com| 超碰99资源站| 五月丁香综合中文| 久久新| 99热精品一| 亚洲精品又粗又大又爽A片| 玖玖在线视频福利| 久久激情五月婷婷| 天天肏夜夜肏| 激情图片五月天| 91精品久久久久久| 激情婷婷五月天| 丁香六月激情| 欧美成人日韩| 丁香六月婷婷久久高清| YJLZZJLZZ亚洲乱熟无码| 4438激情网| 涩五月婷婷| 天天综合网~91| 丁香五月激情无码视频| 韩日AV片| 丁香五月六月综合欧美| 偷拍91九色| 91成人看片| 亚洲综合在线网站| 色五月综合在线| 无语停婷丁香网| 婷婷五月天男人影院色色网| 综合色五月亭亭| 千人斩操逼| 欧美日韩精品人妻狠狠躁免费视频| 伍月激情天| 4399无码视频| 欧美美美女性色视频| 强奸幻女毛片| 丁香色五月天| 国产操肏网站| 九九综合伊人| 九九Av| A√天堂网在线| 可以看的av| 亚洲俩性性爱图片久久第六页| 欧美黑人巨大性生话| 婷婷激情丁香五月天综合| 人人操av| 五月天激情子轮| 爱狠射| 丁香五月激情五月| 婷色五月天| 久/久精品99看9| 亚洲小视频免费看| 婷婷在线中文字幕| 亚洲六月色| 九九热在线99| 99热在线播放| 色婷婷在线视频综合| 亚洲区在线| 天天日天天爽| 色色色777| 日本色色色色色色色色一色二色| 99色色色色| 玖玖婷婷色五月| 亚洲人妻av| 五月婷婷狠天天色综合| 色婷婷影视99| 丁香婷婷久久 | 无码成人AAAAA毛片AI换脸| 五月婷六月婷婷| 狠狠爱五月婷婷| 丁香六月综合| 大香蕉院线| 五月亭亭色| 国产成人99久久亚洲综合精品| 亚洲开心激情网| 91怕怕网| 人人97碰| 5月婷婷六月丁香| 欧洲区自拍| 综合婷婷| 99在线小视频| 色婷婷激情| 五月丁香激情六月| 久热伊人| 色情婷婷久久五月天| 久久99久久99精品免观看粉嫩| 成人五月天色天堂| 超碰在线观看成人视| 操操碰| 情五月亚洲婷婷| 亚洲精品网址| 成人做爰高潮A片免费视频| 九九热免费| 这里只有精品视频222| 婷婷大香焦| 免费观看亚洲AV片| 亚洲综合婷婷六月丁香五月| 婷婷久久网| 九九精品丁香花| 久月婷婷| 天天插插天天| 五月色丁香综合| www,色综合| 婷婷五月花| 天天插天天插| 五月天综合缴情网网站0| 99丝袜精品视频网站| 操操碰| 色久丁香五| 狠狠做五月婷婷| 伊人9在线| 三级片AAA久久久AAA久久久AAA | 欧美色色色色色| 夜夜嗨一区二区三区直播内容 | 思思99热这里只有精品| 狠狠色婷婷7777久综合| 99人妻碰碰久久久禁片| 中文字幕成人| 九九热在线精品视频| 婷婷五月天伦理| se99视频| 99久热这里只有精品| 色情·com| 开心五月婷婷婷美女| www五月婷婷88导航| 99热主页日本| 激情网五月| www夜夜操wwwcon| 狠狠做五月| 香蕉色色网| 国产婷婷色综合AV蜜臀AV| 99综合在线| 色碰碰| 人妻久久久久久| 伊人色综合久久久| 五月情婷婷| 五月丁香婷婷六月天| 成人网站在线观看视频| 久久久99日本大片| 久久婷婷大香蕉| 久久人妻少妇嫩草AV| 五月丁香五月综合欧美| 97狠狠色| 丁香婷婷色五月激情综合| 亚洲丁香五月天在线视频| 亚洲综合99| g00d人体西西| 亚洲无码九九九| 婷婷D区| www久| 狼人婷婷久久| 亚洲婷婷五月| 九色啦蜜臀| 丁香五月婷婷激情中文| 丁香五月成人论坛| 丁香五月色| 97碰碰在线看视频免费| a九九热www| AV免费在线网站| 久久9热好| 国产精品久久久久久久久久 | 国产精品-91JQ就要激情网91JQ6.91JQ27.CASA:16888 | 亚洲亚洲人成综合网络| 丁香五月综合| 综合网色| 99热久久这里只有精品| 色播五月丁香| 伊人激情| 被强行糟蹋的女人A片| 丁香五月天色婷婷| 亚洲综合五月天| 五月婷婷综合网| 九九色精品| 九月婷婷久久久| 午夜成人天堂久久无码日韩久久| 婷婷在线综合| 久久久激情视频| 91无码高清| 婷婷五月影院| 9l视频自拍9l九色9l成人| 五月婷婷综合在线| 人人干99| 国产在线黄色| 任你爽视频| 欧美色婷婷| 欧美日韩一区二区三区四区| 大香蕉久| 蜜桃成语时李时珍 免费| 99精品视频在线观看| 丰满少妇猛烈A片免费看观看| 免费看欧美成人A片无码| 一区二区三区四日本| 综合aV在线| AV在线免费观看不卡| 国产精品成人网址| 欧美日韩成人h| 丁香五月婷婷综合激情啪啪啪| AV大片在线观看| 狠干综合| 色色丁香五月天| 噜噜噜噜噜在线| 婷激情五月天视频导航| 激情丁香五月激情婷婷| 婷婷色情五月| 99综合激情久久精品久久| 丁香五月中文字幕久色| 五月丁香综合激情| 欧美欧盟性爱网| 婷婷五月天av网| 色综合久久伊伊婷婷五月| 婷婷丁香五月天在线| 五月丁香色| 影音先锋四区| 能看的AV| 久久这里只有精品视频15| 97超碰欧美中文字幕| XX久久| 五月丁香激情片| 99久久精彩视频。| 五月激情基地| 激情九色| 亚洲操人| 大鸡巴伊人网| 成人一级片| 天天天操天天天爰| 深爱五月网| 久久多色| 三十熟女| 成人在线网站| 伦乱美欧| 成人丁香五月| 综合色播| 婷婷丁香六月天激情四射网| 色久一| 激情色播| 欧洲激情五月天| 五月天激情国产综合婷婷| 日韩成人网址| 色狠狠色综合久久久绯色aⅴ影视| 97国产精品女人碰碰| 91狠狠色色丁香婷婷综合久久| 99亚洲综合| 五月网网站| 日本狠狠干| 五月婷婷丁香六月| 亚洲色色五月| 热久久99视频| 播五月丁香三月婷婷| 啪啪一区| 丁香六月婷婷开心婷婷网| 韩日在线熟女| 婷婷五月天综合久久| 色色色色热| 婷婷色综合中心站| 26uuu青青| 欧美久人人| 激情黄色小说色五月| 俺也去综合| www婷婷| 日韩欧美成人一区二区三区| 99ri在线视频| 这里只有精品2| h在线看免费版在线看| 人操人| 99er免费在线观看| 久色视频| 超碰狠狠干99| 婷婷在线播放av| 99热这里只有精品一区| 激情视频网址| 久久激情四射| 成人必爱视| 免费97碰碰| 香蕉久久国产AV一区二区| 九九狠狠干| 伍月婷丁香花全集| 9久热| 97影院一级片| 俺去也在线www色官网| 久久作爱| 碰超在线九色| 九九九九九九九热| 久久婷婷色| 99啪啪网| 丁香婷婷色情社区成人小说| 久草热久草在线视频| 日韩精品999| 激情五月天在线视频| 中文字幕乱码亚洲精品一区| 香蕉综合网| 婷婷五月精品中文字幕| 国产探花一片区| 伊人五月天综合网| 五月婷婷视频在线观看| 色婷婷在线电影| 五月天色色网站| 六月激情网| 91丨九色丨老熟女激情| 婷婷色色播五月天| 五月天色综合| 久久久婷婷婷| 久99久热| 色婷婷五月影院| 狠狠干综合网| 久久久一级AAA| 亚洲视频在线观看99| 狠狠色婷婷在线| 色天堂在线| AV在线不卡网站| 热99re| 亚洲精品V天堂中文字幕| 婷婷五月天成人导航| 婷久久| 丁香 亚洲 久久| 亚洲丁香五月| 五月丁香综合色婷婷| 五月婷婷丁香大陆免费| 五月天亭亭俺也| 色噜噜97视频在线观看| 免费看欧美成人A片无码| av五月丁香| 久99热| 67久久| 五月天中文字幕在线婷婷| 日日干日日| 色婷婷五月天天天天天| 99在线精品视频| 好好干Av| 色99色| 丁香五月天网站| caop在线视频| 婷婷精品在线| 五月丁香啪啪啪综合网| 久久婷.com| 丁香五月婷婷啪啪啪| 国产ava| 91在线日| 婷婷激情五月| 99这里有精品| 色婷婷丁香五月天在线视频| 99热| 天天操天天爱天天日| 99热在线看| 日操| 亚洲精品一区中文字幕乱码| 色婷婷丁香五月丁香| 99久久精品免费精品国产_国产精品久久久久久_国产在线|日韩_久久国产精品电影 | 九九精品在线视频观看| 亚洲操B| 亚洲色色在线| 国产在线网| 天天色综合网1| 九热视频免费观看| 99在线资源| 国产成人av在线| 99热超碰在线| 亚洲综合新99视频| 婷婷激情五月呦呦| 97 A I色色| 91肏| 亚洲综合五月天| 天天人人综合| 色哟呦av| 99爱视频在线观看这里只有精品| 久久综合五月天激情小说网站| 天天综合亚洲综合| 2021日韩无码| 欧美六月| 秋霞午夜理论| 少妇高潮呻吟A片免费看软件| 五月婷色啪| 色婷婷性爱| 色碰碰视频| 99热久只有| 天天揷综合网| av在线色五月丁香婷区久| 丁香色五月AV在线| 激情久久久| 丁香五月六月婷婷自拍| 亚洲综合欧美色丁香婷婷888月图片| 二色av| 激情性爱五月天网页| www.俺去也com| 欧美色偷偷大香| 亚洲天堂aaaa| 久久WW| 久久99久久99久久99人受| 五月婷婷久久开心网| 大香蕉婷婷婷| 亚洲操逼片| 天天日天天摸天天| 五月婷丁香久久综合| 网色99| 九月婷婷综合八月丁香在线观看| 日本久碰| 中文字幕成人| 大伊久久| 久9无码视频| 九九AV| 五月综合精品| 久久五月网| 日韩av一区二区在线/日产精品久久久 | 色婷婷五月网| 操逼巨乳91| 色999亚洲人成色| 五月婷天天搞视频| 五月天综合网| 婷婷丁香色女人| 五月婷久久| 婷婷综合激情五月综合| 人人综合久| 中文字幕1区2区。| 97人人操| 丁香五月天婷婷久久综合| 婷婷丁香综合| 国产暴力强伦轩1区二区小说| 97色色色视频| www久| 1024欧美看片| 五月天婷婷激情小说电影| 婷婷色成人| 色噜噜狠狠色综合无码久久欧美| 丁香狠狠色婷婷久久无码视频| 91色婷婷综合久久中文字幕二区| 五月天婷婷成人资源站| 在线中文字幕av| 操精品9| 亚洲热综合| 色五月天本日| 久草久青福利| 五月丁香综合影院| 国产SUV精品一区二区883| 9久久婷婷国产综合精品性色| 激情久久五月网| 在线中文字幕视频| 一区二区三区四区牛| 婷婷六月天| 激情六月天| 五月中旬婷婷丁香六| 99久久九九| 大香蕉人人网| 色婷婷六月| 婷婷五月六月| 五月亭亭开心网| 亭亭色天香| 亚洲AV成人精品日韩在线播放| 婷婷五月另类网站| 202丰满熟女妇大| 久热综合| www夜夜操| 2w在线视频| 美日韩成人| 五月天停停日日| 99日热在线视频| 啪啪啪大香蕉| 另类图片天天影视在线观看| 五月天激情无码| 热的国产,热的综合,热的有码| 五月九九综合| 日日鲁鲁鲁夜夜爽爽狠狠视频97| 97 A I色色| 国产精品色婷婷久久久精品| 久久免费视频62| 成人婷婷桔色| 国产成人av在线| 超碰爱爱爱| 伊人大香久久| 99热爆在线| 超碰久热| 丁香五月香蕉| 亚洲成人一区| 五月婷婷丁香啪啪| 五月丁香激情婷婷| 久久九九99字幕| 99r这里只有精品哦| 大香蕉久| 9久久久久久久久久久| 91九色超碰正在播放| 思思re最新视频| 99色| 人人操AV| 亚洲高清在线| 无码人妻电影| 婷婷玖玖五月天| 久久538| 综合久久五月天| 天天干com| 婷婷成人在线| 激情综合网丁香| Av大香蕉| av在线资源| 五月婷亚洲精品AV天堂| 丁香花五月天激情| 99热爱爱干干日| 97操碰碰无码视频| 99玖玖免费视频| 色综合中文| 国产精品99久久久久久猫咪| 99碰| 伊人色综合久久久| 色色色五月婷| 第五婷婷伊人丁香色| 亚洲啪啪网| 肏屄色播伊人97婷婷| 丁香五月色色婷| 久久婷婷色综合老司机| 五月伊人婷婷999| 怡红院91a√| 百度4399有码精品V在线观看| 五月婷婷色色网址| 亚洲在线视频321| Caoub青青超碰 | 先锋影音男人的天堂AV| 日本三级第一页| 一区=区操屄高清大全av| 色黄啪啪| 婷婷色情五月| 久99热在线观看| 欧洲不卡视频| 婷婷久热| 天天爽成人综合网站| 亚洲热手机在线观看| 婷婷5月色| 亚洲日韩26uuu| 好激情在线综合网| 五月天婷婷激情春色小说| 99视频这里只有久久精品| www.夜夜騎夜夜狠| 五月婷婷中文字幕| 天天插天天插| 色墦五月丁香| 啊v视频在线观看| 99热国品| 久久R激情| 色婷婷五月综合色婷婷| 999九九九久久久99HD| 91n啪啪| 97欧美在线| 操一区| 亚洲色五月天是什么| 色情五月天婷婷| 天天狠天天叉| 99久在线精品| 五月丁香影视| 超碰色碰碰| 9999综合99综合人| 五月天天堂久久| 五月激情婷婷图片基地| 激情五月丁香在线观看直播| 丁香五月a| 激情五月婷黄版| 丁香五月伊人| 超碰在线99| 91人妻九色大屁股| 五月久久网| 天天操夜夜啊| 五月天深爱激情网| 成人视频婷婷| 99九九在线精品热动漫| www.zbzhongsen.com| 碰超亚洲| 9精品视频在线观看| 99热啪啪| 国产精品久久久久久五月天加勒比| 激情五月丁香亭亭 | 开心婷婷五月天激情网| 五月丁香六月激情综合欧美| 人人干99| 欧美搡BBBBB摔BBBBB| 涩婷婷视频快播人妻| 久操热线| 九色视频这里只有精品| 亚洲熟妇无码乱子AV电影| 丁香五月婷婷在线| a免费在线| 99热最新精品| 激情五月婷婷伊人| se影音资源在线观看| 五月婷亚洲精品AV天堂| 91人人人人人| 欧美天天搞| 色宗合,宗合网| 久色婷婷200| 可以免费观看的AV| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 成人五月天。COM| 91超碰人人操| 岛国av电影网站| 久草大| 九九精品9| 91久操| 婷婷丁香五月综合网上 | 婷婷网影院| 色五月婷婷、老熟女| 天堂网啪啪| ..真实国产乱子伦对白在线_欧| 97极品在线| sewuyuejiqingwang| 天天日天天日天天搞| 成人精品在线| 91碰碰碰久久久久| 色婷婷久久综合| 丁香五月天BBw| 天天日天天爽| 色婷婷五月天| 久久 婷婷 五月天| 色区域网站视频| 91成人性爱视频| 成人短视频免费| 久久与婷婷| 免费黄色AV| 夜夜操加勒比| 丁香六月综合激情| 五月丁香婷婷成人网| 国产精品人成A片一区二区| 五月婷激情影院| 亚洲激情五月婷婷日日| 日韩超碰在线| 亚洲成人丁香花| 九九免费精品在线视频| 五月婷婷综合丁香视频| 欧美内射AAAAAAXXXXX| 午夜成人AV在线| 天天天天色天天天天天干| 久久久18| 亚洲成人av在线| 四虎婷婷五月天| 激情综合色五月六月婷婷| 久久精品人妻| 婷婷视频在线碰| 色欲婷婷夜夜| 九九在线视频| 天天日天天久久青青| 久久精品五月天| 狠狠色综合久久| 久久婷婷五月天| 久久性爱视频| 丁香久久久| www网站在线观看| 2025天天爽天天摸| 四色永久成人网站| 色色五月天婷婷丁香| 丁香五月婷婷手机| 国产真人做爰视频免费| 黄网在线免费观看| 久久婷婷五月天激情| 好叼操在线观看| 激情五月亚洲综合网| 99久在线精品99re8| 日本97久久久精品| 亚洲一区二区无码蜜乳av| jiZZdr| 色九网| 激情六月天婷婷| 久久人五月| 久久综合丁香激情五月| 久久九九激情五月天 | 婷婷丁香在线| 99久久精彩视频| 久久99性爱| 性色做爰片在线观看WW| 久久婷婷丁香五月一二三| 男人天堂99| 丁香六月| 五月天婷婷综合免费| 色爱综合五月| 天天综合影院| se婷97| 五月丁香网站在线播放| 国产毛片欧美毛片久久久| 人妻av在线| 婷婷在线精品| 五月天伊人综合| 五月天伊人久久久久| 99久久超级| 婷婷激情五月天亚洲综合| 97在线视频观看| 夜夜涩涩涩| 五月天色婷婷综合| 天天色月| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 久久伦乱| 99热这里只有精品66| 久久婷婷大香蕉| 九九爱激情| 啪啪五月婷婷| 亚洲第一色区| 日本天堂网站99| 思思久久思思| 亚洲成人无码专区| 五月婷婷六月激情网| 风流少妇A片一区二区蜜桃| 婷婷五月开心中文字幕色| 天天日日夜夜| 色5在线| 色色操| 99黄色性生活| 狠狠操天天干| 婷婷丁香视频在线观看免费| www色色com| 99久久国产宗和精品1上映| 亚洲成av人影院| 亚洲精品小视频| 超碰免费人人肏| 99久久6| 亚洲综合另类| 97资源碰碰| 丁香五月天婷婷在线视频| 久久99久久久久久| 丁香六月婷婷综合激情欧美| 精品一二三区久久AAA片| 狠狠干总合| 五月婷婷丁香日韩在线| 激情婷婷啪啪| 99re热在线视频观看| 久久久久激情| 五月天丁香啪啪综合| 国产XXXX搡XXXXX搡麻豆| 99re鈥哸鈥唙| 精品人妻在线| 超碰在线国产| 99热视| 亚洲一区二区色图-亚洲精品国产精品乱码-成人AV | 色婷婷色五月综合| 91凹凸在线| 五月天婷婷色在线视频免费观看| 欧美交换配乱吟粗大25P| www。五月天。com| 无码一级片| 五月丁香六月欧美综合网站| 婷婷丁香五月天在线视频| 日本精品人妻无码77777| 婷婷久久亚洲| 婷婷久久五月| 无码免费人妻A片AAA毛片西瓜| 99愛国产| 丁香五月最新网址| 五月天色区| 99思思| 九九精品碰| 婷婷大乡焦噜噜| 综合久久99| 色婷婷av在线观看| 六月丁香婷婷综合影院| 91黄址| 久热2025无码| 五月婷婷激情在线| 97操操| 99久久思思| 五月丁香婷婷99| 丁香色五月天| 欧美va欧美va差| 991国产精选视频在线播放下载| 五月丁香啪啪网| 久久人妻视步| 99狠狠色| 婷婷情色开心五月天99| 六月丁丁香| 五月丁香网站在线播放| 日韩无码91| 男同色五月开心五月激情五月| 激情五月丁香婷婷| 丁香六月婷婷综情欧美| www.韩日视频| 色噜噜婷婷| 丁香六月视频| 国产激情在线| 影音先锋男人女人| 99精品一二三四视频| 激情综合网激情五月网| 丁香婷婷免费| 成人精品视频99在线观看免费| 天天色综合图片| 五月香婷婷| 五月丁香六月激情| 色婷婷视频| 俺也去在线视频| 成人噜噜网| 国产婷婷久久| 91久久久久久| 欧美成人精品A片免费一区99| 久热这里只有精品3| 久久丁香社| 国产69精品久久久久999小说| 婷婷色综合av| 婷婷五月丁香伊人网| www.99热视频| 日本在线观看91| 激情五月天视频| 五月婷婷丁香六月| 激情五月天之六月婷婷| 极品色丁香| 免费91久久精品| 丁香五月天综合| 婷婷五月丁香六月综合网| 五月天欧美 另类小说| WWW.久久久久久久| 黄色短视频在线观看| www.yw尤物| 丁香久久综合| 五月婷婷婷婷网| ...婷婷国产成人亚洲日韩| 99在线热| 波多婷婷久久| 亚洲妇女熟BBW| 丁香五月成人| 久久爱婷婷| 五月婷婷狠狠干| 亚洲夜五月| 亚洲精品视频在线播放| 99re免费在线视频| 激情综合网激情五月俺也去| 久久久久9| 99热成人精品网站| 狠狠狠夜夜夜| www 五月天 com| 亚洲婷婷五月天在线激情综合网| 婷婷在线视频| 欧美综合激情五月| 人人干天天舔| 精品久久99码| 日本99视频精品免费播放| 色青青电影色五月| 国外亚洲成AV人片在线观看| 97久久超碰| 99热碰碰热| 亚洲欧州色情在线观看| 熟女五月天久久综合| 六月婷婷五月丁香首页| 色色色国产| 人人人操| 2015WWW永久免费观看播放| 婷婷影视久久| 七七婷婷综合| 狠狠干,狠狠操| 亚洲综合色婷婷| 婷婷丁香在线| 五月天丁香婷| 亚洲乱码w在线观看| 开心婷婷中文字幕| 日本五月婷| 日日狠夜夜狠| 婷婷九月激情| 中文字幕丰满乱孑伦无码专区| 久久之人妻| 午夜色婷婷| 婷婷狠狠操| 久操福利| www.97碰碰com| 9精品在线| www.91久久|