欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

QNX 7.0.0開發(fā)實(shí)戰(zhàn):從微內(nèi)核到車載系統(tǒng),避坑指南與性能調(diào)優(yōu)

QNX 7.0.0開發(fā)實(shí)戰(zhàn):從微內(nèi)核到車載系統(tǒng),避坑指南與性能調(diào)優(yōu) 1. 項(xiàng)目概述從零到一我的QNX 7.0.0實(shí)戰(zhàn)心路最近在整理硬盤翻出來一個(gè)塵封已久的項(xiàng)目文件夾里面全是關(guān)于QNX 7.0.0的筆記、腳本和調(diào)試日志。這個(gè)項(xiàng)目當(dāng)時(shí)是為一個(gè)車載信息娛樂系統(tǒng)的原型開發(fā)做的底層平臺(tái)適配斷斷續(xù)續(xù)搞了小半年踩的坑比寫的代碼都多?,F(xiàn)在QNX在汽車、工業(yè)控制這些對(duì)實(shí)時(shí)性和可靠性要求極高的領(lǐng)域越來越火但相關(guān)的、成體系的、能落地的中文開發(fā)總結(jié)卻不多見。網(wǎng)上能找到的要么是年代久遠(yuǎn)的舊版本資料要么就是官方文檔的簡(jiǎn)單翻譯真正從環(huán)境搭建到問題排查把整個(gè)流程串起來講的干貨很少。所以我想把自己在QNX 7.0.0上摸爬滾打的經(jīng)驗(yàn)系統(tǒng)地梳理出來。這不是一份官方的操作手冊(cè)而是一個(gè)一線開發(fā)者視角的實(shí)戰(zhàn)記錄。我會(huì)重點(diǎn)分享那些官方文檔里不會(huì)寫但實(shí)際開發(fā)中一定會(huì)遇到的“坑”以及我是怎么填上這些坑的。無論你是剛剛接觸QNX正在為搭建開發(fā)環(huán)境發(fā)愁還是已經(jīng)有一定基礎(chǔ)但在驅(qū)動(dòng)開發(fā)、系統(tǒng)調(diào)試上遇到了瓶頸希望這篇總結(jié)里的一些思路和技巧能給你帶來實(shí)實(shí)在在的幫助。我們不止要“跑起來”更要理解它為什么這樣跑出了問題該怎么找原因。2. 核心認(rèn)知QNX 7.0.0的變與不變?cè)谡嬲齽?dòng)手之前我們必須先建立起對(duì)QNX 7.0.0的正確認(rèn)知。很多人包括最初的我容易把它想象成一個(gè)“超級(jí)Linux”或者“嵌入式版的Unix”這種類比在初期能幫助理解但深入后會(huì)發(fā)現(xiàn)很多差異直接套用Linux的經(jīng)驗(yàn)會(huì)走彎路。2.1 微內(nèi)核架構(gòu)的深刻影響QNX最核心的特點(diǎn)是其真正的微內(nèi)核Microkernel架構(gòu)。在Linux這樣的宏內(nèi)核Monolithic Kernel系統(tǒng)中文件系統(tǒng)、網(wǎng)絡(luò)協(xié)議棧、設(shè)備驅(qū)動(dòng)等大量服務(wù)都運(yùn)行在內(nèi)核空間。而QNX的微內(nèi)核非常精簡(jiǎn)只負(fù)責(zé)最基礎(chǔ)的任務(wù)調(diào)度、進(jìn)程間通信IPC和中斷處理其他所有組件包括文件系統(tǒng)、網(wǎng)絡(luò)協(xié)議棧甚至設(shè)備驅(qū)動(dòng)都以獨(dú)立的、在用戶空間運(yùn)行的進(jìn)程在QNX中常稱為“資源管理器”形式存在。這個(gè)設(shè)計(jì)帶來了幾個(gè)直接影響高可靠性一個(gè)組件如某個(gè)文件系統(tǒng)崩潰通常只會(huì)導(dǎo)致該進(jìn)程終止而不會(huì)讓整個(gè)系統(tǒng)垮掉。內(nèi)核可以重啟這個(gè)進(jìn)程。這在安全關(guān)鍵領(lǐng)域是至關(guān)重要的。靈活的模塊化你可以動(dòng)態(tài)地啟動(dòng)、停止或替換系統(tǒng)組件而不需要重啟內(nèi)核。這在開發(fā)調(diào)試時(shí)非常方便。性能考量由于服務(wù)進(jìn)程化組件間的通信從內(nèi)核內(nèi)的函數(shù)調(diào)用變成了進(jìn)程間的消息傳遞IPC。這帶來了額外的開銷。因此QNX的IPC機(jī)制主要是MsgSend/MsgReceive/MsgReply被設(shè)計(jì)得極其高效是系統(tǒng)的生命線。理解并正確使用IPC是高效QNX編程的關(guān)鍵。在7.0.0版本中這個(gè)核心架構(gòu)哲學(xué)沒有變但底層實(shí)現(xiàn)和配套工具鏈有了顯著增強(qiáng)為開發(fā)帶來了新的便利和挑戰(zhàn)。2.2 7.0.0版本的關(guān)鍵演進(jìn)與開發(fā)環(huán)境巨變從我實(shí)際使用的感受來看QNX 7.0.0相較于之前的6.6.x系列有幾個(gè)變化是開發(fā)者必須關(guān)注的1. 工具鏈的全面革新LLVM/Clang成為默認(rèn)這是最大的變化之一。早期QNX使用GNU工具鏈gcc gdb。從7.0開始官方轉(zhuǎn)向了LLVM/Clang作為默認(rèn)的編譯和調(diào)試工具鏈。這意味著編譯命令變了你不再主要使用qcc一個(gè)GCC的包裝腳本而是使用qcc現(xiàn)在它可能調(diào)用clang或者直接使用clang針對(duì)QNX目標(biāo)配置好的。調(diào)試器變了默認(rèn)的調(diào)試器從gdb變成了lldb。雖然gdb可能仍可用但官方支持和未來的新特性都會(huì)集中在lldb上。你的調(diào)試習(xí)慣和腳本可能需要調(diào)整。二進(jìn)制兼容性使用新工具鏈編譯的庫(kù)和二進(jìn)制文件與舊工具鏈編譯的可能存在不兼容。如果你有遺留的二進(jìn)制庫(kù)需要鏈接要特別注意。2. 對(duì)C11/14標(biāo)準(zhǔn)的更好支持隨著工具鏈升級(jí)對(duì)現(xiàn)代C標(biāo)準(zhǔn)的支持更加完善。這對(duì)于開發(fā)新的、需要利用現(xiàn)代C特性的應(yīng)用程序比如車載中間件是利好。但在移植舊代碼時(shí)要注意編譯器可能變得更“嚴(yán)格”一些不規(guī)范的舊代碼可能會(huì)編譯報(bào)錯(cuò)。3. 內(nèi)核與驅(qū)動(dòng)的持續(xù)優(yōu)化官方會(huì)持續(xù)優(yōu)化調(diào)度器、IPC性能和內(nèi)存管理。對(duì)于開發(fā)者而言這通常意味著更好的整體性能和更低的延遲但一些極端依賴特定時(shí)序的代碼可能需要重新驗(yàn)證。4. 包管理系統(tǒng)的演進(jìn)QNX Software Center以前叫Momentics IDE的安裝器和pkgin包管理工具也在更新。7.0.0的BSP板級(jí)支持包和系統(tǒng)鏡像的獲取、安裝方式可能略有不同需要按照最新的官方指南操作。注意不要試圖在非QNX官方支持的Linux發(fā)行版如最新的Ubuntu上強(qiáng)行安裝老版本的QNX SDP。版本兼容性問題尤其是glibc版本會(huì)導(dǎo)致各種詭異的安裝失敗和運(yùn)行時(shí)錯(cuò)誤。強(qiáng)烈建議使用QNX官方文檔中明確指出的宿主操作系統(tǒng)版本或者直接使用其提供的虛擬機(jī)鏡像。3. 開發(fā)環(huán)境搭建避坑指南與高效配置搭建一個(gè)穩(wěn)定、高效的QNX開發(fā)環(huán)境是項(xiàng)目成功的第一步也是勸退很多新手的第一個(gè)門檻。我結(jié)合自己的經(jīng)驗(yàn)梳理出一條最穩(wěn)妥的路徑。3.1 宿主系統(tǒng)選擇與QNX SDP安裝宿主系統(tǒng)雖然QNX SDPSoftware Development Platform理論上支持多個(gè)Linux發(fā)行版但為了減少不必要的麻煩我強(qiáng)烈建議你嚴(yán)格按照當(dāng)前QNX 7.0.0官方發(fā)布說明Release Notes中指定的版本去選擇。例如它可能明確支持Red Hat Enterprise Linux 7.x或8.x的某個(gè)特定版本。使用這些版本可以最大程度避免庫(kù)依賴和內(nèi)核模塊兼容性問題。安裝方式獲取安裝包從QNX官網(wǎng)或授權(quán)的軟件中心下載QNX SDP 7.0.0的安裝包通常是一個(gè).run文件。執(zhí)行安裝在終端中賦予執(zhí)行權(quán)限后運(yùn)行安裝腳本。chmod x qnx-700-*.run ./qnx-700-*.run安裝過程是圖形化的你需要接受許可協(xié)議、選擇安裝路徑例如/opt/qnx700和要安裝的組件。關(guān)鍵組件選擇QNX Target Filesystem目標(biāo)系統(tǒng)的根文件系統(tǒng)模板必須裝。BSPs根據(jù)你的目標(biāo)硬件如Intel x86, ARM v7/v8, 某款特定SoC選擇對(duì)應(yīng)的板級(jí)支持包。這是讓QNX在你硬件上跑起來的基礎(chǔ)。Host Utilities在宿主機(jī)上運(yùn)行的工具如mkifs制作鏡像、mkimage等必須裝。QNX Momentics IDE這是一個(gè)基于Eclipse的集成開發(fā)環(huán)境。對(duì)于新手或者進(jìn)行大型應(yīng)用開發(fā)使用IDE會(huì)方便很多特別是調(diào)試。建議安裝。環(huán)境變量配置安裝完成后最重要的一步是配置環(huán)境變量。安裝腳本通常會(huì)在~/.bashrc或~/.profile中為你添加一行source命令用于加載環(huán)境設(shè)置腳本。# 例如如果安裝在 /opt/qnx700 source /opt/qnx700/qnxsdp-env.sh執(zhí)行此腳本后它會(huì)設(shè)置QNX_HOST,QNX_TARGET,PATH等關(guān)鍵環(huán)境變量。每次打開新的終端進(jìn)行QNX開發(fā)前都需要先source這個(gè)腳本或者把這行命令加到你的shell配置文件中讓它自動(dòng)執(zhí)行。3.2 目標(biāo)系統(tǒng)鏡像構(gòu)建與部署有了SDP和BSP下一步就是為你的目標(biāo)板制作一個(gè)可以啟動(dòng)的系統(tǒng)鏡像.ifs文件。理解Buildfile這是制作QNX鏡像的“食譜”一個(gè)文本文件。它定義了鏡像中包含哪些文件、庫(kù)、驅(qū)動(dòng)資源管理器和啟動(dòng)腳本。BSP包里通常會(huì)提供幾個(gè)示例Buildfile如build-*。你需要根據(jù)你的硬件和需求修改它。關(guān)鍵修改點(diǎn)啟動(dòng)行startup line指定啟動(dòng)程序通常是startup-*和傳遞給它的參數(shù)如CPU類型、內(nèi)存地址、控制臺(tái)端口等。這里的參數(shù)必須與你的硬件嚴(yán)格匹配否則無法啟動(dòng)。PATH設(shè)置確保PATH包含了你的應(yīng)用程序所在目錄。驅(qū)動(dòng)模塊通過[script]或[typelink]等方式將需要的驅(qū)動(dòng)如串口、網(wǎng)絡(luò)、USB、顯示驅(qū)動(dòng)包含進(jìn)鏡像。新手常犯的錯(cuò)誤是漏掉了關(guān)鍵驅(qū)動(dòng)導(dǎo)致系統(tǒng)啟動(dòng)后某些硬件無法使用。啟動(dòng)腳本在[script]部分你可以編寫一個(gè).sh腳本在系統(tǒng)啟動(dòng)的最后階段執(zhí)行用于掛載文件系統(tǒng)、啟動(dòng)你的主應(yīng)用程序等。構(gòu)建鏡像使用mkifs命令。mkifs -v -r../install/armle-v7/ my_buildfile my_image.ifs-v顯示詳細(xì)信息便于調(diào)試。-r指定目標(biāo)文件系統(tǒng)的根目錄路徑通常指向你安裝的BSP中的target/qnx7/armle-v7以ARM為例或x86_64等。my_buildfile你的Buildfile文件名。my_image.ifs輸出的鏡像文件名。部署到硬件部署方式取決于硬件U盤/SD卡直接將.ifs文件拷貝到存儲(chǔ)設(shè)備的特定分區(qū)通常需要先格式化如FAT32并確保硬件從該設(shè)備啟動(dòng)。網(wǎng)絡(luò)啟動(dòng)TFTP對(duì)于支持網(wǎng)絡(luò)啟動(dòng)的開發(fā)板可以將.ifs文件放在TFTP服務(wù)器目錄配置Bootloader如U-Boot從網(wǎng)絡(luò)加載并啟動(dòng)它。這是最快速的開發(fā)調(diào)試方式因?yàn)樾薷拇a重建鏡像后無需物理插拔存儲(chǔ)設(shè)備直接重啟板子即可加載新鏡像。燒寫Flash對(duì)于最終產(chǎn)品需要將鏡像燒寫到Nor/Nand Flash中。3.3 宿主-目標(biāo)機(jī)連接與調(diào)試基礎(chǔ)系統(tǒng)在目標(biāo)板上跑起來后你需要建立宿主機(jī)和目標(biāo)機(jī)之間的通信橋梁。串口控制臺(tái)這是最基礎(chǔ)、最可靠的連接方式用于系統(tǒng)最初級(jí)的啟動(dòng)信息輸出和命令行交互。你需要一根USB轉(zhuǎn)串口線如果板子有串口。在宿主機(jī)上使用screen、minicom或picocom等工具連接對(duì)應(yīng)的串口設(shè)備如/dev/ttyUSB0設(shè)置正確的波特率通常是115200、數(shù)據(jù)位、停止位和校驗(yàn)位通常是8N1。screen /dev/ttyUSB0 115200連接成功后你就能看到QNX的啟動(dòng)日志并在出現(xiàn)#提示符后輸入命令。網(wǎng)絡(luò)連接這是高效開發(fā)的關(guān)鍵。QNX默認(rèn)運(yùn)行一個(gè)名為io-pkt的網(wǎng)絡(luò)協(xié)議棧作為一個(gè)進(jìn)程。你需要確保目標(biāo)板網(wǎng)線連接正常并且在Buildfile中正確配置并啟動(dòng)了網(wǎng)絡(luò)驅(qū)動(dòng)如devn-emac.so和io-pkt。在目標(biāo)板啟動(dòng)后使用ifconfig命令配置IP地址或通過DHCP獲取。在宿主機(jī)上確保能與目標(biāo)板IP互相ping通。QNX Momentics IDE連接如果你使用IDE需要在IDE中創(chuàng)建“QNX System Information”項(xiàng)目填寫目標(biāo)板的IP地址和登錄憑證QNX系統(tǒng)默認(rèn)有一個(gè)無密碼的root用戶。連接成功后IDE可以遠(yuǎn)程查看目標(biāo)板進(jìn)程、文件系統(tǒng)并進(jìn)行源碼級(jí)調(diào)試。命令行調(diào)試不使用IDE時(shí)主要依靠lldb。在目標(biāo)板上你的程序需要編譯時(shí)加入-g選項(xiàng)包含調(diào)試信息。在目標(biāo)板上啟動(dòng)程序時(shí)可以附加pidin觀察或者讓程序在開頭sleep一段時(shí)間。在宿主機(jī)上使用lldb連接目標(biāo)板進(jìn)行調(diào)試# 在宿主機(jī)上 lldb my_app (lldb) platform select qnx (lldb) platform connect connect://target_ip:port # 需要目標(biāo)板運(yùn)行l(wèi)ldb-server (lldb) target attach pid # 或者直接運(yùn)行 file my_app; run難點(diǎn)在于需要在目標(biāo)板上運(yùn)行l(wèi)ldb-server或pdebug。一種常見做法是將lldb-server打包進(jìn)系統(tǒng)鏡像在啟動(dòng)腳本中運(yùn)行它。具體步驟請(qǐng)參考QNX官方關(guān)于lldb遠(yuǎn)程調(diào)試的文檔。4. 核心開發(fā)實(shí)戰(zhàn)從應(yīng)用到驅(qū)動(dòng)環(huán)境搭好通信建立真正的開發(fā)工作就開始了。QNX開發(fā)可以分為應(yīng)用層和系統(tǒng)層驅(qū)動(dòng)/資源管理器。4.1 應(yīng)用開發(fā)擁抱現(xiàn)代工具鏈與IPC編譯與鏈接 現(xiàn)在你的qcc很可能背后是Clang。一個(gè)典型的編譯命令如下qcc -Vgcc_ntoarmv7le -g -O2 -Wc,-stdc11 my_app.cpp -o my_app -lmy_lib-V指定編譯器變體。gcc_ntoarmv7le是一個(gè)歷史名稱現(xiàn)在它指向的是針對(duì)ARMv7小端的Clang工具鏈。對(duì)于x86_64可能是gcc_ntox86_64。使用qcc -V命令可以列出所有可用的變體。-g加入調(diào)試信息。-Wc,...將后面的參數(shù)傳遞給C/C編譯器Clang。這里指定使用C11標(biāo)準(zhǔn)。鏈接時(shí)確保你的庫(kù)路徑-L和庫(kù)名-l正確。QNX的系統(tǒng)庫(kù)通常不需要特別指定。進(jìn)程間通信IPC這是QNX應(yīng)用的靈魂。最核心的是消息傳遞Message Passing。// 客戶端發(fā)送請(qǐng)求 int chid ChannelCreate(0); // 創(chuàng)建頻道 int coid ConnectAttach(0, 0, chid, _NTO_SIDE_CHANNEL, 0); // 連接通常服務(wù)端頻道已知 MsgSend(coid, send_msg, sizeof(send_msg), reply_msg, sizeof(reply_msg)); // 發(fā)送并等待回復(fù) // 服務(wù)端接收請(qǐng)求 int rcvid MsgReceive(chid, rcv_msg, sizeof(rcv_msg), NULL); // 接收消息 // ... 處理請(qǐng)求 ... MsgReply(rcvid, EOK, reply_msg, sizeof(reply_msg)); // 回復(fù)阻塞式MsgSend是阻塞的客戶端會(huì)一直等待服務(wù)器MsgReply。這提供了天然的同步。高效消息傳遞通常涉及內(nèi)存拷貝但對(duì)于小消息QNX內(nèi)核會(huì)優(yōu)化為傳遞指針非??臁顟B(tài)MsgReceive可以接收來自任何連接connection的消息rcvid唯一標(biāo)識(shí)了一次交互用于后續(xù)的MsgReply。實(shí)戰(zhàn)技巧對(duì)于復(fù)雜的服務(wù)通常會(huì)用一個(gè)線程專門MsgReceive然后將任務(wù)分發(fā)給工作線程池處理最后再由接收線程或工作線程MsgReply。要小心處理MsgReply的時(shí)機(jī)避免客戶端永久等待。多線程與同步QNX提供了POSIX標(biāo)準(zhǔn)的線程pthread和同步原語(yǔ)互斥鎖mutex、條件變量condvar、信號(hào)量semaphore。用法與Linux上類似。需要注意的是QNX的調(diào)度策略如SCHED_FIFO,SCHED_RR,SCHED_SPORADIC對(duì)實(shí)時(shí)性影響很大需要根據(jù)任務(wù)關(guān)鍵程度合理設(shè)置線程優(yōu)先級(jí)和策略。4.2 驅(qū)動(dòng)與資源管理器開發(fā)在QNX中設(shè)備驅(qū)動(dòng)被稱為“資源管理器”Resource Manager。它本質(zhì)上是一個(gè)特殊的用戶態(tài)進(jìn)程負(fù)責(zé)將設(shè)備操作open, read, write, ioctl等映射到底層硬件寄存器或邏輯操作。核心結(jié)構(gòu)一個(gè)資源管理器的主要工作是填充一個(gè)resmgr_io_funcs_t結(jié)構(gòu)體這個(gè)結(jié)構(gòu)體包含了各種處理函數(shù)如open,read,write,devctl等然后通過resmgr_attach()將這些函數(shù)與一個(gè)路徑名如/dev/mydevice關(guān)聯(lián)起來。開發(fā)流程簡(jiǎn)述定義設(shè)備操作函數(shù)實(shí)現(xiàn)io_open,io_read,io_write,io_devctl等回調(diào)函數(shù)。初始化資源管理器框架調(diào)用resmgr_attach()。進(jìn)入消息循環(huán)通常調(diào)用dispatch_block()或自己寫循環(huán)調(diào)用MsgReceive來接收來自客戶端即應(yīng)用程序的IO消息。處理IO消息在消息循環(huán)中調(diào)用resmgr_msg_again()或resmgr_msg_handle()等函數(shù)框架會(huì)自動(dòng)將消息分派到你之前注冊(cè)的回調(diào)函數(shù)中。硬件交互在你的io_read/io_write/io_devctl函數(shù)中通過mmap映射硬件寄存器內(nèi)存或者使用ioport等函數(shù)進(jìn)行端口IO來實(shí)現(xiàn)實(shí)際的硬件控制。一個(gè)簡(jiǎn)單的示例骨架#include sys/resmgr.h #include sys/dispatch.h static resmgr_connect_funcs_t connect_funcs; static resmgr_io_funcs_t io_funcs; static iofunc_attr_t attr; int io_open(resmgr_context_t *ctp, io_open_t *msg, RESMGR_HANDLE_T *handle, void *extra) { // 檢查權(quán)限初始化上下文等 return iofunc_open_default(ctp, msg, handle, extra); } ssize_t io_read(resmgr_context_t *ctp, io_read_t *msg, RESMGR_OCB_T *ocb) { // 從硬件讀取數(shù)據(jù)填充到msg-i數(shù)據(jù)緩沖區(qū) // 返回讀取的字節(jié)數(shù) return _RESMGR_NPARTS(0); // 示例實(shí)際需返回?cái)?shù)據(jù)和大小 } int main(int argc, char **argv) { resmgr_attr_t rattr; dispatch_t *dpp; resmgr_context_t *ctp; int id; // 1. 創(chuàng)建分發(fā)句柄和上下文 if((dpp dispatch_create()) NULL) { ... } // 2. 初始化屬性結(jié)構(gòu)和函數(shù)表 iofunc_func_init(_RESMGR_CONNECT_NFUNCS, connect_funcs, _RESMGR_IO_NFUNCS, io_funcs); iofunc_attr_init(attr, ...); io_funcs.open io_open; io_funcs.read io_read; // ... 賦值其他函數(shù) // 3. 設(shè)置資源管理器屬性 memset(rattr, 0, sizeof rattr); rattr.nparts_max 1; rattr.msg_max_size 2048; // 4. 附加資源管理器到路徑 if((id resmgr_attach(dpp, rattr, /dev/mysample, _FTYPE_ANY, 0, connect_funcs, io_funcs, attr)) -1) { ... } // 5. 進(jìn)入消息循環(huán) ctp resmgr_context_alloc(dpp); while(1) { if((ctp resmgr_block(ctp)) NULL) { ... } resmgr_msg_again(ctp); } }驅(qū)動(dòng)開發(fā)難點(diǎn)中斷處理資源管理器本身運(yùn)行在用戶態(tài)不能直接處理中斷。通常需要配合一個(gè)運(yùn)行在內(nèi)核態(tài)或高優(yōu)先級(jí)的“中斷服務(wù)例程”ISR。ISR通常只做最少的處理如清除中斷標(biāo)志、發(fā)一個(gè)脈沖然后通過InterruptAttachEvent()或InterruptAttach()關(guān)聯(lián)一個(gè)事件或線程由資源管理器線程來處理后續(xù)復(fù)雜的邏輯。內(nèi)存映射mmap讓應(yīng)用程序可以直接訪問設(shè)備內(nèi)存能極大提升性能如顯卡幀緩沖區(qū)。這需要在資源管理器中實(shí)現(xiàn)io_mmap函數(shù)。devctl()這是實(shí)現(xiàn)自定義控制命令的瑞士軍刀。應(yīng)用程序通過devctl(fd, MY_CMD, data, sizeof(data), NULL)來調(diào)用驅(qū)動(dòng)中io_devctl函數(shù)對(duì)應(yīng)的處理分支。5. 系統(tǒng)調(diào)試與性能剖析實(shí)戰(zhàn)當(dāng)程序行為異?;蛐阅懿贿_(dá)標(biāo)時(shí)QNX提供了一套強(qiáng)大的工具鏈來幫你定位問題。5.1 日志與系統(tǒng)狀態(tài)觀察slog2info系統(tǒng)日志工具。QNX有一個(gè)結(jié)構(gòu)化的日志系統(tǒng)slog2。使用slog2info可以查看內(nèi)核和進(jìn)程產(chǎn)生的日志。在Buildfile中確保啟動(dòng)了slog2ger否則日志可能無法持久化或查看。slog2info -w # 實(shí)時(shí)查看日志pidin這是你的“任務(wù)管理器”。可以查看進(jìn)程、線程、內(nèi)存、通道、連接等幾乎所有系統(tǒng)狀態(tài)。pidin info # 顯示系統(tǒng)摘要內(nèi)存、CPU使用率 pidin arg # 顯示所有進(jìn)程及其參數(shù) pidin mem # 顯示內(nèi)存使用詳情 pidin tid # 顯示所有線程及其狀態(tài)、優(yōu)先級(jí) pidin -p pid tid # 查看特定進(jìn)程的線程hogs實(shí)時(shí)顯示哪些進(jìn)程/線程占用了最多的CPU時(shí)間對(duì)定位CPU熱點(diǎn)非常有用。ls -l /dev/shmem查看共享內(nèi)存對(duì)象排查內(nèi)存泄漏或異常共享內(nèi)存。5.2 性能分析工具tracelogger和traceprinterQNX的系統(tǒng)跟蹤框架??梢杂涗泝?nèi)核事件調(diào)度、IPC、中斷和用戶自定義事件。記錄tracelogger -c -f trace.dat開始記錄。觸發(fā)你的測(cè)試場(chǎng)景。停止tracelogger -t停止記錄。分析traceprinter -f trace.dat -n以文本形式輸出?;蛘呤褂脠D形化的Trace Analyzer在Momentics IDE中進(jìn)行可視化分析可以看到線程狀態(tài)隨時(shí)間的變化圖直觀找出阻塞、等待IPC的地方。instrumented內(nèi)核要使用tracelogger的完整功能你需要構(gòu)建并運(yùn)行一個(gè)帶有“instrumentation”選項(xiàng)的內(nèi)核。BSP中通常會(huì)有對(duì)應(yīng)的buildfile如build-instrumented。這個(gè)內(nèi)核性能有損耗僅用于性能分析不要用于生產(chǎn)環(huán)境。slay強(qiáng)制終止進(jìn)程。slay -f process_name可以強(qiáng)制殺死一個(gè)進(jìn)程。在調(diào)試時(shí)非常有用但要小心使用。5.3 常見問題排查實(shí)錄以下是我在項(xiàng)目中遇到的幾個(gè)典型問題及解決思路問題1系統(tǒng)啟動(dòng)后我的應(yīng)用程序沒有自動(dòng)運(yùn)行。排查檢查串口啟動(dòng)日志看是否有錯(cuò)誤信息特別是你的應(yīng)用程序或它依賴的庫(kù)是否報(bào)“找不到”或“權(quán)限拒絕”。在Buildfile的[script]部分確認(rèn)啟動(dòng)你應(yīng)用的命令是否正確路徑是否有效。一個(gè)常見錯(cuò)誤是路徑中使用了宿主機(jī)路徑而非目標(biāo)板路徑。登錄到目標(biāo)板通過串口或網(wǎng)絡(luò)手動(dòng)嘗試運(yùn)行你的應(yīng)用命令根據(jù)報(bào)錯(cuò)信息進(jìn)一步排查如庫(kù)依賴ldd權(quán)限chmod。心得在Buildfile的啟動(dòng)腳本里在關(guān)鍵命令前后加上echo語(yǔ)句輸出到控制臺(tái)是追蹤啟動(dòng)過程的最簡(jiǎn)單有效方法。問題2應(yīng)用程序運(yùn)行一段時(shí)間后卡死或無響應(yīng)。排查使用pidin tid查看相關(guān)線程的狀態(tài)。如果線程狀態(tài)是RECEIVE、REPLY或SEND說明它很可能在IPC上阻塞了。結(jié)合代碼分析它在等待誰(shuí)的消息或回復(fù)。使用pidin -p pid fd查看進(jìn)程打開了哪些文件描述符是否有未關(guān)閉的資源。檢查是否有死鎖。特別是使用互斥鎖時(shí)是否在同一個(gè)線程內(nèi)重復(fù)加鎖非遞歸鎖或者多個(gè)線程以不同的順序獲取多個(gè)鎖。使用tracelogger記錄卡死前后的活動(dòng)分析線程交互。心得在QNX中由于MsgSend是同步阻塞的設(shè)計(jì)不當(dāng)很容易造成死鎖A等B的回復(fù)B也在等A的回復(fù)。清晰的客戶端-服務(wù)器架構(gòu)和超時(shí)機(jī)制MsgSendPulse,TimerTimeout很重要。問題3系統(tǒng)實(shí)時(shí)性不達(dá)標(biāo)偶爾出現(xiàn)響應(yīng)延遲。排查使用hogs和pidin tid查看在延遲發(fā)生時(shí)是哪個(gè)低優(yōu)先級(jí)線程占用了大量CPU搶占了高優(yōu)先級(jí)實(shí)時(shí)線程。檢查中斷屏蔽。過長(zhǎng)的中斷禁用時(shí)間會(huì)導(dǎo)致高優(yōu)先級(jí)線程也無法被調(diào)度。使用tracelogger查看中斷和線程調(diào)度序列。檢查是否有“優(yōu)先級(jí)反轉(zhuǎn)”。低優(yōu)先級(jí)線程持有了高優(yōu)先級(jí)線程需要的鎖。QNX提供了優(yōu)先級(jí)繼承互斥鎖PTHREAD_PRIO_INHERIT可以在一定程度上緩解此問題。檢查內(nèi)存分配malloc。在實(shí)時(shí)線程中頻繁分配釋放內(nèi)存可能觸發(fā)垃圾回收或引起內(nèi)存碎片整理導(dǎo)致不可預(yù)測(cè)的延遲。實(shí)時(shí)關(guān)鍵路徑上應(yīng)避免動(dòng)態(tài)內(nèi)存分配使用靜態(tài)或池化內(nèi)存。心得實(shí)時(shí)性調(diào)試是系統(tǒng)工程。需要從硬件中斷延遲、驅(qū)動(dòng)設(shè)計(jì)、線程優(yōu)先級(jí)分配、鎖的使用、內(nèi)存管理等多個(gè)層面綜合分析。tracelogger是解決這類問題的終極武器。問題4網(wǎng)絡(luò)性能不佳吞吐量低。排查確認(rèn)io-pkt進(jìn)程是否以最優(yōu)參數(shù)運(yùn)行。例如可以嘗試調(diào)整接收/發(fā)送描述符數(shù)量。使用netstat -i查看網(wǎng)絡(luò)接口是否有大量的錯(cuò)誤或丟包。使用pidin -p pid_of_io-pkt mem查看io-pkt進(jìn)程的內(nèi)存使用看是否因?yàn)閮?nèi)存不足導(dǎo)致性能下降。檢查是否使用了正確的網(wǎng)絡(luò)驅(qū)動(dòng)devn-*.so版本并與網(wǎng)卡硬件匹配。心得網(wǎng)絡(luò)性能調(diào)優(yōu)往往需要結(jié)合具體硬件和驅(qū)動(dòng)。查閱BSP包中關(guān)于網(wǎng)絡(luò)驅(qū)動(dòng)的說明文檔有時(shí)會(huì)提供性能優(yōu)化的配置示例。6. 構(gòu)建與部署自動(dòng)化手動(dòng)執(zhí)行命令效率太低且容易出錯(cuò)。將構(gòu)建和部署過程自動(dòng)化是專業(yè)開發(fā)的必備環(huán)節(jié)。6.1 使用Makefile組織項(xiàng)目一個(gè)結(jié)構(gòu)清晰的Makefile能極大提升效率。QNX的qcc可以很好地集成到Makefile中。# 工具鏈前綴根據(jù)目標(biāo)架構(gòu)修改 CROSS_COMPILE ntoarmv7- CC $(CROSS_COMPILE)qcc LD $(CROSS_COMPILE)qcc CFLAGS -Vgcc_ntoarmv7le -g -O2 -Wc,-stdc11 -Wall LDFLAGS -Vgcc_ntoarmv7le # 源文件和目標(biāo) SRCS main.cpp device_manager.cpp network_service.cpp OBJS $(SRCS:.cpp.o) TARGET my_system_app # 默認(rèn)目標(biāo) all: $(TARGET) # 鏈接 $(TARGET): $(OBJS) $(LD) $(LDFLAGS) -o $ $^ -lmy_lib -lsocket # 編譯 %.o: %.cpp $(CC) $(CFLAGS) -c $ -o $ # 清理 clean: rm -f $(OBJS) $(TARGET) # 部署到目標(biāo)板假設(shè)已配置好網(wǎng)絡(luò)和路徑 deploy: $(TARGET) scp $(TARGET) root192.168.0.100:/tmp/ ssh root192.168.0.100 slay -f $(TARGET) 2/dev/null; cd /tmp ./$(TARGET) .PHONY: all clean deploy你可以為不同的構(gòu)建目標(biāo)Debug/Release x86/ARM定義不同的變量組合。6.2 集成腳本與持續(xù)集成思路對(duì)于更復(fù)雜的項(xiàng)目可以編寫Shell或Python腳本將以下步驟串聯(lián)從版本庫(kù)拉取代碼。調(diào)用Makefile編譯所有組件應(yīng)用、驅(qū)動(dòng)。使用mkifs重新生成系統(tǒng)鏡像。將鏡像部署到TFTP服務(wù)器或直接燒錄到測(cè)試硬件。重啟硬件并運(yùn)行自動(dòng)化測(cè)試套件??梢詫⑦@個(gè)腳本放到Jenkins、GitLab CI等持續(xù)集成平臺(tái)上實(shí)現(xiàn)代碼提交后的自動(dòng)構(gòu)建、部署和冒煙測(cè)試確保主線代碼的穩(wěn)定性。7. 總結(jié)與個(gè)人體會(huì)回顧整個(gè)QNX 7.0.0的開發(fā)過程最大的感受是“理念的轉(zhuǎn)變”。從熟悉的Linux宏內(nèi)核世界切換到QNX的微內(nèi)核和消息傳遞世界初期確實(shí)有很多不適應(yīng)。你會(huì)不自覺地想去fork一個(gè)進(jìn)程做后臺(tái)服務(wù)但在QNX里更優(yōu)雅的方式可能是啟動(dòng)一個(gè)獨(dú)立的資源管理器進(jìn)程并通過IPC與之通信。你會(huì)擔(dān)心頻繁IPC的性能但實(shí)測(cè)下來在正確的使用方式下它的開銷是可接受的換來的則是系統(tǒng)組件間極佳的隔離性和可靠性。對(duì)于新手我的建議是不要急于寫代碼先花時(shí)間理解微內(nèi)核和IPC模型。把官方文檔里關(guān)于MsgSend、MsgReceive、資源管理器的章節(jié)反復(fù)讀幾遍并動(dòng)手寫一些簡(jiǎn)單的示例。這比一上來就移植一個(gè)復(fù)雜的Linux應(yīng)用要高效得多。關(guān)于工具鏈擁抱LLVM/Clang和LLDB是大勢(shì)所趨。雖然切換初期會(huì)有陣痛比如一些舊的GCC特有語(yǔ)法或編譯選項(xiàng)需要調(diào)整LLDB的命令也和GDB有所不同但新的工具鏈在錯(cuò)誤提示、代碼優(yōu)化等方面通常更有優(yōu)勢(shì)。盡早適應(yīng)利大于弊。最后調(diào)試是QNX開發(fā)中最重要的技能之一。pidin,hogs,slog2info是你的日?;锇槎鴗raceloggerTrace Analyzer則是解決復(fù)雜性能問題和死鎖的“核武器”。一定要學(xué)會(huì)使用它們。遇到問題多觀察系統(tǒng)狀態(tài)多打日志結(jié)構(gòu)化slog2比printf更強(qiáng)大從系統(tǒng)級(jí)視角去分析往往能更快地定位到根因。QNX是一個(gè)為高可靠、強(qiáng)實(shí)時(shí)而生的系統(tǒng)它的設(shè)計(jì)哲學(xué)滲透在每一個(gè)細(xì)節(jié)里。理解并遵循這套哲學(xué)而不僅僅是把它當(dāng)做一個(gè)工具你才能更好地駕馭它構(gòu)建出真正穩(wěn)定、高效的嵌入式系統(tǒng)。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月激情站| 成人av免费观看| 一区视频网站| 天天色2017| 激情五月丁香综合网站| 五月婷婷婷综合网| 婷婷六月天国产综合| 开心五月婷婷婷美女| 99人碰碰碰| 少妇真实被内射视频三四区| 99热6色| www一起操在线观看| 色婷网| 五月伊人视频在线看| 国产人人操| 狠狠干在线| 久久久久久丁香五月| 99re视频在线| 婷婷五月丁香四射| 亚洲网综合在线| 丁香五月婷婷亚洲综合精品| 色五月色五天免费视频| 亚洲综合五月天综合| 丁香五月天社区婷婷| 超碰免费电影| 激情网五月天| 丁香色婷婷| 天天干,夜夜爽| 管管補管管紱| 狠狠香婷婷五月| 黄色短视频在线观看| 日本久久精品| 五月天丁香综合| 亚洲色A| 综合五月婷婷| 五月激情射| 日本不卡高字幕在线2019| 这里只有精品久久| 播播网色播播| 超碰高清在线| 91九色中文| 九九精品在线网| 婷婷她六月天| 欧美欧盟性爱网| 日熟女| 婷婷5月久久综合网站| 色优久久| 亚洲成人综合在线| 99这里有精品| 综合色色五月| 六月色 亚洲| 久久精品99国产精品日本| 无码人妻激情| 色丁香五月婷婷| h亚洲| www夜夜操com| 99色精品| 日本色色网| 超碰AV在线| 99九无网码| 日韩人妻在线播放| 九月色婷婷婷| www狠狠com| 久久综合婷| 婷婷五月综合性爱| 秋霞av不能| 九九99偷拍视频| 99视频这里有精品| 五月婷天堂视频| 在线观看欧美3区| 婷婷综合中文字幕| 亚洲爱婷婷| 91大神在线免费看视频全集男男一起操| 91久久国产自产拍夜夜91久久精品文字>91麻豆精品国产 | 激情WWW| 婷婷六月丁香综合| 久久99性爱| 深爱五月最新网址| 99色热视频| 男人天堂99| 97色婷婷成人综合在线观看| 极品人妻VIDEOSSS人妻| 人人操大| 精品五月丁香| 99热免| 狠狠干综合网| 色丁香五月天| 另类在线免费视频| 激情综合丁香五月| 99ri精品在线| 4399无码视频| 99噜噜| 国产成人av在线播放| jiqingtaose五月天| 亚洲激情四射| 久久机热思思热| 六月丁香VA| 天天综合五月| 综合AV网| 婷婷五月天成人在线视频| 久久久性爱视频| 只有精品在线观看| 婷婷五月天在线视频网站| 久久新地址| 精品人妻一区二区| 91丁香五月| 综合五月天亚洲婷婷| 久久奄也去色色网站| 丁香六月五月婷婷| 天天干天天拍| 超碰在线精品| 无码区婷婷五月花开| WWW久久久| 嫩草AV久久伊人妇女超级A| 无码字幕中文| 亚洲99激情| 婷婷久久亚洲| 丁香六月婷婷一区| 婷婷综合在线| AV九九| 久久九九囯产| 常久最新免费的色吊丝| 久久伊人大香蕉| 婷五月天| 欧美婷婷五月| 日韩无码专区| 99热这里只有99| 五月天色社区| 婷婷干| 六月色色| 超碰在线国产| 日韩啪| 亚洲精品国产精品乱码不99| 色婷婷成人做爰A片免费看网站| 色婷婷AⅤ| 天天色天天爱天天舔| 99热只有| 91岛国片| 五月婷婷综合在线| 色婷av| 亚洲VA在线| 久久九九国产精品怡红院| 热99一二三| 五月熟妇婷婷久久| 免费无码毛片一区二区A片 | 亚洲十月婷婷综合| 国产亚洲精品AAAAAAA片| 亚洲六月婷婷| 狠狠色婷婷7777久| 亚洲色综合| 日日杆天天| 九九操屄| 狠狠色噜噜| 色婷婷XXXXX| 在线1青婷| 一起草AV入口| 超碰熟女拍拍| 99碰在线视频| 激情婷婷五月天| 五月做爱| 丁香五月欧美午夜视频| 亚洲熟女乱色综合亚洲网站| 丁香九九九九| 欧美日韩999| 五月丁香在线| 91碰碰碰| 92久久精品一区二区| 久久这里只有精品5| 狠狠综合久久| 免费的日逼视频| 五月天色区| 99ri精品视频在线观看| 亚洲综合五月天| 九九热黄色| 欧美色久| 五月天国产成人| 久久性爱视频网站| 激情 婷婷 丁香五月天| 日本在线wwww| 丁香大香蕉| 精品久久久999| 97精品欧美91久久久久久久| WWW.激情| 黄色AAAA韩国guochansanji| www.久久婷婷| 色婷婷中文在线| 五月丁香久久久久| 国产无遮挡又黄又爽免费网站| 美女五月天婷婷| 国产成人精品一区二三区熟女在线 | 丁香激情网| 99亚洲精品视频| 天天爱天天做天天日| 色999;丁香五月| www.婷婷五月天啪啪| 欧美性生交XXXXX无码小说| 欧洲综合视频在线观看。欧洲,亚洲综合食品在线观看。 | 久久精品五月天| 色啪综合| yiqicaoav| 日韩超碰在线| 91大屁股| 久草A片| 五月激情综合网| 色婷婷中文字母五月丁香| 国产成人片| 91人人爽久久涩噜噜噜| 五月天激情综合在线| 国产又爽又猛又粗的视频A片| 婷婷丁香五月天中文字幕| 色99www.| 懂色av粉嫩av蜜臀av| 丁香美女五月天婷婷| 国产五月天婷婷| 欧美S码亚洲码精品M码| 午夜成人天堂久久无码日韩久久| 天天操天爱综合| 国产精品视频免费看| 日韩成人电影AV| 狠狠五月综合在线| 思思视频这里是精品| 日韩丁香涩| 九九99九九99偷拍视频免费看| 丁香六月婷婷综合色| 婷婷五月丁香综合瑟瑟| 成片免费观看视频大全| 五月天婷婷网站| 天天做夜夜爽| 日日色五月天| 玖玖婷婷五月天| 激情久久久久久久久| 五月色综合| 五月丁香在线看| 最新午夜理论片| 丁香香蕉婷婷| 久99久视频精选| 天天爽夜夜操| 99色视频| 天天做夜夜爽| 99综合免费视频| 色色色色网色色网色色| 丁六月激情| 91成人电影| 五月丁香久久激情综合| 综合久久五| 激情五月综合婷婷| 丁香婷婷啪啪| 丁香五月色色| 超碰AV在线| 五月亭亭网成人在线视频| 天天肏屄夜夜爽| 亚洲婷婷基地| 色五婷婷| 亚洲色五月婷婷| 超pen个人视频97| 婷婷伊人五月天| 99热丁香| 国产67194| 涩综合婷婷| 美女美女美女三级色天天天天天| 。久久久久久久久久久久久久人妻| 舔色婷婷| 激情综合五月开心狠狠| EEUSS鲁片一区二区三区| 思思热再线视频| 激情五月六月婷婷综合啪啪| 岛国资源网| 激情五月深爱五月| 五月社区婷婷激情| 久久这里只有国产视频| 综合网天天| 99热这里只有精品18| 亚洲人人干| 六月色狠狠色| 性色视频| 丁香婷婷性爱| 99无码视频| 日日操天天操| 九九九激情网| 天天综合网~91| www.99热这里精品| 99精品久久久久久久婷婷| 婷婷五月综激情| 中文字幕欧美久久| 激情五月天综合网站网站网站| 国产色丁香| 久久99热这里只有精品23| 亚洲色爽| 99re最新地址| 婷婷丁香花五月天| 国自产拍偷拍精品啪啪一区二区| 婷婷日本在线| 天天肏视频| 婷婷五月天视| 婷久久高清| 超碰免费观看| 五月婷色色| 天天爽成人综合网站| 欧洲激情五月天婷婷| 99在线视频在线观看| 五月色无码| 日日狠狠久久偷偷四色综合免费 | A√天堂网在线| 2025天天爽天天摸| 天天日日夜夜| 玩熟女五十AV一二三区| 中文字幕丰满人妻无码专区| 天天上天天爽| 亚洲综合在线播放| 久久久久久久久月丁| 无码一级片| 另类天堂| 这里只有精彩视| 激情六月丁香| 99久99久| 91操在线视频| 婷婷五月图片小说网| 婷婷刺激综合| 亚洲久久天堂| 色五月涩涩婷婷蜜桃| 六月婷婷激情小说网| 99热免费| 人人操超碰| 色婷婷97| 天天插天天爽| 日韩人妻白浆视频系列| 人人爱操| 激情综合网址| 第五婷婷伊人丁香| 激情五月天色爱| 久热69| 极品少妇XXXX精品少妇偷拍| 欧美影院婷婷| 思思re99视频在线观看| 久草丁香婷婷1024| 有码人妻久久| 亚洲五月婷婷| 婷婷内射视频在线| 亚洲六月色| 91碰碰| 色综合九九色综合88| 婷婷色色播五月天| 香蕉AV福利精品导航| 六月丁香中文字幕| 激情五月婷婷综合| 免费看片在线观看| 人人草人| 狠狠 久久| 精品99久久久久成人网站免费| 五月婷婷五月天在线| 久久久国产精品黄毛片 | 26uuu视频欧美| 婷婷六月丁香五月| 亚洲精品九九| 五月丁香黄色视频| 久热精品9999| 五月综合色播播丁香婷婷| 深爱激情六月天| 成人综合视频在线| 极品另类| 五月丁香精品| 99re这里| 97亚洲色 torrent magnet| 激情五月天婷婷在线网址发给我| 99热在线播放精品| 99久久6| 97成人丁香| ss99热| 九月婷婷| 麻豆123区| 色啪影院| 综合激情啪啪| 欧美成人猛片AAAAAAA| 亚洲中文无码成人| 国产XXXX搡XXXXX搡麻豆| 日日天天天| 99热在线观看| sewuyue第四色| 香蕉久久国产AV一区二区| 久久99这里只有精品| 色色色999| 色愛综合网| 婷婷色五月天在线观看| 欧美日韓成人亚洲精品另类| 成年人丁香五月| 婷婷丁香成人| 久久xx| 亚洲成人免费电影| 青青青在线视频国产| 天天爽夜夜爽夜夜爽精| ..真实国产乱子伦对白在线_欧| 色色网站免费在线视频| 欧美婷婷色| 丁香美女主播视频在线观看| 97日在线视频| 久久丁香五月天| 国产夫妻操逼内射视频| 色色999三级片| 五月天国产婷婷精品视频在线| 综合久久首页| 五月丁香婷婷久久| 精品福利911| 影音先锋 萱萱| 少妇激情五月天| 91精品婷婷国产综合| 九九碰九九爱97| 欧美大奶熟女噜噜噜噜| 九月婷婷综合色干| 欧美日韩成人在线| 激情五月天色婷婷| 久久久18| 狠狠操狠狠色| 天天干电影| 狠干综合| 国产真人做爰视频免费| 色色色五月婷| 5月婷婷六月丁香| 五月天激情日色在线| 日韩在线视频网站| 伊人狠狠操| 性爱五月丁香| 色日本颜射| 日韩人妻无码精品| 久热只有这里精品| 伊人婷婷青青cao| 91九色超碰| 久久久久久激情| 五月丁香综合久久| 六月丁香av| 亚洲宗合激情| 激情六月婷婷| 99九九热视频| 人妻VideOssS人妻高清| 青青草a在线| 久久婷婷综合色丁香| www.婷婷五月| 五月天综合激情网| 国产精品蜜臀99| 一区视频网站| 97超碰在线观看免费| 能直接看的av网站| 婷婷情色五月天| 伊人丁香花综合影院| 91九色精品| 天久综合91综合首页| 婷婷五月香蕉| 色色色热| 丁香五月天网友自拍啪啪啪视频| 五月丁香综合伦理片| 9久国产| 丝袜熟女一区二区三区| 亚洲熟妇AV乱码在线观看| 五月丁香六月婷婷激情视频在线观看免费| www.五月天婷婷姐姐| 色婷视频| 色婷精品91| 日本操B片| 欧美日本免费一道免费视频| 婷婷视频网| 美欧日韩国产成人在战| 天天插,天天射| 丁香六月色情| 天天狠狠婷婷在线| 亚洲精品视频在线| 性视频久久| 人人操人人看97干| 99小视频在线观看| 欧美激情久| 丁香五月色情av| 久久黄色片| 欧洲色区| 99热 日韩| 亚洲中文字幕在线观看| 婷婷亚洲综合| 成人美女网| 丁香激情网| 超碰人人在线| 色色国产| 碰99在线| 99少妇精品| 亚洲视频1区| 丁香五月婷婷激情四射深爱激情| 9色资源在线| 亚洲无码性爱| 人人叉久| AV网站免费在线| 婷婷色基地在线看| 久久宗合影| …亚洲黄色在线播放日韩、av中文a…| 丁香五月综合久久| 91综合国免费久入| 婷婷丁香视频在线观看免费| 色情丁香五月天| ss五月天激情| 久久这里只有国产视频| 第四色五月天| 九九操操| 狠狠干婷婷| 久久婷婷五月天懂色| 婷婷91| 开心婷婷五月| 99在线精品免费视频| 综合六月久久| 久久婷视频| 精品99视频| 婷婷 月 丁香| 婷婷丁香成人| 荫道BBWBBB高潮潮喷| 成人国产欧美大片一区| 先锋影音男人的天堂AV| 全高清无码视頻| WWW,色五月| 99aese| 99九九精品| 色婷婷中文在线| 欧美激情VA永久在线播放| 日韩av一区二区在线/日产精品久久久 | 欧美丁香婷婷五月| 婷婷六月激情综合| 婷婷日本色| 色~性~乱~伦~噜| 日韩一66精品| 久久婷婷视频| 五月综合色| 激情久久婷婷| 色播五月婷婷综合| 激情综合一| 狠狠狠狠狠狠色| 亚洲无码播放| 色五月在线观看| www.minyis.com【JT】实力收量可预付QQ2101460746 | 日韩在线婷婷五月天综合| 五月天婷婷綜合院| 婷婷六月香| 9久久网| 婷婷五月丁香综合激情小说| 丁香五月先锋| 日本不卡高字幕在线2019| sewuyuetingtingiii| 五月丁香久久综合| 99热亚洲精品| 黄网在线免费| 激情五月天综合网站网站网站| 成人丁香婷婷| 98国产精品综合一区二区三区| 97色操| 亚洲性爱99在线| 丝袜激情网| 五月天丁香久久综合 | 色色哒五月婷婷六月丁香| www.99色| 91色色色18| 五月丁香六月婷婷的女人| 亚洲色网络| 啪啪夜久久| 久久人妻在线| 丰满少妇猛烈A片免费看观看| 五月综合丁香婷婷| 色五月激情五月开心五月| 亚洲六月色| 美女五月天婷婷| 九九操操| 中文字幕视频在线播放| 无码髙清| 久久婷婷五月激情综合| 丁香婷婷五月综合影院| 艳妇野外情欲放荡HD| 亚洲小视频免费播放| 狠狠综合网| www.久久99精品| 天天爽天天弄| 最近中文字幕大全免费版在线| 91天天操天天干天天射| 九九激情| 91疯狂操操操操| 五月丁香淫淫婷婷婷| 亚洲色就是色色色| 日日操,天天操| 久久黄A片| 欧美日韩999| 女操碰| 日韩精品999| 91 原创 在线 九色| 欧美婷婷成人| 色约约视频一区二区三区四区五区 | 91久久国产综合久久| 狠狠色噜噜色狠狠狠综合久久成人波 | 欧美日韩成人| 丁香婷婷综合激情五月色,开心五月丁香花综合网,激情综合五月亚洲婷婷,五月天 | 精品九九久久| 色婷婷婷婷五月天| 天天操精品| 性爱视频久久| 丁香五月婷婷啪| 色婷久九| 99热永久在线观看| AA片在线观看视频在线播放| 深爱激情五月天婷婷网| 99在线精品免费视频| 日本成人噜噜噜噜噜| 五月色综合| 6080av| 大香蕉丁香五月| 人人草开心五月天| 五月丁香激情怕怕| 色播五月丁香| 深爱婷婷基地| 超碰在线观看三级片| 亭亭五月天成人| 怡红院91a√| 99久在线| 丁香五月天五码婷婷| 久久五月丁香综合| 国产成人综合在线| 五月天六月丁香| 丁香六月婷婷基地| 亚洲成人av在线| 五月天色婷婷激情综合| 五月久久丁香| 欧美97色| 婷婷丁香激情| www.色色五月天.com| 天天操夜夜操| 五月婷婷啪啪| 丁香开心深爱| 久久精品五月天| 被强行糟蹋的女人A片| 丁香六月婷婷综合缴| 五月天激情综合网俺也去| 激情AV网| 五月丁香综合啪啪| 午夜九九电影| 久久刺激网| 国外亚洲成AV人片在线观看| enecarbon-materials.com污K127封锁请涟系@wip1688 | 亚洲综合五月天| 99热这里只有的精品视 | 午夜激情婷婷| 亚洲人成网站999综合| 久久婷五月天| 99re这里| 亚洲色情激情丁香五月| 黄色片区子| 久久久亚洲成人无码A片| 五月天综合在线| 天天干天天叉| 婷婷日| 在线观看996精品| 日逼AV影音先锋男人资源站| 99精品在这里| 久久婷婷五月天激情四射| 六月婷婷九月丁香亚洲综合| 六月99天天婷婷激情综合| 天天爱天天做天天爽| 99热精品一| 99热99在线| 青青草Avb在线| 伊人在线视频| 婷婷五月色播放| 99在线视频免费| 香蕉网久久| 亚洲一二三网| 日本欧美成人片AAAA| 91人人操人人| 五月婷婷激情久久| 亚洲综合色丁香婷婷六月| 超碰成人电影| 亚州操逼网| 97婷婷久久丁香| 天天日天天肏天天奸| 久草热在线视频| 婷婷五月天网址| 婷婷五月亚洲一本在线丁香| 五月婷六月丁香| 亚洲永久四色| 激情网综合| 极品人妻VIDEOSSS人妻| 91丨九色丨东北熟女| 日韩九区| 激情综合久久| 亚洲成人AV在线观看| 亚洲男女激情| 新激情五月天天在线网| 狠狠色婷婷六月激情网| 五月丁香婷婷激激激综合网色播| 五月婷婷开心激情六月蜜桃| 午夜 外网 精品 在线| 九九青青草成人| 五月丁香成人| VA色婷婷| 久青青久| 日本特黄aaaaa| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 色天堂在线| 99在线免费视频| 九月色婷婷综合| 色噜噜狠狠色综无码久久合欧美| 丁香五月天亚洲视频| 99热这里只有精品8| 欧美色性色好| 五月天激情久久| 成人五月天丁香| 婷婷狠狠操| 欧美日韩91| 九九aV| 99ER热精品视频| 99操九九网| 久婷久婷| 99久久久国产大片区| 欧美久久五月婷婷| 色99网站| 影音先锋一区| 老师的粉嫩小又紧水又多A片视频| 秋霞少妇AV网站| 99在线小视频| 久热91| 天天插夜夜爽| 丁香五月AV| 能看的av网站| 欧洲电影在线观看免费版英语版| www.婷婷com| 91久久久久久久久久| 97人妻碰碰碰久| 久久视频九九视频| 99久超碰| 搡BBBB搡BBB搡18 | 欧美日韩成人在线网站| 色五月婷婷激情综合网| 婷婷六月啪啪| 久久婷婷精品| 99色.com| ...婷婷国产成人亚洲日韩| 伊人色综在线| www.激情五月| 伊人青涩网| 五月婷婷丁香深深爱| www.深爱激情| 六月婷婷中文字幕| 97五月天婷婷综合激情网| 欧美va精品va老师va| 99热九九热| 久热这里| 99 re视频一区| 久久aaaa片一区二区| 美日韩成人| yw.av| 激情综合综合综合| 99久久99热这里只有精品| 婷婷激情综合| 色停停影院五月天| yazhouzonghesese| 91丨九色丨东北熟女| 婷婷久久色| 亚洲 激情 中文| 国产在线黄色| 操久久精| 激情五月婷婷开心网| 亚洲乱码日产精品BD| 思思色播| 99色婷婷视频| 亚洲网站999| 五月激情婷婷开心| 婷婷丁香久久| 丁香婷婷网| 五月丁香婷婷综合| 成人一区在线观看| 美英法精品无码免费视频| 开心五月激情网| 大香蕉久| 亚洲AV人人操| 综激情网| 99热碰碰| 五月天婷婷免费| www.99热这里精品| 亚洲视频1区| 婷婷五月天婷婷| 久久久亚洲精品一区二区三区浴池 | 嫩BBB搡BBBB榛BBBB| www.婷婷| 97狠狠色| 激情久久久| 91精品婷婷国产综合久久| 国产av基地| 色色综合激情| 日本一级| 九九色图| 久久久婷婷婷| 国产激情久久| 欧美综合激情五月丁香| 噼里啪啦完整版中文在线观看| 婷婷色五月婷婷姐妹| 久久久com| 天天操夜夜啊| 91碰碰| 99色热视频| 日曰躁夜夜躁2026| 久久这里有精品视频| 中文超碰视在线| 色色色色av色色色色| 婷婷五月丁香99| 色播五月婷婷| 人伦30P| 亚洲超碰在线| 久久五月人人摸| 丰满女老板BD高清A片| 99精品7| 丁香五月伊人| 男人的天堂五月丁香| 亚洲网视屏| 91色五月| 五月社区丁香| 久久五月六月| www.色五月| 日日做夜夜爱| 日韩色五月| 婷婷五月六月| 噜噜噜精品欧美成人在线观看| 人妻有码乱操| 九九九九这里只有精品| 五月丁香激情综合六月涩涩爱| 99热碰碰热| Av性爱网| 婷婷五月精品| 99在线精品观看99| 精品五月丁香| 久热视频97AV在线观看| 啪啪操超碰| 黄网在线播放| 97色干在线观看| 操一操干一干| 色婷婷五月六月丁香综合视频| 精品久久穴| 亚洲成人网站在线播放| AV堂狠狠干| 99久久久精品| www.99热这里只有精品| 天天做 天天爱| 色噜噜狠狠色综合成人网| 国产精品扒开腿做爽爽爽A片唱戏| 五月婷婷五月天亚洲无码| 五月丁香黄色| 色婷网站| 狠狠色色| 丁香五月婷婷日本| 有码人妻久久| 五月婷婷激情久久| WW婷婷五月天com| 九九九九综合| 激情 婷婷 丁香五月天| 日韩久久视频| 香蕉久久五月| 大香蕉伊人久久| 天天日夜夜曹| www色婷婷久久综合久色| 超碰高清在线| 日本乱子人伦在线视频| 婷婷91| 99久久久| 激情五月综合ì香亚洲| 婷婷六月天天| 中文字幕成人日韩| 色五月婷婷网| 少妇高潮一区二区三区99欧美| 色情久久久| 五月婷六月综合在线观看| 超碰精品国产首页| www.丁香黄色五月天人与| 国产亚洲99久久精品| 狠色狠色综合久久| 激情五月综亚网| 99热国内精品| 超碰国产在线观看| 色婷婷很很十八禁| 亚洲精品V天堂中文字幕| 991精品在线视频| 久久精品只有这| 天天天添天天操| 亚洲热视频| 婷婷五月天无码| 99色免费视频| WWW、日本色丁香、co m| 色色日韩| 另类激情综合| 久久99精品久久久久久噜噜| 五月天大香蕉视频| 无毒黄色网址| 热久久999| 老妇六区| 精品香蕉99久久久久网站 | 亚洲无码www| 97热超碰| 久久久香港| 日韩成人电影av| 五月婷婷婷色| 99婷婷综合| 色婷婷综合久久| 婷婷伊人欧美| 激情操逼婷婷| 中文AV网站| 青青草伊人婷婷| 九月激情婷婷丁香| 婷婷五月丁香图片人人操| 精品一二三区久久AAA片 | 亚洲色情久久| 亚洲中文字幕av| 性色人人爽| 婷婷丁香五月天婷婷| www.狠狠操.co m| 这里只有精彩小视频视频网站| 丁香婷婷六月激情文学| 9久久精品| 日韩精品99久久| 九九干视频| 美女伊人久久| 91色综合网| 婷婷精品免费久久| 五月天另类综合网| 精品成人无码A片观看香草视频| 99精品在线下载| 婷婷色成人| 五月天六月婷婷| 五月天成人综合| 五月婷婷六月天| 婷婷六月丁香五月| 人妻熟人中文字幕一区二区| 大香蕉久久视频久久视频| 亚洲精品另类| 密乳Va| 亚洲午夜AV| 狠狠夜夜五月丁香| 婷婷色网站| 天天日天天干天天操| 综合激情五月天| 五月婷在线| 99久久婷婷国产综合亚洲| 婷婷五月丁香色综合| 狠狠色综合网| 天天艹夜夜爽| 久久激情天堂| 天天日天天舔| 色yeye色综合| 激情丁香九九五月综合网| jiujiu热在线视频| 伊人久久五月天| 激情五月综合网| 99色在线| 日韩 mm 不卡| 婷婷五月天成人娱乐| 大香蕉院线| 亚洲另类婷婷综合| 三年高清大片免费观看国语| 4438国产免费看| www.xtbsty.cn.com蜜乳AV| 精品无码99| 五月丁香婷中文| 久草丁香婷婷1024| 99热在线精品观看| 色婷婷亚洲在线| 大香蕉五月婷婷| 色综色网| 99黄色性生活| 色深爱五月| 99色视频| 国产精品色婷婷99久久精品| 丁香六月 人妻| www.五月婷婷.com| 第九色区av天堂| 色呦呦美女| 5月婷婷五月天| 99热.com| 婷婷六月综合基地| 色丁香在线视频| 久热九九| 人人超碰99| 色婷婷深爱五月| 婷婷午夜精品久久久| 伊人在线大香蕉网| 美女天天久久| 五月狠狠| 97在线天堂| 五月婷婷香蕉| 久热免费| 丁香五月开心亚洲| 99视频只有这里精品| 五月色综合| 中文字幕不卡+婷婷五月| 色五月丁香五月五月婷婷| 深爱五月激情五月| 第九色区AV在线| 五月天色婷伊人| 操99| 日本丁香久在线| 五月婷婷第四色| 五月开心播播网| 五月激情六月| 色婷婷丁香五月天| 超碰在线视屏| 丁香六月婷婷综合欧美| 超碰妻人人| 天天久久66xxx| 殴美日比视频| 五月婷啪啪| 人妻久久久久久| 大香AV| 五月丁香六月婷婷无码| 婷婷综合国产| site:publishdd.com| 亚洲妇女熟BBW| 九九这里有精品视频| 五月丁香婷婷欧美| 深爱五月婷婷开心中文字幕| 亚洲色五月| 五月丁香综合啪啪| 亚洲av网站| 99九色视频在线观看| 思思99热| 4399在线日本A片| 日本一毛片| 精品人妻在线| 日良久久| 丁香六月狠狠干| 干一干xxxx| www色综合| 日本人妻操| 婷婷五月av| 久久99精品日本| 超碰人人99| 日本啪啪网| www.久久| 都市激情蜜桃婷婷五月天| 亚洲国产精品VA在线看黑人| 久er7久热| http:色情日本com| 婷婷激情啪啪| 岛国操B不卡在线| 精品亚洲VA网站| 婷婷99狠狠躁天天躁中文| 五月丁香性爱| 91蜜桃婷婷狠狠久久综合9色| 成人va在线播放| 色日本丁香婷婷| www.99.色| 色婷婷亚洲婷婷在线观看| 9191avse| 亚洲经典三级| 婷婷五月天免费| 青青草Avb在线| 91碰| 激情网狠狠干| 五月婷婷黄网站大全| 天天干天天拍| 成人操呦av| 欧美婷婷色| 婷婷五月天AV在线| 婷婷色婷婷| 五月婷婷色欲| 超碰在线免费9| www.婷婷网| www.cao.com久久| 色婷婷a| 国产五月天激情小说| 久热re视频在线观看网站| WWW,五月| 婷婷激情综合网| 97在线干| 欧美色五月| 五月丁香淫淫婷婷婷| 婷婷丁香在线| 九月停停| www.激情| 狠狠插日日干撸| 五月丁香 啪啪| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 色婷婷六月天| 色五月五月丁香| 色婷婷久久视屏| 99在线精品免费视频| 韩国激情五月天综合网| 狠狠色婷婷在线| 色婷婷色| 成人做爰A片免费看网站找不到了 噼里啪啦在线观看免费完整版视频 | 五月婷婷六月丁香免费| 久久久91精品| 色播五月天激情| 亚洲色色香蕉| 天天草天天舔| 91打屁股视频网站| 亚洲V国产V欧美V久久久久久| 婷婷性爱网| 婷婷激情五月综合丁香社| 婷婷丁香五月天综合AV| 97在线观视频免费观看| 亚洲精品99| 五月色影院| 天天成人综合| 九九色影院| 婷婷日本色| 亚洲色就是色色色| 久久久久er热| 激情五月天婷婷丁香| 综合性视频99| 秋霞A V毛片| 夫妻超碰在线| 五月丁香啪啪激情| 色色色综合色| 伊人玖玖综合| 日本玖玖在线| 99ER热精品视频| 五月在线| 婷婷内射视频在线| 五月婷婷在线视频观看| 五月婷婷综合潮喷| 怕怕av| 日本色频| 99热这里有精品首页10| 久久人视频| 婷婷99狠| 97丨九色丨国产丨PORNY| 久久婷婷五月天| 色播综合| 在线中文字幕视频| 91.com男女操| 婷婷 色 丁香 夜| 色色色成人网| 色J香五月天| 婷婷丁香视频| 久热这里精品免费| 凹凸7777操操操| 涩综合在线 | 五月婷婷人妻| 中文字幕簧片| 久久A热| 五月婷伊人| 婷五月丁香| 天天干夜夜b| 99热国内| 日日干夜夜撸夜夜骑| 久久五月激情网| 色综合播放| 日日操日日干| 婷婷热婷婷色| 好好干av| 婷婷瑟瑟五月天| 激情小说五月欧美亚洲丁香| 人人视频色| 深爱五月激情| 天天做好综合色| 色噜噜狠狠一区二区三区| 亚洲99精品欧美一区| 色色网站| 天堂中文国产| 97资源欧美日韩大香蕉超碰一区| 亚洲无码另类| 婷婷五月天激情网| 播播网色播播| 欧美大片免费观看| 99国产在线精品视频| 久久久亚洲精品一区二区三区浴池| 日日影院 | 99久久精品免费精品国产_国产精品久久久久久_国产在线|日韩_久久国产精品电影 | 丁香六月激情综合| 色丁香五月天| 99啪啪| 69精品人人人人| 天堂二区| 日韩在线一级| 少妇激情基地| 久久久WWW| 六月丁香婷婷网| 婷婷六月激情综合| 激情 婷婷| 五月丁香啪啪网| 婷婷色色综合| 久久人视频| 色欲色天天香综合| 激情五月综合色婷婷| 五月丁香狠狠| 玖玖爱综合网| 久久er99热精品一区二区| 久久这有这里精品| 色三级色三级| 9.1综合网| 99热日韩| 99综合免费视频| 国产亚洲精品久久久久久郑州| 亚洲av电影网站| 另类伊人婷婷| 婷婷五月天直播| 色五月AV| 国产一区二区三区影院| 久热re视频在线观看网站| 无码任你操| 开心五月婷婷激情| 丰满老熟妇BBBBB搡BBB | 超碰97久久| 掩去也综合五月视频| 色婷婷社区| 天天狠天天叉| 大香蕉视频婷婷| 在线观看熟女少妇| 逼里香不卡| 色九月| 五月婷性爱| 99碰碰| 色色欧美色色| 成人短视频在线观看| 超碰人人操人人9| 六月丁香婷婷视频综合在线观看 | 色综合色综合网| 色色婷| 久久全色| 激情五月综合视频| 久久看婷婷| 嫩草视频。| 色婷婷视频| 婷婷99狠狠| 亚洲岛国电影| 色色网站观看| 亚洲婷婷久久综合| 97超级碰| 激情六月五月婷婷综合网| 亚洲五月婷婷| 欧美天堂婷婷日韩| WWW丁香五月| 狠狠爱婷婷丁香| 婷婷五月天丁香综合网| 天天草天天爱| 成人永久免费视频在线观看| 午夜在线成人网站免费观看| 蜜臀av无码久久久久久久久 | 99干在线视频| 呦呦v线| 91蜜桃婷婷狠狠久久综合9色| 婷婷九月在线| 国产午夜一区二区三区| 三人荫蒂添的好舒服A片| 婷婷五月天激情四射| 99在线视频资源| 色婷亚洲| 色色免费网战视频| 亚洲精品无人区| 丁香五月视频在线观看| 成片免费播放| 丁香五月情| 激情小说五月天| 九色激情| 久久精品亚洲热| 亚洲天堂婷婷| 激情五月天网页| 99精彩视频| 激情综合青草| 99热啪啪| 快乐激情五月色婷婷| 天天色宗合| 丁香婷最新动态| 91一起操| 色狠狠五月天| 99激情| 草操AV在线| 日本久久高清| 久久婷婷五月天蜜桃| 女人天堂AV| www,com,五月色色| 丁香在线视频| 九月婷婷色色| 久99久精品视频|