欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

移動(dòng)端CPU與內(nèi)存監(jiān)測(cè)工具全盤(pán)點(diǎn):Android/iOS實(shí)戰(zhàn)指南

移動(dòng)端CPU與內(nèi)存監(jiān)測(cè)工具全盤(pán)點(diǎn):Android/iOS實(shí)戰(zhàn)指南 我自己這些年做App性能治理最頭疼的往往不是優(yōu)化本身而是找不準(zhǔn)數(shù)據(jù)來(lái)源。CPU飆到多少算異常內(nèi)存里的PSS到底該怎么看線上用戶反饋“用著用著就卡頓”我這邊連個(gè)像樣的曲線都拿不出來(lái)——這種狀態(tài)相信不少轉(zhuǎn)做專(zhuān)項(xiàng)性能的開(kāi)發(fā)者都經(jīng)歷過(guò)。這篇文章把我在Android和iOS兩條線上實(shí)際跑過(guò)的監(jiān)測(cè)工具做了一次完整盤(pán)點(diǎn)覆蓋IDE自帶工具、命令行、開(kāi)源庫(kù)、系統(tǒng)框架和自動(dòng)化腳本。準(zhǔn)備分六個(gè)部分講先是監(jiān)測(cè)指標(biāo)本身的認(rèn)知然后Android、iOS分別盤(pán)工具再講幾個(gè)關(guān)鍵數(shù)據(jù)的讀法最后落到專(zhuān)項(xiàng)測(cè)試和常見(jiàn)坑位上。適合剛接手性能監(jiān)控的開(kāi)發(fā)、測(cè)試也適合想搭一套低成本監(jiān)測(cè)體系的技術(shù)負(fù)責(zé)人讀完可以直接按清單落地。1. 盤(pán)點(diǎn)前的關(guān)鍵認(rèn)知CPU與內(nèi)存監(jiān)測(cè)到底在監(jiān)控什么1.1 用戶視角的“卡”和工程師視角的數(shù)據(jù)經(jīng)常不同步用戶說(shuō)“這個(gè)App很卡”他感知到的是掉幀、點(diǎn)擊無(wú)響應(yīng)、App被系統(tǒng)殺掉重開(kāi)。但落到CPU和內(nèi)存監(jiān)測(cè)上我們看到的往往是另外一套東西某段時(shí)間CPU使用率超過(guò)80%或者PSS內(nèi)存持續(xù)增長(zhǎng)、遲遲不回落。這兩者不是天然對(duì)應(yīng)的。CPU高不一定肉眼可見(jiàn)的卡比如后臺(tái)批量壓縮圖片頁(yè)面主線程可能根本不受影響內(nèi)存大也不一定馬上崩Android系統(tǒng)對(duì)“內(nèi)存壓力”有很長(zhǎng)的容忍期等它真正開(kāi)始?xì)⑦M(jìn)程時(shí)你才感受到后果。所以盤(pán)點(diǎn)工具之前先要把目標(biāo)定清楚你是為了找卡頓根因還是為了控內(nèi)存上限還是為了發(fā)現(xiàn)泄漏工具選型完全不一樣。我的習(xí)慣是先把目標(biāo)拆成三類(lèi)。第一類(lèi)是定位問(wèn)題需要可以回溯的函數(shù)調(diào)用棧和內(nèi)存分配棧典型工具是Android Profiler和Instruments第二類(lèi)是持續(xù)觀測(cè)需要低開(kāi)銷(xiāo)、長(zhǎng)時(shí)間采樣的指標(biāo)典型工具是Perfetto和MetricKit第三類(lèi)是自動(dòng)化回歸需要能在CI里跑出對(duì)比數(shù)據(jù)的腳本方案。一篇文章很難同時(shí)覆蓋三類(lèi)細(xì)節(jié)但這篇的每個(gè)工具會(huì)標(biāo)清楚用途邊界方便你按場(chǎng)景取用。1.2 CPU監(jiān)測(cè)不只看占用率還要看線程調(diào)度和調(diào)用棧不少剛?cè)腴T(mén)性能的同學(xué)有個(gè)習(xí)慣開(kāi)個(gè)系統(tǒng)監(jiān)視器看到CPU 40%就覺(jué)得“正?!笨吹?5%就覺(jué)得“高了”。這種判斷在移動(dòng)端會(huì)誤導(dǎo)人——現(xiàn)在的CPU是多核架構(gòu)一顆大核跑到頂和八顆核全部滿載體現(xiàn)出來(lái)的占用率完全不同前端體感也完全不同。用生活類(lèi)比來(lái)講CPU占用率像一棟辦公樓里亮燈的工位比例。你只知道亮燈多還是少但不知道哪些人真正在干活、哪些人是空轉(zhuǎn)更不知道哪條主干道在堵車(chē)。移動(dòng)端實(shí)際出問(wèn)題的往往是單線程或單核的調(diào)度延遲主線程被一個(gè)耗時(shí)任務(wù)占住其它事情都排它后面。這時(shí)整體CPU占用率可能只有30%界面已經(jīng)卡到不行。所以CPU監(jiān)測(cè)有三個(gè)層次最淺的是進(jìn)程占用率只能做趨勢(shì)觀察稍深的是線程級(jí)占用率能看出哪個(gè)線程在忙再深一層是采樣調(diào)用棧能看到忙的時(shí)候CPU到底在跑哪段代碼。工具盤(pán)點(diǎn)里凡是能采樣調(diào)用棧的我標(biāo)了“定位專(zhuān)用”只能給占用率的我標(biāo)了“趨勢(shì)觀測(cè)”。定位問(wèn)題和排查問(wèn)題用的工具級(jí)別完全不同這也是很多團(tuán)隊(duì)工具買(mǎi)了不少、問(wèn)題還是查不出來(lái)的原因。1.3 內(nèi)存監(jiān)測(cè)的維度比想象中多別只盯著“已用內(nèi)存”那個(gè)數(shù)內(nèi)存監(jiān)測(cè)比CPU更容易被誤讀。手機(jī)自己的存儲(chǔ)空間很大而App的進(jìn)程通常被分配了專(zhuān)用內(nèi)存空間但其中很多是“共享”和“可回收”的。單純看系統(tǒng)剩余內(nèi)存來(lái)判斷App有沒(méi)有問(wèn)題就像數(shù)倉(cāng)庫(kù)里還剩多少紙箱卻不看這批貨里有多少是自家租的、多少是別人暫時(shí)寄放的。專(zhuān)業(yè)一點(diǎn)的監(jiān)控一般分三個(gè)維度。維度一是進(jìn)程的RSS它表示進(jìn)程實(shí)際占用的物理內(nèi)存頁(yè)數(shù)包含共享庫(kù)被多進(jìn)程共用后重復(fù)計(jì)算的部分這個(gè)數(shù)字通常會(huì)偏“虛胖”維度二是PSS它把共享內(nèi)存按進(jìn)程數(shù)量平分后再分配到每個(gè)進(jìn)程頭上是Android系統(tǒng)評(píng)判進(jìn)程大小最常用的口徑維度三是VSS它基本只是進(jìn)程地址空間大小除了一些極端場(chǎng)景沒(méi)人認(rèn)真看它。再往細(xì)了分Android側(cè)還分Java堆、Native堆、代碼段、棧、圖形緩沖等iOS側(cè)有物理內(nèi)存足跡、虛擬內(nèi)存、壓縮內(nèi)存等概念。工具給出來(lái)的每一個(gè)數(shù)字都有統(tǒng)計(jì)口徑如果你拿不同工具的數(shù)字去對(duì)接同一份報(bào)告很容易牛頭不對(duì)馬嘴。我后面專(zhuān)門(mén)用一節(jié)來(lái)講這些字段怎么讀這比單純背命令更有用。2. Android平臺(tái)從IDE到命令行的完整監(jiān)測(cè)梯隊(duì)2.1 Android Studio Profiler開(kāi)發(fā)期最直觀的CPU與內(nèi)存在線觀測(cè)Android Studio自帶Profiler依然是開(kāi)發(fā)期最省事的入口。它不需要額外配置Android Studio打開(kāi)Profiler窗口選擇已經(jīng)運(yùn)行的App進(jìn)程就能看到CPU、內(nèi)存、網(wǎng)絡(luò)、能耗四條實(shí)時(shí)曲線。CPU模板適合看“當(dāng)前忙不忙”內(nèi)存模板則會(huì)把Java堆、Native堆、Graphics、Stack、Code等分塊展示初始定位問(wèn)題很快。但要注意它和線上用戶跑的環(huán)境并不完全一樣模擬器和真機(jī)調(diào)度策略不同Profiler本身還會(huì)占用額外CPU和數(shù)據(jù)上報(bào)所以它更適合開(kāi)發(fā)期說(shuō)服自己“這里確實(shí)有問(wèn)題”不建議拿它出周報(bào)。我在實(shí)際項(xiàng)目里的用法是定位到一個(gè)具體操作時(shí)比如“點(diǎn)開(kāi)商品詳情頁(yè)再返回”點(diǎn)擊CPU錄制錄個(gè)幾秒生成火焰圖看哪些函數(shù)吃掉了大量CPU時(shí)間。如果火焰圖里出現(xiàn)明顯的長(zhǎng)時(shí)間函數(shù)調(diào)用比如圖片主線程解碼就去優(yōu)化它。這種“操作路徑火焰圖”的排查法比看整體占用率精準(zhǔn)得多。有一點(diǎn)申請(qǐng)后需留意Android 10以上支持對(duì)release包開(kāi)啟profileable模式這樣可以模擬線上混淆和release優(yōu)化后的性能。構(gòu)建時(shí)在AndroidManifest里加android:profileabletrue或者在debug包和release包之間對(duì)比能避免“debug下正常、release下崩”的尷尬。2.2 adb命令三件套top、dumpsys meminfo、Perfetto命令行工具適合不上IDE、人在遠(yuǎn)程或自動(dòng)化跑批量的場(chǎng)景。Android平臺(tái)上我最常用的三條命令是top、dumpsys meminfo和Perfetto。第一條是top用于快速看進(jìn)程級(jí)CPU和內(nèi)存實(shí)時(shí)狀況adb shell top -m 20 -n 1 -o PID,PCPU,RSS,NAME-m 20表示只顯示前20個(gè)進(jìn)程-n 1表示只掃一次-o指定輸出列。它給出的RSS是前面說(shuō)過(guò)的“虛胖”口徑不能直接和PSS混用但勝在一句話能拿到全機(jī)狀態(tài)。第二條是dumpsys meminfo專(zhuān)門(mén)看單個(gè)進(jìn)程內(nèi)存明細(xì)adb shell dumpsys meminfo com.demo.package輸出里最有價(jià)值的部分是“App Summary”里面列出Java Heap、Native Heap、Code、Stack、Graphics等分部占用以及TOTAL PSS。這個(gè)數(shù)字直接決定Android系統(tǒng)Memory Trim時(shí)的殺進(jìn)程優(yōu)先級(jí)也是做線上內(nèi)存水位線監(jiān)控最常用的字段。第三條是Perfetto它是Systrace的接棒者也是現(xiàn)在Android性能追蹤的標(biāo)配。命令行采集簡(jiǎn)單adb shell perfetto --time 15s -o /data/misc/perfetto-traces/trace adb pull /data/misc/perfetto-traces/trace然后把這個(gè)trace文件拖到ui.perfetto.dev里打開(kāi)就能看到CPU調(diào)度片段、線程狀態(tài)、內(nèi)存生命周期、binder調(diào)用等非常詳細(xì)的信息。Perfetto的學(xué)習(xí)曲線比前兩條命令陡但排查“線程間互相等待”“CPU調(diào)頻跟不上”這類(lèi)疑難問(wèn)題它是真正能給出證據(jù)的工具。我通常只在top和dumpsys定位到大概問(wèn)題后再用Perfetto抓更深的trace。2.3 內(nèi)存泄漏與對(duì)象引用檢測(cè)LeakCanary與Memory Profiler分工Android側(cè)的“找泄漏”有兩套工具互補(bǔ)。LeakCanary適合做持續(xù)性的動(dòng)態(tài)監(jiān)測(cè)它在Debug包中集成后一旦發(fā)現(xiàn)Activity或Fragment銷(xiāo)毀后仍被強(qiáng)引用持有就會(huì)落下通知并把引用鏈展示出來(lái)。這套東西不需要你主動(dòng)操作適合團(tuán)隊(duì)回歸。它在分析時(shí)依賴Shark庫(kù)直接讀取堆快照在Native層注入判斷非常省事。Android Studio的Memory Profiler則適合主動(dòng)調(diào)查。你可以手動(dòng)觸發(fā)一堆操作后點(diǎn)擊Memory視圖里的垃圾回收按鈕再對(duì)比堆占用是否回落到基線。如果回不去很可能有泄漏再點(diǎn)“Dump Java heap”生成堆轉(zhuǎn)儲(chǔ)用“Analyzer Tasks”里的“Detect Leaked Activity”跑一遍通常直接能提示“某個(gè)Activity實(shí)例還活著”。這兩者的分工我總結(jié)為一句話LeakCanary管“團(tuán)隊(duì)日常防線”Memory Profiler管“專(zhuān)項(xiàng)攻堅(jiān)抽樣”。實(shí)際項(xiàng)目里我見(jiàn)過(guò)有人依賴LeakCanary就再也不管內(nèi)存直到線上內(nèi)存水位一路上漲——其實(shí)LeakCanary默認(rèn)只在Debug下生效線上發(fā)布包并沒(méi)有它。所以線上還需要另外一套監(jiān)控這個(gè)話題放到第五節(jié)再展開(kāi)。3. iOS平臺(tái)Instruments與MetricKit的組合玩法3.1 Instruments的四個(gè)標(biāo)配模板Activity Monitor、Allocations、Leaks、Time ProfileriOS上做性能分析的入口是Xcode里的Instruments。它自帶的模板很多但日常做CPU與內(nèi)存監(jiān)測(cè)我長(zhǎng)期只固定用四個(gè)其余大多是這四個(gè)的變體。Activity Monitor模板用來(lái)整體看進(jìn)程的CPU占用和內(nèi)存占用適合先抓“哪個(gè)進(jìn)程在頂”也可以配置成直接動(dòng)態(tài)選擇目標(biāo)App。Allocations模板用來(lái)記錄內(nèi)存分配可以看到對(duì)象分配的類(lèi)型、數(shù)量和調(diào)用棧是排查增長(zhǎng)問(wèn)題的關(guān)鍵比如內(nèi)存中圖片緩存不斷累積。Leaks模板專(zhuān)抓循環(huán)引用和泄露對(duì)象配合一個(gè)“旋轉(zhuǎn)一定角度再返回”的操作路徑反復(fù)測(cè)試往往能抓出不少ViewController沒(méi)被釋放的經(jīng)典問(wèn)題。Time Profiler模板則按時(shí)段采樣CPU調(diào)用棧類(lèi)似Android Profiler的火焰圖按耗時(shí)從大到小排序找熱點(diǎn)函數(shù)。這四件套的操作節(jié)奏通常是先用Activity Monitor確認(rèn)整體趨勢(shì)再用Time Profiler定位CPU熱點(diǎn)用Allocations定位內(nèi)存增長(zhǎng)最后用Leaks確認(rèn)是否有真正的泄漏。一個(gè)實(shí)操建議錄制時(shí)別急著全程跑改成“開(kāi)始錄制-人工執(zhí)行操作-場(chǎng)景結(jié)束-點(diǎn)stop”。時(shí)間線越長(zhǎng)越難定位把操作路徑切得短一點(diǎn)后面分析的工作量會(huì)驟減。3.2 Xcode Memory Graph不打開(kāi)Instruments也能看的對(duì)象關(guān)系圖Xcode從大概iOS 12開(kāi)始提供的Memory Graph調(diào)試器是個(gè)被很多人忽略的好工具。它的入口在Debug工具欄里點(diǎn)擊那個(gè)看起來(lái)像三個(gè)圓圈疊在一起的按鈕就能在調(diào)試中看到當(dāng)前進(jìn)程的對(duì)象圖布局類(lèi)似“一個(gè)矩形一個(gè)對(duì)象對(duì)象間的實(shí)線引用關(guān)系”。日常用法是把一個(gè)ViewController push進(jìn)導(dǎo)航棧再pop然后點(diǎn)擊內(nèi)存圖左下角搜索這個(gè)類(lèi)名。如果類(lèi)實(shí)例仍然存在它能直接顯示是誰(shuí)還在引用它比如一條保存在單例里的回調(diào)閉包或是一個(gè)沒(méi)有置空的定時(shí)器屬性。這個(gè)能力比Instruments里的定制Leak檢測(cè)更直觀適合在開(kāi)發(fā)階段先快速過(guò)濾明顯問(wèn)題。要注意的是Memory Graph并不能代替Instruments做統(tǒng)計(jì)數(shù)據(jù)它偏向?qū)ο箨P(guān)系圖重點(diǎn)解釋“為什么會(huì)活著”但不解釋“內(nèi)存整體漲了多少”。所以在我的工作流里Memory Graph是“定位異常引用”的放大鏡Instruments是“做量化對(duì)比”的標(biāo)尺兩者的使用時(shí)機(jī)并不相同。3.3 MetricKit把性能監(jiān)控搬到線上而不是只在連接電腦時(shí)才看Xcode和Instruments發(fā)作的前提是你有一臺(tái)連著電腦的測(cè)試機(jī)但線上真實(shí)用戶跑起來(lái)是什么樣它們完全無(wú)感知。蘋(píng)果提供的MetricKit就是為這種情況準(zhǔn)備的它讓App在用戶設(shè)備上采集性能指標(biāo)然后定期以報(bào)告形式送回開(kāi)發(fā)端。接入方法不復(fù)雜在App啟動(dòng)時(shí)注冊(cè)一個(gè)MXMetricManager.MetricManager.shared.addSubscriber(...)的訂閱方然后實(shí)現(xiàn)回調(diào)就能收到包括CPU、內(nèi)存、磁盤(pán)I/O、啟動(dòng)時(shí)長(zhǎng)、掉幀等多類(lèi)數(shù)據(jù)。這些是蘋(píng)果統(tǒng)一采集并標(biāo)準(zhǔn)化后匯總的不需要我們?cè)贏pp內(nèi)自己架哨兵隱私和電量影響也較小。它的局限是數(shù)據(jù)粒度偏“匯總型”適合做線上大盤(pán)和版本對(duì)比不太適合單獨(dú)定位某個(gè)用戶的某次具體問(wèn)題。所以我的建議是MetricKit作為線上自動(dòng)化監(jiān)控的底板一旦它發(fā)現(xiàn)某版本CPU中位數(shù)明顯偏高再回到Xcode Instruments復(fù)現(xiàn)問(wèn)題、采集更詳細(xì)的現(xiàn)場(chǎng)。線上報(bào)警和線下定位按理應(yīng)該是一套聯(lián)動(dòng)流程。4. 數(shù)據(jù)含義拆解為什么同一款A(yù)pp在兩個(gè)平臺(tái)看到的數(shù)字不一樣4.1 Android的Java堆、Native堆和“圖形內(nèi)存”到底代表什么打開(kāi)dumpsys meminfo的輸出很多人會(huì)被那一排字段嚇到。其實(shí)歸類(lèi)后一套邏輯就清楚了Java堆是經(jīng)過(guò)虛擬機(jī)和垃圾回收器管理的對(duì)象內(nèi)存平常new出來(lái)的普通對(duì)象基本都在這里Native堆是直接通過(guò)C/C分配的內(nèi)存比如Bitmap像素?cái)?shù)據(jù)、三方引擎內(nèi)部緩沖、部分網(wǎng)絡(luò)庫(kù)的緩沖區(qū)Code是App代碼和資源映射占的內(nèi)存Stack是線程棧Graphics是圖形緩沖和GPU相關(guān)內(nèi)存這塊數(shù)字經(jīng)常被忽略但它常常是吃內(nèi)存大戶。一個(gè)常見(jiàn)誤判是只盯著Java Heap看認(rèn)為Java Heap沒(méi)漲就沒(méi)問(wèn)題。但實(shí)際項(xiàng)目里Bitmap在較新版本上大部分計(jì)算在Graphics和Native層如果這里持續(xù)上漲Java Heap反而很穩(wěn)。所以我們看內(nèi)存報(bào)告時(shí)我習(xí)慣先把“App Summary”里的TOTAL PSS拉出來(lái)當(dāng)?shù)谝粰谠侔袹ava Heap/Gaphics/Native這幾類(lèi)單列做趨勢(shì)單列之間互相驗(yàn)證才能防漏。平臺(tái)區(qū)分也在這Android允許同一個(gè)Library被不同進(jìn)程通過(guò)共享內(nèi)存映射所以“Private Dirty”和“Shared Dirty”等術(shù)語(yǔ)頻繁出現(xiàn)。PSS會(huì)把共享部分按進(jìn)程數(shù)均攤所以我們說(shuō)“某App占了多少內(nèi)存”最嚴(yán)謹(jǐn)?shù)牧炕趶绞荘SS不是RSS更不是系統(tǒng)剩余內(nèi)存減出來(lái)的差值。4.2 iOS的phys_footprint、vsz與“壓縮內(nèi)存”不同在哪iOS側(cè)的內(nèi)存術(shù)語(yǔ)和Android完全不同但在社區(qū)討論里經(jīng)常被混著用。物理內(nèi)存足跡phys_footprint是iOS判斷進(jìn)程內(nèi)存壓力的核心指標(biāo)它把App的內(nèi)存壓縮、IOAccelerator、TASK_VM_INFO等匯總成一個(gè)可以被系統(tǒng)評(píng)估的值。Apple官方和MetricKit里的內(nèi)存報(bào)告基本都圍繞這個(gè)字段展開(kāi)?!疤摂M內(nèi)存大小”則更像一個(gè)邏輯地址空間的大小iOS上不同的線程、庫(kù)、二進(jìn)制映射都會(huì)增大它但它不代表真實(shí)的物理占用。部分開(kāi)發(fā)者看到模擬器監(jiān)控里vsz很大就被嚇到其實(shí)這是正常現(xiàn)象虛擬內(nèi)存和物理占用不是一回事。另一個(gè)概念是壓縮內(nèi)存系統(tǒng)在內(nèi)存吃緊時(shí)會(huì)對(duì)符合條件的頁(yè)進(jìn)行壓縮壓縮后的數(shù)據(jù)在footprint里有一部分計(jì)入但壓縮本身也是CPU開(kāi)銷(xiāo)。這就是為什么你常常看到某些App內(nèi)存曲線明顯下降性能卻變差了——它是在靠CPU換內(nèi)存。從工具上看Instruments的Activity Monitor會(huì)把Memory顯示為某個(gè)數(shù)值底部還能看到Compressed Memory選項(xiàng)。Memory Graph里選中某個(gè)對(duì)象也能看到它在某個(gè)區(qū)域里。你要盯的始終是footprint而不是籠統(tǒng)的“App占用內(nèi)存”。4.3 CPU采樣的“采樣”和“插樁”決定了優(yōu)化精度CPU數(shù)據(jù)的生成方式也影響準(zhǔn)確度。Instruments的Time Profiler是定時(shí)采樣每隔一小段時(shí)間記錄當(dāng)前CPU正在執(zhí)行的調(diào)用棧然后通過(guò)統(tǒng)計(jì)頻率推算出熱點(diǎn)。這種方式的優(yōu)點(diǎn)是開(kāi)銷(xiāo)低缺點(diǎn)是短耗時(shí)的一閃而過(guò)函數(shù)可能完全被漏采所以它適合找“大頭”不適合找秒級(jí)以內(nèi)的毛刺問(wèn)題。Android Profiler的CPU錄制更接近Trace事件的插樁方式它會(huì)更精確地記錄每次函數(shù)調(diào)用的開(kāi)始結(jié)束時(shí)間代價(jià)是錄制時(shí)對(duì)性能的影響更大。Perfetto的調(diào)度事件屬于系統(tǒng)內(nèi)核打點(diǎn)可以看到線程狀態(tài)切換但對(duì)用戶態(tài)的代碼調(diào)用關(guān)系提供的信息相對(duì)有限。一句話總結(jié)要回答“哪段函數(shù)最耗時(shí)”用采樣型工具就夠要回答“突然卡頓的那幾毫秒發(fā)生了什么”盡量用插樁或Trace事件并把Perfetto的調(diào)度信息一起帶上。組會(huì)里最尷尬的事就是采樣頻率不夠復(fù)現(xiàn)時(shí)又沒(méi)抓到你想抓的那一幀。工具選型里務(wù)必將這個(gè)差異納入考慮。5. 專(zhuān)項(xiàng)測(cè)試與自動(dòng)化讓監(jiān)控跑成流水線5.1 一條adb循環(huán)腳本實(shí)現(xiàn)穩(wěn)定性曲線的低成本采集性能測(cè)試最枯燥的部分是長(zhǎng)時(shí)間觀察。線上問(wèn)題往往不會(huì)在手工點(diǎn)兩下后立刻出現(xiàn)需要跑10分鐘、半小時(shí)甚至更久。手工盯屏幕完全不現(xiàn)實(shí)所以我的第一建議是哪怕不用任何工具也要先寫(xiě)一條adb循環(huán)腳本把數(shù)據(jù)錄下來(lái)。以下腳本可以按實(shí)際項(xiàng)目改包名和時(shí)長(zhǎng)#!/bin/bash PACKAGEcom.demo.package DURATION300 START$(date %s) while [ $(($(date %s) - $START)) -lt $DURATION ]; do adb shell top -n 1 -o PID,PCPU,RSS,NAME | grep $PACKAGE cpu.log adb shell dumpsys meminfo $PACKAGE | grep -E TOTAL PSS|Java Heap|Native Heap mem.log sleep 2 done跑完后你會(huì)得到兩份文本日志接下來(lái)可以導(dǎo)入Excel或?qū)憘€(gè)小Python腳本畫(huà)曲線。這樣不用Perfetto也能看出內(nèi)存趨勢(shì)是“穩(wěn)步上漲”“鋸齒波”還是“突然跳變”。鋸齒波通常是正常的對(duì)象反復(fù)創(chuàng)建穩(wěn)步上漲極有可能是泄漏或緩存不清突然跳變可能是某次資源加載任務(wù)。這個(gè)腳本雖然原始卻是我做性能回歸時(shí)利用率最高的工具。要注意的是top里的RSS和dumpsys里的PSS不能在同一張圖里直接比較我在腳本里把它們拆開(kāi)了分析時(shí)分開(kāi)看。另外長(zhǎng)時(shí)間腳本最好帶上adb shell dumpsys batterystats一起記錄這樣后續(xù)分析還能順便解釋CPU升高和電量消耗的關(guān)系。5.2 iOS回歸xctrace與CI里可接受的采樣方式iOS側(cè)的自動(dòng)化相比Android要麻煩一些主要原因是命令行的權(quán)限和采樣的隱蔽性不如adb豐富。但有一條路徑可以走通用xctrace record在命令行采集Instruments模板數(shù)據(jù)。一個(gè)參考格式是xcrun xctrace record --template Time Profiler --device 你的設(shè)備名 --output /tmp/app_trace.trace --launch -- com.demo.package這樣可以在不打開(kāi)Xcode圖形界面的情況下啟動(dòng)App并采集一段時(shí)間內(nèi)的CPU調(diào)用棧。采集完再解析trace文件就能把數(shù)據(jù)傳給報(bào)告或分析腳本。這個(gè)方案適合在固定測(cè)試機(jī)上跑回歸不適合大規(guī)模線上收集線上仍交給MetricKit。在本地CI里我更關(guān)心的是趨勢(shì)包對(duì)比同時(shí)跑兩遍同一個(gè)操作路徑一遍打基線版本一遍打新版本然后比較兩次trace里主要方法的采樣時(shí)長(zhǎng)。手工做過(guò)一兩次后會(huì)發(fā)現(xiàn)這比“看代碼猜性能”效率高得多。哪怕是粗略對(duì)比也能在提交前就發(fā)現(xiàn)某次改動(dòng)把列表滑動(dòng)幀時(shí)間拉長(zhǎng)了一大截。5.3 線上監(jiān)控APM SDK與自采樣的取舍線上用戶設(shè)備千差萬(wàn)別只有在線上才能看到真實(shí)的首屏分布、CPU高負(fù)載比例和系統(tǒng)殺進(jìn)程情況。常見(jiàn)的APM SDK包括Sentry、Firebase Performance等主流的移動(dòng)開(kāi)發(fā)平臺(tái)也都有各自的性能監(jiān)控產(chǎn)品。它們可以在App內(nèi)定期采當(dāng)前進(jìn)程的CPU和內(nèi)存狀態(tài)上報(bào)到后臺(tái)做水位線和版本對(duì)比。不過(guò)用現(xiàn)成SDK之前先想清楚一個(gè)核心問(wèn)題上報(bào)頻率和用戶隱私的平衡。CPU采樣太密SDK自己就是耗電和耗CPU的元兇采樣太疏曲線失去參考價(jià)值。比較合理的做法是按場(chǎng)景采樣比如只在關(guān)鍵頁(yè)面切換后采集或只在某條網(wǎng)絡(luò)請(qǐng)求完成之后采一條CPU快照。上報(bào)頻率按版本灰度逐步放量先灰度10%用戶確認(rèn)功耗沒(méi)有明顯上升再放大比例。此外如果你的App里有大量Native代碼第三方SDK默認(rèn)采到的只是整個(gè)進(jìn)程的占用率很難區(qū)分是Native庫(kù)還是Java層引入的。這時(shí)可以在自建采樣里額外記錄線程名稱把“渲染線程”“IO線程”“網(wǎng)絡(luò)線程”區(qū)分出來(lái)。線上報(bào)告能區(qū)分線程才算有一點(diǎn)點(diǎn)可用性。6. 實(shí)測(cè)手冊(cè)常見(jiàn)誤判、隱藏坑位與排查速查表6.1 常見(jiàn)誤判Profiler開(kāi)著測(cè)、模擬器數(shù)字倒掛、Debug與Release不一致先說(shuō)我見(jiàn)到的頭號(hào)誤判開(kāi)著Android Studio Profiler或Instruments錄制去測(cè)性能數(shù)據(jù)然后把結(jié)果直接作為“App真實(shí)性能”寫(xiě)入報(bào)告。這兩個(gè)工具本身會(huì)占用一定的CPU和內(nèi)存錄制得越密干擾越大。如果是插樁型錄制JIT編譯行為也可能被改變。所以它們最適合定位問(wèn)題方向不適合出精確的基準(zhǔn)數(shù)字。第二個(gè)高頻誤判是模擬器和真機(jī)對(duì)比。模擬器共享宿主機(jī)CPU調(diào)度模型和真機(jī)大核小核的結(jié)構(gòu)完全不同跑出來(lái)的CPU占用率和內(nèi)存壓縮行為往往會(huì)和真機(jī)倒掛模擬器表現(xiàn)正常的場(chǎng)景真機(jī)上可能一直卡頓。我的經(jīng)驗(yàn)是做趨勢(shì)分析可以用模擬器但任何系統(tǒng)性結(jié)論必須到真機(jī)上復(fù)核。第三個(gè)誤判是把Debug版的性能當(dāng)Release版。Debug模式下代碼未混淆、未優(yōu)化系統(tǒng)中還有大量日志輸出和調(diào)試信息CPU和內(nèi)存占用都會(huì)明顯偏高。線上問(wèn)題的復(fù)現(xiàn)如果只在Debug上成立先不要急著改代碼打開(kāi)profileable的Release配置再跑一遍很多時(shí)候會(huì)發(fā)現(xiàn)根本不是同一個(gè)問(wèn)題。6.2 容易被忽略的坑GC延遲、系統(tǒng)內(nèi)存壓縮、日志采樣上限另一個(gè)在實(shí)戰(zhàn)中耗費(fèi)過(guò)時(shí)間的坑是系統(tǒng)垃圾回收帶來(lái)的延遲。Java堆頻繁增長(zhǎng)到水位線后系統(tǒng)會(huì)自動(dòng)觸發(fā)GC此時(shí)主線程經(jīng)常會(huì)被暫停表現(xiàn)為瞬時(shí)卡頓。這種卡頓用CPU占用率看往往不高甚至還會(huì)出現(xiàn)內(nèi)存曲線掉頭向下的“假平穩(wěn)”。排查時(shí)一定要搭配看GC日志或Perfetto的GC片段否則你會(huì)盯著CPU火焰圖卻找不到真正兇手。iOS側(cè)最容易被忽略的是內(nèi)存壓縮進(jìn)程內(nèi)存上限逼近時(shí)系統(tǒng)會(huì)壓縮舊頁(yè)面來(lái)騰出可用空間表面上看內(nèi)存曲線不高但CPU會(huì)多出大量解壓、壓縮的工作。在Instruments里同時(shí)對(duì)比“Compressed Memory”和CPU占用率這類(lèi)問(wèn)題會(huì)更容易看清。還有一個(gè)偏工具層面的坑Perfetto和Instruments的長(zhǎng)trace輸出會(huì)非常大動(dòng)不動(dòng)幾百M(fèi)B甚至上GB。帶采樣頻率的文件很容易在傳輸時(shí)被截?cái)嗷蛘叽蜷_(kāi)后卡死。我建議長(zhǎng)實(shí)操場(chǎng)景分段錄制每段控制在10到20秒之間明確標(biāo)記路徑然后再另跑一條全局趨勢(shì)的采樣顆粒度粗一點(diǎn)也沒(méi)事。兩段數(shù)據(jù)情景不同信息互補(bǔ)就不會(huì)因?yàn)橐粋€(gè)文件過(guò)大而丟掉全部線索。6.3 面對(duì)實(shí)際現(xiàn)場(chǎng)的工具速查表等于是自救清單最后把這套工具整理成一張表按“我想知道什么 - 用什么工具 - 注意什么”的路徑對(duì)照著參考監(jiān)測(cè)需求Android側(cè)推薦iOS側(cè)推薦主要注意點(diǎn)整體趨勢(shì)觀測(cè)adb top、PerfettoInstruments Activity Monitor只能看趨勢(shì)不能直接定位調(diào)用棧定位CPU熱點(diǎn)函數(shù)Android Profiler CPU錄制Instruments Time Profiler采樣型工具可能漏短耗時(shí)熱點(diǎn)定位內(nèi)存分配增長(zhǎng)Android Profiler Dump Java heapInstruments Allocations需要對(duì)比前后兩輪堆轉(zhuǎn)儲(chǔ)檢測(cè)泄漏與引用鏈LeakCanary、Memory GraphInstruments Leaks、Xcode Memory Graph線上默認(rèn)不生效需單獨(dú)處理系統(tǒng)級(jí)trace回溯PerfettoInstruments配合系統(tǒng)Trace長(zhǎng)trace文件要注意分段采集線上周期上報(bào)自建采樣或APM SDKMetricKit注意頻率和隱私邊界灰度放量我在實(shí)操項(xiàng)目里養(yǎng)成的習(xí)慣是拿這張表反過(guò)來(lái)倒推現(xiàn)象先歸類(lèi)再選工具不要打開(kāi)一個(gè)工具就什么信息都想抓。性能監(jiān)控生態(tài)發(fā)展到2026年已經(jīng)比較成熟但真正拉開(kāi)差距的并不是工具本身而是你對(duì)工具輸出數(shù)據(jù)的理解方式。CPU和內(nèi)存不是兩個(gè)孤立的指標(biāo)它們經(jīng)常互相牽引——內(nèi)存壓縮帶來(lái)CPU上升GC卡頓引發(fā)掉幀CPU過(guò)載導(dǎo)致線程調(diào)度延遲。多數(shù)據(jù)源交叉驗(yàn)證比在單一工具里死磕更有價(jià)值。把這些基礎(chǔ)工具用扎實(shí)后續(xù)再上更重的自動(dòng)化或AI輔助分析時(shí)你的判斷力也能跟得上。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
另类色视频| 婷婷五月无码| 色情激情五月婷婷| 在线五月色播| 国产成人网| 99九九这里有免费视频| 99热这里有精品6| 99啪啪网| 丁香五月婷婷综合激情哟哟哟| 丁香六月婷婷激情综合| 激情综合网五月| 成人综合视频网址| 99视频地址| 色色a| 青青草免费公开视频| 日本色图综合| 色婷婷电影网| 69精品无码一区二区三区| 色婷婷伦理| 日韩AV大全| 伊人网啪啪| 久久久久人无码人妻| 婷婷五月天色| 成人在线不卡| 另类 在线| 六月丁香婷婷爱| 26uuu.| www.zbzhongsen.com| 人妻操日日| 99色在线观看视频| 婷婷五月花| 久久草人妻| 亚欧州精品视频| 亚洲AV无码成人电影| 天天草婷婷五月| 久草婷婷| 国产成人+综合亚洲+天堂| 婷婷中文字幕网| 91国产精品视频播放| 99热久只有精品首页| www.91色| 三级三久久线久久99久目本WW| 五月婷婷综合丁香视频| 国产亚洲色婷婷久久99精品91 www.riverspirits.org www.hnnun.com www.changh | txt五月激情四射网综合俺也来了 五月天婷婷丁香人人操91 | 激情综合五月| 婷婷激情五月天小说| 色五月婷婷中文字幕| 99精品在线播放| 91碰操| 久久丁香五月婷婷| 超碰人人在线观看| 激情综合色图| 六月婷婷狠狠| 5月婷婷6月六月丁香| 婷婷五月综合社区| 激情小说婷婷小说| 97成人丁香婷婷| 5五月综合网亚洲| 婷婷香五月| 丁香五月天色婷婷| 这里只有精品视频在线| 丁香五月婷婷老师网站| 久久九区| 天天综合天天玩夜夜玩天天玩夜夜玩 | 深爱婷婷丁香五月激情| 在线99热| 九色在线五月婷婷网址| 欧美在线97| 婷婷色女| 五月婷婷中文字幕| 婷婷视频网| 欧美性猛交99久久久久99按摩| 色婷婷久久9.com| 五月丁香欧美综合| 91人妻视频| 99九九玖玖| 99色婷婷| 婷婷五月网图片区| 爱草视频在线观看| 性爱久久| 九九亚洲天堂| 中文字幕AV在线| 《》【无码】想被搞到爽AV应募而来的超M素人 西纯子 10musume-011723-01 | 亚洲正能量欧美| 婷婷丁香亚洲色综合91| 五月丁香欧美综合免费视频| 九九热99视频| 五月婷婷久久爱| 亚洲最大在线| 婷婷开心久久| 九九热最新| 五月丁香婷婷综合网色欲| 久99| 五月天伊人网| 中文字幕丰满孑伦无码专区| 91久久综合亚洲鲁鲁五月天| 激情五月婷婷综合色播小说| 精品人妻久久久久久| 免费色婷婷| 噜噜狠狠| 狠狠99| 欧美顶级少妇做爰HD| 欧美精品A片一区在线观看| 99热思思在线观看| 五月丁香亭亭操逼| 丁香影院五月综合| 五月情综合| 99色精品| 九月色婷婷婷| 五月的婷婷六月丁香| 综合啪啪| 天天久久婷婷| 日日想日日夜日日操| 久久狠狠干| 不卡在线超碰| 色激情综合狠狠婷婷| 色五月中文网| www.99色在线| 天天在线久久综合 | 天天插天天插| 99热伊人综合| 丁香婷五月| 五月天色图| 精品操逼一区二区| 婷婷婷五月天最新综合你懂的| 九九99九九99九九99视频网| www.激情五月天.con| 激情五月天在线| 黄色五月婷婷| 日本免费91| 五月丁香久久呀| 狠狠干天天日| 91九色|疯狂|高潮|对白|| 99日韩网站| 综合激情五月丁香| 婷婷性爱| 中文字幕不卡+婷婷五月| 色九月综合| 欧美激情五月天在线观看| 操操自拍| 九色激情网| 国产熟女日日骚五月丁香爱| 欧美性猛交AAAA片黑人 | 亚洲AV第二区国产精品| 操骚货在线| 色婷青青| 777精品成人a v久久| 国产精品热搜丁香五月婷婷| 97婷婷狠狠| 五月天丁香婷婷视频网址| 丁香五月婷婷啪啪啪| 激情丁香五月婷婷啪啪| 色爽九九| 丰满少妇猛烈A片免费看观看 | 少妇AB又爽又紧无码网站| 天天干天天拍| 亚洲综合欧美色丁香婷婷888月图片| 久热2025无码| 九97免费视频| 26uuu淫色| 九九久久五月天综合伊人| 狠狠爱婷婷爱| 99狠狠操一| 美国色五月天婷婷资源站| 一二线视频 另类| 久久永久网址| 99热精品中文字幕| 99热情这里只有精品在线播放| 99热亚洲| 久草视频一,二三四| 天天干夜晚夜操| 99久99久| 九九性视频| 久99在线| 丁香久久久| 蜜乳久AV| 色久激情在线| 婷婷五月欧美综合| 怡红院精品视频久久久久久久久| 7EzOBIhNq85TO| 热99精品视频观看| 日韩一区二区A片免费观看| 9999久久久久| 日韩一级片| 97精品综合久久| 丁香五月综合婷婷| 丁香五月激情宗合网| 五月丁香综合激情| 婷香五月网在线| www.操.com| 一级黄色影片| 狠狠色婷婷777| 狠狠五月激情在线| 婷婷综合五月| 久久奄也去色色网站| EEUSS鲁片一区二区三区| 丁香五月色色色色| 丁香六月婷婷综合| 五月丁香六月婷婷中文版| 极品人妻VIDEOSSS人妻| 99爱视频免费看| 九九色video| 九九久热| 久久久久网站| 91色噜噜狠狠狠狠色综合| 激情床戏| www.夜夜操.com| www.天天色综合| 五月天伊人| 久久免费精品小视频| 亚洲久久激情| 婷婷丁香五月天小说| 免费观看全黄做爰的视频| 九九热这里只有精品一| 婷婷五月欧美| 殴美激情综合网| 99爱爱| 久久综合人妻| 国熟女视频| 色五月婷婷在线观看第一页舔| 免费播放99性爱视频| 亚洲成人av中文| 99热激情| 最新av在线观看| 久久久五月天| 天天爽天天弄| 丁香五月婷婷香| 婷婷五月天AV| 91色久| 久久五月丁香| 66精品成人免费网站在线观看| 精品视频网| 精品久久人妻| 色五月激情视频在线综合| 五月天激情婷婷| 五月丁香天堂网婷婷| 丝雨一区二区| 激情婷婷五月| 五月色 亚洲| 久9热视频在线| 国产视频婷婷| 色情五月天视频网| 91九色PORNY大屁股| 天天干,天天日| 色色激情网| 五月综合久久| 激情深爱综合网| 激情六月天婷婷| 天天插天天爽| 天天日日夜夜爽。| 色九区| 亚洲精品白浆高清久久久久久| 成人综合伍月天| 丁香五月天堂亚洲社区| 九九Av| 综合狠狠五月婷婷| 男人天堂 久久| 色婷网| 久久久久综合激动五月天| 亚洲综合视频八| 亚洲性爱电影| 亚洲五月综合色播| 超碰av天堂| 伊人婷婷五月天| 天天色综合网吨吧| 激情四射五月天| 91男同视频| 99热这里只有精品2| 大香蕉综合在线| 9精品久久999| 九九热黄色| 婷五月丁香| 五月五月婷婷| 亚洲乱码日产精品BD| www99热| 久热九九| 色吊丝99| 亚洲色综合| 国产日韩亚洲欧美在线观看| 久久综合丁香五月| 丁香六月青青草| 99爱精品| 五月天com| 日日日日做夜夜夜夜无码| 奇米影视在线视频| 九九在线精品| 91丨九色丨熟女丰满| 六月综和久久| 婷婷五月大香蕉| 狠狠综合网| 亚洲热久久| 99热国品免费| www.久久爱.c n| 伊人激情AV一区二区三区| 涩涩五月天| 天天婷婷操| 99人人干人人| 亚洲丁香五冃97色| 色色色综合色| 五月色综合| 色婷婷色五月丁香| 中文字幕婷婷| 开心五月婷婷综合在线精品素人| 国产无遮挡又黄又爽免费网站| 天天狠狠六月婷丁香影院| 天天色天天搡| 3p久久| 日日操夜夜擼| 欧美激情VA永久在线播放| 色色色色色综合| 丁香五月日啪| 九九国产视频| 久久久jd| 久久久噜噜噜操操操| 99热这里只有精品在线观看| 五月激情综合网| 五月天婷婷影院影院| 97资源碰碰| 99九九热播在线免费视频| 六月激情婷婷| 中文字幕在线免费| www.99热这里精品| 思思热热久久| 人妻性爱| 丁香五月电影| 色五月天丁香婷婷| 激情熟女网| 丁香网五月天| 久热91| 激情都市丁香婷婷| 天天操夜夜橾| 五月婷婷六月奇米网丁香| 色情五月天小说| 欧美日韩成人在线网| 人操综合| 又大又粗九一在线| 国产成人精品一区二三区熟女在线| 人人草人人看| 桔色成人在线| 可以直接看的AV网站| 国产片天天爽夜夜爽| 97干视频在线| 日本久久99久久| 五月做爱| 91黄色五月天视频| 久草热8精品视频在线观看| 天天干天天色综合| 超碰在线9| 丁香五月婷婷色偷偷| 玖玖婷婷视频| 色碰97| 丁香五月天操B| 久99热| 99久久6| 91要啪| 五月激情婷婷播播开心| 欧美黄色AA片哗啦啦啦| 色色丁香激情五月| 天天日夜夜草进麻麻的子宫| 丁香五月天激情五月天激情五月天激情网 | 五月天天天色| AV中文在线| 婷婷99热| aa久久| 人人干女人| 激情五月婷| 亚洲成人人人操| 色5月婷婷| 天天草天天舔| 少妇久久诱惑视频| 99九九视屏| 午夜不卡成人一区二区| 蜜乳A√| 五月婷婷综合网在线播放| 伊九九三级区| 丁香五月久久| 中文字幕av在线| 婷婷激情视频| 操日视频| 亚洲AV网址| 婷婷五月丁香91| a九九热www| 久99在线视频| 五月丁香福利| 久久久久久久丁香五月天婷婷| 中文字幕av在线| 天天干天天操天天射 | 五月天色不卡| 狼人婷婷综合| 丁香五月婷婷超碰在线| 玖玖色综合网| 深爱五月激情| 日本一级一级一级一级| 丰满少妇乱A片无码| 草了bav视频在线观看| 国产成人综合亚洲| 色99xx| 在线sebiav精品视频| 1024在线视频| 9久国产| 97碰碰视频| 99热99久久| 久99久在线| 婷婷综合网| 操一区| 日欧一片内射VA在线影院| 丁香性爱在线视频| 五月丁香久久激情综合| 亚洲免费av观看| 熟女啪啪视频| 99热啪啪| 狠狠999| 99综合一区| 色综合激情| 日本狠狠色| 色碰碰| 亚洲男女激情| 日本一级黄色片。| 99色在线视频观看| 五月丁香毛片| 欧美激情丁香五月| 天天日夜夜操五月| 久久人妻久久| 综合色99| 激情AV| 人妻丰满精品一区二区A片| 91操黄| 婷婷欧美激情| 久久久思思热| 久噜久噜| 色玖玖综合| 97色在线| 丁香五月天操B| 99碰碰中文| 婷婷午夜激情| 五月综亚洲| 天天做天天爱天天综合网| 伊人玖玖网| 色五月大香蕉| 日本黄色三级片内射| 色婷婷色综合| 色五月综合激情| 国产va在线视频| 天天综合天综合| 4438激情网| 色婷婷久久| 夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂夂亚洲亚洲亚洲亚洲亚洲亚洲亚洲亚洲色 | 婷婷99狠狠躁天天躁中| 97激情五月天| 五月婷婷五月| 九九热免费视频| wwww.色婷婷| 亚洲综合五月天婷婷丁香| 内射激情在线| 香蕉操亚洲| 国产亚洲成AV人片在线观黄桃| 996热re视频在线观看视频| 69精品人人人人| 久久婷婷五月草视频| 五月丁香激情综合| 五月综合激情婷婷六月色窝| 欧美人人超级碰| 婷婷五月天激情四射五月天激情| 99久久6| 91viP在线看| 激情开心五月天| 色五月首页| 国产av第一专区| 色五月色五天色情网| 久久伊人日日夜夜| 久久伊人9| 精国产品一区二区三区A片| 欧美婷婷九月| 男人天堂亚洲综合| 婷婷五月天小说| 夜精品无码A片一区二区蜜桃| 欧美久久久久久久久中文字幕| 激情综合网丁香| 99热这里只有精品一区| 欧美丁香婷婷五月| 久久丁香九| 婷婷五月电影院| 夜夜操激情| 五月丁香六月婷综合成人综合 | 国产精品久久欧美久久一区| 婷婷五月丁香欧洲| 三十路磁力链接| 九九色影视| 色欲久久99精品久久久久久| 激情小说五月丁香在线视频观看视频 | 99情色五月天| 丁香婷婷六月激情| 色五月色五天色情网| 日本天堂网站99| 久鲁鲁色网| 亚洲色色色| 五月婷婷色在线| 激情丁香五月天综合| 丁香色五月婷婷| 色五月激情五月| 午夜爱爱网站| 天天碰夜夜爽| 2025神马午夜福利| 九九99在线观看视频| 五月婷婷色| 五月天大香蕉av| 亭亭玉立国色天香| 婷婷九月亚洲| 五月情涩综合婷婷| 色综合色色色色色| 99精品在线| 色婷婷丁香| 丁香五月天堂| 精品自拍99| 久久99激情| 日韩AV片| 五月久久网| 色婷婷丁香香香蕉视频| 爆乳熟妇一区二区三区四区| 凹凸7777操操操| 91色久| www.99久久久久99| 五月天伊人综合| 日韩av手机在线观看| 狠狠色丁香五月婷巨| 99九九在线观看免费| 99国产精品久久久久久久久久久| 韩日AV片| 激情婷婷丁香色五月| 亚洲婷婷五月天| 色一情一乱一乱一区91| 亚洲成人av在线| 99久久五月丁香野外| 五月婷婷啪啪网| 51精品国自产在线| 综合网网欲色| 久热视频这里只有精品| 69凹凸成人综合网| 婷婷五月天日日日干干干| 五月婷视频| 99re在线视频精品,这里只有精品18,| 九九色影视| 久Se视频在线观看| 99啪99| 亚洲热久| 国内外色色色色色成人视频| 亚洲婷婷丁香五月| 五月天综合婷婷| 精品九九久久| 深爱激情网五月天| 国产人人操| 五月婷婷五月天亚洲无码| 日日噜噜夜夜狠狠久久丁香五月| 五月丁香成人版| 亚洲激情综合| 丁香五月婷婷六月婷| 五月天婷婷激情| 天天舔天天插天天爱| 狠狠色综合网站久久久久| 九九色影院| 99久久综合网| 操人无码| 亚洲九区| 亚洲天堂亚洲色色色| 涩五月婷婷| 99热这里只有精品在线免费| 图片区 小说区 区 亚洲五月| 色色网站在线免费观看视频| 亚洲经典三级| 思思99热这里只有精品6| 狠狠精品干练久久久无码中文字幕| 热久久66| 色青青电影色五月| 蜜桃五月天| 久久日曰| 天天插天天射| 成人五月丁香社区| 色情婷婷五月天| sS丁香五月婷婷| 香蕉久久国产AV一区二区| 狠狠五月天婷婷| 欧美婷婷色| 亚洲噜色| 亚洲色图日韩网址| 五月丁香啪啪综合| 热99这里只是精品| 国产精品99久久久久久久女警 | 激情婷婷五月天伊人在线观看| 国产黄大片在线观看画质优化| 国产精品-第3页-91JQ就要激情网91JQ5.JQJQ926.XYZ | 婷婷综合在线观看视频| 最新婷婷五月丁香| 五月丁香综合网| 99婷婷国产最新视频| 超碰av在线| 激情婷婷色小说| 成人国产欧美大片一区| 久久这里只| 99碰在线视频| 中文字幕成人| 五月丁香六月婷婷中合网| se色婷婷视频| www婷婷| 97色婷婷五月天| 涩涩五月天| 色婷婷综合中心| 五月丁香婷婷激情爱爱| 国产白丝在线一区| 五月天婷婷久久日| 精品热九九| 色偷偷综合| 大香蕉综合| 成人精品视频99在线观看免费| 99热这里有精品2| 97超级操操| 色人久久| 婷婷五月天视频在线观看| 久热爱大香蕉在线蜜臀悦色 | 丁香午月AV中文字幕| 无码成人AAAAA毛片AI换脸| 可以免费看AV网站| 91人人网| 五月天电影网| 成人丁香五月| 91一起艹| 俺也去五月婷婷丁| 五月丁香综合激情| 成人天天爽| 69热91天堂| 日本色狠狠| 五月色网| 操碰色一区就去操| 五月天丁香久久| 日韩 欧美 国产 一区 二区| 91碰碰碰久久久久| 亚洲综合九九| 五月丁香六月合| 激情綜合網址| 噼里啪啦完整版中文在线观看| www色婷婷com| 色综合久久久久| 久草丁香婷婷1024| 色偷偷五月天| 久婷婷五月丁香在线观看| 亚洲天堂玖玖| 日韩中文欧美| 97丁香五月| 综合久| 淫五月停停| 久久香蕉丁香| 日韩欧美四五区| 五月激情射| 丁香五月激情五月| 色天五月天在线观看视频| 丁香婷婷综合精品六月初| 五月婷性爱| 五月天色色网站| 亚洲99在线| 男人天堂99| 日韩av一区二区在线/日产精品久久久| 五月天六月色| 婷婷丁香五月天欧美| 996re热精品视频| 在线观看中文字幕| 99er精品视频| 日韩欧美一区二区三区四区| 丁香五月婷婷欧美成人色图| 99在线精品视频| 激情五月天激情五月天| 国产成人网| 久久亭亭电影| 激情五月丁香五月| 亚洲婷婷五月天| 国产26uuu视频| aa久久| 青吴乐视频| 亚洲精品亚洲人成人网| 五月天久久综合婷婷丁香| 成人在线日韩| 色很久综合| 极品人妻VIDEOSSS人妻| 97操碰视频| 五月丁香花激情综合网| 欧美色色色色色色色色色色影视| 亚洲AV第二区国产精品| 丁香五月欧美婷婷综合| 婷婷亚洲综合| 九九热精品99| 激情五月天激情综合网| 99这里只有精品视频在线| 99热第一页| 中文字幕 中文字幕明步| 激情九月综合| 综合久久五月天| 婷婷五月俺要去| 五月天综合在线观看| 俺也去色| 人妻AV在线| 超碰成人av| 亚洲最大视频网站| 日日操日日射| 五月丁香六月婷| 爱射综合| 天天综合五月| 亚洲综合无码| 丁香六月av| 五月色丁香激情| 丁香五月激情啪| 热99一二三| 狠色色狠网| 亚洲网站观看视频| 丁香五月天天| 欧美啪啪9| 亚洲va久久久噜噜噜久久天堂| 丁香五月激情综合婷综| 人妻在线中文字幕久久| 九九热av| 青青日韩| www.亚洲激情| 日韩无码人妻一区二区| 大香蕉丁香| 色婷婷综合丁香五月天| 日日干日日色| 成人视屏在线观看| 久久婷婷亚洲无码一起| 国产成人va在线| 五月天色综合| 丁香五月天啪啪| 婷婷激情视频| 乱乱av| 五月婷婷伦理| 丁香五月婷久久| 婷婷射图五月天| 天天舔天天操| 色在线免费观看| 五月丁香亚洲综合网| 丁香五月色情| 丁香色五月婷婷17C| 六月婷婷激情图片| 亚洲综合另类| 99热免费观看| www色综合亚洲92| 亚洲aV写真天天综合网久久| 亚洲一区二区无遮挡A片| 九九热超碰| 亚洲六月婷婷| 久色网五月| 最近中文字幕大全免费版在线| 婷婷亚洲五| 日本久久精品| 精品综合久久久久久五月天| 人妻体体内射精一区二区 | 99爱视频在线免费观看| 婷婷五月精品| 色五月婷婷五月丁香五月| 日本va欧美va欧美精品88| 一区色色色色网| 丁香五月婷婷久久综合激情网| 无码人妻激情| 99re99在线看| 丁香六月婷婷综情欧美| 六月丁香激情综合网| 六月丁香花婷婷| 五月丁香婷婷福利| 狠狠草天天草| 日本va欧美va欧美va精品| 丁香 婷婷 激情 综合 五月| 婷婷五月天最新综合你懂的 | 一区二区成人电影免费播放| 五月日韩中文字幕| 亚洲综合网在线| 碰碰人人人| 大香蕉网 久久| 另类国产欧美视频| 密臀av无码人妻精品| 四季AV综合网| 久久精品综合色| 男人操女人高潮91视频| 天堂伊人干| 色综合77777| 五月婷婷伊| 变态另类色图| 五月间天堂综合| 一本色道久久88加勒比—| www.99热这里精品| 国内久久久精品99| 婷婷五月大香蕉| 亚州色婷婷| 婷婷五月天受日本法律保护| 熟女五月天久久综合| www.婷婷,com| 色爱五月天| 91视频五月丁香| 色综合综合色| 色999五月色| 婷婷D区| 九九色黄色| 吊色AV男人的天堂| 色婷婷影视| 婷婷五月天另类视频| 精品综合五月| 无码人妻一区| 丁香婷婷九月| 五月天婷婷丁香| 激情婷婷丁香五月| 五月婷婷9| 色丁香婷婷| 立川无码av| 狠狠色综合网站| 91婷婷五月天嫩女| 婷婷五月综合在线| 97色吧| 丁香五月综合激情久久潮喷| 99色五月| 丁香六月婷婷开心| 精品久久久久久久人妻| 26uuu丁香婷婷五月| 99热6精品| 97在线观看| 婷婷丁香黄色| 色播婷婷五月天| 在线区区区| 常久最新免费的色吊丝| 69久久99精品久久久久婷婷| 婷婷五月天色| 五月九九综合| 夜色综合网| 五月丁香六月久久| 激情五月天婷婷视频| 99re思思热久久| 激情五月婷婷综合| 精品人妻午夜一区二区三区四区| 成人国产欧美大片一区| 久久九九囯产| 五月婷丁香花| 深爱五月天天| www.99热在线| 99无码精品| 黄色91在线观看| 狠狠综合| 五月天色婷婷网| 婷婷天堂综合| 夜夜嗨一区二区三区直播内容 | 91pornav在线| 成人在线视频网| 丁香婷婷六月激情综合| 五月天婷婷影院影院观看| 色五月激情五月天| 五月天丁香婷婷网| 91精品无码| 五月婷婷,六月激情| 香蕉综合在线| 五月天色婷婷视频| 久久狠狠干| JAPANRCEP老熟妇乱子伦视频| 秋霞网在线免费基地五月婷婷丁香| 大香蕉婷婷久久| 久久久精久人妻| 成人综合视频在线| 五月天色小说| www.com任你艹| 欧美成人无码一区二区三区| 99这里| www.久久| 大香蕉七区| 婷婷五月天,影院| 色综合中文| 久久久av久av久片一区二区| 在线中文av| 这里只有精彩亚洲视频推荐| 婷婷午夜精品久久久| 《亚洲操B久久免费在线观看,亚洲操B久久在线播放》在线播放 - 高清资源 - 97 | 99精日本久久| 国产亚洲在线| 五月婷婷性| h在线看免费版在线看| 2022人人操人人看| 深爱婷婷色| 99热爱爱干干日| 欧美色激情四射| 91精品久久久久| 亚洲成人噜噜| 亚洲精品久久久久AV无码| 色99婷婷五月天| 亚洲AAAA网| 九九热10| 壅壅儕家a| 狠狠操天天操| A在线观看| 精品九九久久| 五月婷婷久久开心网| 在线观看的av| 精品婷婷丁香五| 五月香蕉综合| 91丨九色丨熟女| 婷婷97C| 2050人人操免费工开爱| 另类视在线| 国产av网| 综合五月亭亭9| 亚洲精品视频在线播放| 色婷婷操逼网| 五月噜噜| 亭亭五月丁香五月天激情| 色色色五月婷| 色综合天天天天做夜夜| 免费观看欧美成人AA片爱我多深| 色色色国产| 激情五月婷| j五月香在线| 第2色五月婷| 日本久热| 婷婷玖玖五月天| 丁香五月天视频在线播放| 少妇AB又爽又紧无码网站| 婷婷五月天成人导航| 五月天激情小说| 久久五月婷综合网| Va另类视频| 公的粗大挺进了我的密道| 午夜天堂啪啪| 婷婷久久五月天丁香| 91传媒无码人妻精| 草婷婷在线| 99热啪啪| WWW,色五月| 日韩一级片| 99在线视频免费| 夜夜操夜夜操| 伊人激情综合| 99热精品一区| 婷婷五月天基地| 久久精品色| 99自拍网| 99热网址| 五月婷婷六月情| 97超喷视频在线观看| 我爱宗和色| 九九香蕉网| 婷婷伊人| 五月亭亭网成人在线视频| 五月丁香另类网| 五月天激情婷婷五月天久久| 五月婷婷综合网| 99久久精| 国产 码在线成人网站| 97久久草草超级碰碰碰| 99性爱视频| 久久综合婷| 婷婷色丁香六月| 日本在线观看aaa 99| 99热这里只有精品33| 噼里啪啦在线观看免费完整版视频 | 99人妻碰碰碰久久久久禁片| 五月婷婷色播| 成人AV中文字幕| 五月天丁香综合在线| 另类激情首页| 亚洲天堂热| 天天综合网91| 五月天婷婷成人网| 色婷婷在线视频观看| 婷婷丁香久久五月综合| 婷婷婷狠狠| 狠狠久久婷五月综合色| 26UUU精品一区二区| 欧美三级欧美一级| 久久色五月天| 国产亚洲色婷婷久久99精品9j| 久热A| 国产精产国品一二三在观看| 色播五月婷婷综合| 啪啪激情综合| 色婷婷婷婷| 六月伊人婷婷| 色五月激情婷婷| 日本一级大片| 色婷婷裸体色性在线| 狠狠五月天| 欧美成人日韩| 婷婷娱乐丁香综合网| 成人无码精品1区2区3区免费看| 大香蕉婷婷色| 五月天婷婷免费| 五月久久婷婷天堂视频| 激情五月丁香亭亭 | 亚洲综合婷婷| 精品夜夜澡人妻无码AV| 51精品国内探花| 人人射人人高潮| 国产综合久久久777777| 99精品在线观看| 久操激情| 天天弄天天操| 五月丁香六月婷婷中合网| 99视频| 亚洲人人操BD| 色九九九综合| 色五月综合资源推荐| 亚州操操| 热久久99热欧美国产亚洲| 99这里只有免费的小视频在线观看| 天天干天天做| 天天天日天天天干| 国产精品成av人在线视午夜片| 99精品在这里| 四月婷婷五月丁香| 欧美精品999| 久久黄色网扯| 久久色大香蕉| 欧美xx激情视频在线观看| 成人Av在线大片| 激情五月丁香五月| 成人五月天在线观看| 成人免费120分钟啪啪| 性生活久久朋友人妻| sewuyuetingtingiii| 婷婷综合精品| 国产精品久久在线观看技巧| 少妇人妻偷人精品无码视频新浪| 久久99性爱| 操逼三区| 91丨九色丨熟女高潮| 色综合久久久久久久久五月| 1024你懂的欧美曰韩| 九九热10| 99热久只有精品首页| 狠狠色婷| 99精品在线下载| 97人人看一| 深爱激情综合| 久久99热精品a片在线观看| 密视AV综合在线| 黄网在线观看免费| 另类色网| 99精品手机在线视频| 色激情五月| 777.色色| 婷婷六月丁综合| 99热91| 26uuu亚洲欧美另类| 久久久九九九 99| 五月天开心激情综合网| 久久草婷婷丁香网站| www.AV在线| 激情五月婷婷| 欧美爆乳一区二区三区| 97AV在线视频| 欧美韩国日本| 66成人网| 草美女在线观看视频在线播放| 丁香五月婷婷操逼| 91丨九色丨白浆秘| 人人干人人操人人摸人人做| 久久午夜丁香| 丁香婷婷久久| 夜夜干天天干| 婷婷六月丁香激情| 人人操婷婷| 99re热在线视频| 人人色AV| 亚洲免费av观看| 五月婷婷六月色| www99热| 亚洲av网站| 2025超碰| 久99久在线| 精品少妇蜜臀91| 91人人爽狠狠狠| 婷婷丁香日韩五月| 五月丁香色色| 五月丁香久久丝袜啪啪| 丁香婷婷六月天| 综合色、色综合| 久久久激情视频| 久久婷婷一级片| www.色99| 大鸡巴伊人网| 天天精品视频免费观看| 精品人妻久久久久| 婷婷丁香社区网| 在线视频九色97| 欧美天堂久久| 五月天夜夜爱夜夜操| 色色色综合网| 九九九AAA热视频| www.色婷婷| 五月综合激情视频在线| 性爱在线播放av| 亚洲狠狠婷婷| 欧美电影在线观看| 婷婷五月综合久久中文字幕| www.26uuu.com亚洲电影| 亚洲AV人人操| 亚洲成AV人片在线观看| 婷婷五月在线观看| 国产精品久久久海的味道| AV 3P| 97人人看| 五月婷婷综合在线视频| 色噜噜狠狠色综合日日| 日日操日日撸| 99热www.| 久久婷婷婷| 人妻有码乱操| 99在线免费观看| 在线天堂9| 五月婷婷婷婷婷| 99综合网| 久久久欧美精品sm网站| 无码碰碰| 婷婷五月成人| 91精品久久久久久77777| 综合久久99| 婷婷六月天精品| 9l视频自拍9l九色成人| 色婷婷久久综合中文久久一本| 午夜成人综合| 色综合99无码| 欧洲色色| 色综合久久88色综合天天99| 色丁香五月婷婷在线| 激情四射五月天偷偷看婷婷| 婷婷爱爱蜜臀天天操| 182.t午在线观看| 涩五月婷婷| 在线成人网址| 久机视频这只有精品| 五月天婷爱综合| 天天操加勒比| 色停停影院五月天| 激情第四色| 丁香婷婷基地| 五月天激情小说网| 丁香五月在线看| 天天操天天操综合| 亚洲五月天综合色| 三级三久久线久久99久目本WW| 91综合在线观看首页| 午夜天天精品视频| 99激情| 97人人干| 六月婷婷综合激情| 久久色五月天激情小说| 亚洲五月婷天天操| 日本天天综合| www.久久| 91精品91久久久中77777久久玖玖九九 | 精品成人久久久久久久_一二三四视| 亚洲av无码精品色午夜| 欧美碰碰| 97碰碰草| 色五月天婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷婷 | 亚洲激情综| 五月婷婷丁香婷婷| 婷婷综合精品视频97| 精久久色| 色婷丨日丨天丨综合久久| 婷婷激情五月天7| 91九色在线| 色狠狠999综合| 99久久www| 激情性爱婷婷| 一级片无码| 国产99久| 久久成人亚洲欧美电影| 亚洲亚洲人成综合网络| 色玖玖| 亚洲综合另类| 天天干 夜夜爽| 91丨九色丨东北熟女| 五月婷婷六月天| 激情网五月| 深爱激情综合网| 俺去也五月天婷婷| 欧美成人性爱网| 五月激情婷婷六月| 久久性爱视频久久性爱视频| 99精品在线下载| 久热这里只有精品99re,久热这里只有精品7 | 99九九免费精品| 中文字幕婷婷在线| 日本波多野结衣视频| 狠狠噪| 婷婷五月天综合亚洲| 久久综合九色综合97婷婷| 欧美槡BBBB槡BBB少妇| 99网| 国产欧美日韩综合精品一区二区| 97干在线| 五月天综合| www.婷婷| 99视频| 97干在线视频精品店| 热日韩欧美| 四季日韩AV无码综合| 亚洲黄色av网站| 日韩av网站在线观看| 婷婷中文字幕网| 婷婷综合在线播放| 中文字幕人妻在线| 亚洲国产成人在线| 91精品久久久久| 成人五月天婷婷| 五月香蕉综合| 777精品成人a v久久| 五月天激情图| 丁香五月欧美色综合| 五月成人天| 日韩色五月| 99热在线看| 综合色影院| 婷婷丁香在线| 九九热超碰| CHINESE熟女老女人HD视频| 国产精品久久久久久妇女6080| 97色五月婷婷在线| 婷婷综合玖玖五月| 色色色丁香| 91久久色| 97碰| 一起草AV| 五月色情婷婷开心五月色情| 天天色,天天操,天天射| 婷婷五月天色综合| 99久久大片| 久久综合首页| 久久久性爱视频| 狠狠综合| 久久久天堂国产精品女人| 中文成人在线| 五月丁香久久激情综合| 亚洲av成人电影在线观看| 在线观看免费狠狠色丁香香综合| 欧美人人女女精品综合五月天| 五月丁香黄色| 在线中文av| 色狠狠五月天| 人妻内射麻豆视频| 五月婷婷综合色拍| 亚洲 六月 综合| 综合网亚洲| 91色综合网| 久久综合人妻| 在线观看国产高清视频免费网站| 婷婷99狠狠躁天天久久久九九九| 狠狠色综合图片| 国产免费av在线| 五月天综合在线| 丁香婷婷五月天网站| 五月天婷a| 夜夜躁婷婷AV| 色色色综合网| 成人网在线观看视频| 99热一本久道| 超碰激情网| 九九在线免费观看| 婷婷五月天六月丁香| 第四色五月天| 666555。COm毛片| 久久思思99| 五月色婷婷亚洲 | 性爱在线播放av| 色色色9| A片一曲|