欧美成人午夜精品久久久,国产?V天堂一区二区三区,欧美精品va在线观看,亚洲一区二区三区免费在线观看,av无码精品一区二区久久,欧美性爱视频不卡一区三区,欧美乱人伦视频在线观看,国产一级牲交高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Hive函數(shù)從入門到實戰(zhàn):內(nèi)置函數(shù)、窗口函數(shù)與UDF自定義函數(shù)完整解析

Hive函數(shù)從入門到實戰(zhàn):內(nèi)置函數(shù)、窗口函數(shù)與UDF自定義函數(shù)完整解析 1. 先搞清楚 Hive 函數(shù)到底是怎么回事做了這么多年數(shù)倉開發(fā)我發(fā)現(xiàn)很多人在接觸 Hive 函數(shù)時習(xí)慣性地把它當成 SQL 函數(shù)的一個“方言版本”。這種理解不能說錯但會埋下不少坑。Hive 函數(shù)真正特殊的地方在于它運行在分布式計算引擎上處理的是“一批數(shù)據(jù)”而不是“一行數(shù)據(jù)”這就讓它的執(zhí)行邏輯、使用邊界和優(yōu)化手段都和傳統(tǒng)關(guān)系型數(shù)據(jù)庫里的函數(shù)有很大區(qū)別。Hive 函數(shù)解決的核心問題說白了就是在海量數(shù)據(jù)上完成清洗、轉(zhuǎn)換、聚合、分析這些動作而不用你去寫 MapReduce 程序。而且 Hive 函數(shù)體系本身也足夠龐大從最簡單的字符串截取到復(fù)雜的自定義聚合基本覆蓋了離線數(shù)倉開發(fā)里九成以上的數(shù)據(jù)處理訴求。這篇文章會從我實際項目的角度出發(fā)把 Hive 函數(shù)從內(nèi)置到自定義從常用姿勢到避坑經(jīng)驗完整拆一遍希望能給正在做數(shù)倉開發(fā)、數(shù)據(jù)分析和 ETL 的同學(xué)一些實在的參考。有一點得先說透只記住某個函數(shù)的語法是沒用的如果你不清楚它的觸發(fā)時機、NULL 值處理邏輯、以及它在分布式環(huán)境下的執(zhí)行特性那上線之后出問題的概率會非常大。所以這篇文章里我不會只列函數(shù)清單更重要的是把“為什么這樣用”“在什么場景下踩過坑”講清楚。適合看這篇內(nèi)容的人我大致分了三類剛?cè)腴T的數(shù)據(jù)分析同學(xué)需要掌握核心函數(shù)來寫日常取數(shù)邏輯做數(shù)倉 ETL 的開發(fā)需要理解自定義函數(shù)和窗口函數(shù)的底層行為以及所有被數(shù)據(jù)傾斜、NULL 值異常、UDF 性能問題折磨過的同學(xué)。1.1 Hive 函數(shù)的本質(zhì)與核心使用場景Hive 函數(shù)的本質(zhì)可以理解為把復(fù)雜的數(shù)據(jù)處理邏輯封裝成一個可復(fù)用的操作單元并交給底層的計算引擎去分布式執(zhí)行。比如你要對一億條用戶行為日志做正則匹配提取 URL 中的關(guān)鍵參數(shù)如果自己寫 MapReduce要處理輸入分片、map 階段的逐行處理、輸出序列化等等工作量不小而用regexp_extract這個 Hive 函數(shù)一行 SQL 就搞定了。所以 Hive 函數(shù)的核心價值就是把通用的數(shù)據(jù)處理邏輯做成標準化操作讓你把精力集中在業(yè)務(wù)問題上。在實際的項目里Hive 函數(shù)主要覆蓋這么幾類場景數(shù)據(jù)清洗場景字段拼接、字符串分割、正則替換、JSON 解析、空值兜底這些是數(shù)據(jù)入倉后最常做的事。統(tǒng)計分析場景按照維度分組后做求和、均值、去重計數(shù)以及更復(fù)雜的百分位估算。行轉(zhuǎn)列與列轉(zhuǎn)行場景把一條記錄展開成多行或者把多行數(shù)據(jù)合并成一個數(shù)組支撐寬表開發(fā)和特征加工。窗口分析場景排行、累計、同比環(huán)比、相鄰行對比這是數(shù)倉需求中占比很大的部分。我一直主張一個觀點看一個 Hive 開發(fā)者水平怎么樣不要看他會不會寫復(fù)雜的 join而是看他能不能把函數(shù)用得恰到好處。因為 join 的邏輯是固定的套路而函數(shù)的選擇往往決定了一個任務(wù)的性能上限和代碼的可維護性。1.2 Hive 函數(shù)的家族譜系從內(nèi)置函數(shù)到自定義函數(shù)Hive 函數(shù)大體上可以分成兩條主線內(nèi)置函數(shù)和自定義函數(shù)。內(nèi)置函數(shù)是 Hive 開箱即用的能力自定義函數(shù)則是當內(nèi)置函數(shù)滿足不了業(yè)務(wù)需求時你用 Java 或者其他語言自己擴展的實現(xiàn)。內(nèi)置函數(shù)按用途又可以細分成幾類我通常這樣歸類函數(shù)類別典型函數(shù)主要用途數(shù)值函數(shù)round, floor, ceil, abs, rand數(shù)值計算、取整、隨機抽樣字符串函數(shù)concat, substring, split, regexp_replace字符串加工、正則處理、字段拆分日期函數(shù)from_unixtime, unix_timestamp, datediff, date_add時間戳轉(zhuǎn)換、日期偏移、間隔計算條件函數(shù)if, case when, nvl, coalesce, nullif邏輯分支、空值兜底聚合函數(shù)count, sum, avg, collect_list, collect_set分組統(tǒng)計、列轉(zhuǎn)行窗口函數(shù)row_number, rank, lag, lead, sum over排行、同比環(huán)比、累計計算特殊函數(shù)explode, posexplode, lateral view行轉(zhuǎn)列、JSON 展開而自定義函數(shù)這邊按輸入輸出的關(guān)系分成三類。UDF 是一進一出比如給你一個字符串返回處理后的字符串UDAF 是多進一出做自定義聚合UDTF 是一進多出把一行展開成多行。這三類我在后面的第 4 節(jié)會詳細拆。2. 最常用的內(nèi)置函數(shù)數(shù)值、字符串與日期實操內(nèi)置函數(shù)雖然多但說句實話日常開發(fā)中真正高頻使用的也就那三四十個。我在多個項目里統(tǒng)計過開發(fā)人員寫的 Hive SQL 中超過八成的函數(shù)調(diào)用集中在字符串處理、日期轉(zhuǎn)換和條件判斷這三類。所以先把這批函數(shù)玩熟比死記硬背完整的函數(shù)列表有用得多。2.1 數(shù)值處理與字符串函數(shù)的使用細節(jié)數(shù)值函數(shù)里常用的無非就是round做四舍五入、floor向下取整、ceil向上取整、abs求絕對值以及rand做隨機抽樣。這里要說一個細節(jié)round在 Hive 里的行為是“四舍五入”但它的實現(xiàn)方式和很多編程語言里的有點差異。Hive 的round是基于Math.round實現(xiàn)的對于負數(shù)它遵循的是“四舍五入到最接近的整數(shù)”的規(guī)則。比如round(-2.5)的結(jié)果是 -3而不是 -2。這在做金額分攤或者比率計算的時候如果沒留意就會產(chǎn)生 1 分錢的誤差。別小看這個誤差對過賬系統(tǒng)來說1 分錢的對不上都會被當成數(shù)據(jù)事故。字符串函數(shù)這塊concat和concat_ws是出場率最高的兩個。很多人習(xí)慣用concat拼字段但一旦要拼的某個字段是 NULL結(jié)果就會變成 NULL整個字段就廢了。concat_ws就好用在這它會跳過 NULL 值而且支持指定分隔符。我寫過一句很典型的 SQLconcat_ws(-, year, month, day)用來拼分區(qū)字段這樣即使某一天的數(shù)據(jù)缺失也不會把整個分區(qū)路徑弄壞。split用來做字符串切分返回結(jié)果是數(shù)組。這里要注意的是Hive 的split第二個參數(shù)是正則表達式不是普通字符串。如果你要按點號切分 IP 地址直接寫split(ip, .)是切不動的因為點號在正則里是通配符必須寫成split(ip, \\.)。類似的還有按豎線切分要寫成split(str, \\|)。這個坑我見過不少同學(xué)踩過排查半天發(fā)現(xiàn)是正則的問題。regexp_replace和regexp_extract是正則處理里的黃金搭檔。前者是做替換后者是提取子串。regexp_extract提取的時候第二個參數(shù)里用括號圈出你要的部分第三個參數(shù)指定取第幾個括號里的內(nèi)容。比如從 URL 里提取 user_idregexp_extract(url, user_id(\\d), 1)。這里第三個參數(shù)寫 1 就表示取第一個括號匹配到的內(nèi)容。另外要留意正則的貪婪匹配問題有時候你會提取到超出預(yù)期的內(nèi)容。如果遇到這種情況可以在正則后面加問號改成非貪婪模式。JSON 解析函數(shù)在日志分析場景里是剛需。get_json_object可以從 JSON 字符串里取指定字段比如get_json_object(json_str, $.username)。但get_json_object的效率并不好尤其是對一個大 JSON 反復(fù)取多個字段時會執(zhí)行多次解析。這里更推薦的做法是用一次json_tuple配合lateral view把多個字段一次性拆出來解析只做一遍性能會好很多。2.2 日期函數(shù)與類型轉(zhuǎn)換的實戰(zhàn)要點日期函數(shù)這塊核心就圍繞三類操作時間戳與字符串互轉(zhuǎn)、日期加減、日期差計算。時間戳轉(zhuǎn)字符串用from_unixtime(unix_timestamp, pattern)比如from_unixtime(ts, yyyy-MM-dd HH:mm:ss)。反過來字符串轉(zhuǎn)時間戳用unix_timestamp(2024-06-01 12:00:00, yyyy-MM-dd HH:mm:ss)。這里的重點是格式模式里的字母區(qū)分大小寫yyyy表示四位的年份YYYY在 Hive 里有時候代表的是“周所在的年份”在跨年的時候可能和yyyy結(jié)果不一致。我建議統(tǒng)一用yyyy避免年底年初這種邊界時段出現(xiàn)意料之外的數(shù)據(jù)。日期加減是date_add和date_sub支持傳入負數(shù)實現(xiàn)相反方向的操作。比如想拿到 30 天前的日期可以寫date_sub(current_date(), 30)也可以寫date_add(current_date(), -30)。我個人更推薦用date_sub表達往前推的語義代碼讀起來直觀。求日期差用datediff(end_date, start_date)返回值是前者減后者的天數(shù)。這里有一個容易搞錯的地方datediff是按天計算的會被取整如果兩邊帶時分秒差值會被截斷不會四舍五入。所以你如果想要精確到小時的間隔不要用datediff直接用兩個時間戳相減再除以 3600 秒。類型轉(zhuǎn)換函數(shù)里cast是通用的轉(zhuǎn)換入口cast(x as int)、cast(x as decimal(10,2))。但cast有個非??拥男袨檗D(zhuǎn)換失敗時不會報錯而是返回 NULL。比如cast(abc as int)的結(jié)果是 NULL如果你的下游邏輯沒有針對 NULL 做處理數(shù)據(jù)就悄悄丟了。所以我在寫類型轉(zhuǎn)換時幾乎都會配合case when先做合法性校驗。額外提一個函數(shù)try_cast這個不是 Hive 原生的是某些引擎擴展的功能是轉(zhuǎn)換失敗返回 NULL 而不是拋異常。如果你所在的環(huán)境支持可以放心用不支持就老實寫校驗邏輯。3. 聚合函數(shù)與窗口函數(shù)數(shù)倉開發(fā)的重頭戲聚合函數(shù)和窗口函數(shù)是 Hive 函數(shù)體系里最有分析深度的一塊。很多取數(shù)需求表面上看起來復(fù)雜拆解到最后基本都是聚合加窗口的組合拳。把這兩類函數(shù)吃透復(fù)雜報表開發(fā)起來會順手很多。3.1 聚合函數(shù)的行為細節(jié)與常見用法聚合函數(shù)的輸入是多行數(shù)據(jù)輸出是一行結(jié)果。count、sum、avg、max、min這五個是最基礎(chǔ)的。先說count的細節(jié)count(*)統(tǒng)計的是行數(shù)包括某列為 NULL 的行count(column)統(tǒng)計的則是該列非 NULL 的值的個數(shù)。很多新手在這里栽過跟頭統(tǒng)計用戶量的時候用count(user_id)如果 user_id 存在 NULL結(jié)果就會偏少。而count(distinct column)是去重計數(shù)這個好用但在數(shù)據(jù)量很大的時候要特別小心因為count(distinct)的底層實現(xiàn)容易引發(fā)數(shù)據(jù)傾斜。聚合函數(shù)里有兩個在數(shù)倉開發(fā)中出場率很高但很多人用不好的函數(shù)collect_list和collect_set。它們的作用是把分組內(nèi)的多行數(shù)據(jù)合并成一個數(shù)組前者保留重復(fù)元素后者自動去重。典型場景是行轉(zhuǎn)列比如把某個用戶的所有訂單號聚合成一個數(shù)組再配合concat_ws拼成字符串。但要注意collect_list得到的數(shù)組元素順序是不保證的如果你想控制順序先在子查詢里排好序再在外面聚合。雖然官方?jīng)]有嚴格保證這種方式必然生效但實際操作中大部分版本是可行的也算是一種廣為流傳的土辦法。avg在 Hive 里的返回值是 double 類型如果你需要精確的小數(shù)位控制建議先轉(zhuǎn)成 decimal 再求平均比如avg(cast(amount as decimal(10, 4)))。另外聚合函數(shù)處理 NULL 的規(guī)則是“忽略 NULL”比如sum遇到一組全是 NULL 的數(shù)據(jù)返回的是 NULL 而不是 0。這個和很多人的直覺相反所以在做指標計算時我習(xí)慣用coalesce(sum(x), 0)把 NULL 兜底成 0避免下游報表出現(xiàn)空值。百分位估算函數(shù)percentile和percentile_approx也值得單獨說。前者要求輸入是整數(shù)列后者可以接受浮點數(shù)列并且可以傳入一個精度參數(shù)控制估算質(zhì)量。在計算 UV 分布、耗時中位數(shù)這類指標時非常有用而且底層做了近似算法不會像count(distinct)那樣產(chǎn)生嚴重的傾斜問題。3.2 窗口函數(shù)排序、偏移與累計計算的完整拆解窗口函數(shù)的計算方式和普通聚合函數(shù)最大的區(qū)別在于聚合函數(shù)把多行結(jié)果壓縮成一行窗口函數(shù)保留每一行同時附加一個聚合結(jié)果在旁邊。這個特性讓窗口函數(shù)成了分析場景里的主力工具。排序相關(guān)的窗口函數(shù)有三個row_number、rank、dense_rank。它們的區(qū)別我在項目里驗證過很多次row_number不管并列情況給一個連續(xù)且唯一的編號rank遇到并列時會跳號dense_rank不跳號。舉個實際場景取每個用戶最近一次訂單直接用row_number() over(partition by user_id order by order_time desc)就能定位而做榜單排名希望并列名次占用相同位次就用rank。偏移函數(shù)lag和lead是做環(huán)比、同比分析的神器。lag(column, offset, default)取當前行往前數(shù)第 offset 行的值lead則往后取。比如計算日活環(huán)比增長可以先按日期排序再用lag(dau, 1)取前一行的日活值然后直接算增長率。需要注意lag在最前面幾行是沒有值可取的如果不傳第三個默認值參數(shù)返回的是 NULL下游要做過濾或兜底。累計計算是另一種高頻用法。sum(amount) over(partition by user_id order by order_time rows between unbounded preceding and current row)就是非常典型的累計求和的寫法。這里的關(guān)鍵是窗口子句rows between ... and ...它定義了累加的范圍。還有rows between 1 preceding and current row表示統(tǒng)計當前行和上一行兩行的合計常用于滑動計算。如果你不加窗口子句默認窗口是從分區(qū)起點到當前行也就是自然形成累計效果。這里要提醒一個很多人忽略的坑在使用排序相關(guān)的窗口函數(shù)時如果order by的字段存在大量重復(fù)值不同函數(shù)的執(zhí)行行為會產(chǎn)生差異。例如sum() over(order by x)在 x 重復(fù)時累計值會把所有相同 x 的行一起算進去而不是逐行累加。這個行為在不同引擎里可能不一致遇到需求明確要逐行累計的場景建議在 order by 后面加上唯一字段做次級排序。3.3 窗口函數(shù)與表生成函數(shù)的協(xié)同實戰(zhàn)窗口函數(shù)偶爾需要配合表生成函數(shù)使用典型場景是展開 JSON 數(shù)組后再對展開后的行做編號或排名。表生成函數(shù)的核心是explode它可以把一個數(shù)組或者 map 展開成多行。比如埋點日志里某個字段存的是商品 id 列表用explode就能把一條日志展開成多條商品記錄。但在 Hive 舊版本里explode不能直接在 select 語句里和其他字段一起查詢必須配合lateral view。lateral view的字面意思就是“側(cè)視圖”它把 explode 產(chǎn)生的虛擬表和原始行關(guān)聯(lián)起來。一個典型寫法是select user_id, order_id from orders lateral view explode(split(product_list, ,)) t as order_id;這種寫法把product_list字符串切成數(shù)組再展開成多行每一行都保留原來的user_id。posexplode是explode的增強版它會額外帶一個下標列可以用于記錄展開后元素的原始下標這在還原數(shù)組順序時很有用比如拼接的商品順序不能亂。在做用戶標簽場景時我經(jīng)常把lateral view explode和窗口函數(shù)放在一起用。先把每個用戶的標簽數(shù)組展開再用row_number給每個標簽做排序之后根據(jù)標簽優(yōu)先級取第一條整個處理鏈路非常流暢。4. 自定義函數(shù)系統(tǒng)函數(shù)不夠用時的突圍方案內(nèi)置函數(shù)再豐富也總有覆蓋不到的業(yè)務(wù)邏輯。比如解析一套內(nèi)部自定義的加密協(xié)議字段、計算兩個地理位置的距離、實現(xiàn)一套特殊的分組邏輯這些時候就需要自己寫函數(shù)擴展 Hive 的能力。4.1 UDF、UDAF、UDTF 的選型與核心原理自定義函數(shù)按輸入輸出關(guān)系分成三類UDF輸入一行輸出一行。這是最常用、最容易上手的一類。典型場景是字符串加工、字段解析、格式標準化。UDAF輸入多行輸出一行本質(zhì)是自定義聚合函數(shù)。典型場景是實現(xiàn)自定義統(tǒng)計指標比如加權(quán)平均、分組去重拼接。UDTF輸入一行輸出多行。典型場景是把一行數(shù)據(jù)展開成多行類似內(nèi)置的explode。選型的原則其實很簡單你在 SQL 里要替換的是一個普通字段轉(zhuǎn)換就用 UDF要替換的是group by里的聚合邏輯就考慮 UDAF要替換的是explode這種行轉(zhuǎn)列操作就寫 UDTF。UDF 的實現(xiàn)底層依賴 Hive 的反射機制。你在 SQL 里寫my_func(x)Hive 會去找到對應(yīng)的 Java 類實例化后把每一行的數(shù)據(jù)傳進去調(diào)用你實現(xiàn)的evaluate方法。這里的核心是同一個 UDF 實例會被多個計算節(jié)點并發(fā)使用所以你的實現(xiàn)里不能有可變的狀態(tài)變量。我見過有人把計數(shù)器寫在 UDF 的成員變量里以為能統(tǒng)計處理行數(shù)結(jié)果數(shù)據(jù)完全對不上原因就是每個節(jié)點各自維護了獨立的實例。4.2 一個 UDF 從開發(fā)到上線的完整流程下面用一個實際案例走一遍全流程。假設(shè)業(yè)務(wù)方要求從訂單號中解析出訂單來源渠道訂單號的規(guī)則是“渠道編碼 日期 序列號”拼接而成比如A01_20240601_000123A01 就是渠道編碼。內(nèi)置函數(shù)當然也能用split來解析但這類邏輯如果散落在幾十個 SQL 里維護成本會很高封裝成 UDF 更合理。第一步創(chuàng)建 Maven 工程引入 Hive 依賴。dependency groupIdorg.apache.hive/groupId artifactIdhive-exec/artifactId version3.1.2/version scopeprovided/scope /dependency第二步寫 UDF 實現(xiàn)類。繼承org.apache.hadoop.hive.ql.exec.UDF實現(xiàn)evaluate方法。import org.apache.hadoop.hive.ql.exec.UDF; public class OrderChannelParser extends UDF { public String evaluate(String orderId) { if (orderId null || orderId.isEmpty()) { return null; } String[] parts orderId.split(_); return parts.length 0 ? parts[0] : null; } }evaluate方法可以重載多個版本Hive 會根據(jù)調(diào)用時傳入的參數(shù)類型自動選擇。所以同一個 UDF 類可以實現(xiàn)支持多種輸入類型比如既有String evaluate(String)又有String evaluate(String, String)調(diào)用時的不同參數(shù)會路由到不同方法。第三步將項目打成 jar 包上傳到 Hive 能訪問到的目錄然后注冊函數(shù)。add jar hdfs://your-path/order-parser.jar; create temporary function parse_order_channel as com.example.OrderChannelParser;這里temporary關(guān)鍵字表示只在當前會話生效適合開發(fā)和測試。如果你要把函數(shù)做成永久能力可以執(zhí)行create function parse_order_channel as com.example.OrderChannelParser using jar hdfs://your-path/order-parser.jar;第四步在 SQL 里調(diào)用驗證結(jié)果。select parse_order_channel(order_id) as channel, count(*) as cnt from orders group by parse_order_channel(order_id);整個流程跑通之后業(yè)務(wù)方后續(xù)所有解析渠道的需求都只需要調(diào)用這一個函數(shù)代碼復(fù)用性大幅提升而且排查問題時只需要看一個類不用翻十幾個 SQL。4.3 UDAF 與 UDTF 的實現(xiàn)要點與注意事項UDAF 的實現(xiàn)會比 UDF 復(fù)雜一個量級。在 Hive 2.0 以上的版本里推薦使用org.apache.hadoop.hive.ql.udf.generic.AbstractGenericUDAFResolver配合GenericUDAFEvaluator的實現(xiàn)方式。核心邏輯是定義一個內(nèi)部狀態(tài)AggregationBuffer在iterate方法里接收每一行數(shù)據(jù)更新狀態(tài)在terminatePartial里輸出部分聚合結(jié)果最后在terminate里輸出最終結(jié)果。這里的關(guān)鍵是要理解 Hive 的聚合計算模型數(shù)據(jù)分散在多個節(jié)點上先做局部聚合再做全局聚合。所以你的聚合狀態(tài)必須支持合并這對應(yīng)merge方法。我見過不少 UDAF 實現(xiàn)錯誤把全局聚合和局部聚合搞混導(dǎo)致結(jié)果翻倍或者丟失。UDTF 的實現(xiàn)則是繼承GenericUDTF實現(xiàn)initialize、process和close三個方法。initialize里定義輸出列名和類型process里接收一行數(shù)據(jù)可以多次調(diào)用forward輸出多行。寫 UDTF 時有一個限制需要留意Hive 不允許 UDTF 的輸入?yún)?shù)和輸出列在同一張表里出現(xiàn)重名否則會報錯如果需要保留原字段必須配合lateral view使用。自定義函數(shù)上線前務(wù)必做三個層面的驗證單測驗證結(jié)果是必要條件造幾組邊界數(shù)據(jù)NULL、空串、超長字符串、特殊字符確認不會拋異常其次用一個小分區(qū)跑真實數(shù)據(jù)對比你預(yù)期的結(jié)果分布最后壓測確認執(zhí)行耗時不會拖垮整個任務(wù)。尤其是 UDF 里做了重量級操作比如在每一行都新建一個正則 Pattern 對象那在大表上就是災(zāi)難Pattern 對象應(yīng)該在構(gòu)造時初始化一次。5. 函數(shù)使用中的常見坑與排查實戰(zhàn)不管內(nèi)置函數(shù)還是自定義函數(shù)實際跑數(shù)時總會遇到各種問題。這一節(jié)我把自己在多個項目里踩過的坑集中整理一下。5.1 性能問題數(shù)據(jù)傾斜與函數(shù)副作用Hive 任務(wù)里最典型的性能問題就是數(shù)據(jù)傾斜。表現(xiàn)的樣貌是整個任務(wù)卡在某個 reduce 上其他都跑完了就它一個在那慢慢磨。函數(shù)觸發(fā)的傾斜有幾個常見原因。第一個是count(distinct)在超大基數(shù)場景下的歸并問題。比如統(tǒng)計上億用戶的去重設(shè)備數(shù)count(distinct device_id)會把所有設(shè)備的去重壓力打到同一個 reduce 上。解決思路一般是改成先group by device_id去重再外層count(1)。這個優(yōu)化的本質(zhì)是把壓力分散到多個 reduce 上內(nèi)核是兩階段聚合。第二個是 UDF 里做了耗時操作比如正則回溯、解析超大 JSON、循環(huán)里做字符串拼接。這類問題在數(shù)據(jù)量小的時候完全無感一旦遷移到百億級大表執(zhí)行時間就會被無限放大。我在項目里優(yōu)化過一個案例問題根源就是 UDF 的evaluate方法里調(diào)用了Pattern.compile做正則預(yù)處理后來改成在類初始化時把Pattern編譯緩存好任務(wù)耗時直接從 3 小時降到 20 分鐘。第三個是collect_list在大分組下的 OOM 風險。如果一個分組內(nèi)的數(shù)據(jù)量巨大collect 出來的數(shù)組會占用大量內(nèi)存。一個比較務(wù)實的策略是先對數(shù)據(jù)做抽樣評估如果某個 key 的數(shù)據(jù)量確實異常大就需要考慮是否真的需要全量 collect還是可以先做一層預(yù)過濾。5.2 數(shù)據(jù)正確性問題NULL、精度、時區(qū)與隱式轉(zhuǎn)換這類問題隱蔽性很強往往數(shù)據(jù)跑完了才發(fā)現(xiàn)不對重跑成本極高。NULL 值問題在前面反復(fù)出現(xiàn)這里再匯總一下。concat遇 NULL 返回 NULL、count(column)不統(tǒng)計 NULL、sum全 NULL 返回 NULL、concat_ws跳過 NULL、coalesce返回第一個非 NULL 值。我的習(xí)慣是數(shù)據(jù)清洗階段盡量把 NULL 處理掉統(tǒng)一轉(zhuǎn)成確定的默認值或者空串后續(xù)的分析查詢就省心很多。精度問題是金額類指標的重災(zāi)區(qū)。Hive 的 double 類型在sum計算時會產(chǎn)生精度丟失尤其是對金額做累加結(jié)果可能出現(xiàn) 0.1 的誤差。我在處理財務(wù)指標時一律要求上游把金額字段轉(zhuǎn)成decimal(18, 2)或者精度更高的類型再參與后續(xù)聚合。round的負數(shù)舍入問題前面已經(jīng)提過同樣值得注意。時區(qū)問題在日期處理函數(shù)里很常見表現(xiàn)形式是取數(shù)結(jié)果和預(yù)期相差 8 個小時。原因在于from_unixtime默認使用服務(wù)器的本地時區(qū)來格式化時間戳如果你的集群時區(qū)配置和業(yè)務(wù)方預(yù)期不一致就會出現(xiàn)偏移。排查這類問題時先確認集群的hive.execution.timezone配置再確認時間戳字段本身是否是 UTC 時間。最穩(wěn)妥的做法是統(tǒng)一約定所有時間戳存儲都用 UTC展示時顯式指定時區(qū)轉(zhuǎn)換。隱式轉(zhuǎn)換是另一個容易靜默出錯的點。比如一個字段被定義成字符串類型但你拿它和整數(shù)比較Hive 會做隱式轉(zhuǎn)換如果那個字段的內(nèi)容不是純數(shù)字比較結(jié)果就會偏離預(yù)期。我建議在表結(jié)構(gòu)定義階段就嚴格要求字段類型不要在 SQL 里依賴隱式轉(zhuǎn)換。舉一個典型的錯誤把分區(qū)字段dt存成 string然后用dt 20240601 and dt 20240630這種不帶引號的寫法去查看起來能跑通但如果有一天分區(qū)字段里出現(xiàn)非數(shù)字內(nèi)容這種行為就變得不可預(yù)測了。5.3 函數(shù)相關(guān)常見問題速查表我整理了一張日常排查速查表出現(xiàn)問題可以先對照排查?,F(xiàn)象可能原因解決方向split按點切分無效點號是正則通配符寫成split(ip, \\.)concat結(jié)果為 NULL某字段為 NULL改用concat_ws或nvl兜底count(distinct)任務(wù)卡死去重基數(shù)過大導(dǎo)致傾斜改成 group by count 兩階段日期結(jié)果差 8 小時時區(qū)配置不一致檢查集群時區(qū)統(tǒng)一 UTC 存儲cast(abc as int)無報錯Hive 轉(zhuǎn)換失敗返回 NULL配合 case when 做校驗金額求和結(jié)果有誤差double 精度丟失字段轉(zhuǎn) decimal 再聚合collect_list內(nèi)存溢出單分組數(shù)據(jù)過大預(yù)過濾、增大容器內(nèi)存或改方案UDF 任務(wù)整體很慢evaluate 里有重操作初始化時緩存 Pattern避免重復(fù)編譯row_number排名的結(jié)果和預(yù)期不同order by 字段重復(fù)增加唯一字段做次級排序datediff結(jié)果被取整按天計算截斷時分秒用時間戳相減精確計算這個表是我在幾個項目迭代中不斷沉淀下來的后續(xù)遇到新的問題還在持續(xù)補充。排查思路的本質(zhì)就一條先確認函數(shù)本身的行為再確認數(shù)據(jù)本身的特征。兩者分開排查問題定位就快很多。6. 從實際項目里沉淀的 Hive 函數(shù)使用經(jīng)驗寫到最后這部分分享一下我在實際項目中總結(jié)的一些使用經(jīng)驗。這里面沒有特別高深的技術(shù)都是實打?qū)嵦嵘_發(fā)和維護效率的做法。6.1 函數(shù)使用的基本原則第一條原則是能用內(nèi)置函數(shù)解決的就不要寫自定義函數(shù)。內(nèi)置函數(shù)經(jīng)過大量場景驗證穩(wěn)定性、性能都有保障。自定義函數(shù)的維護成本是隱性的后面換人接手要花時間理解函數(shù)邏輯一旦函數(shù)里有隱蔽的邊界 bug排查代價很大。第二條原則是邏輯盡量后置到 SQL 層而不是前置在 UDF 里。比如字符串標準化、金額單位轉(zhuǎn)換這類邏輯如果寫到 UDF 里后續(xù)調(diào)整要改代碼重新打包但如果寫在 SQL 里一個字段改一下重跑就行。我見過一個項目把匯率轉(zhuǎn)換寫在 UDF 里結(jié)果匯率基準更新時整個 UDF 要重新上線非常折騰。第三條原則是函數(shù)調(diào)用的可讀性要優(yōu)先。寫 SQL 不要炫技能用簡單的case when說清楚就不要寫一個嵌套三層的regexp_extract或者復(fù)雜的窗口函數(shù)表達式。數(shù)據(jù)開發(fā)最大的成本是別人讀你代碼的成本代碼寫得直白后面維護的人會感謝你。6.2 高價值函數(shù)組合與數(shù)據(jù)加工套路項目里有一種高頻套路清洗階段用case when加regexp_extract做字段規(guī)范化標準化階段用from_unixtime和date_format做時間規(guī)整加工階段用窗口函數(shù)做指標加工。這套組合打下來覆蓋了從明細數(shù)據(jù)到指標寬表的絕大多數(shù)需求。有一個典型的寬表加工例子統(tǒng)計每個用戶最近 7 天的下單金額和下單次數(shù)同時要算出和上一個自然周的同環(huán)比。實現(xiàn)思路是先用date_format(order_time, yyyy-ww)提取周維度再用datediff計算日期差值然后配合條件聚合把最近 7 天的數(shù)據(jù)框出來。這些函數(shù)單看都很簡單但組合起來就能解決很復(fù)雜的業(yè)務(wù)訴求。還有一個經(jīng)驗值得分享在寫窗口函數(shù)做指標加工時盡量把partition by的粒度控制在最小業(yè)務(wù)粒度。比如統(tǒng)計用戶的每日指標時partition by user_id, order_date一定比partition by user_id然后靠order by來限定更可控因為前者能清晰地表達“每組只算一天的數(shù)據(jù)”排查時思路更明確。6.3 最后再分享一個我一直在用的小技巧在寫任何一個帶聚合或窗口的 SQL 之前先在腦子里過一遍數(shù)據(jù)特征這個字段有沒有 NULL、這個維度有沒有可能產(chǎn)生大量的重復(fù)值、這個時間字段的時區(qū)是什么。這些問題過完之后再動手寫 SQL踩坑概率會下降一大半。很多看起來莫名其妙的數(shù)據(jù)異常本質(zhì)都是寫 SQL 之前沒有想清楚數(shù)據(jù)的分布特征。函數(shù)本身沒有錯錯的是你假設(shè)數(shù)據(jù)是干凈有序的。另外一個習(xí)慣是在函數(shù)選型時主動考慮表的數(shù)據(jù)量和文件格式。在 Parquet 這類列式存儲上某些函數(shù)在過濾條件下可以做到延遲物化整體執(zhí)行效率比在 Text 格式上高很多。因此做方案設(shè)計時函數(shù)選型和存儲格式需要通盤考慮不能只盯著一句 SQL 看。做 Hive 開發(fā)這么多年我的體會一直是函數(shù)只是工具真正拉開差距的是你對自己數(shù)據(jù)的理解程度。函數(shù)學(xué)得快慢不重要重要的是每一次使用函數(shù)時都能清楚知道它在這個數(shù)據(jù)集上會發(fā)生什么。這個意識建立起來之后你寫的每一段 SQL 都會比之前穩(wěn)得多。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
激情婷婷视频在线| 丁香五月综合| 51XX午夜影福利| 91人人操人人看| 天天透天天干| 婷婷丁香五月天影院 | WWW.桔色成人.COM| 五月婷婷人妻| 婷婷五月天AV| 伊人久久婷| 97色97干| 五月丁香六月情| 亚洲操B| 97人人射| 久久这里只有精品8| 丁香六月婷婷色XXXXX| 欧美日韩一区二区三区四区| 久热伊人| 国产亚洲AV人片在线| 丁香五月停停av| 一区操| 蜜乳人妻一区二区三区| 自拍偷窥99热| 婷婷丁香成人在线视频| 常久最新免费的色吊丝| 色婷婷五月天| 色情成人五月天| 丁香五月色情| 无码字幕中文| 欧美色色色色色色| 色就是色婷婷五月亚洲激情| 欧美成人网婷婷综合在线| 久久玖玖综合| 日韩人妻无码专区| 99精品在| WWW.17C亚洲精品| 激情综合网五月婷婷| 人妻视频在线| 久热99| 五月天激情婷婷| 国产精品天天狠天天看| 97婷婷五月激情六月丁香伊人| 色婷婷无吗| 黑人无码一区| 日本熟女三区| 婷婷开心五月| 色婷婷精品视频| 久久久com| 大香网伊人久久综合| 99热网精品| 色五月在线综合| 中文字幕欧美久久| 开心婷婷五月天电影院| 另类激情中文| 久热免费| 五月婷综合| 九九色色色| 久久人人超| 狠狠操天天操| 99久久综合| 超碰97干| 日99网站| 99性爱视频| 欧美久久一级内射wwwwww.| 丁香啪啪中文字幕| 丁香六月开心| 看国产探花操逼三级片| 色综合综合色| 国产午夜精品AV一区二区麻豆| 中文字幕成人日韩| 九九这里只有精品在线视频| 丁香五月婷婷手机| 亚洲va综合va国产va中文| 99热婷婷| 有码一区二区三区| 色婷五月婷婷| 中文字幕乱轮| 26uuu日韩| 亚洲一级 片内射网站在线观看| www.五月天婷婷| 99在线er热| 久久这里有精品在线观看| 五月丁香婷婷深深爱| 99久久这里只有精品| 5月丁香美女影院| 99九九综合久久九九| 日本狠狠爽| 六月丁香久久| 丁香六月婷婷| 色色激情五月| 五月激情婷婷女| 五月婷婷久久激情| 殴美日韩成人| 丁香五月大香蕉在线99| 婷婷五月天最新综合你懂的| 丁香色婷婷| 日本丁香五月| www.sebowuyue| 成人欧美一区二区三区在线观看| 91狠狠综合网| 丁香操逼| 五月丁香拍拍激情综合| 色情五月丁香| 丁香色五月AV在线| 国产三级在线播放| 青青久久大香蕉| 99热视| 噜噜噜久久| 无码人妻丰满熟妇奶水区码| 无码人妻激情| 激情影院丁香五月| www九九免费视频| 久久久激情| 婷婷五月色情天| 色999亚洲人成色| 色婷婷瘦婷婷日韩| 秋霞影音91人妻久久| 99ri在线视频| 97碰免费精采视频| 日日舔夜夜操| 一本色道久久88综合日韩精品| 伊人五月婷婷| 丁香五月天色婷婷| 五月婷婷影视| 日韩一66精品| 狠狠爱综合网| 婷婷五月丁香色播| 九九爱激情| 九九热免费视频| 97精品在线| 婷婷爱五月天人人爱| 天天做天天爱天天爽| 99热销国产这里有精品| 五月婷婷免费看| 九月色婷婷| 97干在线观看视频| 五月综合视频| 亚洲影院婷婷色| 色色婷五月天| 丁香五月偷拍| 永久的网站AAAA| 狠狠爱婷婷| 亚洲国产成人AV在线 | 天天草女人| 亚洲婷婷视频| 91操操| 婷婷五月色图| 播五月,色五月,开心五月播放器| 亚洲无码猫咪| 久久色五月天综合网| 国产毛片精品一区二区色欲黄A片 极品人妻VIDEOSSS人妻 | 五月6香色婷婷视频| 成人在线日韩| 97操碰视频| 伊人久久大香| 曰日爽日日操| 日本nghangse中文字幕| 激情综合色五月丁香六月亚洲| 乱岳熟女50岁| 天天网站天天爽| 天天狠狠夜夜狠狠2023| 天天做天天爱天天搞| 97人人搞| 99黄色在线视频精品熟女| 丁香五月婷婷在线观看| 欧美六月婷婷| www,天天干| 婷婷五月激情在线| 婷婷丁香五月亚洲| 九九热99在线视频| 婷婷五月天久久| 人人插操| 丁香五月,激情五月,深爱五月| 国产人妻人伦精品一区二区| 丁香六月高清视频| 一级片操逼视频| 激情婷婷综合| 碰97 久| 激情深愛五月視頻| 91久久99久久91熟女精品| 激情久久久| 99精品久久久| 久久久91| 亚洲成人网在线观看| 亚洲色综合| 激情小说五月天社区丁香| 丁香五月综合婷婷| 天天色月| 国产乱妇无乱码大黄AA片| 六月婷婷之青青草| 国产午夜成人AV在线播放| 六月丁香射婷婷欧美色图片| 五月婷婷涩涩爱| 五月丁香在线婷婷蜜桃| 丰滿爆乳一区二区三区| 五月丁香婷婷六月| 色色五月婷婷久久| 久操大香蕉| www久久99| 99色在线视频| 五月天六月丁香| 99在线免费观看| 色激情综合狠狠婷婷| 天天天天操| 伊人丁香五月| 九九爱精品网站| 婷婷五月天在线观看免费| 91n啪啪| www.亭亭五月天| 97人人干。| 深爱婷婷丁香五月激情| 成人午夜免费电影| 成人在线日韩| 五月婷婷开心色伊人| 风流少妇A片一区二区蜜桃| 亚洲九九九九| 99热亚洲综合| 巴基斯坦粉嫰无码视频| 狠狠色噜噜狠狠狠狠狠色综合久久| 夜丁香五月婷婷| 超爽内射| 538任你爽| 色情五月天小说| av中文在线| 最新亚洲色色网| 91干婷婷| 精品网站:999WWW| 综合色图区| AAA久久| 婷五月丁香| 日韩乱轮AV| 欧美成人性爱网| 色丁香五月| 99热精品在线播放| 另类激情五月| 亚洲成片在线观看| 99日韩| 天天操天天爽天天爱| 91碰碰视频在线观看| 五月天婷婷综合免费| www.色综合.com| 亚洲色热| 丁香 婷婷 亚洲 熟女| 五月天之色情综合网| 色综合色五月| 六月婷婷影院| 91久久综合亚洲噜噜成人在线 | 五月婷婷激情| 江苏少妇性BBB搡BBB爽爽爽 | 99热超| AA久久| 亚洲精品乱码久久久久久综合| 婷婷99视频在线| 日本高清综合网五月丁香| 内射综合网| 国产99久久久国产精品免费看 | 国产99视频永久免费| 色九月综合网| 99人人干| 婷婷五月天久久| 久久激情五月| 色婷婷激情视频| 色色丁香婷婷综合| 成人狠狠成人狠狠成人狠狠成人狠狠| 天天色99| 屁股翘好撅高迎合跪趴| 天堂久久婷婷| 色综合久久88色综合中文字幕| 婷婷 丁香 久久| site:pnnrt.com| 亚州日本欧州韩美高青高潮一| yazhochengrenavwang| 99热一区| 开心五月网| 激情综合4月| 99干在线视频| 久久99网站| 婷婷在线免费| 五月婷五月婷伊人伊人五月婷| a性生活久久无| 999热在线视频| 六月婷婷七月丁香| www.五月婷婷| 色婷婷影视99| 亚洲日韩一页精品发布| 成人综合AV| 婷婷婷五月天最新综合你懂的| 玖玖午夜视频| 91碰免费视频| 五月丁香婷婷啪啪| 久久99热这里只频精品6学生| 蜜臀av无码久久久久久久久| 六月丁香停| 精品久久久久成人码免费动漫 | av在线观看网站| 少妇水多A片太爽了| 五月婷婷在线观看黄| 天天综合插插| 九九激情网| 五月婷婷狠狠久久| 婷婷香草网| 在线色色| 人人摸人人摸| 激情五月亚洲综合网| 久久人人超| cao视频,现在观看| 午夜天堂一区人妻| 欧美日综合| 久播影院免费观看电视剧大全最新网| 99爱免费在线观看| 成人网址在线观看| 91日韩美女被插视频| 亚洲国产精品VA在线看黑人| 91九色精品熟女内射| se99视频| 六月丁香婷婷色69| 五月色亭丁香| 97干视频| 日本色色网站| 超级碰碰99| 天天操天天插| 99热这里有精品| 久婷婷色| 九月丁香五月婷婷| 色欲五月天| 久久九九网| 92久操视频| 色色欧美色色| 全部老头和老太XXXXX| 丁香六月啪| 久久九九色| 99热日| 性日本激情| 欧美婷婷九月| 九九在线91| 国产又爽又猛又粗的视频A片| 久久九九网| 思思99热| 中文av网站| 国产高清精品色| 人妻系列久久久久久久久久久| 色播婷婷五月天| 色色色9 9 9| 97大香蕉五月天| 99这里只有精品| 91精品综合久久久久久五月丁香| 狠狠爱激情网| 婷婷内射视频在线| 九九热婷婷| 五月婷婷 激情五月| 丁香婷婷五月六月天| 天天色情站| 色色丁香婷婷| 色婷婷97| 99在线播放视频| 日熟女| 久热久re| 狠狠综合久久综合| 丁香六月欧美| 一级性感毛片| 午夜色丁香| 色婷婷亚洲综合天堂| www五月婷婷88导航| 久草热久草在线视频| www.99在线| 五月婷婷之综合激情| 超碰成人电影| 五月丁香六月婷婷久久| 午夜五月天| 国产99热| 天天操天天曰| 婷婷伊人网| 思思热99热| 五月天社区| 99re热在线视频| 九九综合伊人| 婷婷久久综合久| 在线色色| 99综合| 79精品视频在线观看,| 日韩成人AV在线| 亲子乱AV一区二区三区下载| 三级黄网站| 色婷婷久久综合| 99视频久久| 在线播放中文字幕| 久色| 亚洲日本韩国| 欧美十二区| 亚洲一级 片内射网站在线观看| 亚洲九九99精品视频在线播放| 无码激情AAAAA片-区区 | 九九久久这里只有精品XB| 青青草护士中出内射-欧美电影在线天堂新版| 亚洲舔观看| 婷婷伊人激情婷婷| 婷婷五月天激情AV影院| 亚洲热久久| 色婷婷的五月天| 国产这里只有精品| 色五月天堂| 99操碰| 第四色五月天| 精品无码久久久久久久久| 91精品久久久久久综合五月天| 国产精品18久久久| 九久久婷婷| 狠狠色婷婷丁香五月| 成人资源在线| 99操视频| 超碰renrenai| 99国产在线| 狠狠爱婷婷| 1024日韩| 怡红院AV亚洲一区二区三区H| 天天插操| 天天综合久久| 婷婷五月激情四月综合| 亚洲女婷婷五月基地综合久久久| 婷婷十月激情综合网| 丁香激情五月| 久久99精品视频| 欧美激情性做爰免费视频| 日韩中文字幕| 国产亚洲成AV人片在线| 亚欧州精品视频| 日本女天天爽| 五月丁香六月婷婷亚洲视频| 九月婷婷激情| 九月色婷婷| 狼人伊人天堂| 丁香五月六月综合激情| 婷婷丁香视频在线观看免费 | 天天精品视频在线观看视频| 免费看欧美成人A片无码| 亚洲综合在线视频| 在线播放人妻| 色五月激情综合| 六月丁香激情综合网| 五月天欧美 另类小说| 伊人五月成人| 97色婷婷成人综合在线观看| 国产精产国品一二三在观看| www:99热视频| 五月欧美色播| 乱色色色| 日韩AV大全| 亚洲色图欧美色图日本视频| 国产成人精品亚洲线观看| 99热午夜精品| 亚洲成人av在线| 婷久看人爽| 九九色综合九九色| 五月天com| 男女啪啪视频久 9| 97人人干人人操| 深爱五月天 开心网| 五月婷视频| 婷婷五月丁香六月| .肏屄视频一区二区| 色停停香蕉视频| 亚洲五月天狠狠| 色偷偷色婷婷| 韩日另类| 99色天堂| 亚洲天码视频www蛋播视频| 五月婷在线观看| 色婷婷性爱网| 婷婷久久五月| www.久久av.com| 五月婷婷激情色情网| www.夜夜操.com| 开心五月激情网| 欧美日韩中国| 天天日天天摸天天| WWW.婷婷五月天.COM| AA片在线观看视频在线播放| 在线中文字幕av| 亚洲色色精品| 天天综合网在线| 综久久久| 美女婷婷六月色| 婷婷五月综合体验看| 99久热| 色青五月天| 婷婷成人在线| 久久九九爽| 99九九这里有免费视频| 国产中文亚洲欧美日韩性交| 久久五月丁香| 成人在线观看精品| 色欲天天综合| Www.激情| 中文字幕在线免费看线人| BT综合在线视频观看| 激情综合六月| 色999亚洲人成色| 日韩综合久| 深爱五月亚洲| 天天日天天爽| 99热欧美精品| av在线色五月丁香婷区久| 另类小说五月天| 久久九九囯产| 综合五月天天天天天五月| 婷婷丁香在线| 欧美在线视频免费播放| 九九视频这里只有精彩| http:色情日本com| 91久久久久久久久| 六月婷婷色综合| 激情婷婷丁香| 99精品视频在线免费观看| 五月丁香啪啪综合| 久久精品日| 丁香六月高清视频| 久久精彩视频| 超碰在线人人| 99热精品在线| 精品操逼一区二区| 激情五月天婷婷视频| 深爱激情五月天| 丁香婷婷91在线观看视频| 99久久久国产精品免费蜜乳tv| www色色com| 99 re视频一区| 一级性爱视频| 欧美日综合| 大香蕉伊在| 五月丁香五月天现场视频| 日本狠狠干| 婷婷五月香蕉| 丝袜激情网| 狠狠色噜噜色狠狠狠综合色| 丁香婷婷色五月天| 色色色色欧美| 五月丁香六月婷婷不卡免费无码 | 99无码视频| 欧洲一区二区| 超碰爱爱爱| 91综合在线观看首页| 五月婷婷欧美激情| 色五月激情五月| 人人亚洲| 99精品无码| 99re热在线视频| 欧美日韩aaa| 日韩av高清| 九九机热| 影音先锋男人站,影音先锋男人色资源网,影音先锋AV最新资源站,影音先锋AV资源 | 伊人网欧美在线男人天堂五月丁香| 99久久久久久www| 9色免费网| www激情五月天| 日B日潘金莲BB| 99热日本| 91色呦哟| 五月天激情网页| 亚洲色无码A片一区二区麻豆| 婷婷丁香成人在线视频| 极品人妻XXXXOOOO| 五月情婷婷五月| 噜噜精品| 九九Y精品热播| 久久66成人网站| 亚洲中文字幕翔田千里| 色婷婷综合网站| 欧美 色婷婷| 天天草天天日| 91久久久久| 思思热99在线视频| 国产人人操| 五月天婷婷在线AN| 97人人看一| 中文久久婷婷| 99久久婷| 久久婷婷成人综合色怡春院| 久久欧洲久久| 五月天婷婷基地| 99热这里有精品6| 激情五月天色播| 五月丁香999| 欧美69久成人做爰视频| 欧美性爱5月天天天看| 日本美女97在线视频| 在热视频精品| 国产亚洲色婷婷久久99精品9j| 久久爱婷婷| 婷婷九月丁香天堂丁香天堂| 五月婷六月| 日本啪啪网| 色五月综合激情| 丁香五月香蕉在线| 国产成人精品一区二三区熟女在线| 色五月激情五月丁香五月婷婷啪啪综合 | 任你艹| ji'qing'luan'ren'lun| 99久久婷婷国产综合精品电影| 亚洲成人噜噜| 狠狠色丁香久久| 精品久久99| WWW.激情| 久久免费高| 久久婷婷综合五月天| 亚洲色夜| 狠狠干五月天| 97久久久免费福利网址| 色碰碰| 大香蕉av在线| 日本精品久久久久中文字幕| A网在线欧洲| 丁香香蕉婷婷| 五月丁香激情综合| 亚洲色五月天是什么| 婷婷丁香红五月91C| 五月丁香六月婷婷无码| 超碰人人超碰| 丁香五月av| 这里只有免费的精品| 综合 蜜月 婷婷| 欧美97色| 99热6这里只有精品6| 激情AV综合| 丁香五月天堂| 久久婷婷伊人| 人妻丰满精品一区二区A片| 涩五月色婷婷| 网色99| 色久综合| 五月天精品视频| 99九九精品视频| 99欧美| 婷婷综合色五月天| 伊人婷婷大香蕉| 精品一二三区久久AAA片| 99热只有精| 91丨九色丨熟女|老版| 成人片在线播放| 操一操插一插| 先锋资源91| 狠狠干狠狠色| 丁香六月婷婷综合欧美| 六月丁香啪啪| 99在线视频网址在线观看| 午夜丁香综合婷婷| 久久ER视频com| 免费看欧美成人A片无码| 激情网五夜婷婷| 黄色av网站在线免费播放| 8区视频在线| 五月六月婷婷激情网| 91操黄| 激情久久肏屄视频| 婷婷久久图片| 91久久久久久久久18| 五月婷婷六月开心| 国产伦理精品高清在线观看网站一区二区 | 99热亚洲只有色| 色哟哟精品| 色五月婷婷五月久久| 婷婷丁香五月激情密臀av| 91热爆在线| 色五月影视| 色五月婷色彩免播放器| 色yeye色综合| 婷婷五月成人| 99热这里只有精品99| 另类五月婷婷| 4399高清无码视频| 国产精品美女久久久久AV超清| 丁香五月天婷婷中文字幕| 99久久a线观| 91天堂网综合| 99精品偷自拍| 久久综合干| 久久久久人妻中文| 婷婷五月激情网站| 五月综合激情图片| 国产亚洲在线观看| 天堂网啪啪| 婷婷五月天手机版视频| 99日韩| 久久久久久久久久久久久久久久久精典| 激情五月天电影| 丁香涩涩爱| 欧日韩AV| 色琪琪一综合久久激情五月视频| 色色综合网www| 丁香五月香蕉| 五月婷婷综合久久| 精品视频99看在线视频| 久综合| 国产乱轮一区二区三区| 色情五月婷婷| 色婷婷亚洲| 天天做天天爱天天综合网| 美妞av| 成人电影在线免费试看| 久久成人亚洲欧美电影| 五月婷婷六月色| 情色婷婷五月天| 自拍偷窥99热| 婷婷综合偷拍| 五月天婷a在线| 亚洲精品成人| 日本久久高清| 色五月中文网| 丁香五月在线观看完整版| 深爱激情网五月| 亚洲操B视频| 五月精品99综合| 婷婷99狠狠| 久久精品视频99| 综合五月婷婷| 色天天综合成人网| 亚洲激情网站无码| 97综合在线| 操逼巨乳91| 婷婷五月丁香综合瑟瑟| 免费无码毛片一区二区A片| 激情www| www.婷婷,com| 99久在线精品99re8| 午夜电影网VA内射| 天天操天天操| 五月天婷婷久久日| 一起草av| 国产熟女一区二区三区五月婷| www五月天com| 青青久久91| 69超碰在线| 国产精品美女久久久久AV超清 | 久/久精品99看9| 毛片新网地| 亚洲精品中文字幕成人片| a级毛片一区二区免费视频| 成人亚洲精品久久久久| 99性爱| 人人爱人人草| 婷婷五月六月| 激情五月天色色| 欧美人人操| 亚洲成人超碰| h在线看免费版在线看| 婷婷五月天在线观看第二页| 99热这里只有精品2024| 色综合五月在线| 婷婷丁香六月影视| 久久aaa| 色色色精品无码区| 天天天操天天天爰| 99精品无码视频| 天天色综和网| 99色这里| 免费视频舔| eeuss人妻| 五月丁香日本一抹本| 色优久久| 亚洲国产精品成人免费一区久久久在线观看AAAA | 亚洲婷婷在线播放十月| 激情五月天黄色小说| 亚洲精品国产A久久久久久| 91超级碰碰碰| 91丨九色丨东北熟女| 五月丁香大香蕉| 九月色婷婷| 欧美经典片免费观看大全| 五月丁香综合| 无码激情AAAAA片-区区| 婷婷99狠狠躁天天久久久九九九| 国产高清av黄色看片| 少妇伦子伦精品无吗| XX色综合| 91综合视频丁香| 九九99热精品| 色99免费视频中文| 丁香五月开心亚洲| 小骚穴电影| 欧美综合五月丁香六月婷| A片一曲| 五月丁香亚洲校园欧美| 色墦五月丁香| 亚洲性爱干干| 99热这里精| 99热这里只有精品最新| 免费不卡狠操美女视频网 | 日本久久性| 大香蕉久| 久久五月天合网| 五月婷婷久久综合| 。久久久久久久久久久久久久人妻| 天天搞天天色综合| 99热色精品| 97色天堂| 可以看的AV| 五月激情综合网| 久久综合婷婷激情| 97操男人的天堂| 伊人网啪啪| 久9视频| 插插插丁香五月婷婷| 亚洲丁香五月深爱五月| 色色日韩无码| 免费不卡狠操美女视频网| 色色色色色色色色色色色色色97| 99re视频在线播放| 性爱久久| 成人丁香婷婷| 欧美啪啪五月天| 久久人人九九| 亚洲激情 久久| WWW.色婷婷.COM| 天天插天天射| 99爱在线精品视频免费观看| 亚洲无码色| 久月久在线视频| 99久久精品亚洲综合| 成人在线精品| 国产色香蕉精品五夜婷| 毛片新网地| 日本女va| A久网| XX久久| 99热综合| 91九色偷拍| 日韩黄色网络| 日本丁香五月婷婷| 激情综合网五月激情| 久久婷婷综合网| 久久97| 丁香八月综合激情| 99碰网站| 狠狠色丁婷婷日日,伊人激情综合网 | 日本婷婷色| 激情五月天啪啪| 狠狠干天天内射| 99热这里只有精品 搜| 欧美综合123区| 九九视频在线观看视频6| 欧美WW在线网| 操国产人妻| 玖玖婷婷五月天| 精品色色| 午夜福利8055| 久久亚洲婷婷综合色五月| 天天婷婷色六月| 亚洲1区| 岛国AAAV| 人人摸人人操人人爽| 久久婷五月综合色| 狠狠穞A片一區二區三區| 亚洲五月婷婷| 亚洲电影中文字幕| www.久久| 色小说五月婷婷| 九九热re99re6在线精品| 国产精产国品一二三在观看| 人人操人人看97干| 久鲁鲁色网| 九九免费精品| 五月天婷婷基地| 香港九九六区八区99| 91久久1118| 天天干天天日日| 久久激情天堂| 丁香五月五月婷婷欧美大香蕉| 99热网址| 婷婷五月天亚洲激情戏精品| 婷婷操超碰| 三级毛片视频| ww久久| 99色免费视频| 99在线观看精品视频| 丁香久久激情俄| 五月天色狠狠| 最新va在线播放| 五月综合激情网| www一起操| 精品无码人妻一区| 日韩色色视频| 成人做爰A片免费看网站找不到了 噼里啪啦在线观看免费完整版视频 | 超碰9在| 69婷婷丁香午夜| 九九九色综合| 久草婷妨| 久久五月天激情婷婷| 五月综合视频| 亚洲欧洲另类图片| 九九成人精品免费视频| 26uuu最新地址| 色天堂A| 婷婷综合玖玖五月| 亚洲婷婷月丁香五月| 超碰9| 丁香五月天婷婷大香蕉| 六月丁香婷婷网| 色中色综合| 婷婷五月丁香香蕉| 开心婷婷五月中文字幕组| 嫩草AV久久伊人妇女超级A| 久久精品视频99| 99re鈥哸鈥唙| 日本久久激情| 99'无码| 91丨九色丨国产打屁股| 人人插9| 99免费热视频| 日比网免费国产| 国产亚洲色婷婷99精品| 91碰| 九九色院| 成人五月天视频播放| 久久人妻少妇嫩草AV| 午夜色色色极品视频| 久9久9久9久9久9久9| 国产精品视频网| 狠狠色丁香久久婷婷综合五月| 国产日韩欧美| 入口五月婷婷六月香| 九九热中文| 综合伊人久久| 五月婷综合| 久久综合55| 思思热再线视频| 三男玩一女三A片| 精品国产va久久久久| 99人妻碰碰碰久久久久禁片| 六月婷婷香蕉| 五月亭亭网成人在线视频| H亚洲| 久噜久噜| caop视频| 激情丰满熟妇五月| 五月婷丁香| Xx色综合| 欧美色五月| 久久久人妻人伦| 丁香色色网| 天天搡日日搡aaaaⅩ| 午夜九九九九九九九九九九九九九| 97香蕉人人在线观看| WWW五月| 真实熟女-91九色| 久久久久久丁香五月| 成人综合视频网址| 我爱va亚洲va52| 日日操夜夜擼| 色久五月| 中文字幕 中文字幕明步| 无码G高清天| 欧美色综合天天久久综合精品| 亚洲视频色色| 六月婷婷综合| 国内裸舞二区| 午夜少妇在线观看视频| 色色色在线播放| 五月激情综合网| 婷婷大美在线| 国产午夜成人AV在线播放| 色婷婷五月天天天天天天天天天| 99国产精品久久久久久久久久久 | 久久91久久精品久久| 亚洲狠狠操| 色99久草在线| 天天综合影院| 99国产欧美视频| 亚洲激情五月天| 丁香五月123| 99男人的天堂| 亚洲精品影视| 婷婷五月天开心网| 天天综合激情| 中文成人在线| Va另类视频| 91色性感五月婷婷丁香| 丁香六月激情综合啪啪| 91N 一起草| 九九这里有精品| 92国产福利| 91久久久久久久久久久| 五月婷婷黄色| 俺去也婷婷| 天天射射夜| 日本色99网站| 五月叮香啪| 婷婷五月色影视先锋| 91九色国产| 激情五月黄色小说| 成人精品视频99在线观看免费 | 9这里只有精品| 国产综合A片| 色5月丁香婷婷| 久久女人天堂| www久久99| www.五月婷婷久久.com| 亚洲成人电影在线免费观看| 丁香五月六月综合欧美| 女操碰| 51国精产品自偷自偷综合| 婷婷激情五月天在线视频| 丁香情色五月| 五月天婷婷影院影院观看| 黄色一级影片| 欧美婷婷综合| 五月综合亚洲| 在线日韩av| 99视频九九热| 婷婷欧美偷拍综合| 蜜臀久久99精品久久久久久酒店| 精品A√| 伊人久久大香线蕉av一区| 婷婷五月激情小说| 精品色色网| 中文av在线观看| 噜噜噜狠狠色综| 色色色色色色色综合| 精品日本视频444| 五月婷婷视频| 亚洲激情在线| 久久久久亚洲AV综合| 99热在这里只有精品| 日日干天天射| 国产肥白大熟妇BBBB视频| 日韩爱操视频| 国产成人AV在线| 熟妇内谢69XXXXXA片| 激情丁香图片| 婷婷丁香成人| 香蕉人妻AV久久久久天天| 玖玖资源在线视频| 97人妻碰碰中文无码久热丝袜| 久久久国产精品黄毛片| 五月激情六月综合| 婷婷五月天AV| 三级毛片视频| 色香久久| 99r这里只有精品哦| 在线一起草av| 激情综合久久| 九九色99| 婷婷五月色综合| 国外亚洲成AV人片在线观看| 国产精品色婷婷AV综合色色| www久久99| 五月丁香婷婷五月色| 97se视频在线| 婷婷免费成人视频| 婷婷伊人綜合| 这里只有精品视频| 九九免费视频| 99er这里只有精品视频| 国产亚洲99久久精品熟| 91九色国产| 久久这里99| 91丨九色丨熟女|新版| 99ER热精品视频| 日本九九视频| 天天色,天天操,天天射| 夜夜爱影院| 少妇被躁爽到高潮无码文| 激情网婷婷五月天| 丁香婷婷免费| 任你日热视频| 专区无日本视频高清8| 亚洲激情另类| 五月丁香婷色| 成人中文字幕在线| 亚洲愉拍99热成人精品| 96精品久久久久久久久| 深爱五月天天| 99九色视频在线观看| 97五月婷| 久久三级视频| 激情小说视频图片网| 丁香五月天婷婷在线视频| 日韩成人无码片| 大香蕉人妻| 最新va在线播放| 综合狠狠干| 色5月婷婷色| 天天爱天天天射AV| 99热9| 99re8这里只有精品99re8热视频| 美女va| 色玖玖综合| 激婷网| 99热精品中文字幕| 九九婷婷网五月天| 狠狠色丁香婷婷基地| 97影院一级片| 97婷婷五月丁香| 丁香五月电影| 激情图片婷婷| 日本成人噜噜| 色播五月婷婷综合| 国产精品视频| 五月婷无码| 91丨九色丨东北熟女| 98色花堂98t.R| 五月六月激情| 亚洲激情无码久久| 亚洲乱码在线观看| 色婷婷91激情小说| 超碰在线91| 婷婷伊人综合中文字幕| 亚洲aV写真天天综合网久久| 亚洲色色图片| 中美日韩成人在线| 九九综合五月欧美| 专区无日本视频高清8| 久久九九热视频| EEUSS鲁片一区二区三区| 伊人久久五月天| 开心丁五月| 色五月婷婷综合| 色婷婷玖玖影院| 激情人妻蜜夜系列区| 五月丁香影院| 五月婷啪| 日本婷色| 99热99热99热99热| 97涩涩丁香五月天| 婷婷色激情网| 狠狠五月激情丁香六月| 久久亭亭电影| 中日韩美欧成人一区二区精品在线| 综合五月婷婷| 色99在线观看| 五月丁香六月婷婷姐| 亚洲激情网站| 天天射综合网天天插| 丁香女人五月天| 五月婷婷性爱| 成人版视频在线观看| 久久久精品99| 秋霞九九无码| 国产婷婷色综合AV蜜臀AV | 六月婷婷五月丁香| 色色五月丁香| 玖玖99免费视频| 99热只有这里有精品| 丁香婷婷中文字幕| 密乳视频| 婷婷久久国产视频| 激情五月激情综合俺也去婷婷小说| 六月婷婷AV| 九九热精品视频在线观看| 久热久| 91婷婷丁香五月| 色综合久久五月天| 欧美日韩AAAA| 婷婷五月天天aV| 夜夜做天天爽| 久久6这里只有精品| 色情性爱视频网址| 丁香九月激情| 色播婷婷大香蕉| 人人九色| 成人在线综合| 欧美色色色色色色| 五月丿香啪啪| 久99久视频精选| 草久私拍| 亚洲9久久精品| 国产亚洲99久久精品熟| 伊人久久丁香狠狠婷婷综合香蕉 | 四虎国产精品永久在线国在线| 九热视频| 99色视频| 色五月婷婷五月天| 九九在线精点品| 婷婷亚洲综合| 久久婷婷五月综合| 99热这里只有精品在线| 久久激情五月婷婷| 狠狠做婷婷| 九九这里有精品| 亚洲激情综合| 99热国产| 1000部毛片A片免费观看| 五月丁香网站| 少妇人妻人伦A片| 极品人妻VIDEOSSS人妻| 欧美搡BBBBB摔BBBBB| 国产又黄又爽又色的免费| 无码人妻精品一区二区蜜桃色欲| 欧洲色区| 亚洲第一成人无码A片| 色日本颜射| 丁香五月开心七月| 伊人喵咪a V| 9999热在线| 丁香花五月天婷婷成人社区| 99久久五月婷婷| 牛牛色av| 97操碰在线视频| 国产精品视频免费看| 久久综合五月天| 亚洲思思热久| 色婷婷内射| 五月婷婷和六月| 欧美色小说婷婷| 久久婷婷五月综合啪| 99热6色| 99视频只有精品| 婷婷五月电影| 99热超碰在线| 综合网色| 国产精品久久久爽爽爽麻豆色哟哟 | 色九九综合| 日韩人妻无码专区| 久久99国产综合精品免费| 色五月亚洲| 91N 一起草| 超碰无码318604| 五月色婷| 久久国产性爱A V| 东北婷婷五月天| 天天干com| 天天插天天插| 120分钟婬片免费看| 99热超碰在线| 玖玖色综合色| 日本99婷婷| 久久综合无| 亚洲色色色色色| 丁香婷婷偷拍| 久久九九在线视频| 99热色精品| 91狠狠综合久久久| 日日干日日| 91碰免费视频| 亚洲婷婷激情综合激情999精品| 婷婷黄色| 七七九九色色| 天天射夜夜骑| www.夜夜操| 色欲色香综合网| 怡红院AV亚洲一区二区三区H | www.色擼擼.com| jiZZdr| 色婷婷久久| 人妻丰满精品一区二区A片| 婷婷天堂综合网| 欧美日比视频| 5月色婷婷| 婷婷丁香综合成人| 99啪啪网| 日韩aaaaa| www.91五月| 婷婷色中文| 色综合爽| 这里只有精彩亚洲视频推荐| 色爱99| 丁香六月综合激情| 五月伊人91| A片试看120分钟做受视频红杏| 日韩99无码| 久草视频一,二三四| 欧美色色色色色色色色色色影视| 五月六月激情| AV在线免费播放| 亚洲亚洲人成综合网络| 最新AV在线观看| 六月亚洲婷婷6月中文字幕| 99热这里只有精品在线播放|