欧美三区_成人在线免费观看视频_欧美极品少妇xxxxⅹ免费视频_a级毛片免费播放_鲁一鲁中文字幕久久_亚洲一级特黄

Hive中抽取連續多天登錄用戶

系統 2849 0

昨天群上有人發個阿里的面試題,題目描述大概如下:

數據源:用戶登錄表,只有倆個字段,uid和dt

試用HQL抽取出連續登錄了K天的用戶uid

第一個想法就是直接用一個UDF解決,按uid分組,把dt收集起來然后在UDF里面判斷是否滿足條件

      
        SELECT
      
      
        
    uid,
    isExist(collect_set(dt), k) flag

      
      
        FROM
      
      
        
    table_name

      
      
        GROUP
      
      
        BY
      
      
        
    uid

      
      
        HAVING
      
      
        
    flag 
      
      
        =
      
      
        1
      
      ;
    

其中isExist的邏輯是判斷collect_set中是否存在k個連續的值

這種方法簡單明了,但是需要額外的寫一個UDF,對于不懂JAVA的來說確實比較麻煩

?

今天群里有個神人給出了一種新的解決思路,十分完美的解決了,下面是具體代碼

      
        SELECT
      
      
         
    uid, 
      
      
        MAX
      
      (dt) 
      
        -
      
      
        MIN
      
      
        (dt) diff, COLLECT_set (dt) 

      
      
        FROM
      
      
        
    (
      
      
        SELECT
      
      
         
        a.uid, a.dt, dt 
      
      
        -
      
      
         rn num 
    
      
      
        FROM
      
      
        
        (
      
      
        SELECT
      
      
         
            uid, dt, row_number () 
      
      
        over
      
       (PARTITION 
      
        BY
      
      
         uid 
        
      
      
        ORDER
      
      
        BY
      
      
         dt) rn 
        
      
      
        FROM
      
      
        
            table_name
        
      
      
        GROUP
      
      
        BY
      
      
         uid, dt) a) a 

      
      
        GROUP
      
      
        BY
      
       uid, num 
    

該思路首先利用窗口函數以uid分組然后按照dt排序給出每個dt在排序中的位置,然后用求出dt與位置的差(記為num)

最后按照uid和num做一個聚合,容易發現同一個num組內的dt是連續的值

然后直接計數(count(*))就可以得出結果了

上面的代碼只是為了更加方便看到輸出的結果正確性,輸出結果如下:

      
        UID        DIFF    DT_ARRAY

      
      
        1043736
      
      
        3.0
      
        20140815
      
      
        20140814
      
      
        20140813
      
      
        20140812
      
      
      
        1043736
      
      
        0.0
      
        20140818
      
      
      
        1043736
      
      
        1.0
      
        20140821
      
      
        20140820
      
      
      
        1043844
      
      
        0.0
      
        20140814
      
      
      
        1044090
      
      
        1.0
      
        20140812
      
      
        20140811
      
      
      
        1044090
      
      
        2.0
      
        20140816
      
      
        20140815
      
      
        20140817
      
      
      
        1044090
      
      
        0.0
      
        20140821
      
      
      
        1044264
      
      
        0.0
      
        20140810
      
      
      
        1044264
      
      
        3.0
      
        20140815
      
      
        20140814
      
      
        20140813
      
      
        20140812
      
      
      
        1044264
      
      
        5.0
      
        20140821
      
      
        20140820
      
      
        20140822
      
      
        20140819
      
      
        20140817
      
      
        20140818
      

結果中uid =?1043736 的一共登錄了7天,其中可以拆分成三個連續的登錄模塊,分別是連續登錄1天、2天和4天

  

Hive中抽取連續多天登錄用戶


更多文章、技術交流、商務合作、聯系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!!!

發表我的評論
最新評論 總共0條評論
主站蜘蛛池模板: 久草在线在线观看 | 精品一区二区久久久久久久网站 | 欧美成人网在线综合视频 | 欧美精品一区二区在线电影 | 天天看天天摸色天天综合网 | 青青青国产观看免费视频 | 国产亚洲欧美一区 | 成人区精品一区二区婷婷 | 亚洲成人91 | 日韩二区 | 一级一片免费看 | 高清一区二区在线观看 | 九九操视频 | 色婷婷久久久亚洲一区二区三区 | 成年人色网站 | av国产精品 | 中文字幕视频在线 | 成人瑟瑟 | 色视频在线观看 | 天天操天天操天天操香蕉 | 成人爽a毛片在线视频网站 婷婷色在线观看 | 日本精a在线观看 | 欧洲一级毛片 | 精品久久洲久久久久护士 | 91精品国产色综合久久 | 成人福利在线视频免费观看 | 欧美激情精品久久久久久久 | 欧美一级片在线视频 | 黄页网站免费高清在线观看 | 一区二区三区精品视频 | 日本女人下面毛茸茸 | 日本道二区视频 | 杀破狼在线观看 | 久久视频这里只有精品35 | 久久中文字幕一区二区三区 | 日韩精品一区二区三区第95 | 一本一道久久a久久精品蜜桃 | 日韩久草| 亚洲人成人 | 国产一区在线免费观看 | 国产不卡视频在线 |