Hider1214

摘要： GitHub 上開源的必應壁紙 API 作為數據來源。 -- 1.開源地址 https://github.com/zenghongtu/bing-wallpaper -- 2.請求接口 https://bingw.jasonzeng.dev/ 一、接口使用說明 1.API 接口：https://bi 閱讀全文

摘要： nvl 函數和 coalesce 函數都是用來處理空值的函數，但略有不同。 注意：非 NULL 值為 NULL， 如果是''，' '， 'null'， 'NULL'等視為字符串，返回參數本身。 一、nvl函數 nvl 只能處理2個參數，如果第1個不是 null， 則返回第1個參數，否則返回第2個參數 閱讀全文

摘要： 一、最大值 當在 Hive 中需要對多列數據求最大值時，可以使用函數 greatest(a, b, c, d) 實現。 select greatest(a, b, c) from ( select 10 as a, 20 as b, 30 as c ) dd; -- 結果：30 舉個具體栗子：計算用 閱讀全文

摘要： 苦命的打工人 `Hider` 每天上班都需要打卡，現在需要統計近一段時間內的平均打卡時間。 ## 一、想法 - 第一想法：利用 `mean` 函數直接求平均，但實際得到的是所有時間的均值，并非時間的均值。 - 第二想法：將日期與時間進行拆分，只對時間求平均。 - 第三想法：求每一個時間與0點之間的時 閱讀全文

摘要： 參考鏈接：值得收藏！2023 年，你應該知道的所有機器學習算法~ 閱讀全文

摘要： 數據從業者的使命是用數據驅動業務，但數據本身無法直接驅動業務，因此必然要經歷從數據到信息、從信息到知識，再從知識到智慧的過程。 數據從業者的成長要起于數據，終于業務，讓數據產生真正的智慧。 參考鏈接:數據從業者成長的五個階段 閱讀全文

摘要： Pandas.Series 對象和 DataFrame 的列數據提供了 cat、dt、str 三種屬性接口（accessors），分別對應分類數據、日期時間數據和字符串數據。 通過這幾個接口可以快速實現特定的功能，十分便捷。 今天先針對 dt 接口對時間模塊進行學習。 一、構建測試數據集 # 創建測 閱讀全文

摘要： 日常從臨時表復制數據到正式表可通過： create table table_name_new as select * from table_name; 但這樣子原表的信息，分區等無法直接復制，需要通過額外的方式進行構建表、插入數據。 具體參考如下。 一、全量復制 drop table table_n 閱讀全文

摘要： 一、查看分區 查看分區 show partitions table_name; /* update_date=20230305 update_date=20230312 update_date=20230319 */ 查看分區表描述 desc table_name partition(update_ 閱讀全文

摘要： MySQL 中有 group_concat 進行分組拼接字符串的功能，但 hive 中沒有這個函數，需要進行折中處理。 具體可參考以前文章：Hive學習筆記：列轉行之collect_list/collect_set/concat_ws 功能更新 對于拼接的字段進行排序，例如： 有多個渠道來源的情況下 閱讀全文