中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

解密數據分區

發布時間:2020-08-03 11:49:41 來源:網絡 閱讀:491 作者:caosheng03 欄目:大數據


   數據分區分為兩種,動態分區和靜態分區,那么兩種分區是怎樣創建的呢?它們各自怎么來使用呢?

一、動態分區

1、從已有的數據動態創建新的分區

解密數據分區

2、分區基于最后一個列值自動創建,如果分區不存在,它將被創建;

如果分區存在,將被覆蓋。

二、靜態分區

1、 靜態分區示例:按天分區呼叫日志

Loudacre的客戶服務電話系統生成了詳細的呼叫日志,分析員使用這些數據來匯總前一天的呼叫量,比如:

解密數據分區

日志按天生成,比如:

解密數據分區

在上面的的示例中,數據基于列值自動分區。現在我們使用靜態分區,

因為數據文件不包含分區數據,分區表按照同樣的方式來定義:

解密數據分區

2、加載數據到靜態分區

使用靜態分區,你可以根據需要創建新分區,比如:為每天的呼叫日志數據添加一個分區:

解密數據分區

這個命令將添加分區到表的元數據,并創建子目錄
/user/hive/warehouse/call_logs/call_date=2014-10-02

然后加載一天的數據到正確的分區

解密數據分區

這個命令移動HDFS文件call-20141002.log到分區子目錄

3、覆蓋分區的所有數據

解密數據分區

以上就是關于動態分區和靜態分區的介紹,那么在ImpalaHive中,數據是怎樣分區的呢?后續將繼續分享。不過技術都是有門檻的,大家在實際生活中要多學習和交流,不斷汲取別人好的經驗知識,改善自己的知識架構。而且當今大數據還在發展中,各方面不算是很成熟,更需要不斷去追求,才可以不落伍,這里推薦一個微信公眾號“大數據cn,還不錯,有時間可以去關注一下。


向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

郑州市| 梓潼县| 含山县| 漳浦县| 华池县| 广平县| 阳泉市| 贵港市| 上饶县| 通江县| 孝义市| 商南县| 游戏| 昭平县| 栾城县| 岑巩县| 湖州市| 新源县| 海门市| 泸州市| 屯门区| 崇文区| 寻乌县| 呼和浩特市| 榆树市| 长海县| 封丘县| 青州市| 依兰县| 东港市| 新晃| 兖州市| 古蔺县| 天水市| 海南省| 朝阳县| 阿图什市| 阳江市| 台安县| 江达县| 山阴县|