中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

hive中怎么添加永久自定義函數

發布時間:2021-07-14 14:07:36 來源:億速云 閱讀:152 作者:Leah 欄目:云計算

這期內容當中小編將會給大家帶來有關hive中怎么添加永久自定義函數,文章內容豐富且以專業的角度為大家分析和敘述,閱讀完這篇文章希望大家可以有所收獲。

永久自定義hive函數

1:做這件事的原因:

有一些函數是比較基礎的,公用的,每次都要create temporary function麻煩了,這樣的基礎函數需要直接集成到hive中去,避免每次都要創建。

2:步驟

本人擁有一個賬戶zb_test

自定義的函數已經準備好

hive中怎么添加永久自定義函數
 

登陸linux賬戶,修改該賬戶的home目錄下的.bashrc文件:

把CLASSPATH改成如下:

export CLASSPATH=$JAVA_HOME/lib:$JAVA_HOME/jre/lib:$SQOOP_HOME/lib:/opt/boh-2.0.0/hadoop/share/hadoop/

tools/lib/*:/opt/boh-2.0.0/hadoop/share/hadoop/common/lib/*:/opt/boh-2.0.0/hadoop/share/hadoop/common/*:/opt/boh-2.0.0/hive/li

b/*:$CLASSPATH(目的是自己編譯的時候要用到)

獲取hive-0.12.0-cdh6.0.0-src.tar.gz的源代碼

解壓,找到hive-exec-0.12.0-cdh6.0.0.jar包(hive函數跟這個有關),再解壓。

jar -xvf XXX.jar

編譯自定義函數的java文件,比如放在utf下

Javac ./utf/*

產生.class文件,放到abc目錄下。

把.class文件打成jar包

Jar -cvf ./hello.jar ./abc/*

產生一個jar包,叫hello.jar

把jar包放到/data/zb_test/目錄下

然后修改/data/zb_test/.bashrc文件的:

export CLASSPATH=/data/zb_test/hello.jar:$JAVA_HOME/lib:$JAVA_HOME/jre/lib:$SQOOP_HOME/lib:/opt/boh-2.0.0/hadoop/share/hadoop/tools/lib/*:/opt/boh-2.0.0/hadoop/share/hadoop/common/lib/*:/opt/boh-2.0.0/hadoop/share/hadoop/common/*:/opt/boh-2.0.0/hive/lib/*:$CLASSPATH(為了測試用的)

將函數test注冊到hive的函數列表中
修改$HIVE_HOME/src/ql/src/java/org/apache/hadoop/hive/ql/exec/FunctionRegistry.java文件
import org.apache.hadoop.hive.ql.udf.UDFTest;

registerUDF(“test”, UDFTest.class,false);

重要步驟:

1:把剛剛產生的所有的.class文件都放到修改$HIVE_HOME/src/ql/src/java/org/apache/hadoop/hive/ql/udf下面

2:然后編譯FunctionRegistry.java文件:編譯通過以后,我們找到hive-exec-0.12.0-cdh6.0.0.jar里面的$HIVE_HOME/src/ql/src/java/org/apache/hadoop/hive/ql/exec/FunctionRegistry.class文件,我們把替換了。

這些路徑都是在hive-exec-0.12.0-cdh6.0.0.jar解壓后的org的路徑下的。

其實把這兩個步驟做了以后,重新把剛剛解壓的hive-exec-0.12.0-cdh6.0.0.jar打成jar包,替換了hive里的,就可以了。

上述就是小編為大家分享的hive中怎么添加永久自定義函數了,如果剛好有類似的疑惑,不妨參照上述分析進行理解。如果想知道更多相關知識,歡迎關注億速云行業資訊頻道。

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

济源市| 贵定县| 冀州市| 保山市| 常山县| 贵州省| 林西县| 舒城县| 鄱阳县| 南充市| 潜江市| 宁乡县| 黔江区| 赞皇县| 富宁县| 綦江县| 大田县| 郯城县| 海伦市| 荔波县| 东平县| 汾西县| 新竹市| 麻城市| 阿瓦提县| 龙岩市| 延边| 鄄城县| 蒲城县| 丰镇市| 平遥县| 池州市| 嘉鱼县| 舒城县| 通榆县| 台北县| 慈溪市| 颍上县| 新郑市| 拜泉县| 修水县|