中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

如何進行hue安裝以及hive hdfs oozie集成

發布時間:2021-10-19 17:28:51 來源:億速云 閱讀:156 作者:柒染 欄目:大數據

如何進行hue安裝以及hive hdfs oozie集成,相信很多沒有經驗的人對此束手無策,為此本文總結了問題出現的原因和解決方法,通過這篇文章希望你能解決這個問題。

[toc]

環境需求

  • jdk


  • maven


  • git


  • 第三方依賴 yum install -y gcc-c++ libxml2-devel.x86_64 libxslt-devel.x86_64 python-devel openldap-devel asciidoc cyrus-sasl-gssapi openssl-devel mysql-devel sqlite-devel gmp-devel libffi-devel npm 還有缺失什么可自行安裝


創建hue用戶和用戶組

groupadd hue

useradd -g hue hue

切換用戶并進入hue根目錄

su hue

cd ~

從git上拉取hue源碼

git clone https://github.com/cloudera/hue.git

進入hue-master目錄并編譯

cd hue-master

make apps 需要等待較長時間,若中間還缺少依賴可自行安裝

修改hue配置文件

vi /home/hue/hue-master/desktop/conf/pseudo-distributed.ini

時區

[desktop]

time_zone=Asia/Shanghai

用戶角色

[desktop]

server_user=hue

server_group=hue

default_user=hue

hdfs配置

[hadoop]

[[hdfs_clusters]]

fs_defaultfs=hdfs://集群名稱

webhdfs_url=http://hdfsMaster1:14000/webhdfs/v1

yarn配置

[hadoop]

[[yarn_clusters]]

[[[default]]]

resourcemanager_host=resourcemanager

resourcemanager_api_url=http://resourcemanager:8088

submit_to=True

proxy_api_url=http://172.19.131.104:8088

history_server_api_url=http://172.19.131.104:19888

database配置

(hue數據庫先創建好并授予權限給hue用戶) [database]

engine=mysql

host=mysqlhost

port=3306

user=hue

password=123456

name=hue

oozie配置(已默認可不配)

[oozie]

remote_data_dir=/user/hue/oozie/workspaces

enable_cron_scheduling=true

enable_document_action=true

liboozie配置

[liboozie]

oozie_url=http://master1:11000/oozie

beeswax配置(hive)

[beeswax]

hive_server_host=172.19.131.107

hive_server_port=10000

數據庫初始化

/home/hue/hue-master/build/env/bin/hue syncdb

/home/hue/hue-master/build/env/bin/hue migrate

運行

/home/hue/hue-master/build/env/bin/supervisor

問題解決

若hdfs路徑無法訪問

在hadoop的core-site配置文件下配置 hadoop.proxyuser.hue.groups=*

hadoop.proxyuser.hue.hosts=*

若hive數據庫無法訪問

可以在權限管理那里(本人用的是ranger)進行hive的數據庫授權

若oozie提交任務執行失敗

可查看MapReduce的日志,可能是當前用戶無法提交任務配置信息到yarn下的目錄

看完上述內容,你們掌握如何進行hue安裝以及hive hdfs oozie集成的方法了嗎?如果還想學到更多技能或想了解更多相關內容,歡迎關注億速云行業資訊頻道,感謝各位的閱讀!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

hue
AI

武宁县| 华宁县| 从江县| 渑池县| 汉沽区| 卓资县| 丰县| 石景山区| 绥棱县| 昌平区| 垫江县| 湘潭县| 安吉县| 太湖县| 奈曼旗| 仲巴县| 永春县| 尼勒克县| 阳信县| 石林| 绵阳市| 登封市| 青铜峡市| 三门县| 正定县| 通许县| 武功县| 龙海市| 博白县| 武山县| 景泰县| 诸暨市| 呼玛县| 西丰县| 云安县| 蓝山县| 平原县| 包头市| 商都县| 资阳市| 唐河县|