如何進(jìn)行hue安裝以及hivehdfsoozie集成

如何進(jìn)行hue安裝以及hive hdfs oozie集成，相信很多沒有經(jīng)驗(yàn)的人對(duì)此束手無策，為此本文總結(jié)了問題出現(xiàn)的原因和解決方法，通過這篇文章希望你能解決這個(gè)問題。

創(chuàng)新互聯(lián)建站專注于黃埔網(wǎng)站建設(shè)服務(wù)及定制，我們擁有豐富的企業(yè)做網(wǎng)站經(jīng)驗(yàn)。 熱誠為您提供黃埔營銷型網(wǎng)站建設(shè)，黃埔網(wǎng)站制作、黃埔網(wǎng)頁設(shè)計(jì)、黃埔網(wǎng)站官網(wǎng)定制、微信小程序服務(wù)，打造黃埔網(wǎng)絡(luò)公司原創(chuàng)品牌,更為您提供黃埔網(wǎng)站排名全網(wǎng)營銷落地服務(wù)。

[toc]

環(huán)境需求

• jdk

• maven

• git

• 第三方依賴 yum install -y gcc-c++ libxml2-devel.x86_64 libxslt-devel.x86_64 python-devel openldap-devel asciidoc cyrus-sasl-gssapi openssl-devel MySQL-devel sqlite-devel gmp-devel libffi-devel npm 還有缺失什么可自行安裝

創(chuàng)建hue用戶和用戶組

groupadd hue

useradd -g hue hue

切換用戶并進(jìn)入hue根目錄

su hue

cd ~

從git上拉取hue源碼

git clone https://github.com/cloudera/hue.git

進(jìn)入hue-master目錄并編譯

cd hue-master

make apps 需要等待較長時(shí)間，若中間還缺少依賴可自行安裝

修改hue配置文件

vi /home/hue/hue-master/desktop/conf/pseudo-distributed.ini

時(shí)區(qū)

[desktop]

time_zone=Asia/Shanghai

用戶角色

[desktop]

server_user=hue

server_group=hue

default_user=hue

hdfs配置

[hadoop]

[[hdfs_clusters]]

fs_defaultfs=hdfs://集群名稱

webhdfs_url=http://hdfsMaster1:14000/webhdfs/v1

yarn配置

[hadoop]

[[yarn_clusters]]

[[[default]]]

resourcemanager_host=resourcemanager

resourcemanager_api_url=http://resourcemanager:8088

submit_to=True

proxy_api_url=http://172.19.131.104:8088

history_server_api_url=http://172.19.131.104:19888

database配置

(hue數(shù)據(jù)庫先創(chuàng)建好并授予權(quán)限給hue用戶) [database]

engine=mysql

host=mysqlhost

port=3306

user=hue

password=123456

name=hue

oozie配置(已默認(rèn)可不配)

[oozie]

remote_data_dir=/user/hue/oozie/workspaces

enable_cron_scheduling=true

enable_document_action=true

liboozie配置

[liboozie]

oozie_url=http://master1:11000/oozie

beeswax配置（hive）

[beeswax]

hive_server_host=172.19.131.107

hive_server_port=10000

數(shù)據(jù)庫初始化

/home/hue/hue-master/build/env/bin/hue syncdb

/home/hue/hue-master/build/env/bin/hue migrate

運(yùn)行

/home/hue/hue-master/build/env/bin/supervisor

問題解決

若hdfs路徑無法訪問

在hadoop的core-site配置文件下配置 hadoop.proxyuser.hue.groups=*

hadoop.proxyuser.hue.hosts=*

若hive數(shù)據(jù)庫無法訪問

可以在權(quán)限管理那里（本人用的是ranger）進(jìn)行hive的數(shù)據(jù)庫授權(quán)

若oozie提交任務(wù)執(zhí)行失敗

可查看MapReduce的日志，可能是當(dāng)前用戶無法提交任務(wù)配置信息到y(tǒng)arn下的目錄

看完上述內(nèi)容，你們掌握如何進(jìn)行hue安裝以及hive hdfs oozie集成的方法了嗎？如果還想學(xué)到更多技能或想了解更多相關(guān)內(nèi)容，歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道，感謝各位的閱讀！

網(wǎng)站題目：如何進(jìn)行hue安裝以及hivehdfsoozie集成
轉(zhuǎn)載注明：http://muchs.cn/article18/jcpodp.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供網(wǎng)站制作、響應(yīng)式網(wǎng)站、定制網(wǎng)站、電子商務(wù)、軟件開發(fā)、域名注冊(cè)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)