在Hive下配置mysql元數(shù)據(jù)

本篇內(nèi)容介紹了“在Hive下配置MySQL元數(shù)據(jù)”的有關(guān)知識(shí),在實(shí)際案例的操作過程中,不少人都會(huì)遇到這樣的困境,接下來就讓小編帶領(lǐng)大家學(xué)習(xí)一下如何處理這些情況吧!希望大家仔細(xì)閱讀,能夠?qū)W有所成!

“專業(yè)、務(wù)實(shí)、高效、創(chuàng)新、把客戶的事當(dāng)成自己的事”是我們每一個(gè)人一直以來堅(jiān)持追求的企業(yè)文化。 創(chuàng)新互聯(lián)是您可以信賴的網(wǎng)站建設(shè)服務(wù)商、專業(yè)的互聯(lián)網(wǎng)服務(wù)提供商! 專注于網(wǎng)站設(shè)計(jì)、網(wǎng)站建設(shè)、軟件開發(fā)、設(shè)計(jì)服務(wù)業(yè)務(wù)。我們始終堅(jiān)持以客戶需求為導(dǎo)向,結(jié)合用戶體驗(yàn)與視覺傳達(dá),提供有針對(duì)性的項(xiàng)目解決方案,提供專業(yè)性的建議,創(chuàng)新互聯(lián)建站將不斷地超越自我,追逐市場,引領(lǐng)市場!

1、首先在ubuntu14.04上安裝mysql,首先嘗試的下載mysql的tar包安裝,未成功,然后使用在線安裝sudo apt-get install mysql-server mysql-client,安裝成功。

2、登錄數(shù)據(jù)庫

    a) 創(chuàng)建hive用戶,create user hive identified by ‘hive’

    b) 授予所有權(quán)限grant all privileges on *.* to ‘hive’ with grant option;

    c) 創(chuàng)建hive數(shù)據(jù)庫,create database ‘hive’

3、下載mysql連接java的驅(qū)動(dòng),復(fù)制到/opt/hive-1.1.1/lib下

4、修改/opt/hive-1.1.1/conf中的hive-default.xml為hive-site.xml

    a) <property>

             <name>javax.jdo.option.ConnectionURL</name>

            <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value>

            <description>JDBC connect string for a JDBC metastore</description>

        </property>

    b) <property>

            <name>javax.jdo.option.ConnectionDriverName</name>

            <value>com.mysql.jdbc.Driver</value>

            <description>Driver class name for a JDBC metastore</description>

        </property>

    c) <property>

            <name>javax.jdo.option.ConnectionUserName</name>

            <value>hive</value>

            <description>username to use against metastore database</description>

        </property>

    d) <property>

            <name>javax.jdo.option.ConnectionPassword</name>

            <value>hive</value>

            <description>password to use against metastore database</description>

        </property>

5、啟動(dòng)hadoop,然后啟動(dòng)hive

    a) 啟動(dòng)出現(xiàn)如下錯(cuò)誤

         在Hive下配置mysql元數(shù)據(jù)

        解決方法:

                在Hive下配置mysql元數(shù)據(jù)

    b) 報(bào)錯(cuò)

         在Hive下配置mysql元數(shù)據(jù)

        解決方法

            將a中的相對(duì)路徑修改為絕對(duì)路徑。

    6、配置hive環(huán)境變量時(shí),修改了linux的etc目錄權(quán)限為777后,重啟linux機(jī)器后,

    發(fā)現(xiàn)su、sudo等命令無法使用,hadoop啟動(dòng)失敗。

    7、重新克隆備份虛擬機(jī),遇到一些問題,如:無密碼登錄失效,轉(zhuǎn)到root用戶失敗

        a) Ubuntu 下 su:authentication failure的解決辦法

            i. $ sudo passwd root  

            ii. Enter new UNIX password:   

            iii. Retype new UNIX password:   

            iv. passwd: password updated successfully

        b) 重設(shè)無密碼登錄。

            刪除/home/hadoop/.ssh后,重新使用ssh-keygen -t rsa -P “” ,只生成兩個(gè)文件。

            重新創(chuàng)建authorized_keys文件,touch authorized_keys;將公鑰復(fù)制進(jìn)去

            cat id_rsa.pub >> authorized_keys,便可無密碼登錄

        c) 從一臺(tái)服務(wù)器復(fù)制到另一臺(tái)服務(wù)器命令:

            scp /home/hadoop/.ssh/id_rsa hadoop@192.168.93.37:/home/hadoop/.ssh/

        d) 創(chuàng)建[外部表]發(fā)生錯(cuò)誤,提示信息如下圖:

                在Hive下配置mysql元數(shù)據(jù)

            查詢資料得,create table ... stored by textfile 在hive-1.1.1存在Bug,在1.0.0,

      1.0.1,1.1.0,1.2.0沒有問題。Bug地址:http://osdir.com/ml/general/2015-05/msg35094.html

        e) 創(chuàng)建[分區(qū)表]報(bào)錯(cuò),提示如下:

            在Hive下配置mysql元數(shù)據(jù)

        語法錯(cuò)誤:row format delimited 后面不應(yīng)該加'\t'

“在Hive下配置mysql元數(shù)據(jù)”的內(nèi)容就介紹到這里了,感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識(shí)可以關(guān)注創(chuàng)新互聯(lián)網(wǎng)站,小編將為大家輸出更多高質(zhì)量的實(shí)用文章!

本文題目:在Hive下配置mysql元數(shù)據(jù)
本文地址:http://muchs.cn/article12/jcppdc.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供全網(wǎng)營銷推廣網(wǎng)站策劃、云服務(wù)器、靜態(tài)網(wǎng)站、關(guān)鍵詞優(yōu)化、企業(yè)網(wǎng)站制作

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)

成都網(wǎng)站建設(shè)公司