Sqoop如何使用

這篇文章給大家分享的是有關(guān)Sqoop如何使用的內(nèi)容。小編覺得挺實(shí)用的,因此分享給大家做個(gè)參考,一起跟隨小編過來看看吧。

創(chuàng)新互聯(lián)專注于鎮(zhèn)海網(wǎng)站建設(shè)服務(wù)及定制,我們擁有豐富的企業(yè)做網(wǎng)站經(jīng)驗(yàn)。 熱誠為您提供鎮(zhèn)海營銷型網(wǎng)站建設(shè),鎮(zhèn)海網(wǎng)站制作、鎮(zhèn)海網(wǎng)頁設(shè)計(jì)、鎮(zhèn)海網(wǎng)站官網(wǎng)定制、微信小程序服務(wù),打造鎮(zhèn)海網(wǎng)絡(luò)公司原創(chuàng)品牌,更為您提供鎮(zhèn)海網(wǎng)站排名全網(wǎng)營銷落地服務(wù)。

            Sqoop是一款開源的工具,主要用于Hadoop(Hive)與傳統(tǒng)的數(shù)據(jù)庫(MySQL、postgresql...)間進(jìn)行數(shù)據(jù)的傳遞.

            Sqoop是一個(gè)用來將Hadoop和關(guān)系型數(shù)據(jù)庫中的數(shù)據(jù)相互轉(zhuǎn)移的工具,可以將一個(gè)關(guān)系型數(shù)據(jù)庫(例如:Mysql,Oracle,Postgres等)中的數(shù)據(jù)導(dǎo)進(jìn)到Hadoop的HDFS中,也可以將HDFS的數(shù)據(jù)導(dǎo)進(jìn)到關(guān)系型數(shù)據(jù)庫中.

            Sqoop導(dǎo)入mysql數(shù)據(jù)庫運(yùn)行過程依賴mysql-connector-java-*.jar

            列出mysql數(shù)據(jù)庫中的所有數(shù)據(jù)庫

            sqoop list-databases --connect jdbc:mysql://localhost:3306/ --username root --password admin

            連接mysql并列出數(shù)據(jù)中的表

            sqoop list-tables --connect jdbc:mysql://localhost:3306/test --username root --password admin

            將關(guān)系型數(shù)據(jù)庫的表結(jié)構(gòu)復(fù)制到hive中,只是復(fù)制表的結(jié)構(gòu),表中的內(nèi)容沒有復(fù)制過去.

            sqoop create-hive-table --connect jdbc:msql://localhost:3306/test --table sqoop_test --username root --password admin

            使用sqoop把數(shù)據(jù)從rdbms導(dǎo)入到hdfs中

            sqoop import --connect jdbc:mysql://hadoop:3306/test --username root --password admin --table user --fields-terminated-by '\t' -m

            注意:test是數(shù)據(jù)庫名稱

            使用sqoop把數(shù)據(jù)從hdfs導(dǎo)出到mysql中

            sqoop export --connect jdbc:mysql://hadoop0:3306/test --username root --password admin --table user --fields-terminated-by '\t' --export-dir '/user/root/user'

            注意:/user/root/user下面有一個(gè)數(shù)據(jù)文件:sort里面的數(shù)據(jù)對于這數(shù)據(jù)庫表中user的字段.

感謝各位的閱讀!關(guān)于“Sqoop如何使用”這篇文章就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,讓大家可以學(xué)到更多知識,如果覺得文章不錯(cuò),可以把它分享出去讓更多的人看到吧!

網(wǎng)站欄目:Sqoop如何使用
URL分享:http://muchs.cn/article0/ghieoo.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供商城網(wǎng)站網(wǎng)站維護(hù)、網(wǎng)站改版、企業(yè)建站、定制開發(fā)、移動(dòng)網(wǎng)站建設(shè)

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)

成都網(wǎng)頁設(shè)計(jì)公司