大數(shù)據(jù)中HDFS常用shell和web界面有哪些-創(chuàng)新互聯(lián)

這篇文章將為大家詳細(xì)講解有關(guān)大數(shù)據(jù)中HDFS常用shell和web界面有哪些，小編覺(jué)得挺實(shí)用的，因此分享給大家做個(gè)參考，希望大家閱讀完這篇文章后可以有所收獲。

在渠縣等地區(qū)，都構(gòu)建了全面的區(qū)域性戰(zhàn)略布局，加強(qiáng)發(fā)展的系統(tǒng)性、市場(chǎng)前瞻性、產(chǎn)品創(chuàng)新能力，以專注、極致的服務(wù)理念，為客戶提供網(wǎng)站制作、成都網(wǎng)站制作 網(wǎng)站設(shè)計(jì)制作按需開(kāi)發(fā),公司網(wǎng)站建設(shè),企業(yè)網(wǎng)站建設(shè),品牌網(wǎng)站制作,全網(wǎng)整合營(yíng)銷推廣,成都外貿(mào)網(wǎng)站制作,渠縣網(wǎng)站建設(shè)費(fèi)用合理。

大數(shù)據(jù)教程分享HDFS常用shell和web界面介紹

最后一個(gè):塊刪除的開(kāi)始時(shí)間

HDFS的Shell命令:

ps:無(wú)論看到是hdfs dfs 形式還是 hadoop fs這種形式 都可以 完成對(duì)HDFS的操作

1.向HDSF上傳文件

put: 從本地文件系統(tǒng)賦值單個(gè)或多個(gè)原路徑目標(biāo)文件到HDFS文件系統(tǒng)中

hdfs dfs -put 本地文件路徑 HDFS文件系統(tǒng)路徑

2.將HDFS文件系統(tǒng)中的文件下載回來(lái)

get:從HDFS文件系統(tǒng)中將文件復(fù)制到本地文件系統(tǒng)中

hdfs dfs -get HDFS文件系統(tǒng)路徑 本地文件系統(tǒng)路徑

ps:HDFS有一個(gè)和put和get類似的而方法 copyFromlocal 相當(dāng)于put 和 copyTolocal 相當(dāng)于 get 3.查看HDFS文件系統(tǒng)中的文件內(nèi)容

cat:查看HDFS文件系統(tǒng)中的文件內(nèi)容

hdfs dfs -cat HDFS文件系統(tǒng)中文件的路徑

ps:不要查看非文件

在查看文件的同時(shí)追加文件到本地路徑

4.HDFS文件系統(tǒng)中進(jìn)行復(fù)制操作

cp:將HDFS文件系統(tǒng)中的文件進(jìn)行復(fù)制,復(fù)制到HDFS系統(tǒng)中

hdfs dfs -cp 源HDFS文件系統(tǒng)中的文件路徑 目標(biāo)HDFS文件系統(tǒng)中的路徑

5.HDFS文件系統(tǒng)中的文件進(jìn)行移動(dòng)操作

mv:將源文件移動(dòng)目標(biāo)路徑,這個(gè)命令可允許有多個(gè)源路徑,此時(shí)目標(biāo)路徑必須是一個(gè)文件夾(目錄)

不允許不同的文件系統(tǒng)互相移動(dòng)文件

hdfs dfs -mv 源HDFS文件系統(tǒng)中的文件路徑 目標(biāo)HDFS文件系統(tǒng)中的路徑

相當(dāng)于剪切

6.查看HDFS文件系統(tǒng)中文件的大小

hdfs dfs -du HDFS文件系統(tǒng)中路徑中的一個(gè)文件

7.在HDSF系統(tǒng)中創(chuàng)建文件夾

mkdir 創(chuàng)建文件夾

hdfs dfs -mkdir HDFS文件系統(tǒng)中的路徑

創(chuàng)建多個(gè)文件夾 添加 -p 就是多個(gè)文件夾

8.查看HDFS文件系統(tǒng)下的所有文件

hdfs dfs -ls HDFS文件系統(tǒng)路徑

9.刪除HDFS文件系統(tǒng)中的目錄或文件

ps:只能是單個(gè)文件 或 空目錄

hdfs dfs -rm HDFS文件系統(tǒng)路徑

若參數(shù)文件夾中有多個(gè)文件 加 -r

hdfs dfs -rm -r HDFS文件系統(tǒng)路徑

10.更改文件的權(quán)限

r可讀 w可寫 x可執(zhí)行

- | ---| --- 1代表有權(quán) 0代表沒(méi)有權(quán)限 所有每三位可以作為一個(gè)八進(jìn)制處理例如 rwx | rwx | rwx

111 | 111 | 111

=========================

7 7 7

hdfs dfs -chmod 權(quán)限值 HDFS文件系統(tǒng)路徑若需要更改目錄下權(quán)限都需要修改

hdfs dfs -chmod -R 權(quán)限值 HDFS文件系統(tǒng)路徑下的文件夾ps:并且文件夾下的所有子文件和文件夾都會(huì)被修改

11.回收站

Hadoop回收站trash,默認(rèn)是關(guān)閉的,建議開(kāi)啟

<property>

<name>fs.trash.interval</name>

<!-- 開(kāi)啟當(dāng)前hdfs中的回收站 時(shí)長(zhǎng):多長(zhǎng)時(shí)間清空回收站 單位是分鐘 1440就是1天-->

<value>1440</value>

</property>

ps:默認(rèn)為是沒(méi)有權(quán)限操作回收站的,所以操作之前開(kāi)啟權(quán)限 hdfs dfs -chmod -R 777 HDFS文件系統(tǒng)中回收站的路徑例子:hdfs dfs -chmod -R 777 /user

刪除文件后,發(fā)現(xiàn)誤刪了,恢復(fù)文件

hdfs dfs -mv HDFS文件系統(tǒng)中回收站的路徑下的文件 HDFS文件系統(tǒng)路徑清空回收站 hdfs dfs -rm -r HDFS文件系統(tǒng)中回收站的路徑

例如:hdfs dfs -rm -r /user/root/.Trash

關(guān)于“大數(shù)據(jù)中HDFS常用shell和web界面有哪些”這篇文章就分享到這里了，希望以上內(nèi)容可以對(duì)大家有一定的幫助，使各位可以學(xué)到更多知識(shí)，如果覺(jué)得文章不錯(cuò)，請(qǐng)把它分享出去讓更多的人看到。

網(wǎng)頁(yè)名稱：大數(shù)據(jù)中HDFS常用shell和web界面有哪些-創(chuàng)新互聯(lián)
網(wǎng)站網(wǎng)址：http://www.muchs.cn/article30/dhospo.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供軟件開(kāi)發(fā)、標(biāo)簽優(yōu)化、全網(wǎng)營(yíng)銷推廣、Google、搜索引擎優(yōu)化、企業(yè)網(wǎng)站制作

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)