HDFS架構如何設計-創(chuàng)新互聯(lián)

這篇文章主要介紹HDFS架構如何設計，文中介紹的非常詳細，具有一定的參考價值，感興趣的小伙伴們一定要看完！

建網站原本是網站策劃師、網絡程序員、網頁設計師等，應用各種網絡程序開發(fā)技術和網頁設計技術配合操作的協(xié)同工作。創(chuàng)新互聯(lián)專業(yè)提供網站設計、成都網站制作,網頁設計,網站制作(企業(yè)站、成都響應式網站建設、電商門戶網站)等服務,從網站深度策劃、搜索引擎友好度優(yōu)化到用戶體驗的提升,我們力求做到極致!

HDFS架構設計：
1.NN(NameNode):主要是維護管理文件命名空間，其中包括了文件名稱，文件的權限，創(chuàng)建時間，副本數(shù)，文件被分成多少塊，快分布在哪些機器（產生文件fsimage和editlog）。

2.理解NN管理下NN和塊以及實際存儲內容的存儲關系。
實例：假設NN為一個容量為128000ML的正方形盒子，每個塊為同樣大小正正方方的容量為128ML的盒子，但是每個盒子里只有3ml的水（每個塊中存儲文件的實際大?。?br/>
則問實際存儲的內容是多少ml？3*（128000/128）=3000ml這里是由DN管理存儲的。
放進去的盒子是多少個？1000個（其實就是存儲的塊的數(shù)量）
總的來說盡管實際存儲只有3000ml,但是卻消耗了1000個瓶子的名字的字節(jié)總和的NN的空間，但是如果把1000個瓶子壓縮成500或者更少（小文件合并），則可以消耗更少量的NN管理空間。

3.DN（DataNode）:存儲數(shù)據塊，存儲數(shù)據塊校驗和。


4.SN（SecondaryNode）:做每小時的檢查工作checkpoint。（檢查NN的工作即產生文件fsimage和editlog并進行打包制作成新的fsimage文件保存下來）

圖理解：

以上是“HDFS架構如何設計”這篇文章的所有內容，感謝各位的閱讀！希望分享的內容對大家有幫助，更多相關知識，歡迎關注創(chuàng)新互聯(lián)-成都網站建設公司行業(yè)資訊頻道！

新聞標題：HDFS架構如何設計-創(chuàng)新互聯(lián)
瀏覽路徑：http://muchs.cn/article4/djigoe.html

成都網站建設公司_創(chuàng)新互聯(lián)，為您提供虛擬主機、網站導航、Google、品牌網站設計、手機網站建設、關鍵詞優(yōu)化

廣告

聲明：本網站發(fā)布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯(lián)