怎么進(jìn)行hadoop2.xnamenodeha架構(gòu)的原理分析

怎么進(jìn)行hadoop2.x namenode ha 架構(gòu)的原理分析,相信很多沒(méi)有經(jīng)驗(yàn)的人對(duì)此束手無(wú)策,為此本文總結(jié)了問(wèn)題出現(xiàn)的原因和解決方法,通過(guò)這篇文章希望你能解決這個(gè)問(wèn)題。

成都創(chuàng)新互聯(lián)公司主要從事成都做網(wǎng)站、網(wǎng)站制作、網(wǎng)頁(yè)設(shè)計(jì)、企業(yè)做網(wǎng)站、公司建網(wǎng)站等業(yè)務(wù)。立足成都服務(wù)建始,十多年網(wǎng)站建設(shè)經(jīng)驗(yàn),價(jià)格優(yōu)惠、服務(wù)專業(yè),歡迎來(lái)電咨詢建站服務(wù):18980820575

在2.x版本的ha的架構(gòu)圖中

怎么進(jìn)行hadoop2.x namenode ha 架構(gòu)的原理分析

看以看到為了完成對(duì)兩個(gè)NN的無(wú)縫切換,DN需要同時(shí)在Block信息發(fā)給兩個(gè)NN,而NN之間需要做的是元數(shù)據(jù)信息的同步。

這里就涉及到同步的問(wèn)題,共享存儲(chǔ)。

在可靠性方面,在每一個(gè)NN上啟動(dòng)了DFSZKFailoverController來(lái)監(jiān)聽(tīng)本地NN的運(yùn)行狀態(tài),以便做出相應(yīng)的判斷處理。

而zookeeper就算為了實(shí)現(xiàn)一個(gè)分布式lock,防止同時(shí)出現(xiàn)兩個(gè)active NN,以及一些數(shù)據(jù)的共享。

我們可以在看這幅比較原理基本的架構(gòu)圖。

怎么進(jìn)行hadoop2.x namenode ha 架構(gòu)的原理分析

可以看到每一個(gè)NN上,是有HADeamon進(jìn)程,定時(shí)和DFSZKFailoverController的HealthMonitor進(jìn)行心跳檢測(cè)。

DFSZKFailoverController其中包含了ActiveStandbyElector來(lái)選舉active以及standby。

元數(shù)據(jù)信息通過(guò)QJM來(lái)實(shí)時(shí)更新。

我們可以把standby NN看成是一個(gè)safemode下的NN,不提供對(duì)外服務(wù),但是卻可以更新相應(yīng)的元數(shù)據(jù)信息修改,block數(shù)據(jù)上報(bào)更新等一系列操作。

看完上述內(nèi)容,你們掌握怎么進(jìn)行hadoop2.x namenode ha 架構(gòu)的原理分析的方法了嗎?如果還想學(xué)到更多技能或想了解更多相關(guān)內(nèi)容,歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道,感謝各位的閱讀!

分享文章:怎么進(jìn)行hadoop2.xnamenodeha架構(gòu)的原理分析
當(dāng)前網(wǎng)址:http://muchs.cn/article32/gpjhsc.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站改版、用戶體驗(yàn)動(dòng)態(tài)網(wǎng)站、網(wǎng)站制作、靜態(tài)網(wǎng)站企業(yè)建站

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)

綿陽(yáng)服務(wù)器托管