這篇文章主要介紹“Namenode HA 知識(shí)點(diǎn)有哪些”,在日常操作中,相信很多人在Namenode HA 知識(shí)點(diǎn)有哪些問題上存在疑惑,小編查閱了各式資料,整理出簡(jiǎn)單好用的操作方法,希望對(duì)大家解答”Namenode HA 知識(shí)點(diǎn)有哪些”的疑惑有所幫助!接下來,請(qǐng)跟著小編一起來學(xué)習(xí)吧!
成都創(chuàng)新互聯(lián)是一家集網(wǎng)站建設(shè),三穗企業(yè)網(wǎng)站建設(shè),三穗品牌網(wǎng)站建設(shè),網(wǎng)站定制,三穗網(wǎng)站建設(shè)報(bào)價(jià),網(wǎng)絡(luò)營(yíng)銷,網(wǎng)絡(luò)優(yōu)化,三穗網(wǎng)站推廣為一體的創(chuàng)新建站企業(yè),幫助傳統(tǒng)企業(yè)提升企業(yè)形象加強(qiáng)企業(yè)競(jìng)爭(zhēng)力??沙浞譂M足這一群體相比中小企業(yè)更為豐富、高端、多元的互聯(lián)網(wǎng)需求。同時(shí)我們時(shí)刻保持專業(yè)、時(shí)尚、前沿,時(shí)刻以成就客戶成長(zhǎng)自我,堅(jiān)持不斷學(xué)習(xí)、思考、沉淀、凈化自己,讓我們?yōu)楦嗟钠髽I(yè)打造出實(shí)用型網(wǎng)站。HA(High Available), 高可用,是保證業(yè)務(wù)連續(xù)性的有效解決方案,一般有兩個(gè)或兩個(gè)以上的節(jié)點(diǎn),分為 活動(dòng)節(jié)點(diǎn)( Active )及 備用節(jié)點(diǎn)( Standby))。用于實(shí)現(xiàn)業(yè)務(wù)的不中斷或短暫中斷 NN 是 HDFS 集群的單點(diǎn)故障點(diǎn)。在 HA 具體實(shí)現(xiàn)方法不同情況下,HA 框架的流程是一致的,不一致的就是如何存儲(chǔ)、管理、同步 edits 編輯日志文件。
QJM/Qurom Journal Manager,基本原理就是用 2N+1 臺(tái) JournalNode 存儲(chǔ)EditLog,每次寫數(shù)據(jù)操作有>=N+1 返回成功時(shí)即認(rèn)為該次寫成功,數(shù)據(jù)不會(huì)丟失了在 HA 模式下,datanode 需要確保同一時(shí)間有且只有一個(gè) NN 能命令DN。
FailoverController 主要包括三個(gè)組件:
HealthMonitor:監(jiān)控 NameNode 是否處于 unavailable 或 unhealthy 狀態(tài)。當(dāng)前通過 RPC 調(diào)用 NN 相應(yīng)的方法完成。
ActiveStandbyElector: 監(jiān)控 NN 在 ZK 中的狀態(tài)。
ZKFailoverController: 訂閱 HealthMonitor 和 ActiveStandbyElector 的事件,并管理 NN 的狀態(tài),另外 zkfc 還負(fù)責(zé)解決 fencing(也就是腦裂問題)。
ZKFailoverController 主要職責(zé):
健康監(jiān)測(cè):周期性的向它監(jiān)控的 NN 發(fā)送健康探測(cè)命令,從而來確定某個(gè)NameNode 是否處于健康狀態(tài),如果機(jī)器宕機(jī),心跳失敗,那么 zkfc 就會(huì)標(biāo)記它處于一個(gè)不健康的狀態(tài)
會(huì)話管理:如果 NN 是健康的,zkfc 就會(huì)在 zookeeper 中保持一個(gè)打開的會(huì)話,如果 NameNode 同時(shí)還是 Active 狀態(tài)的,那么 zkfc 還會(huì)在Zookeeper 中占有一個(gè)類型為短暫類型的 znode,當(dāng)這個(gè) NN 掛掉時(shí),這個(gè) znode 將會(huì)被刪除,然后備用的 NN 將會(huì)得到這把鎖,升級(jí)為主 NN,同時(shí)標(biāo)記狀態(tài)為 Active。
當(dāng)宕機(jī)的 NN 新啟動(dòng)時(shí),它會(huì)再次注冊(cè) zookeper,發(fā)現(xiàn)已經(jīng)有 znode 鎖了,便會(huì)自動(dòng)變?yōu)?Standby 狀態(tài),如此往復(fù)循環(huán),保證高可靠,需要注意,目前僅僅支持最多配置 2 個(gè) NNmaster 選舉:通過在 zookeeper 中維持一個(gè)短暫類型的 znode,來實(shí)現(xiàn)搶占式的鎖機(jī)制,從而判斷那個(gè)NameNode 為 Active 狀態(tài)。
到此,關(guān)于“Namenode HA 知識(shí)點(diǎn)有哪些”的學(xué)習(xí)就結(jié)束了,希望能夠解決大家的疑惑。理論與實(shí)踐的搭配能更好的幫助大家學(xué)習(xí),快去試試吧!若想繼續(xù)學(xué)習(xí)更多相關(guān)知識(shí),請(qǐng)繼續(xù)關(guān)注創(chuàng)新互聯(lián)網(wǎng)站,小編會(huì)繼續(xù)努力為大家?guī)砀鄬?shí)用的文章!
網(wǎng)站名稱:NamenodeHA知識(shí)點(diǎn)有哪些-創(chuàng)新互聯(lián)
文章路徑:http://jinyejixie.com/article32/dcggsc.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供動(dòng)態(tài)網(wǎng)站、企業(yè)建站、營(yíng)銷型網(wǎng)站建設(shè)、網(wǎng)站制作、做網(wǎng)站、品牌網(wǎng)站設(shè)計(jì)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容