1.在大數(shù)據(jù)的領(lǐng)域之中,體系結(jié)構(gòu)都是主從結(jié)構(gòu)(存在主節(jié)點(diǎn)和從節(jié)點(diǎn))
創(chuàng)新互聯(lián)2013年至今,先為浦口等服務(wù)建站,浦口等地企業(yè),進(jìn)行企業(yè)商務(wù)咨詢服務(wù)。為浦口企業(yè)網(wǎng)站制作PC+手機(jī)+微官網(wǎng)三網(wǎng)同步一站式服務(wù)解決您的所有建站問題。在此當(dāng)中單點(diǎn)指的是主節(jié)點(diǎn)發(fā)生故障,主節(jié)點(diǎn)的故障會(huì)導(dǎo)致整個(gè)集群無法訪問。無論是何種集群主節(jié)點(diǎn)的故障導(dǎo)致的結(jié)果都相似。
集群 | 主節(jié)點(diǎn) | 從節(jié)點(diǎn) |
---|---|---|
HDFS | NameNode | DateNode |
Yarn | resourceManager | NodeManager |
HBase | HMaster | RegionServer |
Storn | Nimbus | Supervisor |
Spark | Master | Worker |
通過創(chuàng)造多個(gè)主節(jié)點(diǎn)來避免當(dāng)個(gè)主節(jié)點(diǎn)發(fā)生故障導(dǎo)致的集群無法訪問。
不同的集群都需要借助ZooKeeper來實(shí)現(xiàn)HA。
2.集群的配置
Zookeeper集群:
192.168.157.12 (bigdata12)
192.168.157.13 (bigdata13)
192.168.157.14 (bigdata14)
Hadoop集群:
192.168.157.12 (bigdata12) NameNode1 ResourceManager1 Journalnode
192.168.157.13 (bigdata13) NameNode2 ResourceManager2 Journalnode
192.168.157.14 (bigdata14) DataNode1
192.168.157.15 (bigdata15) DataNode2
日志輸出信息:
我們可以觀察到兩個(gè)主節(jié)點(diǎn)并不是都是Active的狀態(tài)而是一個(gè)active一個(gè)standby。而且在Active狀態(tài)下的主節(jié)點(diǎn)出現(xiàn)故障是可以自動(dòng)將Standby狀態(tài)下的主節(jié)點(diǎn)轉(zhuǎn)化為active的狀態(tài)從而實(shí)現(xiàn)應(yīng)對(duì)單節(jié)故障導(dǎo)致集群無法訪問的結(jié)果。
你是否還在尋找穩(wěn)定的海外服務(wù)器提供商?創(chuàng)新互聯(lián)www.cdcxhl.cn海外機(jī)房具備T級(jí)流量清洗系統(tǒng)配攻擊溯源,準(zhǔn)確流量調(diào)度確保服務(wù)器高可用性,企業(yè)級(jí)服務(wù)器適合批量采購(gòu),新人活動(dòng)首月15元起,快前往官網(wǎng)查看詳情吧
網(wǎng)站標(biāo)題:通過使用ZooKeeper解決單點(diǎn)故障理論-創(chuàng)新互聯(lián)
標(biāo)題鏈接:http://jinyejixie.com/article36/hggpg.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供定制開發(fā)、企業(yè)建站、域名注冊(cè)、面包屑導(dǎo)航、搜索引擎優(yōu)化、移動(dòng)網(wǎng)站建設(shè)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容