成人午夜视频全免费观看高清-秋霞福利视频一区二区三区-国产精品久久久久电影小说-亚洲不卡区三一区三区一区

大數(shù)據(jù)數(shù)據(jù)庫(kù)HBase的集群安裝部署方法

這篇文章主要介紹“大數(shù)據(jù)數(shù)據(jù)庫(kù)HBase的集群安裝部署方法”,在日常操作中,相信很多人在大數(shù)據(jù)數(shù)據(jù)庫(kù)HBase的集群安裝部署方法問(wèn)題上存在疑惑,小編查閱了各式資料,整理出簡(jiǎn)單好用的操作方法,希望對(duì)大家解答”大數(shù)據(jù)數(shù)據(jù)庫(kù)HBase的集群安裝部署方法”的疑惑有所幫助!接下來(lái),請(qǐng)跟著小編一起來(lái)學(xué)習(xí)吧!

創(chuàng)新互聯(lián)專(zhuān)注于弋江網(wǎng)站建設(shè)服務(wù)及定制,我們擁有豐富的企業(yè)做網(wǎng)站經(jīng)驗(yàn)。 熱誠(chéng)為您提供弋江營(yíng)銷(xiāo)型網(wǎng)站建設(shè),弋江網(wǎng)站制作、弋江網(wǎng)頁(yè)設(shè)計(jì)、弋江網(wǎng)站官網(wǎng)定制、小程序定制開(kāi)發(fā)服務(wù),打造弋江網(wǎng)絡(luò)公司原創(chuàng)品牌,更為您提供弋江網(wǎng)站排名全網(wǎng)營(yíng)銷(xiāo)落地服務(wù)。

前言

<font color=#999AAA >Hive的學(xué)習(xí)告一段落,接下來(lái)開(kāi)始了解大數(shù)據(jù)主流NoSql數(shù)據(jù)庫(kù)HBase,本文主要講解HBase集群的安裝部署,為后續(xù)Hbase學(xué)習(xí)作準(zhǔn)備。</font>

<hr  color=#000000 size=1">

1. HBase是什么(5分鐘)

  • 漫畫(huà)學(xué)習(xí)HBase----最易懂的Hbase架構(gòu)原理解析

1.1 HBase的概念

  • HBase基于Google的BigTable論文,是建立的==HDFS==之上,提供高可靠性、高性能、列存儲(chǔ)、可伸縮、實(shí)時(shí)讀寫(xiě)的分布式數(shù)據(jù)庫(kù)系統(tǒng)。

  • 在需要==實(shí)時(shí)讀寫(xiě)隨機(jī)訪(fǎng)問(wèn)==超大規(guī)模數(shù)據(jù)集時(shí),可以使用HBase。

1.2 HBase的特點(diǎn)

  • ==海量存儲(chǔ)==

    • 可以存儲(chǔ)大批量的數(shù)據(jù)

  • ==列式存儲(chǔ)==

    • HBase表的數(shù)據(jù)是基于列族進(jìn)行存儲(chǔ)的,列族是在列的方向上的劃分。

  • ==極易擴(kuò)展==

    • 底層依賴(lài)HDFS,當(dāng)磁盤(pán)空間不足的時(shí)候,只需要?jiǎng)討B(tài)增加datanode節(jié)點(diǎn)就可以了

    • 可以通過(guò)增加服務(wù)器來(lái)對(duì)集群的存儲(chǔ)進(jìn)行擴(kuò)容

  • ==高并發(fā)==

    • 支持高并發(fā)的讀寫(xiě)請(qǐng)求

  • ==稀疏==

    • 稀疏主要是針對(duì)HBase列的靈活性,在列族中,你可以指定任意多的列,在列數(shù)據(jù)為空的情況下,是不會(huì)占用存儲(chǔ)空間的。

  • ==數(shù)據(jù)的多版本==

    • HBase表中的數(shù)據(jù)可以有多個(gè)版本值,默認(rèn)情況下是根據(jù)版本號(hào)去區(qū)分,版本號(hào)就是插入數(shù)據(jù)的時(shí)間戳

  • ==數(shù)據(jù)類(lèi)型單一==

    • 所有的數(shù)據(jù)在HBase中是以==字節(jié)數(shù)組==進(jìn)行存儲(chǔ)

2. HBase集群安裝部署

2.1 準(zhǔn)備安裝包

  • 下載安裝包并上傳到node01服務(wù)器

  • 安裝包下載地址:

    http://archive.cloudera.com/cdh6/cdh/5/hbase-1.2.0-cdh6.14.2.tar.gz

  • 將安裝包上傳到node01服務(wù)器/kkb/soft路徑下,并進(jìn)行解壓

[hadoop@node01 ~]$ cd /kkb/soft/
[hadoop@node01 soft]$ tar -xzvf hbase-1.2.0-cdh6.14.2.tar.gz -C /kkb/install/

2.2 修改HBase配置文件

2.2.1 hbase-env.sh
  • 修改文件

[hadoop@node01 soft]$ cd /kkb/install/hbase-1.2.0-cdh6.14.2/conf/
[hadoop@node01 conf]$ vim hbase-env.sh
  • 修改如下兩項(xiàng)內(nèi)容,值如下

export JAVA_HOME=/kkb/install/jdk1.8.0_141
export HBASE_MANAGES_ZK=false

大數(shù)據(jù)數(shù)據(jù)庫(kù)HBase的集群安裝部署方法 大數(shù)據(jù)數(shù)據(jù)庫(kù)HBase的集群安裝部署方法

2.2.2 hbase-site.xml
  • 修改文件

[hadoop@node01 conf]$ vim hbase-site.xml
<configuration>
	<property>
		<name>hbase.rootdir</name>
		<value>hdfs://node01:8020/hbase</value>  
	</property>
	<property>
		<name>hbase.cluster.distributed</name>
		<value>true</value>
	</property>
	<!-- 0.98后的新變動(dòng),之前版本沒(méi)有.port,默認(rèn)端口為60000 -->
	<property>
		<name>hbase.master.port</name>
		<value>16000</value>
	</property>
	<property>
		<name>hbase.zookeeper.quorum</name>
		<value>node01,node02,node03</value>
	</property>
    <!-- 此屬性可省略,默認(rèn)值就是2181 -->
	<property>
		<name>hbase.zookeeper.property.clientPort</name>
		<value>2181</value>
	</property>
	<property>
		<name>hbase.zookeeper.property.dataDir</name>
		<value>/kkb/install/zookeeper-3.4.5-cdh6.14.2/zkdatas</value>
	</property>
    <!-- 此屬性可省略,默認(rèn)值就是/hbase -->
	<property>
		<name>zookeeper.znode.parent</name>
		<value>/hbase</value>
	</property>
</configuration>
2.2.3 regionservers
  • 修改文件

[hadoop@node01 conf]$ vim regionservers
  • 指定HBase集群的從節(jié)點(diǎn);原內(nèi)容清空,添加如下三行

node01
node02
node03
2.2.4 back-masters
  • 創(chuàng)建back-masters配置文件,里邊包含備份HMaster節(jié)點(diǎn)的主機(jī)名,每個(gè)機(jī)器獨(dú)占一行,實(shí)現(xiàn)HMaster的高可用

[hadoop@node01 conf]$ vim backup-masters

2.3 分發(fā)安裝包

  • 將node01上的HBase安裝包,拷貝到其他機(jī)器上

[hadoop@node01 conf]$ cd /kkb/install
[hadoop@node01 install]$ scp -r hbase-1.2.0-cdh6.14.2/ node02:$PWD
[hadoop@node01 install]$ scp -r hbase-1.2.0-cdh6.14.2/ node03:$PWD

2.4 創(chuàng)建軟連接

  • **<font color='red'>注意:三臺(tái)機(jī)器</font>**均做如下操作

  • 因?yàn)镠Base集群需要讀取hadoop的core-site.xml、hdfs-site.xml的配置文件信息,所以我們==三臺(tái)機(jī)器==都要執(zhí)行以下命令,在相應(yīng)的目錄創(chuàng)建這兩個(gè)配置文件的軟連接

ln -s /kkb/install/hadoop-2.6.0-cdh6.14.2/etc/hadoop/core-site.xml  /kkb/install/hbase-1.2.0-cdh6.14.2/conf/core-site.xml

ln -s /kkb/install/hadoop-2.6.0-cdh6.14.2/etc/hadoop/hdfs-site.xml  /kkb/install/hbase-1.2.0-cdh6.14.2/conf/hdfs-site.xml
  • 執(zhí)行完后,出現(xiàn)如下效果,以node01為例 大數(shù)據(jù)數(shù)據(jù)庫(kù)HBase的集群安裝部署方法

2.5 添加HBase環(huán)境變量

  • **<font color='red'>注意:三臺(tái)機(jī)器</font>**均執(zhí)行以下命令,添加環(huán)境變量

sudo vim /etc/profile
  • 文件末尾添加如下內(nèi)容

export HBASE_HOME=/kkb/install/hbase-1.2.0-cdh6.14.2
export PATH=$PATH:$HBASE_HOME/bin
  • 重新編譯/etc/profile,讓環(huán)境變量生效

source /etc/profile

2.6 HBase的啟動(dòng)與停止

  • <font color='red'>需要提前啟動(dòng)HDFS及ZooKeeper集群</font>

  • 第一臺(tái)機(jī)器==node01==(HBase主節(jié)點(diǎn))執(zhí)行以下命令,啟動(dòng)HBase集群

[hadoop@node01 ~]$ start-hbase.sh
  • 啟動(dòng)完后,jps查看HBase相關(guān)進(jìn)程

    node01、node02上有進(jìn)程HMaster、HRegionServer

    node03上有進(jìn)程HRegionServer

  • 警告提示:HBase啟動(dòng)的時(shí)候會(huì)產(chǎn)生一個(gè)警告,這是因?yàn)閖dk7與jdk8的問(wèn)題導(dǎo)致的,如果linux服務(wù)器安裝jdk8就會(huì)產(chǎn)生這樣的一個(gè)警告

大數(shù)據(jù)數(shù)據(jù)庫(kù)HBase的集群安裝部署方法

  • 可以注釋掉所有機(jī)器的hbase-env.sh當(dāng)中的

    “HBASE_MASTER_OPTS”和“HBASE_REGIONSERVER_OPTS”配置 來(lái)解決這個(gè)問(wèn)題。

    不過(guò)警告不影響我們正常運(yùn)行,可以不用解決

  • 我們也可以執(zhí)行以下命令,單節(jié)點(diǎn)啟動(dòng)相關(guān)進(jìn)程

#HMaster節(jié)點(diǎn)上啟動(dòng)HMaster命令
hbase-daemon.sh start master

#啟動(dòng)HRegionServer命令
hbase-daemon.sh start regionserver

2.7 訪(fǎng)問(wèn)WEB頁(yè)面

  • 瀏覽器頁(yè)面訪(fǎng)問(wèn)

    http://node01:60010

大數(shù)據(jù)數(shù)據(jù)庫(kù)HBase的集群安裝部署方法

1.8 停止HBase集群

  • 停止HBase集群的正確順序

  • node01上運(yùn)行

[hadoop@node01 ~]$ stop-hbase.sh
  • 若需要關(guān)閉虛擬機(jī),則還需要關(guān)閉ZooKeeper、Hadoop集群

到此,關(guān)于“大數(shù)據(jù)數(shù)據(jù)庫(kù)HBase的集群安裝部署方法”的學(xué)習(xí)就結(jié)束了,希望能夠解決大家的疑惑。理論與實(shí)踐的搭配能更好的幫助大家學(xué)習(xí),快去試試吧!若想繼續(xù)學(xué)習(xí)更多相關(guān)知識(shí),請(qǐng)繼續(xù)關(guān)注創(chuàng)新互聯(lián)網(wǎng)站,小編會(huì)繼續(xù)努力為大家?guī)?lái)更多實(shí)用的文章!

分享名稱(chēng):大數(shù)據(jù)數(shù)據(jù)庫(kù)HBase的集群安裝部署方法
轉(zhuǎn)載源于:http://jinyejixie.com/article30/ghoiso.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供建站公司、微信公眾號(hào)、虛擬主機(jī)、標(biāo)簽優(yōu)化、移動(dòng)網(wǎng)站建設(shè)、外貿(mào)網(wǎng)站建設(shè)

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶(hù)投稿、用戶(hù)轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話(huà):028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)

網(wǎng)站優(yōu)化排名
和林格尔县| 许昌县| 玉林市| 海原县| 宾川县| 木里| 新竹市| 新绛县| 囊谦县| 珠海市| 南阳市| 三河市| 雷波县| 盱眙县| 九台市| 安仁县| 建德市| 铜川市| 进贤县| 温宿县| 临沂市| 三门峡市| 滦平县| 阜宁县| 鸡西市| 萍乡市| 石狮市| 山西省| 鄄城县| 霍邱县| 肥城市| 东方市| 江陵县| 临海市| 淮北市| 沂源县| 徐水县| 延安市| 尉氏县| 延长县| 江门市|