大數(shù)據(jù)數(shù)據(jù)庫HBase的集群安裝部署方法

這篇文章主要介紹“大數(shù)據(jù)數(shù)據(jù)庫HBase的集群安裝部署方法”，在日常操作中，相信很多人在大數(shù)據(jù)數(shù)據(jù)庫HBase的集群安裝部署方法問題上存在疑惑，小編查閱了各式資料，整理出簡單好用的操作方法，希望對大家解答”大數(shù)據(jù)數(shù)據(jù)庫HBase的集群安裝部署方法”的疑惑有所幫助！接下來，請跟著小編一起來學(xué)習(xí)吧！

創(chuàng)新互聯(lián)專注于弋江網(wǎng)站建設(shè)服務(wù)及定制，我們擁有豐富的企業(yè)做網(wǎng)站經(jīng)驗。 熱誠為您提供弋江營銷型網(wǎng)站建設(shè)，弋江網(wǎng)站制作、弋江網(wǎng)頁設(shè)計、弋江網(wǎng)站官網(wǎng)定制、小程序定制開發(fā)服務(wù)，打造弋江網(wǎng)絡(luò)公司原創(chuàng)品牌,更為您提供弋江網(wǎng)站排名全網(wǎng)營銷落地服務(wù)。

前言

<font color=#999AAA >Hive的學(xué)習(xí)告一段落，接下來開始了解大數(shù)據(jù)主流NoSql數(shù)據(jù)庫HBase，本文主要講解HBase集群的安裝部署，為后續(xù)Hbase學(xué)習(xí)作準(zhǔn)備。</font>

<hr  color=#000000 size=1">

1. HBase是什么（5分鐘）

• 漫畫學(xué)習(xí)HBase----最易懂的Hbase架構(gòu)原理解析

1.1 HBase的概念

• HBase基于Google的BigTable論文，是建立的==HDFS==之上，提供高可靠性、高性能、列存儲、可伸縮、實時讀寫的分布式數(shù)據(jù)庫系統(tǒng)。

• 在需要==實時讀寫隨機訪問==超大規(guī)模數(shù)據(jù)集時，可以使用HBase。

1.2 HBase的特點

• ==海量存儲==

• 可以存儲大批量的數(shù)據(jù)

• ==列式存儲==

• HBase表的數(shù)據(jù)是基于列族進行存儲的，列族是在列的方向上的劃分。

• ==極易擴展==

• 底層依賴HDFS，當(dāng)磁盤空間不足的時候，只需要動態(tài)增加datanode節(jié)點就可以了

• 可以通過增加服務(wù)器來對集群的存儲進行擴容

• ==高并發(fā)==

• 支持高并發(fā)的讀寫請求

• ==稀疏==

• 稀疏主要是針對HBase列的靈活性，在列族中，你可以指定任意多的列，在列數(shù)據(jù)為空的情況下，是不會占用存儲空間的。

• ==數(shù)據(jù)的多版本==

• HBase表中的數(shù)據(jù)可以有多個版本值，默認情況下是根據(jù)版本號去區(qū)分，版本號就是插入數(shù)據(jù)的時間戳

• ==數(shù)據(jù)類型單一==

• 所有的數(shù)據(jù)在HBase中是以==字節(jié)數(shù)組==進行存儲

2. HBase集群安裝部署

2.1 準(zhǔn)備安裝包

• 下載安裝包并上傳到node01服務(wù)器

• 安裝包下載地址：

  http://archive.cloudera.com/cdh6/cdh/5/hbase-1.2.0-cdh6.14.2.tar.gz

• 將安裝包上傳到node01服務(wù)器/kkb/soft路徑下，并進行解壓

[hadoop@node01 ~]$ cd /kkb/soft/
[hadoop@node01 soft]$ tar -xzvf hbase-1.2.0-cdh6.14.2.tar.gz -C /kkb/install/

2.2 修改HBase配置文件

2.2.1 hbase-env.sh

• 修改文件

[hadoop@node01 soft]$ cd /kkb/install/hbase-1.2.0-cdh6.14.2/conf/
[hadoop@node01 conf]$ vim hbase-env.sh

• 修改如下兩項內(nèi)容，值如下

export JAVA_HOME=/kkb/install/jdk1.8.0_141
export HBASE_MANAGES_ZK=false

2.2.2 hbase-site.xml

• 修改文件

[hadoop@node01 conf]$ vim hbase-site.xml

<configuration>
	<property>
		<name>hbase.rootdir</name>
		<value>hdfs://node01:8020/hbase</value>  
	</property>
	<property>
		<name>hbase.cluster.distributed</name>
		<value>true</value>
	</property>
	<!-- 0.98后的新變動，之前版本沒有.port,默認端口為60000 -->
	<property>
		<name>hbase.master.port</name>
		<value>16000</value>
	</property>
	<property>
		<name>hbase.zookeeper.quorum</name>
		<value>node01,node02,node03</value>
	</property>
    <!-- 此屬性可省略，默認值就是2181 -->
	<property>
		<name>hbase.zookeeper.property.clientPort</name>
		<value>2181</value>
	</property>
	<property>
		<name>hbase.zookeeper.property.dataDir</name>
		<value>/kkb/install/zookeeper-3.4.5-cdh6.14.2/zkdatas</value>
	</property>
    <!-- 此屬性可省略，默認值就是/hbase -->
	<property>
		<name>zookeeper.znode.parent</name>
		<value>/hbase</value>
	</property>
</configuration>

2.2.3 regionservers

• 修改文件

[hadoop@node01 conf]$ vim regionservers

• 指定HBase集群的從節(jié)點；原內(nèi)容清空，添加如下三行

node01
node02
node03

2.2.4 back-masters

• 創(chuàng)建back-masters配置文件，里邊包含備份HMaster節(jié)點的主機名，每個機器獨占一行，實現(xiàn)HMaster的高可用

[hadoop@node01 conf]$ vim backup-masters

2.3 分發(fā)安裝包

• 將node01上的HBase安裝包，拷貝到其他機器上

[hadoop@node01 conf]$ cd /kkb/install
[hadoop@node01 install]$ scp -r hbase-1.2.0-cdh6.14.2/ node02:$PWD
[hadoop@node01 install]$ scp -r hbase-1.2.0-cdh6.14.2/ node03:$PWD

2.4 創(chuàng)建軟連接

• **<font color='red'>注意：三臺機器</font>**均做如下操作

• 因為HBase集群需要讀取hadoop的core-site.xml、hdfs-site.xml的配置文件信息，所以我們==三臺機器==都要執(zhí)行以下命令，在相應(yīng)的目錄創(chuàng)建這兩個配置文件的軟連接

ln -s /kkb/install/hadoop-2.6.0-cdh6.14.2/etc/hadoop/core-site.xml  /kkb/install/hbase-1.2.0-cdh6.14.2/conf/core-site.xml

ln -s /kkb/install/hadoop-2.6.0-cdh6.14.2/etc/hadoop/hdfs-site.xml  /kkb/install/hbase-1.2.0-cdh6.14.2/conf/hdfs-site.xml

• 執(zhí)行完后，出現(xiàn)如下效果，以node01為例

2.5 添加HBase環(huán)境變量

• **<font color='red'>注意：三臺機器</font>**均執(zhí)行以下命令，添加環(huán)境變量

sudo vim /etc/profile

• 文件末尾添加如下內(nèi)容

export HBASE_HOME=/kkb/install/hbase-1.2.0-cdh6.14.2
export PATH=$PATH:$HBASE_HOME/bin

• 重新編譯/etc/profile，讓環(huán)境變量生效

source /etc/profile

2.6 HBase的啟動與停止

• <font color='red'>需要提前啟動HDFS及ZooKeeper集群</font>

• 第一臺機器==node01==（HBase主節(jié)點）執(zhí)行以下命令，啟動HBase集群

[hadoop@node01 ~]$ start-hbase.sh

• 啟動完后，jps查看HBase相關(guān)進程

  node01、node02上有進程HMaster、HRegionServer

  node03上有進程HRegionServer

• 警告提示：HBase啟動的時候會產(chǎn)生一個警告，這是因為jdk7與jdk8的問題導(dǎo)致的，如果linux服務(wù)器安裝jdk8就會產(chǎn)生這樣的一個警告

• 可以注釋掉所有機器的hbase-env.sh當(dāng)中的

  “HBASE_MASTER_OPTS”和“HBASE_REGIONSERVER_OPTS”配置 來解決這個問題。

  不過警告不影響我們正常運行，可以不用解決

• 我們也可以執(zhí)行以下命令，單節(jié)點啟動相關(guān)進程

#HMaster節(jié)點上啟動HMaster命令
hbase-daemon.sh start master

#啟動HRegionServer命令
hbase-daemon.sh start regionserver

2.7 訪問WEB頁面

• 瀏覽器頁面訪問

  http://node01:60010

1.8 停止HBase集群

• 停止HBase集群的正確順序

• node01上運行

[hadoop@node01 ~]$ stop-hbase.sh

• 若需要關(guān)閉虛擬機，則還需要關(guān)閉ZooKeeper、Hadoop集群

到此，關(guān)于“大數(shù)據(jù)數(shù)據(jù)庫HBase的集群安裝部署方法”的學(xué)習(xí)就結(jié)束了，希望能夠解決大家的疑惑。理論與實踐的搭配能更好的幫助大家學(xué)習(xí)，快去試試吧！若想繼續(xù)學(xué)習(xí)更多相關(guān)知識，請繼續(xù)關(guān)注創(chuàng)新互聯(lián)網(wǎng)站，小編會繼續(xù)努力為大家?guī)砀鄬嵱玫奈恼拢?/p>

分享名稱：大數(shù)據(jù)數(shù)據(jù)庫HBase的集群安裝部署方法
轉(zhuǎn)載源于：http://muchs.cn/article30/ghoiso.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供建站公司、微信公眾號、虛擬主機、標(biāo)簽優(yōu)化、移動網(wǎng)站建設(shè)、外貿(mào)網(wǎng)站建設(shè)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)