成人午夜视频全免费观看高清-秋霞福利视频一区二区三区-国产精品久久久久电影小说-亚洲不卡区三一区三区一区

hbase尋址機(jī)制的示例分析

小編給大家分享一下hbase尋址機(jī)制的示例分析,相信大部分人都還不怎么了解,因此分享這篇文章給大家參考一下,希望大家閱讀完這篇文章后大有收獲,下面讓我們一起去了解一下吧!

創(chuàng)新互聯(lián)公司,為您提供網(wǎng)站建設(shè)公司成都網(wǎng)站制作、網(wǎng)站營銷推廣、網(wǎng)站開發(fā)設(shè)計(jì),對服務(wù)成都混凝土攪拌站等多個(gè)行業(yè)擁有豐富的網(wǎng)站建設(shè)及推廣經(jīng)驗(yàn)。創(chuàng)新互聯(lián)公司網(wǎng)站建設(shè)公司成立于2013年,提供專業(yè)網(wǎng)站制作報(bào)價(jià)服務(wù),我們深知市場的競爭激烈,認(rèn)真對待每位客戶,為客戶提供賞心悅目的作品。 與客戶共同發(fā)展進(jìn)步,是我們永遠(yuǎn)的責(zé)任!

hbase尋址機(jī)制詳解

系統(tǒng)如何找到某個(gè)row key(或者某個(gè)row key range(范圍))所在的region big table 使用三層類似B+樹的結(jié)構(gòu)來保存region 位置
第一層是保存zookeeper 里面的文件,它持有root region 的位置。
第二層root region 是.META.表的第一個(gè)region 其中 保存了.META.z表 其它region 的位置。通過root region,我們就可以訪問.META.表的數(shù)據(jù)。
.META.是第三層,它是一個(gè)特殊的表,保存了hbase 中所有數(shù)據(jù)表的region 位置信息。
//見圖

hbase尋址機(jī)制的示例分析

說明:
1 root region 永遠(yuǎn)不會被split,保證了最需要三次跳轉(zhuǎn),就能定位到任意region 。
2.META.表每行保存一個(gè)region 的位置信息,row key 采用表名+表的最后一樣編碼而成。
3 為了加快訪問,.META.表的全部region 都保存在內(nèi)存中。
假設(shè),.META.表的一行在內(nèi)存中大約占用1KB。并且每個(gè)region 限制為128MB。
那么上面的三層結(jié)構(gòu)可以保存的region 數(shù)目為:
(128MB/1KB) * (128MB/1KB) = = 2(34)個(gè)region
4 client 會將查詢過的位置信息保存緩存起來,緩存不會主動失效,因此如果client 上的緩存全部失效,則需要進(jìn)行6 次網(wǎng)絡(luò)來回,才能定位到正確的region(其中三次用來發(fā)現(xiàn)緩存失效,另外三次用來獲取位置信息)。

從上面的路徑我們可以看出,用戶需要 3 次請求才能直到用戶 Table 真正的位置,這在一定 程序帶來了性能的下降。在 0.96 之前使用 3 層設(shè)計(jì)的主要原因是考慮到元數(shù)據(jù)可能需要很 大。但是真正集群運(yùn)行,元數(shù)據(jù)的大小其實(shí)很容易計(jì)算出來。在 BigTable 的論文中,每行 METADATA 數(shù)據(jù)存儲大小為 1KB 左右,如果按照一個(gè) Region 為 128M 的計(jì)算,3 層設(shè)計(jì)可以支持的 Region 個(gè)數(shù)為 2^34 個(gè),采用 2 層設(shè)計(jì)可以支持 2^17(131072)。那么 2 層設(shè)計(jì)的情 況下一個(gè)集群可以存儲 4P 的數(shù)據(jù)。這僅僅是一個(gè) Region 只有 128M 的情況下。如果是 10G 呢? 因此,通過計(jì)算,其實(shí) 2 層設(shè)計(jì)就可以滿足集群的需求。因此在 0.96 版本以后就去掉 了-ROOT-表了。

提示:更具版本的不同,分為老的尋址地址方式,和新的尋址方式

以上是“hbase尋址機(jī)制的示例分析”這篇文章的所有內(nèi)容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內(nèi)容對大家有所幫助,如果還想學(xué)習(xí)更多知識,歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道!

新聞標(biāo)題:hbase尋址機(jī)制的示例分析
新聞來源:http://jinyejixie.com/article24/ppjdje.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供App設(shè)計(jì)、網(wǎng)站改版、用戶體驗(yàn)云服務(wù)器、Google、軟件開發(fā)

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)

成都seo排名網(wǎng)站優(yōu)化