hbase如何預(yù)分配region

這篇文章主要為大家展示了“hbase如何預(yù)分配region”,內(nèi)容簡(jiǎn)而易懂,條理清晰,希望能夠幫助大家解決疑惑,下面讓小編帶領(lǐng)大家一起研究并學(xué)習(xí)一下“hbase如何預(yù)分配region”這篇文章吧。

創(chuàng)新互聯(lián)公司專注于元氏企業(yè)網(wǎng)站建設(shè),響應(yīng)式網(wǎng)站,商城網(wǎng)站定制開(kāi)發(fā)。元氏網(wǎng)站建設(shè)公司,為元氏等地區(qū)提供建站服務(wù)。全流程定制設(shè)計(jì),專業(yè)設(shè)計(jì),全程項(xiàng)目跟蹤,創(chuàng)新互聯(lián)公司專業(yè)和態(tài)度為您提供的服務(wù)

在create一個(gè)表時(shí)如果不指定預(yù)分配region,則默認(rèn)會(huì)先分配一個(gè)region,這樣在大數(shù)據(jù)并行載入時(shí)性能比較低,因?yàn)樗械臄?shù)據(jù)都往一個(gè)region灌入,容易引起單節(jié)點(diǎn)負(fù)載升高,從而影響入庫(kù)性能,一個(gè)好的方法時(shí)在建立表時(shí)預(yù)先分配數(shù)個(gè)region。方法有兩種,主要針對(duì)不同版本可供選擇。

  1. 使用RegionSplitter方法,主要針對(duì)hbase-0.90.X版本

    (1) 首先使用RegionSplitter建表,預(yù)分配region,例如建立一個(gè)poidb表,列簇為info,預(yù)分配9個(gè)region,

 hbase org.apache.hadoop.hbase.util.RegionSplitter -c 9 -f info poidb

    (2) 修改建表參數(shù)(可選)

默認(rèn)建表是沒(méi)有開(kāi)啟Bloomfilter和壓縮參數(shù)的,這里為了提供讀性能,建議開(kāi)啟Bloomfilter,同時(shí)使用壓縮SNAPPY,進(jìn)入hbase shell,首先需要disable 'poidb',然后使用使用

alter 'poidb',{NAME => 'info',BLOOMFILTER => 'ROWCOL',COMPRESSION => 'SNAPPY',VERSIONS => '1'}

最后

enable 'poidb'

2.使用hbase shell建表參數(shù),真多0.94.x版本

0.94版本可以直接在建表時(shí)直接使用預(yù)分配regions:

create 'poidb', { NAME => 'info', COMPRESSION => 'snappy' },  
{NUMREGIONS => 9, SPLITALGO => 'HexStringSplit'}

以上是“hbase如何預(yù)分配region”這篇文章的所有內(nèi)容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內(nèi)容對(duì)大家有所幫助,如果還想學(xué)習(xí)更多知識(shí),歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道!

本文題目:hbase如何預(yù)分配region
轉(zhuǎn)載來(lái)源:http://bm7419.com/article42/jdiiec.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供外貿(mào)網(wǎng)站建設(shè)、網(wǎng)站改版、App開(kāi)發(fā)、商城網(wǎng)站、軟件開(kāi)發(fā)、品牌網(wǎng)站設(shè)計(jì)

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)

網(wǎng)站托管運(yùn)營(yíng)