HBase 系統調優指南

2021-10-09 16:23:45 字數 357 閱讀 3941

本篇面試內容劃重點:bloomfilter、預分割槽、資料傾斜、rowkey 設計。

hbase 雖然沒有字段資訊也沒有型別的限制,但是建表的時候還是有很多需要注意的地方的,合理地配置表資訊可以使你寫的程式更高效地使用 hbase 。

bloomfilter 布隆過濾器

預設值為 none,布隆過濾器的作用是可以過濾掉大部分不存在目標查詢值的 hfile(即略去不必要的磁碟掃瞄),可以有助於降低讀取延遲。配置方式:create 'table',

versions 版本

預設值為 1 ,我們知道 hbase 是乙個多版本共存的資料庫ÿ

HBASE引數調優

zookeeper.session.timeout預設值 3分鐘 180000ms 說明 regionserver與zookeeper間的連線超時時間。當超時時間到後,reigonserver會被zookeeper從rs集群清單中移除,hmaster收到移除通知後,會對這台server負責的regi...

HBase集群調優

2.5.2.1.zookeeper.session.timeout 這個預設值是3分鐘。這意味著一旦乙個server宕掉了,master至少需要3分鐘才能察覺到宕機,開始恢復。你可能希望將這個超時調短,這樣master就能更快的察覺到了。在你調這個值之前,你需要確認你的jvm的gc引數,否則乙個長時...

Flink Flink調優指南

jobmanger.rpc.address jm的位址。jobmanager.rpc.port jm的埠號。jobmanager.heap.mb jm的堆記憶體大小。不建議配的太大,1 2g足夠。taskmanager.numberoftaskslots slot數量。在yarn模式使用的時候會受到...