Hbase RegionServer Cache

Hbase

RegionServer Cache分为：MemStore默认占用40%。BlockCache默认占用40%。其他默认占用20%。

1）MemStore & BlockCache

说明

• 写入请求，会先写入到MemStore，RegionServer为每个region分配一个MemStore，当MemStore默认达到64M后，flush到磁盘。
• 读请求，先到MemStore读取，查不到去读取BlockCache，还查不到读Hfile。读取完后把读取的结果放到BlockCache。当BlockCache大小达到heapsize * hfile.block.cache.size * 0.85，启动淘汰机制，淘汰最老的一批数据。
• BlockCache分为三种类型：比率SINGLE->0.25。MULTI->0.5。IN_MEMORY->0.25。
  
  • SINGLE：程序cache数据放置的区域
  • MULTI：多次查询时数据放置的区域
  • IN_MEMORY：启动Hbase就缓存的数据，hbase:meta表就设置了这样的属性
• 根据不同的读写需求，合理的设置参数。注重读的需求BlockCache设置大些，注重些的需求MemStore大些。

3）配置

hbase.regionserver.global.memstore.upperLimit
单个region server的全部memtores的最大值。超过这个值，一个新的update操作会被挂起，强制执行flush操作。
默认: 0.4
hbase.regionserver.global.memstore.upperLimit
单个region server的全部memtores的最大值。超过这个值，一个新的update操作会被挂起，强制执行flush操作。
默认: 0.4
hbase.hregion.memstore.flush.size
当memstore的大小超过这个值的时候，会flush到磁盘。这个值被一个线程每隔hbase.server.thread.wakefrequency时间间隔检查一下。
默认:134217728
hfile.block.cache.size
分配给HFile/StoreFile的block cache占最大堆(-Xmx setting)的比例。默认0.4意思是分配40%，设置为0就是禁用，但不推荐。
默认:0.4

在此输入正文