Heim > Datenbank > MySQL-Tutorial > 内存回收与hbase

内存回收与hbase

WBOY
Freigeben: 2016-06-07 15:29:20
Original
1151 Leute haben es durchsucht

1.3.1.1 内存回收导致的程序卡顿 Todd Lipcon 描述了2种常见的导致hbase卡顿的内存回收情况,尤其在加载数据到hbase的情况下。这两种情况分别是:cms内存回收失败、老年代堆内存碎片严重。 对于第一种情况,可以在启动cms的时候加入参数- XX:CMSInitiatingOc

1.3.1.1 内存回收导致的程序卡顿

Todd Lipcon 描述了2种常见的导致hbase卡顿的“内存回收情况”,尤其在加载数据到hbase的情况下。这两种情况分别是:cms内存回收失败、老年代堆内存碎片严重。

对于第一种情况,可以在启动cms的时候加入参数-XX:CMSInitiatingOccupancyFraction,将该参数调小为60~70,即当对老年代堆内存使用到60~70时进行cms内存回收,提升内存回收频率。

<code class="code">对于第二种情况,Todd提到一种措施,设置参数 <code class="code">hbase.hregion.memstore.mslab.enabled为true,为每一个memstore开辟一个单独的缓存空间。隐患:mslab(A memstore-local allocation buffer)的开启会导致每个store产生至少一个2MB的buffer。也就是说如果每台机器有2000个store,默认直接会占用至少4G的内存空间,当4G写满了将占用8G。因此对于store非常多的应用有可能会发生OOM,需要谨慎。

<code class="code"><code class="code">个人建议

<code class="code"><code class="code">1、hbase默认内存为1G,最好放大 2、使用cms回收,

<code class="code"><code class="code">export SERVER_GC_OPTS="-XX:CMSInitiatingOccupancyFraction=80 -XX:+UseParNewGC -XX:+UseConcMarkSweepGC"

Verwandte Etiketten:
Quelle:php.cn
Erklärung dieser Website
Der Inhalt dieses Artikels wird freiwillig von Internetnutzern beigesteuert und das Urheberrecht liegt beim ursprünglichen Autor. Diese Website übernimmt keine entsprechende rechtliche Verantwortung. Wenn Sie Inhalte finden, bei denen der Verdacht eines Plagiats oder einer Rechtsverletzung besteht, wenden Sie sich bitte an admin@php.cn
Beliebte Tutorials
Mehr>
Neueste Downloads
Mehr>
Web-Effekte
Quellcode der Website
Website-Materialien
Frontend-Vorlage