Native memory track use jemalloc for ES

栏目: Java · 发布时间: 6年前

内容简介:Native memory track use jemalloc for ES

这篇文章 中得知ES在5.1版本中有原生内存泄露的问题, 而碰巧我们生产环境中也在使用5.1系列的版本,但是场景不一样。比如我们并没有使用x-pack,但是还是放心不下,决定在我们的场景下利用文章中的方法进行下测试。

先弄清楚要测试的问题,Java的内存问题,大多数集中在Java Heap上面,所以平时遇到native memory的问题几率较低。Heap是 Java 新对象创建的地方也是GC工作的 主要区域,平时如果遇到Heap内存问题,通过收集GC日志,基本上就能看出端倪。例如GC时间过长、GC过于频繁的话需要进行GC算法参数的调优,老年代持续增长的话就要看对象是否分配的合理了,这也是一种泄露-导致GC无法回收。不同的GC算法调优的参数不一样,但目前还是用的CMS,有时间可以总结下。

另外就是native memory的问题,例如出现了Outofmemory的错误:

Allocated 1953546736 bytes of native memory before running out
Exception in thread "main" java.lang.OutOfMemoryError: unable to create new native thread
   at java.lang.Thread.start0(Native Method)
   at java.lang.Thread.start(Thread.java:574)
   at com.ibm.jtc.demos.StartingAThreadUnderNativeStarvation.main(
StartingAThreadUnderNativeStarvation.java:22)

遇到这样的问题,首先要确定的是是不是由堆内存申请导致的,如果不是就有可能是下面两种: 1. MetaSpace 2. Native memory

只要是JVM相关的内存问题,通过相关的监控 工具 都能很好的判定,例如如果集成了 Metrics ,可以得到

Native memory track use jemalloc for ES

通过这样的监控可以很容易的可以看出内存问题是否是出自于JVM。

扯得有点远了,回归主题:native memory tracking。 需要清楚的是Native memory tracking是tracking Java进程申请的OS内存,即glibc申请内存的情况。而 jemalloc 这个工具可以帮助我们抓取到Java进程的内存申请行为。过程也颇为简单:

git clone https://github.com/jemalloc/jemalloc
git checkout stable-4
./autogen.sh
./configure --enable-perf
make
sudo make install

启动ES之前设置下环境变量:

export LD_PRELOAD=/usr/local/lib/libjemalloc.so
export MALLOC_CONF=prof:true,lg_prof_interval:30,lg_prof_sample:17,prof_final:true

环境变量LD_PRELOAD用来替换原生的glibc malloc。 然后启动ES,运行一段时间,停掉后会生成多个jeprof.{processId}的文件,通过下面命令生成内存tracking信息:

jeprof --show_bytes --gif ~/jre/bin/java jeprof*.heap > ./app-profiling.gif

Native memory track use jemalloc for ES 有将近95%的内存来自于jvm本身,也由于运行时间不是很长,所以可以认为是安全的,如果再持续一段时间这个百分比降低了,说明有内存泄露的可能。

参考:

  1. http://www.evanjones.ca/java-native-leak-bug.html
  2. https://gdstechnology.blog.gov.uk/2015/12/11/using-jemalloc-to-get-to-the-bottom-of-a-memory-leak/

以上所述就是小编给大家介绍的《Native memory track use jemalloc for ES》,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对 码农网 的支持!

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

产品心经:产品经理应该知道的60件事(第2版)

产品心经:产品经理应该知道的60件事(第2版)

闫荣 / 机械工业出版社 / 2016-4 / 69.00

本书第一版出版后广获好评,应广大读者要求,作者把自己在实践中新近总结的10个关于产品的最佳实践融入到了这本新书中。这"10件事"侧重于深挖产品需求和产品疯传背后的秘密,配合之前的"50件事",不仅能帮产品经理打造出让用户尖叫并疯传的产品,还能帮助产品经理迅速全方位提升自己的能力。 本书作者有超过10年的产品工作经验,在互联网产品领域公认的大咖,这本书从产品经理核心素养、产品认知、战略与规划、......一起来看看 《产品心经:产品经理应该知道的60件事(第2版)》 这本书的介绍吧!

JSON 在线解析
JSON 在线解析

在线 JSON 格式化工具

SHA 加密
SHA 加密

SHA 加密工具