使用JeMalloc在Java应用程序中查找本机内存泄漏

Question

目前我正在尝试解决Java内存问题:我的Java应用程序不断使用越来越多的内存,最终它被Linux OOM杀手杀死.

可能存在Native Memory泄漏,因为在使用VisualVM检查JVM后,metaspace和堆看起来都很正常.

使用top命令,我可以看到JVM使用的内存不断增加.

本文的第一个图形:

示例#1

与我在自己的应用程序中看到的完美匹配.

所以我尝试使用JeMalloc来查找各种文章中描述的泄漏.在这里我遇到了一个问题:在jeprof本身使用jeprof命令和更高版本的top命令时,它确实显示了使用最多内存的函数,但它们都是十六进制地址,因此我必须缺少一些符号.但我不知道我需要哪些包,这是我不知道的.

我已经找到了这个链接: 链接#1

并安装了这个包:debuginfo-install java-1.8.0-openjdk

我试图先完成简单的步骤:

让JeMalloc使用简单的应用程序,例如w.接下来让它与java -version一起使用.到目前为止,我还可以从JeMalloc获得完美概述的PDF文件.

接下来让它与java -jar一起工作simpletest.jar <<这里我缺少符号例如,如果我不在这里关闭GZipInputStream,那么它不会出现在JeMalloc结果中.

接下来让它使用java -jar myapplication.jar <<这里我也缺少符号.

所以我的问题基本上是:为了让JeMalloc显示所有符号名称以调试应用程序,我需要哪些软件包,例如:

public void test1() {
    InputStream fileInputStream = null;
    GZipInputStream gzipInputStream = null;

    try {
      fileInputStream = new FileInputStream("test.zip");
      gzipInputStream = new GZIPInputStream(fileInputStream);

      int data = gzipInputStream.read();
      while (data != -1) {
        // do something with data
        data = gzipInputStream.read();
      }

    } catch (Exception ex) {

    } finally {
      // Disabled to see whether JeMalloc can detect the leak
      /*try {
        if (gzipInputStream != null) {
          gzipInputStream.close();
        }
        if (fileInputStream != null) {
          fileInputStream.close();
        }

        gzipInputStream = null;
        fileInputStream = null;
      } catch (IOException e) {
      e.printStackTrace();
    }*/
  }
}

使用以下软件:

• Linux CentOS 7
• JeMalloc
• OpenJDK的

找到的文章:

第1条

第2条

第3条

第4条

Answer 1

替换分配器（例如使用 jemalloc 或 tcmalloc）来分析内存使用情况可能会提供有关本机内存泄漏来源的提示，但仅限于 JVM 中加载的库中可用的本机代码符号。

要在堆栈跟踪中包含 Java 类/方法，需要生成一个将本机代码内存位置与其来源相关联的映射文件。在撰写本文时唯一的工具是https://github.com/jvm-profiling-tools/perf-map-agent

为了在堆栈中获得不仅仅是“解释器”名称，相关代码必须进行 JIT 编译，因此在-XX:CompileThreshold=1JVM 命令行选项上强制执行很有趣（IMO 生产中除外）。

当代理加载到 JVM 中时，生成的映射文件和 JIT 编译的代码perf可用于报告 CPU 分析。内存泄漏调查需要更多处理。

如果您的 Linux 内核是 4.9 或更高版本，最好的选择是获取bcc其工具：https: //github.com/iovisor/bcc/blob/master/tools/memleak_example.txtmemleak

非常感谢布伦丹·格雷格

Debian 系统在简单的安装之后就准备好了，但是 RedHat 系统需要更多的工作，如http://hydandata.org/installing-ebpf-tools-bcc-and-ply-on-centos-7apt install bcc上记录的 CentOS 7 （情况更糟）在 CentOS 6 上）

作为替代方案，perf仅也可以使用特定探针报告泄漏堆栈跟踪。脚本和示例用法可在https://github.com/dkogan/memory_leak_instrumentation获取，但必须适应 Java 上下文。