Инструмент анализатора памяти: ParseHeapDump. sh - Ошибка приложения: OutOfMemory Запрошенная длина нового long [2 147 483 640] превышает ограничение в 2 147 483 639 - PullRequest
Новая
       67

Инструмент анализатора памяти: ParseHeapDump. sh - Ошибка приложения: OutOfMemory Запрошенная длина нового long [2 147 483 640] превышает ограничение в 2 147 483 639

2 голосов
/ 06 января 2020

Я пытаюсь проанализировать heapdump 200 ГБ на удаленном компьютере. Дамп кучи был создан с помощью кнопки «Создать дамп кучи» в visualVM. Даже выполнение его с Xmx300GB ("$(dirname -- "$0")"/MemoryAnalyzer -consolelog -application org.eclipse.mat.api.parse "$@" -vmargs -Xmx300g -XX:-UseGCOverheadLimit) приводит к тому, что MAT обрабатывает sh со следующей ошибкой: 

eclipse.buildId=unknown
java.version=11.0.3
java.vendor=Oracle Corporation
BootLoader constants: OS=linux, ARCH=x86_64, WS=gtk, NL=en_US
Framework arguments:  -application org.eclipse.mat.api.parse ./tmp/heapdump-1577977940574.hprof
Command-line arguments:  -os linux -ws gtk -arch x86_64 -consolelog -application org.eclipse.mat.api.parse ./tmp/heapdump-1577977940574.hprof

!ENTRY org.eclipse.osgi 4 0 2020-01-06 16:25:11.593
!MESSAGE Application error
!STACK 1
java.lang.OutOfMemoryError: Requested length of new long[2,147,483,640] exceeds limit of 2,147,483,639
        at org.eclipse.mat.parser.index.IndexWriter$Identifier.add(IndexWriter.java:91)
        at org.eclipse.mat.hprof.HprofParserHandlerImpl.reportInstance(HprofParserHandlerImpl.java:588)
        at org.eclipse.mat.hprof.Pass1Parser.readPrimitiveArrayDump(Pass1Parser.java:590)
        at org.eclipse.mat.hprof.Pass1Parser.readDumpSegments(Pass1Parser.java:366)
        at org.eclipse.mat.hprof.Pass1Parser.read(Pass1Parser.java:175)
        at org.eclipse.mat.hprof.HprofIndexBuilder.fill(HprofIndexBuilder.java:80)
        at org.eclipse.mat.parser.internal.SnapshotFactoryImpl.parse(SnapshotFactoryImpl.java:222)
        at org.eclipse.mat.parser.internal.SnapshotFactoryImpl.openSnapshot(SnapshotFactoryImpl.java:126)
        at org.eclipse.mat.snapshot.SnapshotFactory.openSnapshot(SnapshotFactory.java:145)
        at org.eclipse.mat.internal.apps.ParseSnapshotApp.parse(ParseSnapshotApp.java:134)
        at org.eclipse.mat.internal.apps.ParseSnapshotApp.start(ParseSnapshotApp.java:106)
        at org.eclipse.equinox.internal.app.EclipseAppHandle.run(EclipseAppHandle.java:196)
        at org.eclipse.core.runtime.internal.adaptor.EclipseAppLauncher.runApplication(EclipseAppLauncher.java:134)
        at org.eclipse.core.runtime.internal.adaptor.EclipseAppLauncher.start(EclipseAppLauncher.java:104)
        at org.eclipse.core.runtime.adaptor.EclipseStarter.run(EclipseStarter.java:388)
        at org.eclipse.core.runtime.adaptor.EclipseStarter.run(EclipseStarter.java:243)
        at java.base/jdk.internal.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
        at java.base/jdk.internal.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
        at java.base/jdk.internal.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
        at java.base/java.lang.reflect.Method.invoke(Method.java:566)
        at org.eclipse.equinox.launcher.Main.invokeFramework(Main.java:656)
        at org.eclipse.equinox.launcher.Main.basicRun(Main.java:592)
        at org.eclipse.equinox.launcher.Main.run(Main.java:1498)
        at org.eclipse.equinox.launcher.Main.main(Main.java:1471)

Возможно, файл поврежден или он слишком большой для анализа?

1 Ответ

2 голосов
/ 06 января 2020

Скорее всего, вы столкнулись с известным ограничением Memory Analyzer согласно этому комментарию :

"Memory Analyzer имеет архитектурное ограничение 2 ^ 31 - 3 объекта, текущий предел 2 ^ 31 - 8 = 2 147 483 640 объектов, но не был протестирован с таким количеством объектов. Текущая запись представляет собой файл дампа кучи размером 48 Гбайт, содержащий 948 000 000 объектов, который был открыт с помощью Memory Analyzer, работающего с кучей 58 Гбайт. "

См. Также https://dev.eclipse.org/mhonarc/lists//mat-dev/msg00324.html

Независимо от размера кучи Java не позволит создать массив больше Integer.MAX_VALUE - 5, что составляет 2 147 483 639 .

Вы можете попробовать загрузить последнюю версию Memory Analyzer и посмотреть, не был ли лимит увеличен.

...