Сколько «накладной» памяти требуется JDOM для генерации файлов XML? - PullRequest
Новая
       8

Сколько «накладной» памяти требуется JDOM для генерации файлов XML?

1 голос
/ 02 августа 2010

Мне нужно использовать JDOM для генерации XML-файлов, которые могут быть довольно большими. Мне интересно, сколько дополнительного пространства памяти нужно JDOM, кроме данных, в основном строк, которые уже находятся в памяти. Я написал простую программу для тестирования, и оказалось, что накладные расходы примерно вдвое больше, чем содержимое XML.

Кто-нибудь знает, зачем JDOM так много дополнительной памяти, и если есть способ оптимизировать ее? Разве объекты JDOM не должны просто ссылаться на существующие строки?

Вот программа, которую я использовал для проверки: 

public class TestJdomMemoryOverhead {
    private static Runtime runtime = Runtime.getRuntime();

    public static void gc() {
        // Try to give the JVM some hints to run garbage collection
        for (int i = 0; i < 5; i++) {
            runtime.runFinalization();
            runtime.gc();
            Thread.currentThread().yield();
        }
    }

    public static void generateXml(List<String> filenames) throws IOException {
        // generate a simple XML file by these file names. It looks like:
        // <?xml version="1.0" encoding="UTF-8"?>
        // <files>
        // <f n="aaaaaaaaaaaaaaaaaaaaaaaaaaaaaa" />
        // <f n="aaaaaaaaaaaaaaaaaaaaaaaaaaaaaa" />
        // <f n="aaaaaaaaaaaaaaaaaaaaaaaaaaaaaa" />
        // ....
        // ....
        // </files>
        Element filesElem = new Element("files");
        Document doc = new Document(filesElem);
        for (String name : filenames) {
            Element fileElem = new Element("f");
            fileElem.setAttribute("n", name);
            filesElem.addContent(fileElem);
        }
        gc();
        System.out.println("After generating JDOM objects: " + (runtime.totalMemory() - runtime.freeMemory()) + " bytes");
        XMLOutputter outputter = new XMLOutputter(Format.getPrettyFormat());
        BufferedWriter writer = new BufferedWriter(new FileWriter("test.xml", false));
        outputter.output(doc, writer);
        writer.close();
        gc();
        System.out.println("After writing to XML file: " + (runtime.totalMemory() - runtime.freeMemory()) + " bytes");
    }

    public static void main(String[] cmdArgs) throws IOException {
        List<String> filenames = new ArrayList<String>();
        StringBuilder builder = new StringBuilder();
        // 30 unicode chracters, repated 500,000 times. The memory to store
        // these file name strings should be about 30MB.
        builder.append("aaaaaaaaaaaaaaaaaaaaaaaaaaaaaa");
        for (int i = 0; i < 500000; i++) {
            filenames.add(builder.toString());
        }
        gc();
        System.out.println("After generating file names: " + (runtime.totalMemory() - runtime.freeMemory()) + " bytes");
        generateXml(filenames);
        gc();
        System.out.println("Get back to main: " + (runtime.totalMemory() - runtime.freeMemory()) + " bytes");
    }
}

Вывод: 

After generating file names: 51941096 bytes
After generating JDOM objects: 125766824 bytes
After writing to XML file: 126036768 bytes
Get back to main: 51087440 bytes

Как видите, объекты JDOM использовали около 70 МБ.

1 Ответ

1 голос
/ 02 августа 2010

Причина, по которой JDOM требует так много памяти, заключается в том, что JDOM - это в основном древовидный API, такой как DOM (дерево документов создается в памяти так, как вы ее использовали). Но это более производительный, чем DOM. Если вы создаете большие XML-документы, вы можете рассмотреть возможность использования чего-то вроде XMLStreamWriter , который связан с jdk6

Вот краткая статья о том, на что JDOM не способен

...