Утечки памяти Python? - PullRequest
       17

Утечки памяти Python?

7 голосов
/ 14 сентября 2009

Я пишу расширение Python, которое, кажется, утечка памяти. Я пытаюсь понять причину проблемы, используя valgrind.

Однако, похоже, что сам питон теряет память в соответствии с valgrind. Используя следующий простой скрипт:

hello.py

  print "Hello World!"

и делает

> valgrind --tool=memcheck python ./hello.py

(...)
==7937== ERROR SUMMARY: 580 errors from 34 contexts (suppressed: 21 from 1)
==7937== malloc/free: in use at exit: 721,878 bytes in 190 blocks.
==7937== malloc/free: 2,436 allocs, 2,246 frees, 1,863,631 bytes allocated.
==7937== For counts of detected errors, rerun with: -v
==7937== Use --track-origins=yes to see where uninitialised values come from
==7937== searching for pointers to 190 not-freed blocks.
==7937== checked 965,952 bytes.
==7937== 
==7937== LEAK SUMMARY:
==7937==    definitely lost: 0 bytes in 0 blocks.
==7937==      possibly lost: 4,612 bytes in 13 blocks.
==7937==    still reachable: 717,266 bytes in 177 blocks.
==7937==         suppressed: 0 bytes in 0 blocks.
==7937== Rerun with --leak-check=full to see details of leaked memory.

У кого-нибудь есть объяснение этому странному поведению? Действительно ли интерпретатор Python теряет память?

Какой инструмент используют разработчики Python для устранения утечек памяти?

Ответы [ 2 ]

12 голосов
/ 14 сентября 2009

В источниках Python есть целый README.valgrind, объясняющий различные предостережения, пытающиеся использовать Valgrind с Python:

http://svn.python.org/projects/python/trunk/Misc/README.valgrind

Python uses its own small-object allocation scheme on top of malloc,
called PyMalloc.

Valgrind may show some unexpected results when PyMalloc is used.
Starting with Python 2.3, PyMalloc is used by default.  You can disable
PyMalloc when configuring python by adding the --without-pymalloc option.
If you disable PyMalloc, most of the information in this document and
the supplied suppressions file will not be useful.  As discussed above,
disabling PyMalloc can catch more problems.

If you use valgrind on a default build of Python,  you will see
many errors like:

        ==6399== Use of uninitialised value of size 4
        ==6399== at 0x4A9BDE7E: PyObject_Free (obmalloc.c:711)
        ==6399== by 0x4A9B8198: dictresize (dictobject.c:477)

These are expected and not a problem. 
2 голосов
/ 14 сентября 2009

Утечка, скорее всего, происходит от вашего собственного расширения, а не от Python. Большие системы часто выходят с выделенной памятью просто потому, что не стоит явно освобождать ее, если процесс все равно заканчивается

...