Сборка мусора делает Python медленнее?

Question

ОК, поэтому мы разрабатываем приложение, связанное с сетью, где пользователь может загрузить свои собственные сценарии Python, чтобы выбрать алгоритм. Наш код содержит модули c и cython и python.

Поскольку для нас крайне важно избежать задержек, объема памяти и минимальной обработки, мы задались вопросом, разумно ли и эффективно (с точки зрения производительности) отключать сборку мусора и самостоятельно обрабатывать освобождение памяти.

Answer 1

Просто позвольте языку делать то, что он хочет, и если вы обнаружите, что у вас есть реальная проблема, вернитесь и напишите об этом. В противном случае это преждевременная оптимизация.

Answer 2

gc.disable отключает только циклический сборщик мусора.Объекты по-прежнему будут собираться, когда рефконт все равно упадет до нуля.Так что, если у вас нет много циклических ссылок, это не будет иметь никакого значения.

Вы говорите о создании пользовательской сборки Python и отключении GC подсчета ссылок?

Answer 3

Просто разработайте приложение, чтобы оно было функционально правильным.Как только вы получили правильное приложение, запустите профилировщик и определите, где находятся медленные биты.Если вас беспокоит производительность пользовательских сценариев, вы, вероятно, сосредотачиваетесь не на том.

Короче, ответ заключается в том, что, вероятно, неразумно и неэффективно пытаться оптимизировать до завершения первоначальной разработки.

Answer 4

Сборка мусора делает все медленнее.Это также делает все намного менее подверженным ошибкам.Особенно, если дело в том, чтобы запускать загруженные пользователем сценарии, мне трудно поверить, что компромисс будет удачным;если у вас есть утечка или двойное освобождение, теперь у вас есть уязвимость DoS, если кто-то может выяснить, как ее вызвать.

Answer 5

Я потратил довольно много времени на работу с языками с автоматической сборкой мусора, и я могу почти в одностороннем порядке сказать, что доверять собственной сборке мусора будет быстрее и надежнее, чем пользовательское решение.

Answer 6

CPython (оригинальный и наиболее используемый Python) использует подход подсчета ссылок для сборки мусора: объекты, на которые больше нет ссылок, немедленно освобождаются.Поэтому, если вы не создаете какие-либо циклы, сборщик мусора, который существует только для обнаружения циклов, не должен часто вызываться.