MemoryError при отправке нескольких фотографий в бот Telegram - PullRequest
Новая
       16

MemoryError при отправке нескольких фотографий в бот Telegram

1 голос
/ 13 марта 2019

Я создал бот-телеграмму, и он отправляет несколько фотографий пользователю.Хорошо работает на 4 или 5 фотографиях, но после этого вылетает.Я отправляю фотографии так: 

for i in range(len(pages)):
        photo = open('pics/{0}.jpg'.format(i+1), 'rb')
        bot.send_photo(chat_id=chat_id,photo=photo)

это моя ошибка: 

2019-03-13 14:30:52,207 (util.py:65 WorkerThread2) ERROR - TeleBot: "MemoryError occurred, args=()
Traceback (most recent call last):
  File "/root/Env/pdf/lib/python3.5/site-packages/telebot/util.py", line 59, in run
    task(*args, **kwargs)
  File "pdf.py", line 63, in handle_docs
    pages = convert_from_path('botpdf.pdf', 500)
  File "/root/Env/pdf/lib/python3.5/site-packages/pdf2image/pdf2image.py", line 98, in convert_from_path
    data, err = proc.communicate()
  File "/usr/lib/python3.5/subprocess.py", line 1072, in communicate
    stdout, stderr = self._communicate(input, endtime, timeout)
  File "/usr/lib/python3.5/subprocess.py", line 1745, in _communicate
    stdout = b''.join(stdout)
MemoryError
"
Traceback (most recent call last):
  File "pdf.py", line 99, in <module>
    bot.polling(none_stop=False, interval=0)
  File "/root/Env/pdf/lib/python3.5/site-packages/telebot/__init__.py", line 389, in polling
    self.__threaded_polling(none_stop, interval, timeout)
  File "/root/Env/pdf/lib/python3.5/site-packages/telebot/__init__.py", line 413, in __threaded_polling
    self.worker_pool.raise_exceptions()
  File "/root/Env/pdf/lib/python3.5/site-packages/telebot/util.py", line 108, in raise_exceptions
    six.reraise(self.exc_info[0], self.exc_info[1], self.exc_info[2])
  File "/root/Env/pdf/lib/python3.5/site-packages/six.py", line 693, in reraise
    raise value
  File "/root/Env/pdf/lib/python3.5/site-packages/telebot/util.py", line 59, in run
    task(*args, **kwargs)
  File "pdf.py", line 63, in handle_docs
    pages = convert_from_path('botpdf.pdf', 500)
  File "/root/Env/pdf/lib/python3.5/site-packages/pdf2image/pdf2image.py", line 98, in convert_from_path
    data, err = proc.communicate()
  File "/usr/lib/python3.5/subprocess.py", line 1072, in communicate
    stdout, stderr = self._communicate(input, endtime, timeout)
  File "/usr/lib/python3.5/subprocess.py", line 1745, in _communicate
    stdout = b''.join(stdout)
MemoryError

1 Ответ

0 голосов
/ 14 марта 2019

Используйте выходной каталог, ваше текущее использование pdf2image загружает все изображения в память. Это может оказать огромное влияние!

Где вы написали pages = convert_from_path('botpdf.pdf', 500)

Изменить на: 

import tempfile

with tempfile.TemporaryDirectory() as path:
    pages = convert_from_path('botpdf.pdf', 500, output_folder=path)

Это запишет все преобразованные изображения на диск, прежде чем вернуть их вам (сохраняя огромный кусок памяти). Вы также можете преобразовать в JPEG вместо PPM по умолчанию (который является необработанным форматом): 

pages = convert_from_path('botpdf.pdf', 500, fmt='jpeg')

Но с этим решением у вас все еще будут проблемы, если PDF очень большой.

...