Описание проблемы:
Ресурсные и вычислительные задачи ETL конвейера, выполняющиеся каждую минуту, не выполняются. Мы получаем много сообщений об ошибках, как показано ниже. (Похоже, что его провал почти каждую минуту). Мы заметили, что новый шаблон параметров основан на общем шаблоне и может быть оптимизирован. Например, work_mem составляет 4 МБ, и мы увеличили его. Буду признателен за любые советы. Заранее спасибо.
Шаги, которые мы предприняли для решения проблемы:
- анализ вакуума
- увеличение рабочей памяти
Сообщение об ошибке 1:
(OperationalError ('Ошибка SSL SYSCALL: обнаружен EOF \ n')
ETL SQL (upsert,обновление, создание временной таблицы, индексация, сортировка и т. д.) ....
Исключение: соединение уже закрыто
Сообщение об ошибке 2:
psycopg2.OperationalError: сервер неожиданно закрыл соединение Это, вероятно, означает, что сервер аварийно завершил работу до или во время обработки запроса.