Я сталкиваюсь со специфической проблемой, когда я выполняю работу, которая выполняет обучение модели глубокого обучения в тензорном потоке, и эта работа умирает преждевременно без какого-либо явного предупреждения. В коде нет синтаксической ошибки, но выполняемое им задание умирает через полчаса с момента запуска задания. Системный журнал не показывает ничего, имеющего отношение к проблеме, с которой я сталкиваюсь, но я вижу большие пробелы в метке времени системного журнала во время сбоя моей работы.
Я подключен к серверу Ubuntu 18.04 LTS через ssh. Даже когда я выхожу из системы или остаюсь на связи с сервером, моя работа умирает через 30-40 минут. Единственное, что я постоянно вижу в системном журнале во время сбоя моей работы, - это предупреждение Airflow_Tempera_Cel.
Буду признателен за любую помощь в решении этой странной проблемы, с которой я сталкиваюсь.