Нейронную сеть необходимо обучать в течение нескольких эпох, и я хотел бы использовать каждое изображение только один раз за все обучение (поэтому эпоха будет использовать только подмножество всех доступных изображений). Данные изображения для классификации хранятся на внешнем сервере в файловой системе. Сеть будет обучаться на временной службе в облаке. Поскольку облачная служба может отключить сервер в любое время, мне нужно каким-то образом отслеживать, какие изображения уже использовались при возобновлении обучения на новом сервере. Требуется использовать незащищенную базу данных на основе SQL вне сервера для записи как контрольных точек, так и изображений, которые были использованы. Модуль для этого процесса должен быть реализован на Python.
Есть идеи или советы, как этого можно достичь с помощью базы данных SQL?