Воспроизводимые модели Keras

Question

Я знаю, что это кажется общим вопросом, но это действительно постоянная проблема, и я заметил, что многие люди пытаются ее решить: есть ли у кого-то окончательное решение проблемы воспроизводимости моделей Keras (Tensorflow в качестве бэкэнда)?

Answer 1

Что вы имеете в виду под воспроизводимостью?Вам нужно быть более конкретным.По замыслу есть много стохастических частей, которые входят в обучение модели глубокого обучения.Веса инициализируются случайным образом;Алгоритм back-prop по своей природе стохастичен, как мы всегда делаем SGD;выпадение снова стохастик

Несмотря на все это;Модели глубокого обучения обучают и дают последовательные результаты по всем прогонам по модулю этих проблем стохастичности.Вы можете запускать примеры Keras на их стандартных наборах данных, MNIST и т. П. И постоянно получать одинаковые показатели производительности (по модулю стохастичности)

Короче говоря;да, результаты, безусловно, воспроизводимы, принимая во внимание небольшие различия, которые по своей природе возникают из стохастичности модели обучения