Пояснение к лестнице в обучении нейронной сети?

Question

Я попытался создать модель Keras с моими собственными данными. Примерно через несколько эпох произошло нечто странное (например, лестница), которое я не могу объяснить себе.

Результат обучения

Вы случайно не знаете, чтоозначает событие после 270 эпох?

Answer 1

Трудно ответить на ваш вопрос, не увидев код

На мой взгляд, похоже, у вас может быть планировщик скорости обучения или что-то еще, что регулирует вашу скорость обучения (см. Керас)документация здесь ).

keras.callbacks.callbacks.LearningRateScheduler(schedule, verbose=0)

И в случае, если вы заблудились с того, с чего начать планировщик (см. сообщение в блоге ):

Графики скорости обучения стремятся регулировать скорость обучения во время обучения, уменьшая скорость обучения в соответствии с заранее определенным расписанием. Распространенные графики скорости обучения включают затухание по времени, ступенчатое затухание и экспоненциальное затухание.