Веса в Deep Neural Network не меняются, а смещения сильно меняются. Зачем? - PullRequest
0 голосов
/ 27 июня 2018

Вот результат с тензорной доски. гиперссылок.

Как мы видели, потеря уменьшилась, а точность (как обучающая, так и тестовая) увеличилась. Следовательно, модель уже успешно прошла обучение.

Однако, Распределение параметров, веса / смещения не изменяется (может измениться незначительно), в то время как смещение сильно меняется. Может ли кто-нибудь помочь мне объяснить, что вызывает это? Я знал, что это нормальный результат, но почему? Спасибо!

Редакция: Может ли кто-нибудь поделиться опытом обучения Deep Neural Network? Каковы будут реальные ожидания изменения параметров в успешной обученной модели? Спасибо.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...