Расчет частной производной стоимости по активированному значению для нейрона 1 - PullRequest
0 голосов
/ 13 марта 2020

У меня есть персептрон только с одним скрытым слоем. Входной, скрытый и выходной слои имеют по два нейрона каждый.

Рассматривая первый нейрон в скрытом слое: при вычислении частных производных во время обратного распространения, как вы можете рассчитать частную производную стоимости по значению активации этого нейрона? Функция стоимости явно зависит от активированных значений двух нейронов в выходном слое (a3, a4), но неявно только для a1 и a2 (активированные значения двух нейронов в скрытом слое)

Примечание: взвешенная сумма = обозначается как z

активированное значение (a): значение z после применения сигмоидальной функции

Пожалуйста, см. прилагаемый чертеж ... и сообщите, нужно ли нам обозначать a3 и a4 через a1 и a2 для частных производных.

enter image description here

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...