Почему потери и акк колебались в спайках на тренировках? - PullRequest
Новая
       63

Почему потери и акк колебались в спайках на тренировках?

1 голос
/ 09 июля 2019

Я тренирую сеть LSTM, она не колеблется повсюду, а в нескольких местах. Я пытался настроить скорость обучения. Есть ли другой способ решить эту проблему?

enter image description here

enter image description here

model.add(LSTM(64, batch_input_shape=(len(TimeStep.fodder), TimeStep.TIME_STEP + 1, 10), return_sequences=True, activation='relu'))
model.add(LSTM(128, activation='relu', return_sequences=True))
model.add(LSTM(64, activation='relu'))
model.add(Dense(2, activation='softmax'))

model.compile(loss='categorical_crossentropy', optimizer='adam', metrics=[categorical_accuracy])
history = model.fit(TimeStep.fodder, TimeStep.target, epochs=500, batch_size=len(TimeStep.fodder))
...