Невозможно изменить параметр модели в средах classic_control в спортзале OpenAI - PullRequest
0 голосов
/ 08 мая 2020

Я работаю со средой CartPole-v1 и пытаюсь изменить некоторые параметры модели (например, force_mag), чтобы проверить надежность моих алгоритмов по отношению к вариациям модели. Я пытаюсь сделать это с помощью следующего кода:

env = gym.make('myCartPole-v1) 
env.force_mag = -10.0 # nominal is +10.0

, но я не вижу никаких изменений в поведении модели, пока тестирую ее с помощью моей изученной политики (которая должна терпеть неудачу / ухудшаться, но это не так. ). При изменении других параметров (например, тележки, длины ...) ничего не происходит. Я что-то упускаю? Как лучше всего производить локальные изменения в моделях?

1 Ответ

0 голосов
/ 09 мая 2020

Проблема была решена созданием экземпляра окружения и вызовом env.unwrapped. Код в примере должен выглядеть так: env = gym.make('myCartPole-v1).unwrapped

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...