Зарегистрировали ли вы свою среду в тренажерном зале?
Вы могли бы сделать это таким образом, если бы ваша собственная среда была определена в следующей структуре:
myenv/
__init__.py
myenv.py
myenv.py
содержит класс для ваше окружение. В __init__.py
вы вводите следующий код:
from gym.envs.registration import register
register(
id='MyEnv-v0',
entry_point='myenv.myenv:MyEnv',
)
Тогда вы можете использовать его так:
import gym
import myenv
env = gym.make('MyEnv-v0')