my_gym_envs

在上级目录中的__init__.py文件中添加以下内容:

    # DIY envs
    # ---------

    register(
        id='GridWorld-v1',
        entry_point='gym.envs.my_gym_envs:GridEnv1',
        max_episode_steps=200,
        reward_threshold=100.0,
        )