python OpenAI健身房监视器在录制目录中创建json文件

Question

我正在健身房CartPole-v0环境中实现价值迭代，并希望将代理动作的视频记录在视频文件中。我一直在尝试使用 Monitor 包装器来实现这一点，但它会在录制目录中生成 json 文件而不是视频文件。这是我的代码：

env = gym.make('FrozenLake-v0')
env = gym.wrappers.Monitor(env, 'recording', force=True)
env.seed(0)
optimalValue = valueIteration(env)
st = time.time()
policy = cal_policy(optimalValue)
policy_score = evaluate_policy(env, policy)
et = time.time()
env.close()
print('Best score: %.2f  Time: %4.4f sec' % (policy_score, et-st))

监控json文件

我遵循了本教程，但不确定出了什么问题。我在谷歌上搜索了很多，但没有遇到任何有用的东西。

Answer 1

上次我检查时，这工作正常：

env = gym.wrappers.Monitor(env, "./vid", video_callable=lambda episode_id: True,force=True)

这将录制所有剧集的视频。您可以使用episode_id选择要录制的剧集。