唯一的区别似乎在于它们内部分配的max_episode_steps和reward_threshold,可以如下所示访问。CartPole-v0的值为200/195.0,CartPole-v1的值为500/475.0。乍一看,其余部分似乎完全相同。 import gym env = gym.make("CartPole-v1") print(self.env.spec.max_episode_steps) print(self.env.spec.reward_threshold) ...