OpenAI Gym Note

安装：

pip install gym # 基础版
pip install pygame
conda install -c conda-forge box2d-py # 或者 pip install gym[box2d]

atari 安装问题

1，zsh问题

pip install gym[atari]

error：找不到‘gym[atari]’
解决办法：
vim ~/.zshrc
最后一行加上：setopt no_nomatch
source ~/.zshrc

2，ROM问题
官网下载Roms.rar

unrar -x Roms.rar
python -m atari_py.import_roms ROMS

3，验证

from gym import envs
print(envs.registry)

能够看到atari中的环境，比如’Pong-v0’
4，0.26版本环境要加render_mode

env = gym.make("Pong-v0", render_mode='rgb_array')

资源

gym document
Gymnasium Documentation
Gymnasium github
动手学强化学习
openai spinnerup
openai spinnerup doc
SUTTON. Reinforcement learning: an introduction. 2018.