OpenAI-Baseline项目阅读-0-Baseline的安装和使用

0-Baseline的安装和使用

  • Baseline项目安装
  • Baseline调试-示例运行

Baseline项目安装

Baseline项目主页:
https://github.com/openai/baselines
将项目从GitHub上面下载下来

git clone https://github.com/openai/baselines.git

OpenAI-Baseline项目阅读-0-Baseline的安装和使用_第1张图片
安装tensorflow,版本号为1.14(这里是cpu版本,主页中也给出了GPU版本的下载方式)

cd baselines/
pip install tensorflow==1.14

等待安装完毕后,安装所有其他的依赖库

pip install -e .

如果有部分库安装失败的话,可以对照baseline/setup.py文件看一下里面要求的哪些包,然后根据自己安装失败的包的报错代码搜索一下相关资料。
之后,官方给出了一个用pytest来检验的方法。

pip install pytest
pytest

运行pytest之后,可以发现找到了一个错误
pytest-1
然后我们往上面翻找,查找错误出在哪里,可以看到是matplotlib库没有安装
OpenAI-Baseline项目阅读-0-Baseline的安装和使用_第2张图片
这里我们用pip把他安装上

pip install matplotlib

之后我们再运行pytest,如果还有错误就继续安装缺失的包,直到错误消失。

Baseline调试-示例运行

在不断的调试过程中,这里有一个比较奇怪的错误值得注意一下,错误信息为:

Exception: ROM is missing for pong, see https://github.com/openai/atari-py#roms for instructions

这里我们首先需要去下载一下Roms
http://www.atarimania.com/rom_collection_archive_atari_2600_roms.html
然后再在把他们解压到一个文件夹(Roms.rar解压之后还是两个压缩包,接着解压)
OpenAI-Baseline项目阅读-0-Baseline的安装和使用_第3张图片
然后运行下面这个命令即可

python -m atari_py.import_roms /home/qch/Roms

后面的路径就是你放这些刚刚解压出来的文件夹的路径。
错误解决完以后,尝试着运行一下用例
按照官网中给出的示例,运行命令

python -m baselines.run --alg=deepq --env=PongNoFrameskip-v4 --num_timesteps=1e6

后面只需要漫长的等待即可。。
OpenAI-Baseline项目阅读-0-Baseline的安装和使用_第4张图片
经过长时间的等待,可以看到奖励值从负的一点点跑到正的,最终在17.8结束。
OpenAI-Baseline项目阅读-0-Baseline的安装和使用_第5张图片
至此,我们的首次实验就成功了,接下来就根据具体的文件来配合一起学习代码的含义和个人的理解。

你可能感兴趣的:(python,深度学习,强化学习,linux,OpenAI)