百度飞桨强化学习（1）

基础

• 高等数学
• 线性代数（向量空间的变换思想）
• 概率与数理统计（期望，方差）
• Python:numpy
• 神经网络

强化学习

两种学习方法

• 基于价值
• 基于策略

乌龟环境

首先本地下载PARL：

git clone git@github.com:PaddlePaddle/PARL.git

用pycharm打开PARL的工程

进到第一节课的文件下：

cd D:\py_code\PARL\examples\tutorials\lesson1

在pycharm的终端输入python进入交互式编程：

python

然后在终端输入下面命令：

import gym
from gridworld import CliffWalkingWapper

env = gym.make("CliffWalking-v0") #创建悬崖环境
env = CliffWalkingWapper(env) #产生可视化界面
env.reset() #初始化
env.render()

乌龟通过0123上下左右的移动：

env.step(0)
env.render()

完整的乌龟探索走到终点的代码：

import gym
from gridworld import CliffWalkingWapper
import numpy as np

env = gym.make("CliffWalking-v0") #创建悬崖环境
env = CliffWalkingWapper(env) #产生可视化界面
obs = env.reset() #初始化
while True:
    action = np.random.randint(0,4)
    obs,reward,done,info = env.step(action)
    env.render()
    if done:
        break