下载ipynb文件到本地环境
点击打开https://tianchi.aliyun.com/course/313/3564
点右上角Fork，再点击编辑
打开的DSW环境中ipynb文件，然后点菜单File->Download下载ipynb文件
然后本地Anaconda环境启动JupyterLab，打开下载的ipynb文件
简化版本程序执行
点击工具栏三角图标执行单元格，创建倒立摆环境，多次迭代信息显示
openai官方版本依赖较多，有的要降低版本，依赖组件有ffmpeg, mpi, spinningup要求tensorflow版本小于2.0, 大于等于1.8
如果要继续测试openai官方版本，官方github地址为 https://github.com/openai/spinningup.git，目录spinup/algos/pytorch/ppo中有ppo算法代码
附安装ffmpeg步骤
找到ffmpeg主页https://ffmpeg.org/download.html，再找到windows 程序下载页，下载ffmpeg-git-full.7z
下载后解压到目录，然后添加目录到系统PATH环境变量
安装ffmpeg后，重新启动JupyterLab，让环境变量生效
安装Spinning Up的命令
git clone https://github.com/openai/spinningup.git
cd spinningup
pip install -e .