ML-Agents系列:
利用ML-Agents进行强化学习一:开发环境
利用ML-Agents进行强化学习二:UNITY实例工程简介
利用ML-Agents进行强化学习三:训练模型
利用ML-Agents进行强化学习四:观察训练进展
1、ML-Agents 简介

Unity机器学习代理工具包(ML-Agents)是一个开源项目,它使游戏和模拟成为训练智能代理的环境。通过使用简单易用的Python API,可以使用强化学习、模仿学习、神经进化或其他机器学习方法对代理进行训练。
ML-Agents 还提供了实现(基于TensorFlow)的最先进的算法,使游戏开发者和爱好者为2D, 3D和VR/AR游戏,轻松培训智能代理。这些经过训练的代理可以用于多种用途,包括控制NPC
2、ML-Agents工具包包含几个组件:
- Unity 包(com.unity.ml-agents)
包含 Unity C# SDK(整合到你的Unity场景中)
- Python 包:mlagents
包含机器学习算法,使您能够训练行为在您的Unity场景。大多数ML-Agents用户只需要直接安装mlagents。mlagents_envs包含一个与Unity场景交互的Python API。它是一个基础层,促进了Unity场景和Python机器学习算法之间的数据信息传递。因此,mlagents依赖于mlagents_envs。gym_unity为你的Unity场景提供一个支持OpenAI Gym 接口的python包。
- Unity Project
包含几个示例环境,突出显示工具包的各种特性,以帮助您入门。
3、ML-Agents开发环境:
- 安装 Unity (2018.4 或更高)
直接官网下载
- 安装 Python (3.6.1 或更高)
可以用anaconda安装,详见另一篇文章《深度学习小白篇一:Anaconda的安装和配置》
- 下载ML-Agents工具包
cd 存放目录 git clone https://github.com/Unity-Technologies/ml-agents.git
如果没有安装git工具,可以直接下载 h*t*t*p*s://github.com/Unity-Technologies/ml-agents/archive/release_2.zip 这个包
- Unity安装 com.unity.ml-agents Unity package

- 安装 mlagents Python 包
安装Aconda
详见另一篇文章 《深度学习小白篇一:Anaconda的安装和配置》
安装 pip3
cd 安装目录Anaconda3Scripts easy_install.exe pip
安装mlagents
pip3 install mlagents
等待安装完成,开发环境准备好了,接下来我们就可以看看官方的,入门指南,它包含几个简短的教程,介绍如何在Unity中设置ML-Agents工具包,运行一个预先训练过的模型,以及如何构建和训练环境。
注意,如果你是用Anaconda安装的python环境,妥当起见,更新一下Anaconda的安装的包。