Sutton & Barto: Reinforcement Learning: An Introduction

教材简介

• 来源：Richard Sutton、Andrew Barto（University of Alberta）
• 先修要求：机器学习基础、概率论、微积分
• 课程难度：🌟🌟🌟🌟
• 预计学时：80 小时 +

Sutton & Barto 的《Reinforcement Learning: An Introduction》是强化学习领域的"圣经"。Richard Sutton 被称为"强化学习之父"。

教材资源

• 官方网站：incompleteideas.net
• 免费在线阅读：完全免费
• 配套代码：GitHub

内容结构

• 第一部分：表格型方法（多臂老虎机、MDP、DP、MC、TD）
• 第二部分：近似方法（函数逼近、策略梯度）
• 第三部分：前沿（探索与利用、多智能体 RL）

自学建议

先学 David Silver 课程再读这本书。 书偏理论，建议先建立直觉。

做书后习题。 每章都有习题，能帮你检验理解程度。

重点关注前 6 章。 前 6 章覆盖了 RL 的核心概念。

备注

Sutton & Barto 的 RL 教材是 RL 研究者的必读书。如果你想深入理解 RL 的理论基础，这本书是必读的。