1. Apollo推荐技能树

Apollo 自动驾驶工程师技能图谱 - 编程开发技能图谱 - 文江博客
自动驾驶技术如何升级？这份技能图谱为你指路_搜狐汽车_搜狐网
 

2. 经典基础

• MDP，看周博磊老师视频。强化学习纲要 第一课 概括与基础 上_哔哩哔哩_bilibili
• TODO

3. 深度学习

• 李宏毅老师视频。李宏毅2020机器学习深度学习(完整版)国语_哔哩哔哩_bilibili

4. 强化学习

4.1 开源库

（1） spinning up

spinning up是openAI的，比较古老了，算法写的比较清晰易懂，也有一些入门指导，适合新手，地址如下：

GitHub - openai/spinningup: An educational resource to help anyone learn deep reinforcement learning.

（2）Stable baseline 3

Stable baseline 3也是openAI的算法库，读了一下代码，算法更全面一些，但封装的过于复杂了，基类满天飞，各种依赖项，对只想熟悉算法的同学并不友好。

GitHub - DLR-RM/stable-baselines3: PyTorch version of Stable Baselines, reliable implementations of reinforcement learning algorithms.

（3） 天授

清华自己搞的轻量化的强化学习算法库，算法支持比较全面，代码也尽量追求简洁，也比较适合新手学习。

GitHub - thu-ml/tianshou: An elegant PyTorch deep reinforcement learning library.

4.2 Papers & books

书籍：蘑菇书-EasyRL，适合新手入门 + 作为工具书   GitHub - datawhalechina/easy-rl: 强化学习中文教程（蘑菇书），在线阅读地址：https://datawhalechina.github.io/easy-rl/

4.3 课程 & 网络资料

• 周博磊老师视频：偏传统强化学习（相较于深度强化学习），重视推导，适合打牢理论基础。强化学习纲要 第一课 概括与基础 上_哔哩哔哩_bilibili
• 李宏毅老师：深入浅出，细节过程有演示，容易理解。【李宏毅】2020 最新课程 (完整版) 强化学习 - 71.作業十五 ML Lecture 23-1 - Deep Re_哔哩哔哩_bilibili
•  莫烦视频，有demo演示。强化学习 (Reinforcement Learning) | 莫烦Python
• 资料汇总贴，内含练习题。强化学习（reinforcement learning)有什么好的开源项目、网站、文章推荐一下？ - 知乎

5. 仿真器

• Apollo。Apollo
• DriverGym，内含几个RL仿真平台。DriverGym，一个强化学习用于自动驾驶的开源平台 - 知乎
• CommonRoad，轻量级仿真器，集成了多个数据集，支持RL。CommonRoad

6. 数据集

• 规控类数据集。自动驾驶开源轨迹数据集汇总和测评 - 知乎
• 数据集汇总。2020年| 最新自动驾驶数据集汇总，持续更新（2）_cliy的博客-CSDN博客_apollo自动驾驶数据集