ESP32官方支持通过集成开发环境（IDE）中的官方插件安装流程：Eclipse 或 VSCode也可以使用ESP-IDF软件开发框架并且自行搭建编译工具链（不推荐新手使用）在官网上下载个人版VSCode：https://code.visualstudio.com/#alt-downloads根据自己的电脑系统类型选择X64或者ARM64不知道自己电脑系统类型的可以在CMD窗口输入：systemi

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录前言一、强化学习是什么？二、基本模型1.基本框架2.学习过程三.马尔科夫决策过程（Markov Decision Process. MDP）1.马尔科夫性质2.MDP的基本组成部分总结前言记录B站学习龙强老师强化学习相关视频后的总结笔记，视频链接：https://www.bilibili.com/video/BV1hq4y1n

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录前言一、pandas是什么？二、使用步骤1.引入库2.读入数据总结前言参加完16届智能车竞赛单车拉力组，最终止步华南赛区，比赛成绩为58.7s，没能进国赛挺遗憾的，单车组作为16届新出的赛题，制作难度较大，尤其是车模的平衡控制。在此我打算总结一下我们大半年来做车的经验，让实验室的学弟学妹能少走一些弯路。（PS:16届单车组为室