起因：在Pycharm中，基于python新建了环境，输入conda activate base后突然无法激活虚拟环境了解决1.找到Anaconda Prompt右击进入文件所在位置2. 右击进入属性3. 复制cmd.exe开始到最后的路径4. 粘贴到pycharm-settings-tools-terminal-shell path中5. 保存重启pycharm，问题解决。详细参考下面参考文献。

灰度图像只包含亮度信息，不包含颜色信息，因此数据量比彩色图像小，处理起来更加简单和快速。这对于需要实时处理大量图像数据的场合尤为重要。：在许多图像处理任务中，如边缘检测、图像增强、特征提取等，颜色信息并不是关键因素。去除颜色信息可以减少计算的复杂度，提高算法的效率。：在某些情况下，颜色可能会分散观察者的注意力，而灰度图像可以更好地突出图像的结构和纹理，使得关键信息更加明显。：在图像分析和机器视觉领

在无监督学习中，没有外部反馈，学习是通过数据本身的特性来驱动的。而在强化学习中，反馈是在智能体执行动作后由环境提供的奖励，这些奖励可能是稀疏的（不是每个动作都有奖励）、延迟的（长期效果）且通常需要智能体自己探索来确定动作的优劣。在强化学习中，智能体会基于其观察到的环境状态进行决策，执行动作，并接收环境给予的奖励（或惩罚）。而强化学习是关于连续决策的，智能体需要在一系列的时间点上做出一系列的动作。无

配置window10，python3.7，tensorflow1.14.0，运行第一节多臂赌博机代码时遇到AttributeError: ‘EntryPoints‘ object has no attribute ‘get‘。

之前下载的python3.8，在对应Pytorch和Tensorflow时没太在意版本，在运行一些代码时，提示Pytorch和Tensorflow版本过高，直接降下来，有时候又和Python3.8不兼容，所以又在虚拟环境搞一个Pyhon3.7，下载一些低版本的Pytorch和Tensorflow。

意思是缺rendering文件，这个问题主要是由于Gym版本的变化，在某个版本中删除了classic_control包中的rendering文件，所以需要手动把这个文件给加上。

在上篇提到过，博主最初下载版本是pyglet-2.0.0，出现该问题后，将版本降至pyglet-1.5.27。

定义：如下图小灰猫，进行翻转操作，小黄猫，就行不同角度的旋转操作，这样实现了一图多用的效果，在原数据的技术上，将数据集翻了几倍。比方说你现在有一个1w的数据集，经过数据增强，可以完成10w的数据集。注意：进行训练时需要tensor格式的数据，所以展示的时候tensor的数据需要转换成numpy的格式，而且还需要还原回标准化的结果。目的：我们所收集准备训练的数据都是很可贵的，数据越多成本也就越高，所

任何跨时代的技术，其利弊都呈现出极端化现象。

从上面的论述中我们发现，感知大模型（语言大模型、视觉大模型、嗅觉大模型、味觉大模型）（深度学习），让智能体具有理解真实世界的能力，在这个能力的基础上，决策大模型（强化学习）赋予了智能体思考的能力，而数字孪生让智能体可以在虚拟环境中快速且无损的找到诸多思考下最优的解决方案。具身智能是通往通用人工智能的大门，而强化学习是通往具身智能的大门。