一个智能体从起点出发，避开悬崖行走，最终走到终点。如图所示，智能体的起点是左下角，终点是左上角，我们的目标是避开悬崖走到中断。智能体可以采取的行动有4种：上、下、左、右。如果智能体采取动作后触碰到边界墙壁则状态不发生改变，否则就会相应到达下一个状态。智能体每走一步的奖励是 −1，掉入悬崖的奖励是 −100。""" 悬崖漫步环境"""self.ncol = ncol # 定义网格世界的列self.n

git 配置私人令牌，不用每次输入密码且安全性高

原因：该报错是由于没有服务器端的.vscode-server未及时更新导致。如果你在VScode中遇到不停输入密码或者报错。

随着 LLM 的不断发展，算力成为一个非常热门的话题，尤其在前段时间4090禁止出售给中国的时候。说到算力，不免要讨论一下 GPU。虽然大家都用着 GPU ，但真正了解 GPU 工作原理的人并不多。本篇文章将会从 GPU 底层架构出发告诉你 GPU 是如何进行并行计算的。

上图中看到我的Edge版本是 120.0.2210.61。将其解压到python解释器目录并重命名为。将压缩包解压到一个指定路径下。访问百度，看看能否正常打开。安装浏览器驱动时注意版本保持一致。

VSCode是一款开源的编译神器，有很多人喜欢用它来工作、学习。其一是它是一个轻量级应用，运行时不会占用太多的空间；其二是它的插件已经十分丰富，足以满足我们日常的需求；其三是由于使用的人非常多，因此当VSCode出现问题时，也很容易在网上得到解决。本篇文章将教会你如何远程连接服务器，并在此基础上如何运行程序。

跟着教程走了一遍，一模一样的步骤，就是报错。

服务器的系统大多都是 Linux 系统，但也有少部分同学使用 Win10 系统的服务器（比如我），那如何远程访问本地win10台式机呢，这就要用到今天的主角：SSH。安装完成之后，需要进行初始化配置，以管理员身份运行PowerShell 。设置服务自动启动确认一下防火墙是否是放开如果是放开的，结果会提示 。以下所有操作均在 PowerShell 中进行。允许新用户使用访问以管理员身份编辑 %pro