Q-learning是一种强化学习算法，其主要目的是通过学习如何做出最优决策来最大化长期奖赏。在Q-learning中，我们使用一个称为Q-table的表格来保存每个状态下可用行动的值函数。这个值函数表示了采取某个特定行动后，预期获得的长期奖赏。重复步骤2至4，直到达到任务结束条件。Q-learning有一些优缺点。优点包括：具有较好的收敛性，不需要先验知识，可处理连续状态和动作空间问题等。缺点包

linux环境下python中import找不到自定义模块解决方法：修改环境变量/etc/profile打开/etc/profilevim /etc/profile在/etc/profile的最后一行添加export PYTHONPATH=$PYTHONPATH:/home/mycode//home/mycode/ 为添加库的路径生效：退出后输入以下命令source /etc/profileOK！

图片尺寸转换的算法

1 conda创建pytorch虚拟环境2 解决opencv在pycharm不提示代码的问题

tensorflow和pytorch的卷积比较

pytorch实现cifar10分类任务

直接使用pip install xgboost安装， 即使加了源也安装失败，当然程序猿跟猿猴一样，上蹿下跳，不解决问题咋能安心。方案：采用下载xgboost的方法，然后手工安装但是前提是要下载正确版本的xgboost查看匹配版本：pip debug --verbose结果结论：也就是说这些就是可以匹配的版本点击访问xgboost官网找到对应版本，下载，然后进入whl文件所在的目录，在文件夹输入栏中

jupyter notebook中ipynb文件输出内容太多打不开的解决方法

本文主要记录虚拟环境的创建、查看、进入、退出和删除虚拟环境。使用虚拟环境，我们可以随意对虚拟系统进行设置或更改操作，尤其是使用虚拟机可以进行系统硬盘的格式化，进行重新分区操作，而且不会担心丢失数据，因为虚拟机是系统上运行的一个虚拟软件，对虚拟机系统的任何操作都相当于在操作虚拟机的虚拟机设备和系统，不会影响计算机上的真实数据。简单来讲的，就是创建一个一个独立的小房子，在各自小房子可以配置自己想要..

jupyter notebook安装插件jupyter notebook被广泛使用，插件能大大提高效率。准备工作1 下载选择插件的工具栏，进入cmd中输入：pip install jupyter_contrib_nbextensions2 将插件工具栏添加到jupyter notebook页面中，相当于安装工具栏，cmd中输入:jupyter contrib nbextension install