出现的问题1：重启后，nvidia-smi都能看到显卡，但是ubuntu内核中的网卡驱动在更新显卡驱动的过程中被删掉了。（1）uname -r查看ubuntu内核版本。（3）手动安装内核驱动，重启后网络恢复正常。联网安装，利用ubuntu系统里面提供的。sudo dpkg -i 文件.deb。（2）利用清华源下载相应的内核驱动。

1、win系统装"gym[atari]"（1）第一步，安装gympip install gym（2）第二步，安装ataripip install --no-index -f https://github.com/Kojoley/atari-py/releases atari_py2、ubuntu上装"gym[atari]"在ubuntu上安装 atari-py，首先要确保已安装 cmake，zli

出现的问题1：重启后，nvidia-smi都能看到显卡，但是ubuntu内核中的网卡驱动在更新显卡驱动的过程中被删掉了。（1）uname -r查看ubuntu内核版本。（3）手动安装内核驱动，重启后网络恢复正常。联网安装，利用ubuntu系统里面提供的。sudo dpkg -i 文件.deb。（2）利用清华源下载相应的内核驱动。

出现的问题1：重启后，nvidia-smi都能看到显卡，但是ubuntu内核中的网卡驱动在更新显卡驱动的过程中被删掉了。（1）uname -r查看ubuntu内核版本。（3）手动安装内核驱动，重启后网络恢复正常。联网安装，利用ubuntu系统里面提供的。sudo dpkg -i 文件.deb。（2）利用清华源下载相应的内核驱动。

出现的问题1：重启后，nvidia-smi都能看到显卡，但是ubuntu内核中的网卡驱动在更新显卡驱动的过程中被删掉了。（1）uname -r查看ubuntu内核版本。（3）手动安装内核驱动，重启后网络恢复正常。联网安装，利用ubuntu系统里面提供的。sudo dpkg -i 文件.deb。（2）利用清华源下载相应的内核驱动。

https://download.pytorch.org/whl/torch_stable.html

原因：terminal中运行的过程中有系统环境配置：source.bashrc但是pycharm中没有配置cuda路径所以找不到cuda解决在pychrm的需要运行的代码处配置运行的环境变量

更改ubuntu的pyhton版本解决问题的主要思路就是先查看/usr/bin中的python文件，发现该文件是python2.7的链接文件于是直接删掉这个软链接，然后重新创建python2.6的链接文件：1 rm /usr/bin/python2 ln -s /usr/bin/ptyhon2.6 /usr/bin/python在创建了python2.6的链接文件之后，还

the error ispython>>> import cv2Traceback (most recent call last):File "", line 1, inImportError: No module named cv2(1)doesnt workThe easiest way to install OpenCV on Windows

多臂老虎机问题和mdp问题的区别当然多臂老虎机问题是reward未知的MDP问题中最简单的一种，因为多臂问题不需要规划。也就是只需要估计action （选择哪个手臂）背后的reward的价值，这个action不会影响state的转移（因为任意手臂转一次，一个episode就结束了，我们就可以对选择的手臂背后的估值进行更新啦）。如果这个问题难一点，就如我说的那个估值未知的背包问题，不仅需要探索物品的