我是在公司工作了4年之后才去读的博士，以前在公司的时候程序员、设计师、项目经理都做过，项目也参与了十几二十个吧，不记得了。读博动机不谈，但其实压力是相当大，毕竟大学成绩一般，虽然实践经验比较丰富，但学术基础非常差。当时联系导师的时候，有一位教授叫我发成绩单。发了之后直接跟我说：“你这基础太差了。”现在也有很多先工作再读博的，但那些一般都是在高校工作，比如本来就是老师。像我这种从企业出来去读的，..

目录概念强化学习中的策略（policy)：Q-learning（Quality-learning）强化学习中的State和Observation强化学习agent分类概念奖励（reward）、代理（agent，又叫智能体）、环境（environment）、状态（state）、动作（action）强化学习中的策略（policy)：目标策略（target policy）：智能体要学习的策略行为策略（b

TensorFlow 2.9的零零碎碎（六）-模型训练

目录概念强化学习中的策略（policy)：Q-learning（Quality-learning）强化学习中的State和Observation强化学习agent分类概念奖励（reward）、代理（agent，又叫智能体）、环境（environment）、状态（state）、动作（action）强化学习中的策略（policy)：目标策略（target policy）：智能体要学习的策略行为策略（b

TensorFlow 2.9的零零碎碎（六）-模型训练

目录TensorFlowPyTorchTheanoKerasCaffe：Convolutional Architecture Forfast Feature EmbeddingMXNETCNTK：Microsoft cognitive toolkit，微软认知工具包DL4JPaddlePaddleTensorFlowTensorFlow is an end-to-end open source p

目录数据及其处理文本数据词干提取（stemming）和词形还原（lemmatization）N-gram模型音频数据确定数据集规模数据及其处理样本：sample，或输入，input预测：prediction，或输出，output目标：target，真实值类别：class标签：label真值：ground-truth，或标注，annotation训练集：training set测试集：test se

目录TensorFlowPyTorchTheanoKerasCaffe：Convolutional Architecture Forfast Feature EmbeddingMXNETCNTK：Microsoft cognitive toolkit，微软认知工具包DL4JPaddlePaddleTensorFlowTensorFlow is an end-to-end open source p

目录查看CUDA/CUDNN版本Ubuntu 18.04安装CUDAUbuntu 18.04安装CUDNN查看CUDA/CUDNN版本cat /usr/local/cuda/version.txtcat /usr/local/cuda/include/cudnn.h | grep CUDNN_MAJOR -A 2也可以通过nvidia-smi查看Ubuntu 18.04安装CUDAconda in

现象：昨天还好好的，今天打开突然部分或者全部图片都是空白（WPS）或者红叉（OFFICE）原因网上有很多推测，但好像也都不太确定的样子解决方法：1. 把出现问题的图片删了，重新插入这个显然极其麻烦，我的ppt都是一两百页的，每次这么搞太折腾2. （未证实）据说给图片加框可以解决我已经按这种方式修改了我的PPT，如果还出现红叉，再来更新结论选中图片，边框和底纹，选一种颜色如果不喜欢给图片加边框，用选