本文我们针对多臂老虎机问题做一个基于python的仿真，通过仿真来具体地探索一下epsilon-greedy算法在多臂老虎机问题上的表现。本文中代码在Jupyter Notebook中运行确认过。

上一篇我们用全连接层(Dense layer)实现了一个分类器用于MNIST手写数字识别。但是由于MNIST的数据样本是28x28的图像，所以更适合于用卷积神经网络来实现它的识别任务。本文就来介绍如何构建一个简单的卷积神经网络用于MNIST手写数字识别。

策略评估（Policy Evaluation），简单来说，就是针对某个既定的策略求其状态值函数和动作值函数。求得了状态值函数和动作值函数，事实上就很容易进行不同候补策略之间的性能对比并进而求得最优策略。假定MDP的动力学函数p(s',r|s,a)是完全知道，理论上来说，就可以针对特定策略的值函数的进行精确的闭式解求解。本文给出一个简单的MDP模型的状态值函数的求解示例。

简要介绍了斯皮尔曼相关系数(Spearman correlation coefficient)的概念、计算公式，以及手动计算例、调用scipy函数、pandas函数计算的代码示例。。。

特征图的可视化，是指对于给定输入图像，展示模型处理后的各中间层（包括卷积层和池化层等）输出的特征图（各中间层的激活函数的输出代表该层特征图）。这让我们可以看到输入数据在网络中是如何被分解，不同滤波器分别聚焦于原始图像的什么方面的信息。我们希望在三个维度对特征图进行可视化：宽度、高度和深度（通道，channel）。每个通道都对应相对独立的特征。所以将这些特征图可视化的正确方法是将每个通道的内容分别会

机器学习和数据科学领域有无数多优秀的工具和资源可供使用，令人眼花缭乱，有时会让我们很难弄清楚该学习什么技能，该使用哪种工具。本文对机器学习和数据科学领域最常用的Python开源库做一个罗列和极简介绍（当然仅限于我所知道、用过且喜欢的），仅作抛砖引玉之用。另外，此列表会不断增长。

被tf.keras.preprocessing.image_dataset_from_directory逼疯了。。。昨天刚写了一个博客，记录学习使用image_dataset_from_directory从目录中加载大型数据集的过程，觉得感觉不错。今天准备正式用用这个做一个深度学习模型训练实验，自信满满地开始，然后。。。遭到了暴击。。。先记录一下这个问题，不知道有没有人碰到过同样的问题。

本系列介绍如何搭建一个卷积神经网络用于图像分类的深度学习问题，尤其是再训练数据集比较小的场合。通常来说，深度学习需要大量的数据进行训练，尤其是像在图像处理这种通常数据维度非常高的场合。但是当你没有一个足够大的数据集进行训练的时候应该怎么办呢？本文是本（小）系列的最后一篇，基于预训练模型的模型微调训练一个卷积神经网络图像分类器。

在测试自动化领域，BSI指的是Boundary Scan Inspector，顾名思义，是基于边界扫描技术（Boundary Scan）用于测试和诊断集成电路（IC）的用以实现测试自动化的设备。

如果你希望匹配字符串而不是严格意义上的单词（即字符串可以是其他字符串的一部分），可以省略。命令组合来统计一个文件中特定单词或字符串的个数。运行上面的命令即可得到 “example” 在。在 Linux 中，可以使用。