上图是咱们之前的一个例子，当遍历到第三个单词Teddy时，仅凭前两个单词He said不足以判断这是否是人名的一部分，这是因为我们在此之前讲的模型，无论你用的单元是最基础的RNN单元还是GRU单元还是LSTM单元，整个序列模型都是单向RNN，所以后面的影响不到前面的。最后暑促先来看一下GRU和LSTM的对比，从公式可以看到LSTM中a^和c^已经不是一个东西了，然后LSTM有三个门，分别是更新门，

一.介绍学习目标一、 计算机协议介绍1 什么是协议简单来说，协议就是计算机之间通过网络实现通信时事先达成的一种“约定”；这种“约定”使那些由不同厂商的设备，不同 CPU 及不同操作系统组成的计算机之间，只要遵循相同的协议就可以实现通信。协议可以分很多种，每一种协议都明确界定了它的行为规范：2 台计算机之间必须能够支持相同的协议，并且遵循相同的协议进行处理，才能实现相互通信。2 协议的标准化计算机通

左侧是电影名，上侧是用户名，然后右下侧是用户给电影的评分，最右侧是每个电影的特征（是的，特征也有评分，比如romance=0.1代表有一点小浪漫，romance=0.99代表非常浪漫，等于0就是和浪漫不沾边，即浪漫的程度）这里假设给定参数w和b，和之前的线性回归恰恰相反，咱们之前是给定x，需要建立模型来推导w和，但是咱们是假设有了w和b，建立模型来推x，也就是如下图所示，x_1和x_2都是未知的。

，指的是在梯度下降的每一步中，我们都用到了所有的训练样本，在梯度下降中，在计算微分求导项时，我们需要进行求和运算，所以，在每一个单独的梯度下降中，我们最终都要计算这样一个东西，这个项需要对所有个训练样本求和。对了，吴恩达老师的课件里的代码是用的jupyter notebook写的，但是因为jupyter notebook的每个单元格是独立的，所以在一个单元格里定义的东西，另一个单元格里用不了，所以

之前时jdk1.6,装1.8之后，java -version是1.8，notwithstanding，javac -version仍是1.6只要把%JAVA_HOME%\bin放到Path最前面就好了。解决。注意！如果Path满了，像这篇（戳一下）所说，把%JAVA_HOME%\bin放到Path1里，再把Path1放到最前面是不行的，必须得把%JAVA_HOME%\bin单独拿出来放到最前面！！

一.容器简介容器，是用来容纳物体、管理物体。生活中我们会用到各种各样的容器。如锅碗瓢盆、箱子和包等。程序中的容器也有类似的功能，用来容纳和管理数据。开发和学习中需要时刻和数据打交道，如何组织这些数据是我们编程中重要的内容。我们一般通过容器来容纳和管理数据。事实上，我们前面所学的数组就是一种容器，可以在其中放置对象或基本类型数据。数组的优势：是一种简单的线性序列，可以快速地访问数组元素，效率高。如果

另外，对于很多技术公司可能会遇到的一些问题，通常来说，正样本的数量很少，甚至有时候是0，也就是说，出现了太多没见过的不同的异常类型，那么对于这些问题，通常应该使用的算法就是异常检测算法。下图的例子是飞机发动机的制造，有很多特征，我们为了方便讲解取其中的两个特征：发动机产生的热量和震动强度，然后数据集是m个（发动机，每个发动机有两个特征），我们这个异常检测的问题就是测试新的数据和原来的数据是否相似，

使用单个决策树的缺点：单个的决策树对于数据的改变非常敏感，比如咱们之前的例子中一直把耳朵形状选择为根节点的特征，但是你可能改变某个猫的某些特征，这样虽然只是改变了十只猫中的一只，但是也会影响决策过程，根节点选择的特征就会改变，这就是一棵新的决策树了。和之前不一样的地方就是当每一轮生成新的训练集时，不是有放回随机选取10个了，即每个训练示例不是等概率选取了，比如在本轮前面的决策树预测时把训练示例A分

可以看到左侧的算法当y代入0或1的时候，会发现其实和右边的loss定义是一个道理（注意看吴老师的蓝色和红色的批注），所以Softmax回归其实是逻辑回归的泛化。先来一个jupyter notebook的例子，可以看到在数学上的两个结果相同的表达式在计算机中却输出不一样，下面的方法就可以提高运算的精度。上面是一个新的问题，比如一个自动驾驶系统，可能要在一张图片里识别出有无汽车，公共汽车，行人，那么此

在PyTorch中，模型的可学习参数（即权重和偏差）包含在模型的参数中，（使用可以进行访问）。state_dict是Python字典对象，它将每一层映射到其参数张量。注意，只有具有可学习参数的层（如卷积层，线性层等）的模型才具有state_dict这一项。目标优化也有state_dict属性，它包含有关优化器的状态信息，以及使用的超参数。因为state_dict的对象是Python字典，所以它们可