\quad\;\;深度神经网络（Deep Neural Networks， 以下简称DNN）是深度学习的基础，而要理解DNN，首先我们要理解DNN模型，下面我们就对DNN的模型与前向传播算法做一个总结。1. 从感知机到神经网络    \quad\;\;在感知机原理小结中，我们介绍过感知机的模型，它是一个有若干输入和一个输出的模型，如下图:    \quad\;\;输出和输入之间学习到一个线

1. 定义法2. 微分法3. 链式法**参考：**https://www.cnblogs.com/pinard/category/894690.html