首先Nesterov动量优化算法是Momentum优化算法的一种改进。比较这两个算法的算法步骤，基本都一样，差别就在于应用临时更新这一句即先用当前的速度v先更新一遍参数，这样做后，Nesterrov算法比Momentum算法更新更快，因为在每一次更新的时候都是基于当前速度和梯度的更新，那我在求梯度之前就先进行一次对于当前速度的更新，就会加快收敛速度。# coding=utf-8"""基于小批量梯度