logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Pytorch深度学习实践笔记 --- 反向传播Back Propagation

Gradient梯度就是对cost(w)求倒数 g = ∂cost(w)/∂w ,代表当前函数cost(w)的趋势Update w = w - a * g(a --- 学习率)= w - a * ∂cost(w)/∂w 梯度开始下降,迭代过程就是根据梯度实现若g<0,此时cost(w)单调减,则w👉;若g>0,cost(w)单调增,则w👈(都是往下降方向走)由于本质是贪心,所以不一定得到全局最

#深度学习#pytorch
到底了