阅读背景:

指数加权平均-exponential weighted average

来源:互联网 

前言

上一篇我们说通过mini batch的方式来为梯度下降算法增速。 这次说一说指数加权平均。 它同样是用来给梯度下降增速的。 在我们的正常的梯度下降中,不论是mini batch还是 full batch,梯度下降的效果大概是下面这个样子的。上一篇我们说通过mini batch的方式来为梯度下降算法增速。 这次




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: