2019-03-01
阅读量:
837
什么是梯度下降法?
问、什么是梯度下降法?
答:
梯度下降法(Gradient descent)是使得代价函数达到最小的经典方法之一

在机器学习算法中,在最小化损失函数时,可以通过梯度下降法来一步步的迭代求解,得到最小化的损失函数,和模型参数值。反过来,如果我们需要求解损失函数的最大值,这时就需要用梯度上升法来迭代了。
梯度下降法和梯度上升法是可以互相转化的。比如我们需要求解损失函数f(θ)的最小值,这时我们需要用梯度下降法来迭代求解。但是实际上,我们可以反过来求解损失函数 -f(θ)的最大值,这时梯度上升法就派上用场了。






评论(0)


暂无数据
推荐帖子
4条评论
3条评论