梯度下降的公式的解释

来源:2-4 梯度下降

慕婉清4872412

2018-07-09 10:37

请问老师,梯度下降公式中学习速率乘上损失函数的偏倒的意义仍然不理解,什么叫对每次损失函数减小的维度进行不近似的参数递减?最小二乘法的公式是通过矩阵求导得到的吗?是否也可以用线性代数的知识解释呢?

写回答 关注

1回答

  • Tsuki_suki
    2018-07-13 15:55:13

    损失函数的偏导就是一个导数,就是theta的斜率,调节学习率是为了斜率变化不大,这样多次迭代就能达到最低值

Python实现线性回归

掌握python进行线性回归分析的原理及编程实践

26153 学习 · 36 问题

查看课程

相似问题