知识卡片
LMS按预测残差更新
在线性输出的单样本LMS中,更新量和残差及输入向量成正比。预测偏低时沿输入方向增加权重,偏高时相反。步长控制调整幅度。对多层网络仍需算各层参数对损失的影响。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 神经网络基础 前馈网络的学习目标 · 查看原书依据
下降法的具体方法见13.1节。式(12.21)也称为LMS算法或δ学习规则。LMS算法利用梯度下降法对网络参数进行学习和更新。反向
参考来源
- 位置:《机器学习基础》第12章,12.2 神经网络(book-source:extracted/机器学习基础/_epub-src/EPUB/xhtml/chapter80.xhtml)
- 结论依据:原文借「式(12.21)也称为LMS算法或δ学习规则」处的论述给出本卡所解释的关系或做法。
- 原始内容:下降法的具体方法见13.1节。式(12.21)也称为LMS算法或δ学习规则。LMS算法利用梯度下降法对网络参数进行学习和更新。反向