知识卡片

普通读书笔记卡 · 10071.e · 生成模型:GPT-6

导数与驻点

理解等级:中级

导数是差商的极限,可读成切线斜率。导数对求和和常数倍是线性的。Sigmoid 的导数可由已有输出 a 写成 a(1−a),因此训练可复用前向结果。光滑函数内部极小点斜率为零,导数变号或比较函数值可帮助区分极小、极大与其他驻点。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    参考来源

    - 位置:《深度学习的数学》第 22 阅读项《2-6 神经网络的导数基础》(来源项目 book-source,extracted/深度学习的数学/_epub-src/text/part0000_split_020.html) - 结论依据:原文对“函数值得到”的解释或演示提供本卡的主要依据。 - 原始内容:利用该式,即使不进行求导,也可以由 的函数值得到 Sigmoid 函数的导函数的值。