← 返回卡片

原书出处

深度学习详解

07 Transformer 7.4.1 自回归解码器

核验版本的摘录快照 · 导入于 2026-11-21T12:46:32.558Z

Transformer 解码器的详细结构如图7.17 所示.类似于编码器,解码器也有多头注意力、残差连接和层归一化,以及全连接前馈神经网络.解码器在最后会执行 softmax操作,以使其输出变成概率.此外,解码器还使用了掩码多头自注意力,掩码多头自注意力可以通过一个掩码(mask)来阻止每个位置选择其后面的输入信息.

此预览只包含定位所需的摘录和上下文。

原书定位详情

来源:a19c7933-4eda-4176-aebd-30fe7e1ad292

正文位置:extracted/深度学习详解/_epub-src/OEBPS/Text/Chapter07.xhtml

EPUB SHA-256:35d2d4b7de742e0ce7756e7fb57c534014bf33cecdf0483a75e23cb7446cb7dc