原书出处
大语言模型-基础与前沿 (熊涛)
11 第11章 视觉语言模型
了用于训练少样本图像-文本神经网络的冻结(Frozen)方法,其中文本编码器的权重被冻结,但用于从头开始训练图像编码器。
受前缀或提示调优的启发,Frozen可被视为一种图像条件前缀调优,即使用外部神经网络生成的图像条件激活作为连续前缀。
通过冻结Frozen中的语言模型参数,可以保留强大的语言能力。在测试时,即便使用有限的图像描述数据进行训练,该设置也可以
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/大语言模型-基础与前沿 (熊涛)/_epub-src/EPUB/xhtml/chapter13.xhtml
EPUB SHA-256:1bd3e387da1e881a4b6e0214f2c7df6e30d5cdbd1f602c69fc88edacffe6743d