原书出处
大语言模型-基础与前沿 (熊涛)
10 第10章 减少偏见和有害性
些模型不可避免地包含偏见。Bender和Gabriel关于讽刺鹦鹉危害的研究(Bender et al,2021)发现,
大语言模型的训练集(如Common Crawl)通常过于庞大而无法进行有效审核,并且可能包含偏见或仇恨言论。此外,即使数据集可以被清洗,不同的社群也有不同的需求,过滤可能会使边缘化社群保持沉默。
所有语言模型都存在偏见,其中一些可能是有害的。 接下来我们先从数据开始。在使用互联网数据训练语言模型时,了解数据中的偏见
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/大语言模型-基础与前沿 (熊涛)/_epub-src/EPUB/xhtml/chapter12.xhtml
EPUB SHA-256:1bd3e387da1e881a4b6e0214f2c7df6e30d5cdbd1f602c69fc88edacffe6743d