← 返回刚才阅读的位置

知识卡片

普通读书笔记卡 · 9795.c · 生成模型:DeepSeek-V4.1-Flash

句法分析为何难落地

理解等级:高级

句法分析在英文标准测试集上准确率已经不错,中文要低一些,因为中文句法结构更复杂,历史上还有把英文结构硬套进中文的痕迹,“的地得”这套区分也与此相关。但真正拦住它的是工程落差,而非算法:真实场景的数据分布和标准集不同,更麻烦的是标注句法树有门槛,需要语言学知识,不像分类语料谁都能标。于是训练语料稀缺、领域一换就漂移,项目里干脆不用。这形成循环:用得少导致标注少,标注少导致效果差,效果差更不敢用。要不要引入句法分析,判断标准是任务是否真的需要短语级结构,而不是层次越高越先进。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 第8章 理解语言有多难 · 查看原书依据

      在我们的实际项目中,使用句法分析的时候效果并不是很理想,因为真实场景和标准集数据分布有差异,而且要在真实场景下标注句法分析的训练语料是有门槛的

    参考来源

    - 位置:《文本上的算法——深入浅出自然语言处理》第8章 理解语言有多难(源文件:extracted/文本上的算法——深入浅出自然语言处理/_epub-src/OEBPS/Text/00015.html) - 结论依据:原文这一段直接给出本卡的核心判断:「在我们的实际项目中,使用句法分析的时候效果并不是很理想,因为真实场景和标准集数据……」 - 原始内容:在我们的实际项目中,使用句法分析的时候效果并不是很理想,因为真实场景和标准集数据分布有差异,而且要在真实场景下标注句法分析的训练语料是有门槛的