知识卡片
自然语言处理五大类问题
各种 NLP 任务大多可被模型归约为五大类问题,主要用统计方法与深度学习求解:
- 分类问题:给单词、词组或句子打标签,单词级较简单,句子级需分析构成。
- 匹配问题:判断两个句子或文章的相似程度。
- 翻译问题:把词句转换到另一种语言,句子翻译尤其困难,是重点研究方向。
- 结构分析:分析句中名词、动词等成分,并做关键词提取、关键信息检索。
- 阶段预测:由前文推断后文、提取核心段落与中心思想,也称马可夫决策过程——基于当前状态决定行动,再判断下一状态。
用途:面对一个模糊的语言需求时,先归类到这五类,就能复用对应解法。边界:这是建模视角的归纳,不是语言学的严格分类;有些任务会跨类。迁移启发:把复杂问题先“降维”到若干标准题型,是产品与算法沟通的高效语言。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 自然语言处理与循环神经网络 12.1.1 什么是自然语言处理 · 查看原书依据
目前,各种各样的自然语言处理问题基本上可以通过模型转化为五大类问题,即分类问题、匹配问题、翻译问题、结构分析以及阶段预测这五类。主要是采用统计的方法以及深度学习来解决这些问题。
参考来源
- 位置:《产品经理进阶:100个案例搞懂人工智能 (林中翘)》第12章《自然语言处理与循环神经网络》(源文件:`../../book-sources/extracted/产品经理进阶:100个案例搞懂人工智能 (林中翘)/_epub-src/OEBPS/text00017.html`,来源项目 a19c7933-4eda-4176-aebd-30fe7e1ad292)
- 结论依据:原文列举分类、匹配、翻译、结构分析、阶段预测五类,并分别给出定义与难度,支撑“NLP 问题可统一归约为五大类”的结论。
- 原始内容:目前,各种各样的自然语言处理问题基本上可以通过模型转化为五大类问题,即分类问题、匹配问题、翻译问题、结构分析以及阶段预测这五类。主要是采用统计的方法以及深度学习来解决这些问题。