← 返回卡片

原书出处

智能搜索和推荐系统:原理、算法与应用(零基础掌握搜索和推荐系统的原理、架构、算法) (智能系统与技术丛书)

04 第4章 搜索系统框架及原理

核验版本的摘录快照 · 导入于 2026-11-18T22:35:03.559Z

本中的所有词条转换成大写或者小写,但在某些特殊情况下,需要对大小写进行区分。 对于中文的词法分析,最关键的就是中文分词。

在中文分词的过程中,有两大难题:一是歧义识别,所谓歧义是指同样的一句话可能有两种或者多种切分方法;二是新词识别,“新词”的专业术语为“未登录词”,也就是那些在字典中没有收录过的词。

再谈谈中文分词。所谓“分词”,指的就是将一个完整的句子划分为一个个词条的过程。这种词条应当满足某种语言规则,以便为其建

此预览只包含定位所需的摘录和上下文。

原书定位详情

来源:a19c7933-4eda-4176-aebd-30fe7e1ad292

正文位置:extracted/智能搜索和推荐系统:原理、算法与应用(零基础掌握搜索和推荐系统的原理、架构、算法) (智能系统与技术丛书)/_epub-src/text/part0063.html

EPUB SHA-256:7c59ad7c208225d5ad9ff8ebac84642c693438b69bb9a48fad164b9dfb1eb976