原书出处
智能搜索和推荐系统:原理、算法与应用(零基础掌握搜索和推荐系统的原理、架构、算法) (智能系统与技术丛书)
04 第4章 搜索系统框架及原理
本中的所有词条转换成大写或者小写,但在某些特殊情况下,需要对大小写进行区分。 对于中文的词法分析,最关键的就是中文分词。
在中文分词的过程中,有两大难题:一是歧义识别,所谓歧义是指同样的一句话可能有两种或者多种切分方法;二是新词识别,“新词”的专业术语为“未登录词”,也就是那些在字典中没有收录过的词。
再谈谈中文分词。所谓“分词”,指的就是将一个完整的句子划分为一个个词条的过程。这种词条应当满足某种语言规则,以便为其建
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/智能搜索和推荐系统:原理、算法与应用(零基础掌握搜索和推荐系统的原理、架构、算法) (智能系统与技术丛书)/_epub-src/text/part0063.html
EPUB SHA-256:7c59ad7c208225d5ad9ff8ebac84642c693438b69bb9a48fad164b9dfb1eb976