知识卡片
垂直搜索引擎的定位
垂直化搜索与Google、Baidu这类通用搜索的差别不在技术栈而在对象:后者用爬虫抓全网建索引,前者只针对企业内部自有数据提供检索。它补两个短板。其一,用户要全文检索、模糊匹配,而数据库like查询在大数据量下走不了索引、效率极低;其二,分库分表或改用NoSQL后数据被拆散,多表关联与复杂组合查询难以甚至无法执行。搜索引擎把多来源字段预先冗余成一张大表并建倒排索引,复杂查询与分组统计便能在索引侧完成。代价是索引并非主库实时镜像:更新要重建或增量同步,存在延迟,只能保证最终一致,宽表冗余也带来存储与一致性成本。它是查询能力的补充,而非替代关系型存储。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第2章 分布式系统基础设施 2.4 垂直化搜索引擎 · 查看原书依据
垂直化的搜索引擎主要针对企业内部的自有数据的检索,而不像Google和Baidu等搜索引擎平台,采用网络爬虫对全网数据进行抓取,从而建立索引并提供给用户进行检索。在分布式系统中,垂直化的搜索引擎是一个非常重要的角色,它既能满足用户对于全文检索、模糊匹配的需求,解决数据库like查询效率低下的问题,又能够解决分布式环境下,由于采用分库分表或者使用NoSQL数据库,导致无法进行多表
参考来源
- 位置:《大型分布式网站架构设计与实践》第2章《2.4 垂直化搜索引擎》(源文件:`extracted/大型分布式网站架构设计与实践/_epub-src/text/part0007_split_004.html`,来源项目 `a19c7933-4eda-4176-aebd-30fe7e1ad292`,文件 SHA-256 `6b17e8ae39ba9d3082d863cc25fb1d874604b7173bc0245503e7a8afffeed684`)
- 结论依据:原文『垂直化的搜索引擎主要针对企业内部的自有数据的检索,而不像Google和Baidu等搜索引擎平台,采用网络爬虫对全网数据进行抓取』直接界定其边界。
- 原始内容:垂直化的搜索引擎主要针对企业内部的自有数据的检索,而不像Google和Baidu等搜索引擎平台,采用网络爬虫对全网数据进行抓取,从而建立索引并提供给用户进行检索。在分布式系统中,垂直化的搜索引擎是一个非常重要的角色,它既能满足用户对于全文检索、模糊匹配的需求,解决数据库like查询效率低下的问题,又能够解决分布式环境下,由于采用分库分表或者使用NoSQL数据库,导致无法进行多表