返回主题:倒排索引与查询处理

知识卡片

普通读书笔记卡 · 2828.c

离线在线搜索分开

理解等级:未标注

大型推荐系统里,在线搜索服务和离线计算用的搜索最好分开部署。离线场景要每天全量计算所有商品的文本相似度,商品一多到百万、千万甚至上亿,分布式并行查询索引会给集群带来极大压力;若和在线业务共用一个集群,必然拖慢网站或 App 的用户体验。分开部署的代价是要维护两套集群,更麻烦。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    原书出处

    参考来源

    - 位置:《分布式机器学习实战》第8章《完整工业级系统实战》(源文件:_epub-src/OEBPS/Text/chapter8.xhtml) - 结论依据:原文说明对于大型推荐系统,在线搜索服务和离线计算服务最好分开部署:离线场景如每天全量计算所有商品的文本相似,商品上百万、千万甚至上亿时计算量特别大且分布式并行查询索引,集群压力非常大,与在线业务混在一起必然影响网站或App用户体验;缺点是维护起来麻烦。 - 原始内容:对于一个大型的推荐系统来讲,用于在线的搜索服务和离线计算的服务最好分开部署……如果和在线的业务混在一起的话,必然会影响到网站或App用户的性能体验,所以建议分开部署,但这样的缺点就是维护起来麻烦