知识卡片
离线在线搜索分开
大型推荐系统里,在线搜索服务和离线计算用的搜索最好分开部署。离线场景要每天全量计算所有商品的文本相似度,商品一多到百万、千万甚至上亿,分布式并行查询索引会给集群带来极大压力;若和在线业务共用一个集群,必然拖慢网站或 App 的用户体验。分开部署的代价是要维护两套集群,更麻烦。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《分布式机器学习实战》第8章《完整工业级系统实战》(源文件:_epub-src/OEBPS/Text/chapter8.xhtml)
- 结论依据:原文说明对于大型推荐系统,在线搜索服务和离线计算服务最好分开部署:离线场景如每天全量计算所有商品的文本相似,商品上百万、千万甚至上亿时计算量特别大且分布式并行查询索引,集群压力非常大,与在线业务混在一起必然影响网站或App用户体验;缺点是维护起来麻烦。
- 原始内容:对于一个大型的推荐系统来讲,用于在线的搜索服务和离线计算的服务最好分开部署……如果和在线的业务混在一起的话,必然会影响到网站或App用户的性能体验,所以建议分开部署,但这样的缺点就是维护起来麻烦