知识卡片
推荐平台让实时与离线并存
推荐架构实时化后,离线计算仍可与实时计算并存:实时链路负责接入新行为、计算并服务及时预测,离线链路保留批量处理任务。将两类能力分成平台,能让推荐引擎按时效要求使用结果;这与把所有数据都改成流式处理不同,具体任务应按新鲜度和计算成本分配。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《大数据时代的IT架构设计》第2篇《腾讯个性化精准推荐平台架构》“三、系统架构及实现”(源文件:_epub-src/OEBPS/text00010.html)
- 结论依据:原文明确把实时接入、实时计算和分布式存储抽象为实时计算平台,与离线计算平台相对应,并称为实时计算加离线计算并存模式。
- 原始内容:我们把实时接入、实时计算和分布式存储给抽象出来了,抽象成实时计算平台,然后跟下面的离线计算平台相对应,所以现在的架构就是实时计算加离线计算并存的模式。