← 返回卡片

原书出处

大数据日知录_架构与算法

12 流式计算

2014年9月第1版 · 核验版本的摘录快照 · 导入于 2026-10-24T04:14:12.140Z

如图12-11所示,计算任务的某个计算节点N在另外一台物理机上设置其对应的备份服务S,计算框架定时通过心跳或者ZooKeeper来及时捕获服务状态,当节点N发生故障时,启动备份服务S来接替计算节点N的功能。这是非常常见的一种模式,但是这只适合计算节点属于无状态(Stateless)类型的服务,因为一旦计算节点N死掉,如果存有状态信息,则状态信息全部丢失,无法在计算节点S进行状态恢复。Yahoo的S4在容错机制方面就是采取这种方式的,所以存在状态信息丢失的可能,这对于流式计算系统来说是很严重的功能不足,大大限制了其使用场景。

此预览只包含定位所需的摘录和上下文。

原书定位详情

来源:a19c7933-4eda-4176-aebd-30fe7e1ad292

正文位置:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00017.html

EPUB SHA-256:e45b74c4bdd8959aef24f2a5183280eb73ec5f173108f8679a4bbf44bbd5b34d