← 返回卡片

原书出处

大数据日知录_架构与算法

12 流式计算

2014年9月第1版 · 核验版本的摘录快照 · 导入于 2026-10-24T04:14:12.140Z

在Storm的送达保证机制中,如果一条数据i能够从Spout流转到某个终结节点(即这个节点不再产生数据i的衍生数据),对于其中任意一个由i衍生的数据,其对应的随机ID一定会被XOR操作两次:一次是在产生这个数据的上游节点,因为如果计算节点正确执行后,新产生的数据随机ID会被用来更新签名;另外一次是在其对应的下游节点,如果下游节点能够接收到上游节点传送来的数据,那么会用输入数据的随机ID去更新签名。所以对于任意一个衍生数据,其被赋予的随机ID被两次用来更新签名,所有的数据都是如此,所以签名的最后一定是0。以上面所举例子中的数据d2为例,更新签名的节点顺序依次为B、D、F、G,其对应完整的XOR操作过程是:(01001 XOR 01001)XOR(11011 XOR 11011)XOR(11101 XOR 11101)=0。

此预览只包含定位所需的摘录和上下文。

原书定位详情

来源:a19c7933-4eda-4176-aebd-30fe7e1ad292

正文位置:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00017.html

EPUB SHA-256:e45b74c4bdd8959aef24f2a5183280eb73ec5f173108f8679a4bbf44bbd5b34d