知识卡片
再分区与数据局部性
多实例并行消费事件流时,如果同一个业务实体(如同一个用户)的事件散落在不同分区,每个消费者实例只能看到该实体的部分数据,无法独立算出完整状态。再分区就是按新键重新对事件流分桶,让同一个键的所有事件必进同一个分区——消费者只需处理自己分到的分区,就能拿到该键相关的完整历史,是有状态计算能水平扩展的前提条件。发散:这本质是分布式系统”先分片再计算”的通用套路,数据库按key分片路由和这里思路是一回事。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
《微服务与事件驱动架构》第5章《事件驱动处理基础》