知识卡片

专业/工作

检查点必须同步算子状态与键控状态

理解等级:未标注

重量级流框架靠检查点(某时刻内部状态的快照)支撑故障恢复和伸缩:节点挂了或要重分配分区,新实例直接从检查点加载状态,不用从最初输入重放。但检查点必须同时、原子地记录两类信息——算子状态(消费到了哪个偏移量)和键控状态(每个业务键当前聚合的结果),两者一旦不同步后果是灾难性的:偏移量领先会导致部分事件永远漏算,键控状态领先则导致事件被重复计算。发散:这是”进度指针”和”指针指向的执行结果”必须捆绑存储的通用教训,数据库WAL和数据页刷盘顺序是同一类问题。

这张卡片看不懂?

已有反馈 · 0 / 10 条

    还没有人提交反馈。

    原书出处

    参考来源

    《微服务与事件驱动架构》第11章《使用重量级框架的微服务》