返回主题:状态与容错:状态存哪、错了怎么恢复

此卡片不在当前主题的阅读序列中,可返回主题继续阅读。

知识卡片

普通读书笔记卡 · 1777.b

消息语义分层

理解等级:高级

至多一次允许丢失但不重复处理,至少一次以确认与重放避免可恢复失败造成永久遗漏,却可能重复执行。恰好一次应说明范围:通常允许网络重传和函数重试,但通过持久去重、原子状态提交及恢复协议,让受管状态只产生一次逻辑效果。它不自动覆盖外部扣款或任意非事务副作用。语义越强,确认、持久化和协调的成本越需纳入延迟与吞吐预算。

这张卡片看不懂?

已有反馈 · 0 条

    还没有人提交反馈。

    在整书笔记中的位置

    原书出处 · 1 处

    • 流式计算 · 查看原书依据

      其一,至少送达一次(At-Least Once Delivery):即上游节点保证向下游节点送达一次或者多次相同的数据。 其二,至多送达一次(At-Most Once Delivery):即上游节点不能保证将消息送达下游节点。如果流式计算系统容错机制不完善,存在丢失数据的情形,则一般属于这种类型的送达保证机制。上游节点将流数据发向下游节点后,不管下游节点是否收到,都继续进行后续处理,S4和MUDP8就属于这种送达类型,很明显,这意味着计算结果的正确性无法得到保证,因为数据如果没有正确送达下游节点,这个送达机制并不考虑继续重新发送数据。 其三,恰好送达一次(Exact-Once Delivery):即上游节点保证将流数据正确地送达下游节点且只正确送达一次,不会出现多次送达的情况。

    参考来源

    - 位置:《大数据日知录:架构与算法》第12章《流式计算》"发送与接收保证机制"及"Storm的状态持久化"一节(源文件:_epub-src/OEBPS/text00017.html) - 结论依据:本次根据完整原文窄修边界与恢复条件。三种语义需明确状态与外部副作用范围。 - 原始内容:其一,至少送达一次(At-Least Once Delivery):即上游节点保证向下游节点送达一次或者多次相同的数据。 其二,至多送达一次(At-Most Once Delivery):即上游节点不能保证将消息送达下游节点。如果流式计算系统容错机制不完善,存在丢失数据的情形,则一般属于这种类型的送达保证机制。上游节点将流数据发向下游节点后,不管下游节点是否收到,都继续进行后续处理,S4和MUDP8就属于这种送达类型,很明显,这意味着计算结果的正确性无法得到保证,因为数据如果没有正确送达下游节点,这个送达机制并不考虑继续重新发送数据。 其三,恰好送达一次(Exact-Once Delivery):即上游节点保证将流数据正确地送达下游节点且只正确送达一次,不会出现多次送达的情况。