知识卡片
分布式Cron的新约束
单机 Cron 的故障域就是那台机器,只需保存配置文件。搬到数据中心后约束全变:进程与机器解耦,但发现故障和迁移要时间,本地状态会丢,可能超过一分钟的最小调度间隔,所以要外部保存状态并备热备;容器隔离要求任务事先声明资源,资源不足会延迟启动,需记录任务全过程;一次启动可能发多个 RPC,必须处理“部分启动”。Cron 宜部署在单个数据中心,与依赖的任务分发系统低延迟、同故障域。发散:规模一变,语义也变。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第24章 分布式周期性任务系统 · 查看原书依据
这种资源要求,加上用户对任务运行情况的监控需要,使得我们需要记录Cron任务的全过程,从预计执行一直到任务终止。 将进程启动过程与具体运行的机器分离使得整个Cron系统需要处理“部分启动”的故障类型。Cron任务的多样性意味着某些任务在启动的时候可能需要发送多个RPC,有时我们会遇到某个RPC成功,而其他RPC不成功的问题(例如,发送RPC的进程本身在发送过程中崩溃了)。Cron 故障恢复过程必须要处理这种情况。
参考来源
- 位置:《SRE:Google运维解密》第24章《分布式周期性任务系统》(源文件:`_epub-src/OEBPS/Text/0009_0015.xhtml`)
- 结论依据:原文对比单机与数据中心级 Cron,列出进程迁移、资源声明、部分启动等新约束,并说明部署在单数据中心的理由。
- 原始内容:将进程启动过程与具体运行的机器分离使得整个Cron系统需要处理“部分启动”的故障类型。