原书出处
SRE:Google运维解密
25 第25章 数据处理流水线
Workflow采用了这个模式,模型(Model)由一个被称为“主任务”的进程持有。主任务使用流式系统模式将所有的任务状态保存在内存中,同时同步地将每一次修改以日志方式记录在持久化磁盘上。视图(View)是那些作为整个流水线子组件,不断向主任务更新它们所见的系统状态的工作进程。虽然整个流水线的全部数据可以保存在主任务中,但是为了获取更好的系统性能,主任务通常只会保存具体工作的指针,而真正的输入和输出数据会保存在一个常见的文件系统或者其他存储系统中。根据这个比喻,工作进程是完全无状态的,可以在任一时间被抛弃。控制器(Controller)是可选的,可以加入进来支持一系列的辅助活动,比如对流水线的实时伸缩,对状态的快照,以及工作周期的管理,回滚流水线的状态,甚至是在紧急时刻负责停止一切系统行为。图25-5 描述了这种设计模式。
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/SRE:Google运维解密/_epub-src/OEBPS/Text/0009_0016.xhtml
EPUB SHA-256:5bd7e1e6474442d93354f1f13578bcb59c445e0dc7e54fa052cdc95f5f3e439c