原书出处
大数据日知录_架构与算法
11 大规模批处理系统
当DAG图中某个图节点所有输入数据准备齐全后,JM即可调度使得这个工作机上的图节点程序开始运行,在调度过程中,还会考虑数据局部性,将计算尽可能分配到存储数据的节点,以此增加运行效率。如此这般,DAG图中的图节点依次或者并行执行,直到所有节点执行结束,将执行结果文件合并后即可输出最终结果。
原书定位详情
来源:a19c7933-4eda-4176-aebd-30fe7e1ad292
正文位置:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00016.html
EPUB SHA-256:e45b74c4bdd8959aef24f2a5183280eb73ec5f173108f8679a4bbf44bbd5b34d