知识卡片
集群三层
TensorFlow 分布式从集群视角拆成 Cluster、Job、Task:集群定义整体训练目标,Job 聚合一类任务,Task 对应具体服务进程。清楚这三层,才不会把业务角色和进程实例混在一起。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《分布式机器学习:系统、工程与实战》第15章《分布式运行环境之静态架构》(源文件:_epub-src/Fen Bu Shi Ji Qi Xue Xi _Xi Tong , Gong Cheng Yu Shi Zhan_split_084.html)
- 结论依据:原文定义 Cluster 包含服务端,训练切成 Job,Job 包含 Task,Task 与具体 tf.train.Server 处理过程关联。
- 原始内容:■ 一个TensorFlow集群包含一个或者多个TensorFlow服务端,一个集群一般会专注于一个相对高层的目标,比如用多台机器并行地训练一个神经网络。■ 训练被切分为一系列Job,每个Job会负责一系列Task。当集群有多个Tas