知识卡片
多队列共享计算资源
同一分析集群承载报表、实验和产品任务时,不同任务优先级会争用计算资源;按队列分配共享资源,可以在复用集群的同时表达服务次序。队列策略应与任务时效、业务影响和公平性目标相配,避免高优先级任务长期挤压其他工作。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第05章 信息平台和数据科学家的兴起 · 查看原书依据
为了适应这些运行在集群上的任务的不同优先级,我们构建了作业调度器,实现在多个队列上的资源共享。
参考来源
- 位置:《数据之美》第5章《信息平台和数据科学家的兴起》(源文件:../程序之美系列套装(6册)团队之美、项目管理之美、架构之美、数据之美、测试之美、安全之美/_epub-src/OEBPS/Text/part0330.xhtml)
- 结论依据:原文说明集群运行不同优先级的任务,因此构建多队列作业调度器实现资源共享;后半句为通用设计启发。
- 原始内容:为了适应这些运行在集群上的任务的不同优先级,我们构建了作业调度器,实现在多个队列上的资源共享。