← 返回卡片

原书出处

大数据日知录_架构与算法

04 集群资源管理与调度

2014年9月第1版 · 核验版本的摘录快照 · 导入于 2026-10-24T04:14:12.119Z

状态共享调度器是Google的Omega调度系统提出的一种资源管理与调度范型。在这种调度范型中,每个计算框架可以看到整个集群中的所有资源,并采用相互竞争的方式去获取自己所需的资源,根据自身特性采取不同的具体资源调度策略,同时系统采用了乐观并发控制手段解决不同框架在资源竞争过程中出现的需求冲突。这样,状态共享调度器在以下两方面对两级调度器做出了改进, 一方面乐观并发控制增加了系统的并发性能,另外一方面每个计算框架可以获得全局的资源使用状况信息。当然,这种自由竞争资源的方式也有其相应的代价:如果系统中存在大量资源竞争冲突(即多个框架申请相同的资源),这种乐观并发控制在做出仲裁后,竞争失败者很可能需要重新执行任务,而这会造成大量的资源浪费。

此预览只包含定位所需的摘录和上下文。

原书定位详情

来源:a19c7933-4eda-4176-aebd-30fe7e1ad292

正文位置:extracted/大数据日知录_架构与算法/_epub-src/OEBPS/text00009.html

EPUB SHA-256:e45b74c4bdd8959aef24f2a5183280eb73ec5f173108f8679a4bbf44bbd5b34d

本卡其他出处