知识卡片
共识写性能受网络与磁盘限制
共识写性能受两项物理限制:网络往返和写盘时间。数据中心内往返是毫秒级,美国本土约 45ms,纽约到伦敦约 70ms,而副本常要放远以分散故障域。每次承诺前都要写盘,一次共识包括提案者写盘、并行发消息、接收者并行写盘、回复。优化手段:把共识日志与状态机日志合一,减少磁盘寻址;批处理多个客户端操作;用流水线让多个提案同时进行。客户端太多时,用区域代理池维持到共识组的长连接。发散:共识慢多半慢在写盘与距离。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
在整书笔记中的位置
原书出处 · 1 处
- 第23章 管理关键状态:利用分布式共识来提高可靠性 · 查看原书依据
法定租约对大量读操作的系统是非常有用的,尤其是当数据的某一部分是被集中在某一个地理区域的进程所读取的时候。 分布式共识系统的性能与网络延迟 分布式系统的写性能面临两个主要的物理限制。第一个是网络往返时间(RTT),另外一个是数据写入持久化存储的时间。我们接下来会先分析前者。 网络往返时间对不同的源地址和目的地址来说区别非常大,不仅由源地址和目的地址的物理距离决定,还包括网络拥塞程度。
参考来源
- 位置:《SRE:Google运维解密》第23章《管理关键状态:利用分布式共识来提高可靠性》(源文件:`_epub-src/OEBPS/Text/0009_0014.xhtml`)
- 结论依据:原文分析网络往返与磁盘写入对共识写性能的限制,给出 RTT 数据与单次共识的步骤,并介绍日志合并、批处理、流水线和代理池等优化。
- 原始内容:分布式系统的写性能面临两个主要的物理限制。第一个是网络往返时间(RTT),另外一个是数据写入持久化存储的时间。