知识卡片
Aurora的关键洞察:把复制单元从数据页换成redo日志,降低网络IOPS
传统数据库架构里,主节点向存储/副本节点同步数据时,网络上传输 的内容往往不只是最精简的”变更了什么”,还夹带着完整数据页、 Binlog等冗余信息——这些额外内容本身就在消耗网络I/O吞吐 (IOPS),而在存算分离架构下,网络恰恰是最容易成为瓶颈的一环。 Aurora的做法是把”该往网络上发什么”这个问题重新想了一遍:只把 redo日志(记录了”哪里发生了什么变化”的重做日志)写入存储节点, 而不是把完整的数据页或者其他冗余信息一起发过去。这个改动看似 只是”少传点数据”,实际效果是把网络IOPS降低了一个数量级——而 一旦这个此前被网络传输量本身占据的瓶颈被消除,此前被这个瓶颈 掩盖的其他优化空间才能被进一步挖掘出来,Aurora因此获得了远超 MySQL原生代码库的性能提升。这个思路的价值在于:面对”存算分离 后网络成为新瓶颈”这个通用问题,答案不一定是升级网络硬件,而是 先回头审视”到底有没有必要传这么多数据”——把复制单元从”完整 状态快照”降到”最小变更记录”,往往比堆硬件更有效。同时,Aurora 还把备份和重做恢复这类原本是”一次性动作”的关键功能,改造成 连续的异步操作,从而实现了无需检查点的即时崩溃恢复。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《新型数据库系统:原理、架构与实践》第8章"云数据库
技术"8.3.2节"Aurora"(源文件:
_epub-src/EPUB/xhtml/Section0001_0010.xhtml)
- 结论依据:原文明确"在传统的架构中,节点之间网络传输的内容
不仅包括数据还包括Binlog等其他信息。通过将redo日志(重做
日志)写入存储节点,能够将网络IOPS降低一个数量级。一旦消除
了这个瓶颈,就能够优化许多其他问题,从而获得比MySQL基本
代码库更加显著的系统性能",直接说明redo日志复制策略与网络
IOPS降低及后续性能提升之间的因果关系。
- 原始内容:通过将redo日志(重做日志)写入存储节点,能够将
网络IOPS降低一个数量级。一旦消除了这个瓶颈,就能够优化许多
其他问题,从而获得比MySQL基本代码库更加显著的系统性能。