知识卡片
内存库成本悖论
内存 KV 的性能来自把工作集放进 RAM,但三副本会把昂贵内存成本放大。系统要么牺牲成本做内存副本,要么把备份放到磁盘并承担恢复窗口,核心矛盾是低延迟与高可用。
这张卡片看不懂?
这张卡片已通过人工审查,不再接受失败反馈。
已有反馈 · 0 条
还没有人提交反馈。
在整书笔记中的位置
- · 第9章 内存KV数据库
- · 附录B 延伸阅读
原书出处 · 2 处
- 延伸阅读 · 查看原书依据
RAMCloud是非常有影响力的内存KV数据库,其整体架构比较简洁,内存保留一份数据,将备份数据存储在外存的策略能较好地在成本和性能间获得平衡,不过其高可用性设计方案存在较大的缺陷。相对而言,Membase是设计较为完善的内存KV数据库,可惜其技术资料较少。
- 内存KV数据库 · 查看原书依据
此时我们有两种选择:一种思路是忽略成本提高可用性,与外存存储系统一样,在内存里对数据进行备份,这样如果选择常见的3备份策略的话,成本会是只存储一份数据的3倍。这样做有3个好处,首先可以保证系统高可用性,其次系统实现起来也较为简单,还有一个明显的优点是通过内存多备份可以增加读操作的并发性。另外一个思路是降低成本,只在内存保留一份数据,数据备份放在磁盘或者SSD中,但是这会带来可用性问题,如果某台存储服务器发生故障,其负责的内存数据将不可用。
参考来源
- 位置:《大数据日知录:架构与算法》第9章《内存KV数据库》引言部分(源文件:_epub-src/OEBPS/text00014.html)
- 结论依据:原文明确"在大规模存储环境下,为了数据的高可用性,往往会将同一个数据保存3份……对于内存来说……相对外存和SSD来说,内存的成本还是比较高的",进而给出两种取舍:"忽略成本提高可用性……成本会是只存储一份数据的3倍",或"降低成本,只在内存保留一份数据,数据备份放在磁盘或者SSD中,但是这会带来可用性问题"。
- 原始内容:在大规模存储环境下,为了数据的高可用性,往往会将同一个数据保存3份……但是对于内存来说……相对外存和SSD来说,内存的成本还是比较高的……一种思路是忽略成本提高可用性……如果选择常见的3备份策略的话,成本会是只存储一份数据的3倍……另外一个思路是降低成本,只在内存保留一份数据,数据备份放在磁盘或者SSD中,但是这会带来可用性问题