知识卡片
存储引擎支持层级
原书回顾MongoDB 3.0/3.2时期的存储引擎时,把“能运行”“官方内置”“默认启用”“企业版提供”和“可用于生产”几种状态并列出现。性能测试结果只有和支持层级、已知缺陷及负载条件一起读,才能用于选型。
| 书中引擎或模式 | 当时支持状态 | 书中同时给出的限制 |
|---|---|---|
| MMAP | 旧默认内置引擎,锁从database级收窄到collection级 | 3.2后默认引擎改为WiredTiger |
| WiredTiger B-tree | 官方重点与新默认方向 | 支持文档级并发和压缩,但案例也观察到短暂stall、启用复制后Primary吞吐下降,相关算法仍在改进 |
RocksDB mongo-rocks |
非官方built-in支持的合作项目 | 朋友测试性能突出不等于官方生产支持或长期兼容 |
| WiredTiger LSM | 通过未文档化参数进行preview test | 与MongoDB结合仍在进行,书中提到memory leak,未用于生产 |
| Memory | 企业版、非开源 | 当时采用表级锁 |
书中业务从MongoDB 2.6升级到3.0.x后磁盘占用由3.12TB降到270GB,是特定数据、压缩设置和版本下的案例,不是任意负载都能复现的压缩承诺。同理,单项写入压测“很强”也不能替代复制、恢复、持久性、升级和故障测试。
选型时应先查目标版本仍支持哪些引擎和参数,再区分官方稳定、第三方适配、预览、企业许可等层级;随后使用实际数据同时测试稳态吞吐、尾延迟、空间、checkpoint/eviction、复制开销和恢复。[[文档级并发控制]]解释了锁粒度收益,本卡补充的是能力来源与生产就绪度不能由性能结果代替。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《高可用架构(第1卷)》第6章《大数据与数据库》“6.11.1 存储引擎的发展”(源文件:_epub-src/OEBPS/Text/Chapter6_11_2.xhtml)
- 结论依据:原文分别标明MMAP/WiredTiger的默认版本变化、WiredTiger压缩与实测问题、RocksDB的非官方支持、WiredTiger LSM的未文档化预览状态及Memory引擎的企业版许可,直接支撑按支持层级审查选型。
- 原始内容:MMAP在时候依然还是默认的存储引擎,新的改进就是在并发方面,由原来的database-level锁转为collection-level锁,不过在3.2版本以后默认的存储引擎替换为WiredTiger。
- 原始内容:该存储引擎是Facebook开源的,写入强劲NoSQL Storage(http://rocksdb.org/),不过对于MongoDB来说是非官方built-in支持的存储引擎(https://github.com/mongodb-partners/mongo-rocks),有朋友测试过这个存储引擎,其性能表现得非常突出。
- 原始内容:不过,WiredTiger的LSM特性和MongoDB的结合还在进行中,所以现在的使用是修改undocument parameter,并且也存在比如memory leak的Bug,这里只是preview test,并没有在生产环境中使用。
- 原始内容:这是企业版存储引擎,非开源,有些类似于MySQL的memory engine,也是表级锁;这里简单提下,感兴趣的朋友请参考SERVER-1153。