主题索引
存储模型选型
比较关系型、键值、列式、文档与全文检索等存储模型的特性取舍与适用场景。
来源书籍
本书围绕持久内存的硬件/固件架构、操作系统抽象、DAX/PMDK编程模型、Redis/RocksDB/Spark/HDFS等工程改造展开,持续解释容量、延时、带宽、持久性、一致性、成本和恢复时间之间的取舍,信息浓度较高。与此同时,书中大量结论绑定英特尔傲腾持久内存、Cascade Lake、PMDK、IPMCTL/NDCTL、DAX和具体版本生态,产品路线与工具栈变化会影响实践细节,因此稳定性低于纯原理型著作。 **支撑例子**:第2章用持久化域、ADR/eADR说明“写入完成”与“数据持久”之间的硬件边界;第4章把DAX-MMAP的优势与断电一致性、原子性、持久堆分配、位置独立性联系起来;第6章用Redis RDB/AOF和RocksDB WAL/LSM写放大展示真实系统如何围绕持久内存重构数据路径。这些内容不是简单命令清单,但对当时的Optane/PMDK生态依赖明显。
四象限结论:工程实践(高信息浓度 + 低稳定性)
理由:本书围绕持久内存的硬件/固件架构、操作系统抽象、DAX/PMDK编程模型、Redis/RocksDB/Spark/HDFS等工程改造展开,持续解释容量、延时、带宽、持久性、一致性、成本和恢复时间之间的取舍,信息浓度较高。与此同时,书中大量结论绑定英特尔傲腾持久内存、Cascade Lake、PMDK、IPMCTL/NDCTL、DAX和具体版本生态,产品路线与工具栈变化会影响实践细节,因此稳定性低于纯原理型著作。
支撑例子:第2章用持久化域、ADR/eADR说明“写入完成”与“数据持久”之间的硬件边界;第4章把DAX-MMAP的优势与断电一致性、原子性、持久堆分配、位置独立性联系起来;第6章用Redis RDB/AOF和RocksDB WAL/LSM写放大展示真实系统如何围绕持久内存重构数据路径。这些内容不是简单命令清单,但对当时的Optane/PMDK生态依赖明显。
辅助材料(内容简介、推荐序、前言、版权信息)仅用于建立背景,不进入卡片生成。正文8章全部精读,因为每章都包含可迁移的软件架构或系统工程取舍。
| 章节号 | 章节标题 | 精读/略读 | 状态(pending/done) | 卡片数 |
|---|---|---|---|---|
| 1 | 持久内存的需求 | 精读:从存储层级、介质演进和业务场景解释持久内存为何出现,奠定全书架构判断。 | done | 4 |
| 2 | 持久内存的架构 | 精读:持久化域、ADR/eADR、固件、安全和RAS直接决定系统正确性与可靠性。 | done | 5 |
| 3 | 操作系统实现 | 精读:DAX、块/字符设备、NUMA和虚拟化揭示持久内存如何进入OS抽象。 | done | 4 |
| 4 | 持久内存的编程和开发库 | 精读:DAX-MMAP带来一致性、原子性、分配和位置独立等核心编程挑战。 | done | 5 |
| 5 | 持久内存性能优化 | 精读:把模式选择、工作集、读写比例、NUMA、带宽和工具串成可执行调优框架。 | done | 5 |
| 6 | 持久内存在数据库中的应用 | 精读:Redis与RocksDB案例展示如何围绕持久化、日志和LSM写放大重构数据路径。 | done | 6 |
| 7 | 持久内存在大数据中的应用 | 精读:Spark、HDFS、PMoF等案例体现持久内存在计算缓存和远程内存访问中的取舍。 | done | 5 |
| 8 | 持久内存在其他领域中的应用 | 精读:推荐、缓存、HPC和云主机案例提供跨场景迁移的架构模式。 | done | 5 |
notes/持久内存架构与工程实践/cards/从本书的主题进入跨书阅读,对照其他书籍的讲解。下方数量包含主题关联的全部卡片与书籍。
主题索引
比较关系型、键值、列式、文档与全文检索等存储模型的特性取舍与适用场景。
主题索引
比较 GFS、HDFS、BigTable、MongoDB、RabbitMQ 等系统的租约、写确认、副本同步、选主与脑裂处理。
主题索引
比较缓存穿透、雪崩、热点等问题的成因与应对方案。
主题索引
比较冗余容量、故障域、逻辑与物理资源解耦等容量规划与调度方法。
主题索引
比较 HTTP 认证方案、OAuth2 与 JWT、会话状态,以及摘要、加密、签名、证书与 TLS 的密码学基础。
主题索引
比较全虚拟化、半虚拟化、硬件辅助虚拟化与纯软件模拟在隔离、性能与兼容性上的取舍,以及设备、内存与权限模型的设计。
主题索引
比较备份独立性、恢复可验证性与恢复阶段的设计要点。
主题索引
比较采样剖析、火焰图、执行追踪与调用栈诊断的使用方法和解读边界。
主题索引
比较布隆过滤器、跳表、LSM 树、Merkle 树、Cuckoo 哈希等在存储系统中以空间或精度换效率的数据结构。
主题索引
比较 Commit Logging、WAL、Shadow Paging 等保证原子性与持久性的日志与恢复机制。
主题索引
预写日志与 redo/undo 的分工,检查点与日志截断,崩溃恢复的重做与回滚阶段,以及不同存储引擎在提交、刷盘与恢复时间上的取舍。
主题索引
互斥锁与读写锁的适用比例、信号量与 CountDownLatch 的语义差别、条件等待为什么必须持锁并循环复查、锁顺序与可重入导致的死锁,以及粗粒度锁换简单性与细粒度锁换并发的代价。
主题索引
数据最终落在介质上:闪存的组织与 FTL、写放大与磨损,以及主机到盘的接口协议与电源状态。
主题索引
Spark Core 从 SparkContext、RPC、存储体系、内存管理到 DAG/Task 调度、Shuffle 与容错恢复的内部机制与取舍。
主题索引
原子不等于易变、volatile 不等于互斥,读改写为什么必须整体原子,竞态与数据争用的判定,内存屏障与顺序一致,双重检查锁与懒加载的发布问题,以及 Race 检测只覆盖运行路径的局限。
主题索引
比较分级分配、页/块管理与多级缓存降锁等分配器设计。
主题索引
比较锁状态存储、锁膨胀、自旋与排队队列、同步器骨架等锁实现机制及其竞争开销。
主题索引
比较 NAND 闪存介质特性、FTL 映射与垃圾回收、写放大、磨损平衡、掉电恢复,以及 LDPC 等纠错机制对 SSD 性能与寿命的影响。
主题索引
比较 PCIe 分层、TLP 事务与流控、NVMe 队列与寻址、NVMe over Fabrics,以及 SATA/PCIe/NVMe 的电源管理机制。
主题索引
比较缓存可见性、指令重排、内存屏障与 happens-before 等内存模型规则及安全发布手段。
主题索引
比较 CAS、原子类、热点分散与 ABA 等无锁编程机制及其适用边界。