此卡片不在当前主题的阅读序列中,可返回主题继续阅读。
知识卡片
顺序写加PageCache
所有消息写进同一份CommitLog,子文件默认1GB、Offset连续,总是追加到最后一个文件,把随机写变成顺序写。消息先写入操作系统Page Cache再定时刷盘,读写经MappedByteBuffer内存映射完成,省去内核态与用户态之间的拷贝。借用文件系统已有能力换吞吐,而不在应用层另造缓存。
这张卡片看不懂?
这张卡片的反馈已满 10 条,暂时无法继续提交。
已有反馈 · 0 / 10 条
还没有人提交反馈。
原书出处
参考来源
- 位置:《RocketMQ分布式消息中间件:核心原理与最佳实践》第6章《Broker存储机制》(源文件:_epub-src/OEBPS/Text/chapter010.xhtml)
- 结论依据:原文说明CommitLog按1GB切分、Offset连续、总写最后一个文件,消息先写Page Cache再定时刷盘,MappedByteBuffer实现零拷贝。
- 原始内容:所有CommitLog子文件之间的Offset是连续的,所以最后一个CommitLog总是被写入的。……java.nio.MappedByteBuffer.java文件中实现了零拷贝技术,即Java进程映射到内核态内存,原来内核态内存与用户态内存的互相拷贝过程就消失了。……RocketMQ首先将消息数据写入操作系统Page Cache,然后定时将数据刷入磁盘。