存储引擎

Apache MapReduce Shuffle 引擎深度工程实战:从 MapOutputBuffer 环形缓冲、Spill 索引排序到 Reduce 端拉流归并的全链路解析

拆解 MapReduce Shuffle 全链路:MapOutputBuffer 四数组环形缓冲与只排索引不排数据的排序技巧、spill 数据文件与 IndexRecord 索引文件的 O(1) 定位、ShuffleHandler 从 Jetty 迁 Netty 的动因、Reduce 端 MapHost 的 PENDING/BUSY/PENALIZED 状态机与慢启动、k 路归并与 final merge 流式接口,并给出生产故障排查清单与调优参数矩阵。

Apache RocketMQ 存储引擎深度工程实战:从 CommitLog 顺序写、ConsumeQueue 定长索引到事务消息与 DLedger 高可用的全链路解析

沿真实工程链路拆解 RocketMQ 存储层:所有 Topic 共享单一 CommitLog 如何用顺序写把分区数从写性能公式中剔除;ConsumeQueue 20 字节定长索引为何只存 tag 哈希并强制客户端二次过滤;IndexFile 开链哈希;延迟消息与重试如何复用「改 Topic 重投」原语;事务消息用 half/op 双队列做差集表达未决状态;DLedger 为何只需 Raft 化 CommitLog 而索引层零改动,并给出生产调参与排障路径。