Apache Iceberg 湖仓表格式深度实战:从元数据树与快照隔离到 COW/MOR 的工程全解 从元数据三层树、快照隔离与乐观并发控制出发,拆解 Apache Iceberg 的 Hidden Partitioning、Copy-on-Write 与 Merge-on-Read 删除流派、Schema Evolution 的 field-id 机制,并给出小文件压缩与元数据治理的生产级运维清单。 AI应用开发 2026年09月30日 0 点赞 0 评论 1 浏览
Apache Parquet 文件格式深度实战:从 Dremel 记录拆解到 Page Index 谓词下推的工程全链路 从文件物理布局讲起,拆解 Parquet 如何用 Dremel 的 repetition/definition level 无损表达嵌套结构,给出可运行的记录装配与 RLE/Bit-Packing 解码实现,并系统梳理字典编码、BYTE_STREAM_SPLIT 等编码体系与 Row Group / Page / Bloom Filter 三级谓词下推,最后给出生产环境 row group 大小、排序、schema 演进与压缩选型的实战经验。 AI应用开发 2026年09月30日 0 点赞 0 评论 0 浏览