存储

Parquet 与 ORC 存储格式与压缩优化(2025)

Parquet 与 ORC 存储格式与压缩优化(2025)Parquet 与 ORC 是主流列式存储格式,广泛用于湖仓与离线分析场景。一、格式与编码列式存储:按列组织数据,提升扫描与压缩效率。编码:字典/Run-Length/位图等编码降低存储与 IO。二、压缩与性能压缩算法:ZSTD/Snappy

NATS JetStream 流存储与消息治理(2025)

NATS JetStream 流存储与消息治理(2025)JetStream 提供持久化与重放能力,适合轻量事件与队列场景。一、主题与流流定义:设置存储、保留与分段参数。主题设计:命名与层级便于路由与权限控制。二、订阅与投递推/拉订阅:适配不同消费模型与背压。Ack 与重试:对失败消息进行重试与死信