系统内核

Parquet 与 ORC 存储格式与压缩优化(2025)

# Parquet 与 ORC 存储格式与压缩优化(2025)Parquet 与 ORC 是主流列式存储格式,广泛用于湖仓与离线分析场景。## 一、格式与编码- 列式存储:按列组织数据,提升扫描与压缩效率。- 编码:字典/Run-Length/位图等编码降低存储与 IO。## 二、压缩与性能- 压缩算法:ZSTD/Snappy/Gzip 按场景选型,权衡压缩比与速度。- 列裁剪

Envoy Rate Limit Service 分布式限流治理(2025)

# Envoy Rate Limit Service 分布式限流治理(2025)## 一、架构与键控- 架构:Envoy 通过本地/远程 `Rate Limit Service` 进行限流判定(Rate Limit Service)。- 键控:按租户/用户/路由/方法/地域构建限流键(分布式)。## 二、算法与策略- 令牌桶(令牌桶):设置速率与突发;分层配额与优先级策略。- 维度

Elastic APM 分布式追踪与服务基线治理(2025)

# Elastic APM 分布式追踪与服务基线治理(2025)## 一、部署与接入- Agent:在服务中接入 APM Agent,采集 `Trace` 与指标。- 采集:事务/Span 采集、错误与日志关联;统一服务命名。- 链路:跨服务传播上下文与采样决策。## 二、采样与成本- 采样:概率/规则采样控制数据量;异常优先与尾延迟优先策略。- 保留:关键事务提高采样率;其余降