Kafka Streams状态存储与RocksDB调优
掌握 Kafka Streams 的状态存储与恢复机制，调优 RocksDB/缓存与日志，提升稳定性与延迟表现。
中间件开发
Kafka 主题保留与压缩策略（Retention、Log Compaction、cleanup.policy）
设计 Kafka 主题的保留与压缩策略，合理配置 `cleanup.policy=delete/compact`，并验证可靠性与成本的平衡。
Kafka 事务与端到端一致性（2025）
# Kafka 事务与端到端一致性（2025）端到端一致性需要在生产、消费与持久化之间协同保障。## 一、幂等生产与事务- 幂等生产：避免重复消息；配置生产者幂等与重试。- 事务：将多个写入合并为原子操作，保障一致性。## 二、Exactly-once (EOS)- EOS：在流处理与下游写入之间实现 Exactly-once。- 偏移与状态：对偏移与状态进行一致性管理。#
Kafka 保留与压缩策略治理（2025）
# Kafka 保留与压缩策略治理（2025）Kafka 的保留与压缩配置影响成本与查询与一致性，需要按业务治理。## 一、保留与分段- retention.ms：控制时间保留与容量规划。- segment.bytes：设定分段大小，平衡文件数量与恢复时长。## 二、压缩与键- cleanup.policy：`delete` 与 `compact` 组合策略。- log com
Kafka 架构与消费组最佳实践（2025）
# Kafka 架构与消费组最佳实践（2025）Kafka 以分区与副本实现高吞吐与扩展性。本文聚焦消费组、重平衡与幂等处理的工程要点。## 一、分区与副本- 分区：提升并行度；按键路由保证同键有序。- 副本与 ISR：副本同步与故障容忍，提升可用性。## 二、消费组与重平衡- 消费组：以组为单位进行分区分配与并行消费。- 重平衡：控制会话与心跳参数，降低抖动与分配开销。#
NATS JetStream 流与消费者治理（2025）
# NATS JetStream 流与消费者治理（2025）## 一、Stream 与存储- Stream：主题分组与副本；存储策略与保留（Limits/WorkQueue）。- 分片与副本：按吞吐与可用性设副本；跨集群镜像与转发。## 二、Consumer 与投递- Consumer：`Ack Policy`（Explicit/All/None）与 `Ack Wait`；`Deli
NATS JetStream 流存储与消息治理（2025）
# NATS JetStream 流存储与消息治理（2025）JetStream 提供持久化与重放能力，适合轻量事件与队列场景。## 一、主题与流- 流定义：设置存储、保留与分段参数。- 主题设计：命名与层级便于路由与权限控制。## 二、订阅与投递- 推/拉订阅：适配不同消费模型与背压。- Ack 与重试：对失败消息进行重试与死信处理。## 三、观测与成本- 指标：积压与
NATS JetStream 流存储与消息语义（Ack、Deliver Policy、Retention）
介绍 NATS JetStream 的流存储与消费语义，配置 Ack/Deliver Policy 与 Retention，提供可验证的实践与观测方法。
NATS JetStream 消费者速率与回压治理（拉取批次、Ack 与限速验证）
配置JetStream消费者的拉取批次与确认策略，结合速率限制与回压机制，保证在高并发场景下的稳定处理与一致性验证。
NATS JetStream流存储与消费语义实践
使用JetStream进行流存储与拉取/推送消费，提供可验证的配置与命令实现可靠处理与保留策略。
NATS JetStream流式消息与持久化实践
使用 NATS JetStream 构建流式消息与持久化存储，配置 Stream/Consumer、确认与投递策略、保留与去重，并提供验证与监控方法。
