OpenTelemetry尾采样与采样策略实践

--- title: OpenTelemetry尾采样与采样策略实践 keywords: - OpenTelemetry - 尾采样 - Tail Sampling - 采样策略 - Trace - 规则 - OTLP - 可视化 - 验证 - 成本优化 description: 使用 OTel Collector 的尾采样提高异常与慢请求的采集率，设计多规则采样策略与成本优化，并提供配置与验证方法。 date: 2025-11-26 categories: - 应用软件 - 音乐软件 --- # 概述 尾采样基于完成后的 Trace 进行选择，能提高对异常与慢请求的采集效果。本文提供 OTel Collector 的尾采样配置、规则设计与成本控制，以及验证方法。 # 采样策略（已验证） - 错误优先：对 `status!=OK` 的 Trace 100% 采集； - 慢请求优先：对耗时超过阈值（如 P95）采集； - 正常流量：按 1%–10% 率采样。 # Collector 配置（片段） ```yaml processors: tail_sampling: policies: - name: error-traces type: status_code status_code: status_codes: [ ERROR ] - name: latency-traces type: latency latency: threshold_ms: 500 - name: probabilistic type: probabilistic probabilistic: sampling_percentage: 5 service: pipelines: traces: processors: [tail_sampling] ``` # 验证与监控 - 指标：采样后 Trace 命中率与错误/慢请求覆盖率； - 成本：导出量与存储成本； # 常见误区 - 单一概率采样导致异常漏采； - 阈值设置不合理造成成本波动； # 结语 以尾采样多策略为核心，结合错误与慢请求优先与正常流量概率采样，并以成本与覆盖率指标验证，可在控制成本的同时提高重要 Trace 的可见性。