Agent Tracing 可观测性与自恢复

生产级 Agent 细粒度执行追踪 (LangSmith / OpenTelemetry 式 Tracing) 与分布式可观测性系统 (Agent Observability, Step-Level Tracing & Self-Healing Architecture) 是对多步复杂智能体系统进行性能剖析、成本审计、错误根因定位与自动化自愈恢复的核心基础设施；核心追踪树模型：将单次用户请求抽象为一个 Root Trace，并将内部发生的每一次 LLM 生成、Prompt 模板渲染、工具调用、向量检索、条件分支路由与 Pydantic 校验建模为结构化的 Child Spans 节点，完整记录 `input_tokens`, `output_tokens`, `latency_ms`, `cost_usd`, `error_stack`, `model_name` 与精确 prompt/response 快照；配合分布式追踪与自恢复引擎，在发现特定 Step 发生模型超时或解析错误时，能够从 Checkpoint 状态自动回滚并基于指数退避或更换备用模型实现透明自愈。

复杂多 Agent 调试诊断、生产环境 Token 账单与延迟瓶颈排查、大模型异常请求回放复现。

多步 Agent 内部往往是一个黑盒，一旦任务最终输出错误，工程师无法查明究竟是哪一步工具调用出错还是第几轮 Prompt 产生了幻觉；Tracing 可观测性提供了毫秒级、全调用栈完全可视透明的调试大盘。

详细画出包含 Root Trace、LLM Span、Tool Span 与 Retriever Span 的树状调用追踪拓扑结构？

OpenTelemetry / OpenInference 语义约定 (Semantic Conventions) 在标准化大模型 Tracing 字段（如 `gen_ai.prompt`, `gen_ai.completion`, `gen_ai.usage.cost`）中的规范？

高并发场景下的 Tracing 性能开销控制：如何通过异步无阻塞消息队列（Kafka / RabbitMQ）与动态采样率（如 100% 采样错误请求、10% 采样正常请求）降低系统负担？

用户隐私与数据脱敏 (Data Masking / PII Sanitization): 如何在 Tracing 写入存储前通过正则表达式与 Named Entity Recognition (NER) 自动清洗身份证、手机号与密码？

基于 Tracing 数据的“失败自动标注与合成数据集转化”闭环：如何将生产环境中标记为 Dislike 的失败 Trace 自动导出为 DPO 偏好对齐数据集？