Skip to content

Day 6 · AgentOps 可观测性

预计时间:2.5 小时

学习材料

#资料时间类型
1AgentOps GitHub - README + Quickstart1h快速上手
2AgentOps: Enabling Observability of LLM Agents - arXiv1h论文原理
312 Best AI Observability Tools 202630min选型参考

为什么需要 AgentOps

传统 APM 监控的是请求-响应。Agent 是多步骤、非确定性的。你需要追踪:

  • Session — 一次完整的 Agent 运行
  • Trace — 一条执行路径(可能有分支)
  • Span — 单个步骤(LLM 调用、Tool 调用、决策点)

工具选型

工具定位适合
AgentOps多 Agent 追踪 + 成本统计CrewAI / AutoGen 生态
Langfuse开源、可自托管需要数据私有化
Arize PhoenixRAG pipeline 调试重 RAG 场景
LangSmithLangChain 原生LangChain 生态

自检问题

  • [ ] Agent 可观测性与传统 APM 有什么区别?
  • [ ] AgentOps 追踪的核心单元是什么?
  • [ ] Langfuse vs AgentOps vs Arize Phoenix 分别适合什么场景?
  • [ ] 你的哪个项目最需要加可观测性?