出问题时能回答“它为什么这么做”,上线后能算清“每个任务花多少钱”。
为 Agent 接入 Tracing,统计 50 次运行的 Token、工具耗时与单任务成本。
记录一次 Agent Run:模型调用、工具调用、参数、返回、耗时与错误。
哪些指标放进看板,哪些异常需要实时告警。
Token 成本、工具成本、重试成本与单任务成本估算。
并行、缓存、流式输出、小模型路由与减少无效步骤。
线上 Trace → 失败案例 → 评测集 → 修改 → 回归。
试试:上下文、MCP、沙箱、Prompt 注入、外链