telemetry.dev

telemetry.dev

AI 代理的 LLM 可观察性

Product screenshot

关于产品

telemetry.dev 将 AI 代理的每次运行显示为一条跟踪。每个模型调用和工具调用都是一个包含持续时间、令牌、成本和错误的跨度。提示和评估使用相同的跟踪:在不部署的情况下更改提示,然后在数据集上运行它并将分数与生产进行比较。警报会告诉您有关错误、成本峰值和代理循环的信息。连接我们的 TypeScript 或 Python SDK,或连接您已使用的 OpenTelemetry 导出器。