Latitude icon

Latitude

认领

Latitude 是一款开源 AI agent 可观测性和监控平台,帮助团队检查生产环境 traces、发现问题并验证修复。支持基于 OpenTelemetry 的 tracing、告警、会话搜索和 AI agent 系统评估工作流。

Latitude

概述

Latitude 是一款开源 AI agent 可观测性和监控平台。它旨在帮助团队检查真实的生产流量,找出失败之处,并在部署后验证修复是否真正生效。

该产品以 traces、会话搜索、问题检测和评估工作流为核心。它可以通过自身的 SDK 或现有的 OpenTelemetry pipeline 接入,并提供聚类相似失败、标注 traces,以及将生产示例转化为可重复 eval 的工具。

功能

兼容 OTEL 的 tracing

可通过 Latitude 的 SDK 捕获 traces,或将现有的 OpenTelemetry pipeline 指向该平台,让 traces 以非专有格式接入。

对话智能

分析已完成的会话,识别对话内容、发生了什么,以及升级、放弃、重试、工具失败或信任中断发生的位置。

对话搜索与过滤

使用语义搜索、精确文本和元数据过滤器搜索全部 traces,快速缩小真实示例范围。

自动问题发现与告警

检测新问题或升级,并将告警路由到 Slack、电子邮件或 webhooks,以便团队在用户投诉前响应。

eval 与数据集管理

将已验证的生产问题转化为 eval,构建带版本的黄金数据集,并针对新 traces 运行回归检查。

人工注释与审核

在 traces、spans 或输出上留下行内反馈,并将生成的结构化注释用于搜索、聚类和 eval 工作流。

使用场景

  • 调试生产中的 agent 行为

    检查生产环境 traces,了解 agent 在某次会话中实际做了什么,包括消息、工具调用、错误以及其他失败信号。

  • 分析用户对话中的模式

    搜索所有对话,找到与某个问题、某个发布窗口或特定失败模式相匹配的一组真实示例。

  • 监控回归与升级

    在问题出现时及时发现它们,对相似失败进行聚类,并向团队发送告警,以便在问题扩散前完成分诊。

  • 通过回归检查验证修复

    将已验证的生产问题转换为基于真实示例的 eval,然后在发布修复后针对新的 traces 重新运行。

  • 协调审核与质量工作流

    使用注释、数据集和问题聚类,让围绕 AI agents 的团队审核工作保持结构化。

Pros and Cons

Pros

  • 开源,并面向 AI agent 监控场景。
  • 可与现有的 OpenTelemetry pipeline 配合使用,减少锁定。
  • 支持对全部 traces 进行语义搜索,而不是仅限于采样数据。
  • 将可观测性与 eval、数据集、注释和问题聚类整合到一个工作流中。
  • 提供免费 Starter 方案,以及适合需要更多容量或支持的团队的付费层级。

Cons

  • 来源未提供除 OpenTelemetry 以及 Slack、电子邮件和 webhooks 之外的完整集成列表。
  • 价格页列出了方案层级和支持级别,但所提供来源中并未展示所有使用限制或计费细节。

FAQ

Latitude 可以免费开始使用吗?

Latitude 的设置目的是监控 AI agents,并从生产环境 traces 中发现问题。价格页还显示它提供免费 Starter 方案以及付费的 Pro 和 Enterprise 选项。

Latitude 处理哪类数据?

来源说明 Latitude 会捕获 traces、搜索会话、发现问题,并通过 SDK 或现有的 OpenTelemetry pipeline 支持遥测数据。

Latitude 如何通知团队有问题?

首页说明它可以将问题告警发送到 Slack、电子邮件或 webhooks,价格页则提到 Starter 方案支持 Slack,Pro 提供优先支持。

Latitude 支持哪些核心工作流?

首页说明 Latitude 提供可观测性、会话搜索、对话智能、问题发现、自动化 eval、数据集管理、人工注释、高级过滤和故障模式聚类。

Quick Facts

类别
AI agent 可观测性与监控
产品类型
开源平台
主要用户
构建 AI agents 的团队
网站
latitude.so
价格
免费 Starter 方案;付费 Pro 和 Enterprise 层级
关键集成
OpenTelemetry、Slack、电子邮件、webhooks