跳过到主要内容

配置 PagerDuty 集成以用于 LangSmith 警报

概述

本指南详细介绍了如何使用 PagerDuty 的 Events API v2 配置 PagerDuty 作为 LangSmith 警报的通知渠道。此集成允许关键的 LLM 应用程序问题触发 PagerDuty 事件,从而通过您既定的事件管理工作流程实现快速响应。

先决条件

  • 一个具有管理员权限的活跃 PagerDuty 账户
  • PagerDuty 中适当的服务级别权限

此外,如果是自定义部署的 LangSmith,请确保没有防火墙设置阻止来自 LangSmith 服务的出站流量。

集成步骤

步骤 1:在 PagerDuty 中创建服务

  1. 登录您的 PagerDuty 账户
  2. 导航到 服务 → 服务目录
  3. 点击 + 新建服务
  4. 填写以下字段
    • 名称:提供一个描述性名称(例如,“LangSmith 监控”)
    • 描述:添加有关受监控应用程序的详细信息
    • 升级策略:选择适当的团队升级策略
    • 集成类型:选择“Events API V2”
  5. 点击 添加服务 以创建服务

步骤 2:获取集成密钥

创建服务后,您需要检索集成密钥

  1. 服务目录下的服务下拉菜单中,找到并点击您新创建的服务
  2. 选择集成选项卡
  3. 找到“Events API V2”集成
  4. 复制集成密钥(一个 32 字符的字母数字字符串)

PagerDuty Integration Key Location

步骤 3:使用 PagerDuty 配置 LangSmith 警报

PagerDuty Setup

  1. 在 LangSmith 警报设置的通知部分,选择 PagerDuty
  2. 将步骤 2 中的集成密钥粘贴到指定字段中
  3. 配置其他通知选项
    • 严重性:映射到 PagerDuty 事件优先级
  4. 通过点击发送测试警报发送测试警报
  5. 验证 PagerDuty 是否触发了事件并包含相关的 LangSmith 警报信息

故障排除

如果 PagerDuty 中没有创建事件

  • 验证 LangSmith 中是否正确输入了集成密钥
  • 确保 PagerDuty 服务处于活动状态且未处于维护模式
  • 检查您的 PagerDuty 账户是否已启用 Events API v2
  • 如果您的 LangSmith 实例位于防火墙后,请检查网络连接

其他资源


此页面有帮助吗?


您可以留下详细反馈 在 GitHub 上.