配置 PagerDuty 集成以用于 LangSmith 警报
概述
本指南详细介绍了如何使用 PagerDuty 的 Events API v2 配置 PagerDuty 作为 LangSmith 警报的通知渠道。此集成允许关键的 LLM 应用程序问题触发 PagerDuty 事件,从而通过您既定的事件管理工作流程实现快速响应。
先决条件
- 一个具有管理员权限的活跃 PagerDuty 账户
- PagerDuty 中适当的服务级别权限
此外,如果是自定义部署的 LangSmith,请确保没有防火墙设置阻止来自 LangSmith 服务的出站流量。
集成步骤
步骤 1:在 PagerDuty 中创建服务
- 登录您的 PagerDuty 账户
- 导航到 服务 → 服务目录
- 点击 + 新建服务
- 填写以下字段
- 名称:提供一个描述性名称(例如,“LangSmith 监控”)
- 描述:添加有关受监控应用程序的详细信息
- 升级策略:选择适当的团队升级策略
- 集成类型:选择“Events API V2”
- 点击 添加服务 以创建服务
步骤 2:获取集成密钥
创建服务后,您需要检索集成密钥
- 在服务目录下的服务下拉菜单中,找到并点击您新创建的服务
- 选择集成选项卡
- 找到“Events API V2”集成
- 复制集成密钥(一个 32 字符的字母数字字符串)
步骤 3:使用 PagerDuty 配置 LangSmith 警报
- 在 LangSmith 警报设置的通知部分,选择 PagerDuty
- 将步骤 2 中的集成密钥粘贴到指定字段中
- 配置其他通知选项
- 严重性:映射到 PagerDuty 事件优先级
- 通过点击发送测试警报发送测试警报
- 验证 PagerDuty 是否触发了事件并包含相关的 LangSmith 警报信息
故障排除
如果 PagerDuty 中没有创建事件
- 验证 LangSmith 中是否正确输入了集成密钥
- 确保 PagerDuty 服务处于活动状态且未处于维护模式
- 检查您的 PagerDuty 账户是否已启用 Events API v2
- 如果您的 LangSmith 实例位于防火墙后,请检查网络连接