EvaluateOptions 接口

interface EvaluateOptions {
    data: DataT;
    client?: Client;
    description?: string;
    evaluators?: EvaluatorT[];
    experimentPrefix?: string;
    includeAttachments?: boolean;
    maxConcurrency?: number;
    metadata?: KVMap;
    numRepetitions?: number;
    summaryEvaluators?: SummaryEvaluatorT[];
}

继承关系

  • BaseEvaluateOptions
    • EvaluateOptions

属性

data client? description? evaluators? experimentPrefix? includeAttachments? maxConcurrency? metadata? numRepetitions? summaryEvaluators?

属性

data

data: DataT

要评估的数据集。可以是数据集名称、示例列表或示例生成器。

可选client

client?: Client

要使用的 LangSmith 客户端。

默认值

undefined

可选description

description?: string

实验的自由格式描述。

可选evaluators

evaluators?: EvaluatorT[]

要在每个示例上运行的评估器列表。

默认值

undefined

可选experimentPrefix

experimentPrefix?: string

为您的实验名称提供的前缀。

默认值

undefined

可选includeAttachments

includeAttachments?: boolean

是否为实验使用附件。

默认值

false

可选maxConcurrency

maxConcurrency?: number

要运行的最大并发评估数。

默认值

undefined

可选metadata

metadata?: KVMap

要附加到实验的元数据。

默认值

undefined

可选numRepetitions

numRepetitions?: number

要执行的重复次数。每个示例将运行此次数。

默认值

1

可选summaryEvaluators

summaryEvaluators?: SummaryEvaluatorT[]

要在整个数据集上运行的摘要评估器列表。

默认值

undefined

设置

成员可见性

页面内容

属性