EvaluationResult#

class langsmith.evaluation.evaluator.EvaluationResult(
*,
key: str,
score: StrictBool | StrictInt | StrictFloat | None = None,
value: dict | str | None = None,
comment: str | None = None,
correction: dict | None = None,
evaluator_info: dict = None,
feedback_config: FeedbackConfig | dict | None = None,
source_run_id: UUID | str | None = None,
target_run_id: UUID | str | None = None,
extra: dict | None = None,
)[source]#

评估结果。

通过解析和验证关键字参数的输入数据来创建新模型。

如果输入数据无法解析以形成有效模型，则引发 ValidationError。

属性

方法

__init__(**data)

通过解析和验证关键字参数的输入数据来创建新模型。

check_value_non_numeric(v, values)

检查值是否为非数字。

construct([_fields_set])

根据受信任或预验证的数据创建新模型，设置 __dict__ 和 __fields_set__。

copy(*[, include, exclude, update, deep])

复制模型，可选择要包含、排除和更改的字段。

dict(*[, include, exclude, by_alias, ...])

生成模型的字典表示，可选指定要包含或排除的字段。

from_orm(obj)

json(*[, include, exclude, by_alias, ...])

生成模型的 JSON 表示，include 和 exclude 参数与 dict() 相同。

parse_file(path, *[, content_type, ...])

parse_obj(obj)

parse_raw(b, *[, content_type, encoding, ...])

schema([by_alias, ref_template])

schema_json(*[, by_alias, ref_template])

update_forward_refs(**localns)

尝试根据此模型、全局命名空间和局部命名空间更新字段上的 ForwardRefs。

validate(value)

参数:

  • key (str)

  • score (StrictBool | StrictInt | StrictFloat | None)

  • value (dict | str | None)

  • comment (str | None)

  • correction (dict | None)

  • evaluator_info (dict)

  • feedback_config (FeedbackConfig | dict | None)

  • source_run_id (UUID | str | None)

  • target_run_id (UUID | str | None)

  • extra (dict | None)

__init__(**data: Any) → None#

通过解析和验证关键字参数的输入数据来创建新模型。

如果输入数据无法解析以形成有效模型，则引发 ValidationError。

参数:

data (Any)

返回类型:

None

classmethod check_value_non_numeric(v, values)[source]#

检查值是否为非数字。

classmethod construct(
_fields_set: SetStr | None = None,
**values: Any,
) → Model#

根据受信任或预验证的数据创建新模型，设置 __dict__ 和 __fields_set__。默认值得到遵循，但不会执行其他验证。其行为如同设置了 Config.extra = ‘allow’，因为它添加了所有传递的值

参数:

  • _fields_set (SetStr | None)

  • values (Any)

返回类型:

Model

copy(
*,
include: AbstractSetIntStr | MappingIntStrAny | None = None,
exclude: AbstractSetIntStr | MappingIntStrAny | None = None,
update: DictStrAny | None = None,
deep: bool = False,
) → Model#

复制模型，可选择要包含、排除和更改的字段。

参数:

  • include (AbstractSetIntStr | MappingIntStrAny | None) – 要包含在新模型中的字段

  • exclude (AbstractSetIntStr | MappingIntStrAny | None) – 要从新模型中排除的字段，与值一样，这优先于包含

  • update (DictStrAny | None) – 新模型中要更改/添加的值。注意：在创建新模型之前，数据不会被验证：您应该信任此数据

  • deep (bool) – 设置为 True 以对模型进行深拷贝

  • self (Model)

返回:

新模型实例

返回类型:

Model

dict(
*,
include: AbstractSetIntStr | MappingIntStrAny | None = None,
exclude: AbstractSetIntStr | MappingIntStrAny | None = None,
by_alias: bool = False,
skip_defaults: bool | None = None,
exclude_unset: bool = False,
exclude_defaults: bool = False,
exclude_none: bool = False,
) → DictStrAny#

生成模型的字典表示，可选指定要包含或排除的字段。

参数:

  • include (AbstractSetIntStr | MappingIntStrAny | None)

  • exclude (AbstractSetIntStr | MappingIntStrAny | None)

  • by_alias (bool)

  • skip_defaults (bool | None)

  • exclude_unset (bool)

  • exclude_defaults (bool)

  • exclude_none (bool)

返回类型:

DictStrAny

classmethod from_orm(obj: Any) → Model#
参数:

obj (Any)

返回类型:

Model

json(
*,
include: AbstractSetIntStr | MappingIntStrAny | None = None,
exclude: AbstractSetIntStr | MappingIntStrAny | None = None,
by_alias: bool = False,
skip_defaults: bool | None = None,
exclude_unset: bool = False,
exclude_defaults: bool = False,
exclude_none: bool = False,
encoder: Callable[[Any], Any] | None = None,
models_as_dict: bool = True,
**dumps_kwargs: Any,
) → str#

生成模型的 JSON 表示，include 和 exclude 参数与 dict() 相同。

encoder 是一个可选函数，作为 json.dumps() 的 default 提供，其他参数与 json.dumps() 相同。

参数:

  • include (AbstractSetIntStr | MappingIntStrAny | None)

  • exclude (AbstractSetIntStr | MappingIntStrAny | None)

  • by_alias (bool)

  • skip_defaults (bool | None)

  • exclude_unset (bool)

  • exclude_defaults (bool)

  • exclude_none (bool)

  • encoder (Callable[[Any], Any] | None)

  • models_as_dict (bool)

  • dumps_kwargs (Any)

返回类型:

str

classmethod parse_file(
path: str | Path,
*,
content_type: str = None,
encoding: str = 'utf8',
proto: Protocol = None,
allow_pickle: bool = False,
) → Model#
参数:

  • path (str | Path)

  • content_type (str)

  • encoding (str)

  • proto (Protocol)

  • allow_pickle (bool)

返回类型:

Model

classmethod parse_obj(obj: Any) → Model#
参数:

obj (Any)

返回类型:

Model

classmethod parse_raw(
b: str | bytes,
*,
content_type: str = None,
encoding: str = 'utf8',
proto: Protocol = None,
allow_pickle: bool = False,
) → Model#
参数:

  • b (str | bytes)

  • content_type (str)

  • encoding (str)

  • proto (Protocol)

  • allow_pickle (bool)

返回类型:

Model

classmethod schema(
by_alias: bool = True,
ref_template: str = '#/definitions/{model}',
) → DictStrAny#
参数:

  • by_alias (bool)

  • ref_template (str)

返回类型:

DictStrAny

classmethod schema_json(
*,
by_alias: bool = True,
ref_template: str = '#/definitions/{model}',
**dumps_kwargs: Any,
) → str#
参数:

  • by_alias (bool)

  • ref_template (str)

  • dumps_kwargs (Any)

返回类型:

str

classmethod update_forward_refs(
**localns: Any,
) → None#

尝试根据此模型、全局命名空间和局部命名空间更新字段上的 ForwardRefs。

参数:

localns (Any)

返回类型:

None

classmethod validate(value: Any) → Model#
参数:

value (Any)

返回类型:

Model