Documentation Index
Fetch the complete documentation index at: /llms.txt
Use this file to discover all available pages before exploring further.
eval evaluator 命令组用于管理评估器（负责打分的评判模型）：浏览预置模板、列出与查看已有评估器、从模板派生新评估器、删除评估器。评估器通常是一段带评分标准的提示词，配合一个大模型端点，接收若干输入字段（如 input、output、reference_output）后给出分数。
| 标志/参数 | 说明 | 默认值 |
|---|---|---|
-p, --project <name> | 项目名称。 | default |
--json | 输出原始 JSON。 | false |
agentkit eval evaluator templates
| 标志/参数 | 说明 | 默认值 |
|---|---|---|
-p, --project <name> | 项目名称。 | default |
--json | 输出原始 JSON。 | false |
agentkit eval evaluator list
| 标志/参数 | 说明 | 默认值 |
|---|---|---|
<id> | 评估器 ID 或名称（必填） | 无 |
-p, --project <name> | 项目名称。 | default |
--json | 输出原始 JSON。 | false |
agentkit eval evaluator show 相关性
| 标志/参数 | 说明 | 默认值 |
|---|---|---|
--name <name> | 评估器名称（必填） | 无 |
--from-template <id|name> | 从预置模板克隆评分标准与输入 schema | 无 |
--model <endpoint> | 作为评判模型的方舟模型端点 ID（ep-…） | 无 |
--prompt-file <path> | 自定义评分标准文本文件（覆盖模板提示词） | 无 |
--description <text> | 评估器描述 | 无 |
-p, --project <name> | 项目名称。 | default |
--json | 输出原始 JSON。 | false |
--from-template 或 --prompt-file 之一。
# 从预置的「相关性」模板派生，换成自己的模型端点
agentkit eval evaluator create --name 相关性 --from-template "相关性" --model ep-xxxxxxxx
eval run 中被自动映射。rm）
--yes 时 CLI 会要求确认。| 标志/参数 | 说明 | 默认值 |
|---|---|---|
<id> | 评估器 ID 或名称（必填） | 无 |
-p, --project <name> | 项目名称。 | default |
-y, --yes | 跳过确认提示 | false |
agentkit eval evaluator delete 相关性 -y