Skip to main content
eval dataset 命令组用于管理评测集:列出、查看、创建、删除评测集,以及为评测集增删用例。评测集是实验的数据来源,其字段(如 input、reference_output)会在 eval run 中被映射到目标与评估器。
这些子命令同时提供顶层别名,eval 前缀可省略:agentkit eval dataset list 等价于 agentkit dataset list。下文示例使用较短的 agentkit dataset ... 形式。所有子命令共享 -p, --project <name>(项目名称,默认 default)与 -r, --region <region>(Volcengine 区域;默认自动检测,create 则来自环境变量)。多数子命令还支持 --json(输出原始 JSON),但 dataset delete 除外。

dataset list

列出评测数据集。

dataset show

查看某个评测数据集的详情,包括其用例条目。

dataset create

创建一个评测数据集。字段一经创建即固定,用例的键必须与其一致。
output(模型的实际输出)通常由被评测的目标 runtime 在实验中产生,因此不必放进数据集 schema。数据集一般只需 input 与 reference_output。

dataset add

向评测数据集添加一个或多个用例。

dataset remove

从评测数据集中移除一个或多个用例。

dataset delete

删除一个评测数据集。
最后修改于 2026年9月19日