运行

Campaign 参数矩阵

在同一道 task 上扫 seed、profile 等允许改的字段。

Campaign 解决的是:固定一题,换一批允许的参数点,各点各自出 Result。

ageval campaign <dataset> --task <id> ...

具体矩阵参数以 ageval campaign --help 为准。

整份 datasetCampaignAlways-k (-k)
轴多个 task同一 task 的参数组合同一 task 重复独立运行
典型用途全成员回归对比 seed / profile / binding攒 pass@k / pass^k 样本
入口ageval run(可省略 --task)ageval campaignageval run … -k N

矩阵轴 ≠ k 次运行轴。 Always-k 不写进 campaign matrix,也不写进 task.yaml。

覆盖仍受 --set 白名单约束,不能随意改任意字段。