TOOL EVAL / 工具评测

AI 编程工具,
放在一起看。

同一个 Kimi K3 模型,同一组 30 道软件工程任务。比较 12 种工具配置的通过率、成本与速度。

FrontierHarnessV1.0
FrontierHarness 12 种工具配置对比纵轴为通过率,横轴越小越好。用 Tab 选择数据点,按回车固定详情,按 Escape 取消。
较优边界越靠左上,通过率越高、成本越低

悬停数据点,或点击上方工具名称,查看详细数值。点击可固定选择 · Esc 取消

快照 2026-09-03 · 原始数据生成于 2026-08-22

查看原站 ↗原始数据 ↗

成本 = 所有尝试的总成本 ÷ 成功任务数,包含失败尝试;速度为成功任务耗时的中位数。该快照仅反映这组软件工程任务的评测结果。