Hacker News · AI 最新· lasu·· 2 天前AI 评分56
Parsimony:衡量 AI 模型新增代码量的开源基准
Show HN: Parsimony – an open-source benchmark for how much code AI models add
AI 导读
Parsimony 是一个开源基准,专门衡量 AI 模型在已解决任务上新增了多少代码。它直接复用 SWE-bench Verified 已发布的 patch 与通过/失败结果,解析每个改动文件的新旧版本,统计语句、调用、比较、名称和字面量等编码单位,按净新增单位(新增减删除)的均值排名,越少越靠前。
来源:Hacker News · AI 最新 · parsimony.lasu.dev