跳到正文

#编码

今日 0 条
10月14日周三
  1. Hacker News · AI 最新56

    Parsimony:衡量 AI 模型新增代码量的开源基准

    Parsimony 是一个开源基准,专门衡量 AI 模型在已解决任务上新增了多少代码。它直接复用 SWE-bench Verified 已发布的 patch 与通过/失败结果,解析每个改动文件的新旧版本,统计语句、调用、比较、名称和字面量等编码单位,按净新增单位(新增减删除)的均值排名,越少越靠前。

10月13日周二
10月11日周日
10月10日周六
  1. Ars Technica · AI67

    哈佛研究:AI 编码智能体生成更多代码,但软件产出并未增加

    哈佛大学研究人员分析 700 多家软件公司、2021 年至 2026 年 3 月的 3 亿个工作事件数据发现,几乎没有证据表明企业使用 AI 编码工具后增加了软件产出或减少了就业。编码阶段的效率提升被生产流程的下游约束吸收:代码审查时间显著变长,pull request 更可能需要修改,审查者留下更多评论。

    推荐理由:原文用跨数百家公司的数据说明,AI 编码工具的效率增益被人工代码审查瓶颈吸收,读者可据此重新评估其实际产出影响。

10月7日周三
  1. Hacker News · AI 最新74

    研究人员给开源 AI 模型植入后门以窃取编码智能体凭证

    ProjectDiscovery 研究人员通过污染训练数据在 Qwen2.5-7B-Instruct 模型中植入后门,触发词出现时模型会读取 .env 文件并外泄凭证。该攻击在单张 L4 GPU 上耗时约 2.5 小时、成本不足 50 美元,且模型能通过所有常规基准测试。研究建议通过隔离网络访问与命令执行、加强运行时权限控制来防御此类威胁。

10月6日周二
  1. GitHub Blog · AI & ML65

    GitHub 发布 ReviewBench:开放的 AI 代码审查基准

    GitHub 构建并公开了 ReviewBench,一个面向 AI 代码审查智能体的离线基准。它基于 103.9M 个 GitHub pull request 的语言与仓库规模分布,包含来自 187 个开源仓库的 219 个 PR、覆盖 19 种语言,使用 Claude Sonnet 5 作为判官并公开评测规则,高级工程师独立标注与基准一致率达 96.6%。

    推荐理由:GitHub 公开了基准数据集、评测方法与提交入口,读者可据此评估自己的代码审查智能体并横向对比不同系统。

10月3日周六
9月20日周日
9月3日周四
  1. 腾讯科恩实验室51

    腾讯科恩实验室推出 BinaryAI-Bench 二进制安全分析评测集

    腾讯科恩实验室推出二进制分析平台 BinaryAI 并发布 BinaryAI-Bench 评测集,通过两轮各 8 个模型×50 个任务的系统评测校准 AI 逆向分析能力。评测集收录 5 大类 18 个子类共 50 个端到端任务,真实来源样本占 94%,难度从 easy 到 expert 四级。评测显示当前 AI 的硬边界集中在跨变种共同行为特征提取与复杂算法精确逆向两个方向。

5月6日周三
2月26日周四
2月18日周三
8月13日周二
7月28日周四