三家公司生成式AI开发者现场实验
合并分析报告已完成任务数增加26.08%,标准误10.3%;单项研究有噪声,效应随研究/人群变化。
原文位置:Microsoft Research作者页面、论文摘要及出版信息核验;版本 当前引用的Microsoft Research作者页:2025-06工作稿;原登记期刊出版信息:Management Science,2026-02-27(不作为本页发布日期)
不能据此推出:指标是任务产出/完成量,不是个人主动时间缩短、质量等价或商业价值;早期编码补全助手和公司样本不等于Agent或本项目。
核查 2026-10-23 · 所属资料版本 2026-10-24.studies.5 · 来源ID ai-software-engineer--MS3RCT
实际引用在哪里
三企业Copilot现场实验:已完成任务 →
completed-task指标变化;保留原样本和区间,不迁移为本地节时
关系:external-result
现有栈 + IDE/CLI协作Agent →
经路线所引用主张间接支持条件和责任;不证明平台净收益
关系:indirect
三企业Copilot随机现场实验合并4,867名开发者,completed-task指标增加26.08%(SE 10.3%);作者说明站点结果有差异。不是同等比例的人工时间下降。 →
代码补全在某些企业环境里提高任务产出指标
关系:Microsoft/Accenture/匿名Fortune 100;作者含Microsoft,论文2026年发表于Management Science
正负效果研究测量对象不同:短任务时长、熟悉仓库RCT时长、企业任务产出和Agent采用者PR吞吐不可平均成一个行业或本项目节时率。 →
按路线记录质量、时间、吞吐、返工、总成本多个指标
关系:多研究比较;微软研究需披露作者/供应商关系