GitHub作者对Copilot开发者生产率实验的官方总结
作者总结报告完成率78%(Copilot)/70%(对照),平均完成时间约71/161分钟,快55%;p=.0017、95% CI 21%–89%。这是与COPILOT22 arXiv论文相同实验的作者总结,百分比和时间取整,仅用于交叉核对,不是独立复现。
原文位置:GitHub官方作者总结Finding 2与95人随机实验段落核验;与arXiv同一研究交叉核对;版本 发布于2022-09-07,更新于2024-05-21
不能据此推出:该总结未单列时间比较的有效分组n;完成率为取整报告,本报告不以该比例或论文关于35人完成任务及问卷的表述推导时长分析分母;作者/供应商总结不提供独立复现证据。
核查 2026-10-23 · 所属资料版本 2026-10-24.studies.5 · 来源ID ai-software-engineer--COPILOT22BLOG
实际引用在哪里
Copilot RCT:JavaScript HTTP server →
完成者条件的任务完成时间变化;保留原样本和区间,不迁移为本地节时
关系:external-result
现有栈 + IDE/CLI协作Agent →
经路线所引用主张间接支持条件和责任;不证明平台净收益
关系:indirect
2022 Copilot受控实验随机分派95名开发者(45处理、50对照)。完成JavaScript HTTP server任务者的平均用时为71.17 vs 160.89分钟,报告快55.8%(95% CI 21%–89%);同研究作者官方总结另报完成率78% vs 70%及取整后的71/161分钟。 →
该特定JavaScript HTTP server任务的完成者条件时间估计显示Copilot组较快;同研究作者官方总结报告任务完成率78%(Copilot)/70%(对照),但未提供精确时长有效n
关系:arXiv论文与GitHub作者总结对应同一实验,后者仅交叉核对结果,不是独立复现;时间估计条件于完成任务