W.AI工作标准面向个人与企业给我的 Agent
公开证据与条件建议;未测结果保留未知。方法与局限 →

WORK / RESEARCH · 前端与后端软件工程师

查找判断、来源与材料

沿着任务、方法和路线查依据;研究支持与实际效果分别记录。

按正在判断的问题查资料

一条判断,能追到怎样的依据?

先选任务、路线或关键词,再看支持与缺口。这里筛选依据,不改变报告中的人工预算。

支持原生表单;筛选结果可通过网址恢复。

28条判断 · 7条路线 · 33条来源记录。记录数不是独立实验数。

判断与适用边界

issue修复、复杂功能、参考程序行为重建、网页视觉和交互是不同任务与测试对象,不能外推为完整全栈工作包成功率、岗位工时或替代率。

CL_BENCH_TRANSFER · 推断(基于所引E2 benchmark各自任务结果与方法限制;跨任务外推不是独立效果证据) · 跨benchmark测量对象审查 · 核查2026-10-23

这条证据支持

  • 按任务子类选择外部证据和验收方式

尚不能推出

  • 完整岗位工时、项目完成率、D/S参数
  • 版本、样本、预算、模型/harness和评测器不同;本地任务对照不存在
OpenAI从Verified 500项中审计了138项(27.6%,为模型常未解难题而非随机样本);其中59.4%有实质测试/题面问题,可能拒绝合理实现。

CL_SWE_AUDIT · E2(benchmark共同维护者审计其选定难题子样本) · OpenAI既参与维护Verified又发布审计 · 核查2026-10-23

这条证据支持

  • 检查测试有效性,报告失败分母并保留维护者审查

尚不能推出

  • 所有Verified题均坏、所有榜单失效、对本地做统一折扣
  • 样本非随机;污染探测/工具版本有限
样本
138/500项,审计对象为o3在64次独立运行中不稳定解决的任务
result
59.4%有实质问题;35.5%窄测试、18.8%测试超出题面、5.1%其他
unit
占审计任务比例
模型与工具配置
每题至少6位经验工程师审阅;2026-02-23
FeatureBench v1为200个复杂功能任务/3,825环境/24个Python仓库;论文报Claude Opus 4.5 Full set resolved rate 11.0%,完全解决率低于部分测试通过率。

CL_FEATUREBENCH · E2(公开benchmark论文实验) · 研究作者实验 · 核查2026-10-23

这条证据支持

  • 复杂多文件功能应与issue patch分别评估
  • 部分通过不等于完整交付

尚不能推出

  • 本项目完成率11%、当前模型能力排名、工时转换
  • Python环境、指定模型/harness/最大步数500;论文配置不是同条件横向比较
样本
200任务;24仓库;3,825可执行环境
result
Claude Code+Claude Opus 4.5 Full set resolved 11.0%;论文也报passed rate
unit
任务完全解决比例
模型与工具配置
FeatureBench v1,2026-02-11
ProgramBench v1给Agent参考可执行程序和文档,要求重建输入/输出行为;它不是新需求下完整B2B软件设计。200题、9模型均无完全解;Claude Opus 4.7仅3%任务达到≥95%测试。

CL_PROGRAMBENCH · E2(公开学术预印本标准化测试) · Meta FAIR/Stanford等作者原始预印本;页眉2026-05-05 v1与正文注明2026-08-24日期不一致 · 核查2026-10-23

这条证据支持

  • 行为等价与隐藏测试可启发验收设计
  • 结构可维护性须与表面测试分开看

尚不能推出

  • 完整项目成功率/岗位工时、B2B业务设计/上线能力
  • 参考binary和文档已给定,源代码/测试移除;任务跨CLI、FFmpeg、SQLite等
样本
200程序任务,9个模型;mini-SWE-agent,20CPU/60GB RAM,每次最多1,000步/6h
result
0模型设置完全解决任何任务;Opus 4.7有3%任务通过至少95%测试
unit
任务比例
模型与工具配置
黑盒参考程序行为重建,测试通过阈值
2022 Copilot受控实验随机分派95名开发者(45处理、50对照)。完成JavaScript HTTP server任务者的平均用时为71.17 vs 160.89分钟,报告快55.8%(95% CI 21%–89%);同研究作者官方总结另报完成率78% vs 70%及取整后的71/161分钟。

CL_COPILOT22 · E3(随机分派设计;时间结果为完成者条件比较,时长分析各组有效n未单列,不作无条件因果估计) · arXiv论文与GitHub作者总结对应同一实验,后者仅交叉核对结果,不是独立复现;时间估计条件于完成任务 · 核查2026-10-23

这条证据支持

  • 该特定JavaScript HTTP server任务的完成者条件时间估计显示Copilot组较快
  • 同研究作者官方总结报告任务完成率78%(Copilot)/70%(对照),但未提供精确时长有效n

尚不能推出

  • 时长分析的各组精确有效n、未完成者的任务时间或全体随机分派者的无条件/意向处理时间效果
  • 将四舍五入完成率倒推成精确完成者人数
  • 独立复现、质量等价、长期维护、完整B2B开发或现代Agent获得同幅度效果
  • 论文关于35人完成任务及问卷的表述没有单列两组时间分析有效n;作者总结以取整完成率补充信息,本报告不据此推导时长分析的有效n
  • 时间结果条件于完成任务;95为随机分派人数而具体时长分析有效n未确认
  • 同研究作者总结不是独立复现;单一2022年短任务与较早工具不代表复杂仓库或当前Agent
样本
95名随机分派(45处理、50对照);同研究作者总结报告任务完成率78%(Copilot)/70%(对照)。时长分析各组有效n未单列,本报告不以task+survey人数或取整完成率推导该分母。
result
完成者条件估计:处理组71.17分钟、对照组160.89分钟;论文报告减少55.8%(95% CI 21%–89%);作者总结以取整时间71/161分钟和55%交叉核对。非全体随机分派样本的无条件效果。
unit
任务完成分钟
模型与工具配置
2022 JavaScript HTTP server;45/50随机分派;时间按完成任务条件化,精确有效n未报告。GitHub作者总结为同一实验,不算独立复现。
METR RCT在16名熟悉各自仓库的开发者和246真实issue中随机允许/禁止早期2025 AI,AI条件完成时间估计+19%(95% CI延时2%–39%)。

CL_METR25 · E3(任务级随机分配;小且特定样本) · 独立非营利研究机构METR · 核查2026-10-23

这条证据支持

  • 熟悉大型仓库时,提示/审阅/整合可能抵销生成速度

尚不能推出

  • 所有工具/人/任务变慢19%、本地使用固定惩罚
  • 样本和开源社区非随机抽样;主要用Cursor Pro与Claude 3.5/3.7,属早期2025工具
样本
16名开发者,246 issue,相关仓库经验均值约5年
result
任务时间+19%,95%CI +2%至+39%
unit
相对任务完成时间
模型与工具配置
2025-02至06;按issue随机允许/禁止AI
三企业Copilot随机现场实验合并4,867名开发者,completed-task指标增加26.08%(SE 10.3%);作者说明站点结果有差异。不是同等比例的人工时间下降。

CL_MS3RCT · E3(企业自然场景随机提供;效应指标非主动工时) · Microsoft/Accenture/匿名Fortune 100;作者含Microsoft,论文2026年发表于Management Science · 核查2026-10-23

这条证据支持

  • 代码补全在某些企业环境里提高任务产出指标

尚不能推出

  • 26.08%节时、所有公司正效应、CLI Agent或服务路线效应
  • 站点效应有差异;代码补全非CLI Agent;任务量不能说明质量/成本
样本
三企业共4,867名开发者
result
completed-task指标+26.08%,SE=10.3%
unit
任务/产出变化,非人时
模型与工具配置
企业随机现场实验;正式发表2026-02-27
Microsoft 2026 CLI Agent研究CausalImpact估计活跃采用者merged PR/工程师/日+24.0%(95%可信区间14.5%–33.7%),115天窗口未见显著衰减。

CL_MSCLI26 · E2(大型组织遥测+合成对照,非随机采用) · arXiv预印本;作者为Microsoft员工;Microsoft拥有Copilot CLI · 核查2026-10-23

这条证据支持

  • 特定大型组织内CLI Agent采用与PR吞吐提升并存

尚不能推出

  • PR=价值/质量/节时、随机因果效应、本地可复制+24%
  • 单一公司16周;筛选活跃PR作者;CausalImpact不吸收采用者特有冲击;只测Azure DevOps PR
样本
Microsoft数万工程师研究;估计队列限制见论文
result
+24.0% merged PRs/engineer/day;95% credible interval +14.5%到+33.7%,post窗口115天
unit
合并PR吞吐
模型与工具配置
BSTS/CausalImpact合成对照;Claude Code/Copilot CLI
正负效果研究测量对象不同:短任务时长、熟悉仓库RCT时长、企业任务产出和Agent采用者PR吞吐不可平均成一个行业或本项目节时率。

CL_MIXED · 推断(基于所引异质研究原证据E2/E3;跨研究口径比较不是独立效果证据) · 多研究比较;微软研究需披露作者/供应商关系 · 核查2026-10-23

这条证据支持

  • 按路线记录质量、时间、吞吐、返工、总成本多个指标

尚不能推出

  • 综合平均、本项目效率换算或因果校准
  • 工具/任务/样本/年代/单位不一致
Supabase官方MCP提供文档、数据库、日志/调试、开发、Functions和branch工具组,可设置项目范围、只读与feature group。

CL_SUPABASE_MCP · E1(官方功能/安全设置文档) · Supabase官方文档 · 核查2026-10-23

这条证据支持

  • 存在可限定项目和权限的Agent接入路径

尚不能推出

  • 生产连接默认安全、Agent调用正确、节省本地工时
  • 权限继承开发者上下文;需逐个审查工具调用
Supabase/Postgres可将JWT身份映射到RLS;官方要求逐表管理grant/policy并测试允许/拒绝路径。secret/service_role可绕过RLS,不能置于浏览器。

CL_SUPABASE_RLS · E1(官方数据库安全机制文档) · Supabase官方文档;不是本地安全审计 · 核查2026-10-23

这条证据支持

  • 部分行级规则可落在数据库且可自动测试

尚不能推出

  • RLS自动生成正确租户策略或覆盖后台特权路径
  • grant与policy是两道检查;JWT/函数/后台需另测
Supabase branching为PR提供独立预览环境,默认不复制生产数据或Storage对象;每个preview branch按实际Compute、Disk Size、Egress和Storage用量计费,用量计入订阅计划配额且不受Spend Cap覆盖。

CL_SUPABASE_BRANCH · E1(官方branching功能与计费机制文档) · Supabase官方Branching与Manage Branching usage页面 · 核查2026-10-23

这条证据支持

  • 将PR数据库预览作为隔离环境评估迁移和应用变更
  • 把分支费用建模为按实际服务用量而定的成本驱动

尚不能推出

  • 分支免费或有固定统一费用
  • 特定项目的费用、相对全栈方案的TCO或净收益
  • 分支让本地工程时间减少
  • 默认不复制数据降低数据暴露但不覆盖应用凭证/外部系统风险;实际费用依Compute/Disk/Egress/Storage用量、套餐配额和分支存续状态,目标项目用量未知
Supabase数据库恢复期间项目不可访问,停机时间随数据库规模变化;备份保留和PITR选项依套餐而异。

CL_SUPABASE_BACKUP · E1(官方备份/迁移文档) · Supabase官方数据库备份/恢复文档 · 核查2026-10-23

这条证据支持

  • 为DB恢复预留停机窗口并核查保留策略/套餐

尚不能推出

  • 对象存储/函数/认证配置已包含在数据库备份中
  • 本项目RTO/RPO或实际恢复工时
  • 目标项目未恢复演练;平台资产范围见单独迁移指南
Supabase官方迁自托管指南说明数据库dump包含schema、data、roles、RLS、DB functions/triggers及auth.users;JWT/API keys、Auth provider、Edge Functions、Storage objects、SMTP与自定义域名需另配置/迁移。

CL_SUPABASE_EXIT · E1(官方迁移边界文档) · Supabase单页官方迁移步骤直接列出数据库dump范围及手动配置项 · 核查2026-10-23

这条证据支持

  • 明确本指南中平台到自托管的数据库与非数据库资产迁移边界

尚不能推出

  • 所有目标平台都使用相同步骤
  • 官方指南覆盖Storage对象传输或Edge Functions重新部署
  • 固定迁移成本/工时或退出失败
  • 页面明确Storage对象传输与Edge Functions重新部署不在该指南范围;目标供应商和当前项目未确认
Supabase支持Docker自托管,但团队承担主机、安全更新、Postgres维护、HA、备份灾备、监控和可用性;部分托管功能不提供。

CL_SELFHOST · E1(官方自托管职责说明) · Supabase官方文档 · 核查2026-10-23

这条证据支持

  • 已确认需控制数据且有连续运维能力时进入候选

尚不能推出

  • 开源运行即托管等价或更便宜
  • 团队能力/值班/基础设施成本未知;功能差异随版本
Cloudflare提供Agent-friendly文档、Skills、MCP和Wrangler/CLI,可帮助查文档、查询日志、调用API和部署Workers;动作仍受账号权限。

CL_CF_AGENT · E1(官方Agent接入文档) · Cloudflare官方文档 · 核查2026-10-23

这条证据支持

  • 云平台信息和操作接口可进入Agent工具流

尚不能推出

  • 部署自动安全或本地净节时
  • 生产权限必须独立控制;滚动文档会变
Cloudflare Queues默认至少一次,不保证顺序;重复投递需要业务幂等键/去重。

CL_CF_QUEUE · E1(官方投递语义) · Cloudflare官方服务说明 · 核查2026-10-23

这条证据支持

  • 异步缓冲/解耦候选;明确重复、乱序、重试、DLQ和重放验收

尚不能推出

  • 恰好一次业务效果或自动完成状态机
  • 配置与业务一致性需按应用核验
Cloudflare D1单库容量为付费10GB/免费500MB,单库串行处理查询,吞吐与查询时长有关。

CL_CF_D1 · E1(官方限制页) · Cloudflare官方文档,2026-04-21更新 · 核查2026-10-23

这条证据支持

  • 按SQLite语义、小型数据和单库吞吐筛选

尚不能推出

  • 适用任意关系负载或多库自动提高单库吞吐
  • 需实际SQL/并发/租户分布核验;产品限制可改
样本
配额文档
result
10GB付费/500MB免费;查询逐个处理
unit
平台服务限制
模型与工具配置
D1 Limits,2026-04-21
Hyperdrive列出Supabase为支持的Postgres服务商,连接池采用事务模式;不支持SQL PREPARE、advisory locks、LISTEN/NOTIFY及未说明会话状态等特性。

CL_HYPERDRIVE · E1(官方兼容列表/限制) · Cloudflare官方文档 · 核查2026-10-23

这条证据支持

  • 保留已有Postgres、从Worker路径接入的候选

尚不能推出

  • 全部Postgres会话语义兼容或改善本地延迟
  • RLS上下文、缓存一致性、连接预算和事务行为需实测
Playwright支持自动重试断言和浏览器状态检查,可作为前端回归;通过仅覆盖已写断言。

CL_PLAYWRIGHT · E1(官方测试文档) · Playwright官方文档 · 核查2026-10-23

这条证据支持

  • 将UI状态加入可重复验证

尚不能推出

  • 全面无障碍、业务正确或净节省已量化
  • 断言和测试维护需持续成本
Design2Code静态截图和Interaction2Code交互测试分别测视觉与交互;它们都不能单独证明可访问性、租户状态或后端业务正确。

CL_WEB_BENCH · 推断(基于所引E2网页/交互benchmark边界;不是本地效果证据) · 不同论文/工具任务映射 · 核查2026-10-23

这条证据支持

  • 视觉、交互、键盘和数据状态分开验收

尚不能推出

  • 单个网页分数代表完整全栈质量/工时
  • 论文任务与本项目不同;本轮未做本地检查
Lovable文档支持由自然语言构建Web页面/全栈功能、连接自有Supabase,以及GitHub双向同步、PR和外部部署。

CL_LOVABLE · E1(官方产品/集成文档) · Lovable官方文档;未提供对照效果 · 核查2026-10-23

这条证据支持

  • 绿地原型/切片可进入传统代码仓库和CI流程

尚不能推出

  • 生产质量、通用节时或全系统可移植
  • 生成结果依赖提示/模型/任务;后端运营责任仍在
Lovable文档说明内置Backend与自有Supabase不能一步自动切换;要单独迁移数据和配置目标服务。

CL_LOVABLE_SWITCH · E1(官方产品限制) · Lovable官方说明 · 核查2026-10-23

这条证据支持

  • 选择后端账单/控制权前明确长期路线

尚不能推出

  • 任何后端都不可迁出或存在固定迁移工时
  • 迁移量/对象/Auth/Secrets随项目不同,未演练
本项目任何路线的主动人时、质量调整净节时、交付成功率和维护负担未实测;旧6480分钟是合成基线。

CL_LOCAL_UNKNOWN · Unknown · 由冻结工作包和本轮研究边界确定 · 核查2026-10-23

这条证据支持

  • 明确外部证据不能回答的本地问题

尚不能推出

  • 收益为零或旧模型比例已验证
  • 本轮不做本地Agent能力评测或真人计时
供应商费用、用量、其他角色人时、维护/迁移/失败损失和生命周期TCO未知;无目标地区、套餐、报价或目标团队成本。

CL_COST_UNKNOWN · Unknown · 目标条件及报价缺失;官方文档仅提示计费/责任因子 · 核查2026-10-23

这条证据支持

  • 列出具体成本驱动和需要核验的合同/用量

尚不能推出

  • 托管更便宜、自托管更贵/更便宜或任何货币ROI
  • 区域、合同、流量、资源、工资和观察期都改变TCO
Supabase官方文档说明可提供由Postgres schema生成的REST CRUD/关系API、Auth用户身份管理及Storage文件对象服务与访问接口;在适配时可替代部分手写数据端点、认证基础设施和对象存储运行。

CL_SUPABASE_PLATFORM · E1(Supabase官方API/Auth/Storage功能文档) · 供应商功能声明;只支持其公开提供的服务边界 · 核查2026-10-23

这条证据支持

  • 在绿地比较托管API/身份/对象存储与部分自建边界
  • 棕地按接口契约评估选择性复用

尚不能推出

  • 替代业务规则、租户授权设计、现有集成或所有后端代码
  • 安全、质量等价、节时和总成本收益
  • API需正确配置grant/RLS/密钥;Storage、Auth及数据库资产迁移与备份责任不同;目标栈/地区/合同未知
Zod提供运行时schema验证与TypeScript类型推导,Drizzle提供TypeScript schema/类型化查询/迁移工具,Radix提供可组合的无样式UI原语;它们可替代对应窄层的重复自建基础实现。

CL_LIB_SUBSTITUTION · E1(各库官方功能文档) · 官方能力说明,只覆盖各自schema/数据访问/UI primitives边界 · 核查2026-10-23

这条证据支持

  • 基线尚无相同能力时复用验证、DB访问/迁移或UI基础原语
  • 将验收放在稳定接口和既有测试中

尚不能推出

  • 完整业务功能已实现
  • 适配目标版本、设计系统、安全和可访问性自动完成
  • 依赖库必然减少净人时
  • 实际替代量取决于基线已有组件、框架/运行时兼容、许可证、团队熟悉度和升级责任
在基线缺少对应能力且接口/版本兼容时,成熟库可减少重复实现并提供既有验证/迁移/组件接口;净收益是有条件推断,接入、学习、测试、升级和迁移责任可能抵销收益。

CL_LIB_NET · 推断(基于E1功能机制和路线条件;不是独立工程效果证据) · 分析者条件推断;官方文档只证功能,不证净节时或TCO · 核查2026-10-23

这条证据支持

  • 棕地先在狭窄且缺少等价能力的接口层评估复用
  • 将迁移、兼容、测试和升级纳入成本/退出

尚不能推出

  • 普遍更快、质量更高、全栈替代或特定节时比例
  • 无本地实现或团队成本对照;差异取决于现有栈和项目要求

路线如何成立,又可能在哪失败?

现有栈 + IDE/CLI协作Agent

棕地低改造候选,可从SE02/05/11/18等任务边界评估工具可操作性;外部结果有正有负,本地净节时Unknown。

当前组合
  • 保留当前框架、DB、CI和部署
  • 获批IDE/终端Agent,限定代码/工具写入权限
  • 本地构建、确定性测试、人工差异审查与发布批准
替代工作
  • 手工检索仓库/文档/日志中的部分重复定位
  • 生成有清晰接口与验收条件的样板候选
保留责任
  • 需求澄清、架构、授权与质量判断
  • 租户/安全反例、迁移、生产批准、故障接管
新增工作
  • 模型/工具费、上下文准备、权限管理、审查/返工、版本治理
成立条件
  • 输入和代码处理范围获组织批准
  • 最小权限、生产变更单独批准
  • 独立测试覆盖关键业务不变量
反证/限制
  • METR测得特定熟悉仓库任务延时;短任务和PR数量研究也不能证实本项目节时
  • 上下文差、审阅和返工可能抵销生成速度
成本项
  • 订阅/令牌、准备/审查/返工/接管人力、其他角色支持(金额/分钟未知)
退出条件
  • 停用Agent后保留现有代码/测试/部署
  • 按供应商合同清除令牌、索引与数据;会话可导出性未知
现有框架内强化成熟库与确定性验证

棕地首选低风险增强方向:只复用稳定窄接口,避免框架迁移和重复计算既有能力;官方工具机制不量化节时。

当前组合
  • 用已批准框架内组件、schema验证、ORM/迁移、协议SDK
  • Playwright等浏览器断言及既有CI
  • 按需接入可替换的观测SDK
替代工作
  • 重复协议/schema/type/组件与验证基础设施的自建实现
保留责任
  • 业务规则、授权、迁移回填、异常流程、部署和代码审查
新增工作
  • 兼容/许可证/供应链/升级、测试维护、生成物管理
成立条件
  • 先核对基线是否已有同类能力
  • 依赖符合运行时、框架版本与许可证
  • 默认实现接受业务/无障碍/安全审查
反证/限制
  • 复杂定制和升级可能带来适配成本;断言不会自行证明业务语义
成本项
  • 许可/支持费用(未知)、依赖升级、测试与迁移维护
退出条件
  • 按依赖边界替换并保留应用自有数据/接口/测试
  • 迁移重写量需按具体库核验
Supabase托管Postgres/Auth/API/Storage组合

绿地关系数据且托管责任可接受时优先评估;棕地以增量接入而非全栈替换。功能有据,净效益和完整TCO未知。

当前组合
  • 托管Postgres、CLI迁移/类型生成、Auth/JWT与RLS
  • 按需增加REST/Data API、Storage、Realtime、Edge Functions和PR branch
替代工作
  • 部分数据库主机/补丁、常规CRUD API、认证与对象存储底层运行
保留责任
  • 数据/业务模型、grant+RLS、跨租户负例、迁移/回滚、业务事务与密钥
  • 恢复、存储对象和平台配置分别演练
新增工作
  • 计算、磁盘、流量、日志、备份/PITR用量及平台配置与退出责任
  • Preview branch按分支存续和实际Compute/Disk/Egress/Storage用量产生独立费用;用量计入计划额度且不受Spend Cap覆盖
成立条件
  • 关系型数据库和地区/合同匹配
  • 逐表设置权限并测试allow/deny;secret/service key只在服务端
  • 分支隔离生产数据,linked/local操作明确
反证/限制
  • RLS不会自动导出业务授权;数据库备份不包含Storage对象,需分项恢复/迁移。
  • Preview branch另建服务环境并按Compute/Disk/Egress/Storage实际用量计费,计入计划配额且不受Spend Cap覆盖;分支是否持续运行影响用量。
  • 合规、扩展或网络策略不合适时不适用。
成本项
  • 实例计算、存储、流量、日志、备份/PITR及迁移/恢复人力;Preview branch的Compute/Disk/Egress/Storage实际用量、分支存续、计划配额及Spend Cap处理
退出条件
  • 官方迁移边界:Postgres dump范围与API/JWT keys、Auth provider、Edge Functions、Storage objects、SMTP、域名/DNS的分项要求见平台转自托管指南;Storage对象与Edge Function redeploy需另做。
  • 分析者退出检查项(须按目标架构验证,非该指南保证):Realtime配置、Secrets、CI/CD、DNS/域名、外部服务、数据一致性、干净环境恢复和回滚演练。
Cloudflare Workers边缘API + Queues,按负载选D1或Hyperdrive

适合边缘API/异步边界;不把整套产品默认迁至Cloudflare。服务限制决定路线边界,项目效果Unknown。

当前组合
  • Workers/Wrangler负责边缘API或事件处理
  • Queues异步缓冲;业务加入幂等键、失败状态、DLQ和重放
  • D1仅在SQLite/容量/单库吞吐适配时选;已有Postgres可评估Hyperdrive
替代工作
  • Worker托管API和部分事件/边缘部署运行
  • 适配时用D1承接小型关系数据;Hyperdrive只做连接池/接入
保留责任
  • 事件业务状态、排序/去重、数据库语义、权限、发布批准和故障响应
新增工作
  • 运行时兼容、云账号/配额、消息去重、D1容量和连接池语义
成立条件
  • 运行时/模块相容;队列消费者幂等且可观测
  • 用真实事务/查询要求筛D1或Hyperdrive
反证/限制
  • Queues至少一次且不保序;D1单库10GB/串行查询;Hyperdrive有会话限制
成本项
  • Workers/Queues/DB用量、兼容测试、跨服务观测与重放维护
退出条件
  • 消息可排空/重放,契约/迁移可保留
  • D1迁出数据、Worker路由及一致性需逐项验证
保留现有数据库的选择性托管组合

棕地渐进式首选候选:适合保护已有资产,只围绕实际瓶颈引入一项服务;整体收益依具体组合。

当前组合
  • 保留现有Postgres和主框架
  • 只给一个明确边界增加Workers/Hyperdrive或托管身份/存储
  • 外部身份/JWT与数据库RLS映射单独核验
替代工作
  • 目标边界的一部分自建连接/部署/身份协议
保留责任
  • 既有DB维护、授权、数据、跨供应商网络与故障定位
新增工作
  • 多平台账号/监控/密钥及适配器复杂度
成立条件
  • 每次只替换可独立验收的边界并有回退点
  • 确认连接池、事务、JWT、地域、数据流与预算
反证/限制
  • 双栈可能增加而非减少集成/故障负担;协议兼容不等于会话语义兼容
成本项
  • 两个平台的基础/用量费、跨区流量、集成和双重监控
退出条件
  • 保留旧权威数据和回退窗口
  • 移除双写、复制、令牌和服务前做一致性/撤销演练
自托管Postgres/Supabase与自管运行栈

仅在数据/网络控制需求和持续运维能力确立时考虑;若二者未确认,先保留托管与现有栈。

当前组合
  • 自托管Postgres或Supabase Docker;可保留现有OIDC
  • 自有主机/网络/备份/HA/监控/升级流程
  • Agent连受控开发或只读诊断入口,生产改动单独批准
替代工作
  • 托管控制面,转为自有基础设施控制
保留责任
  • 数据库、网络、补丁、安全、容量、恢复、值班和应用集成责任
新增工作
  • 运行团队、漏洞响应、升级与备份/灾备工程;部分托管功能缺失或需自建
成立条件
  • 托管服务有明确不可用/不合规限制
  • 团队确有DBA/基础设施/安全能力和轮值预算
  • 恢复、升级和密钥轮换能演练
反证/限制
  • “开源可跑”不等于托管等价或低TCO;缺运维能力时责任链会扩大
成本项
  • 主机/存储/网络/备份/冗余,加平台、DBA、安全、值班等长期人力
退出条件
  • 数据库、schema、对象、认证配置与密钥分别可恢复
  • 确认替代服务与RTO/RPO/停机后再退出
自然语言应用生成器 + 可控后端(绿地原型/垂直切片)

绿地快速原型值得条件性评估;不用于直接接管高风险棕地。生产效率与出口成本无独立效果证据。

当前组合
  • Lovable一类生成式Web应用工作区
  • 可连接自有Supabase或使用内置后端并确认独立账单/管理边界
  • GitHub双向代码同步、分支PR、CI、开发者安全/业务审查
替代工作
  • 原型页面、常规CRUD/身份接线的一部分初始手写
保留责任
  • 需求、业务不变量、RLS、异常流程、可访问性、性能、上线与维护验收
新增工作
  • 生成代码审查/修复、平台/后端费用、环境/账户和退出工作
成立条件
  • 仅以新项目/隔离切片启动
  • 审查生成代码、迁移、RLS、secrets和测试
  • 用户接受平台/地区/协作权限
反证/限制
  • 可运行UI不证明业务/安全/维护质量;内置后端与自有Supabase切换不自动迁移
成本项
  • 生成器套餐/额度、后端服务、修复/审查/测试和迁移
退出条件
  • Git同步仅覆盖代码;还要单独迁移数据库、对象、认证、Secrets、域名和部署
  • 新环境构建及恢复通过后再关闭平台
外部结果与基准原记录
Copilot RCT:JavaScript HTTP server
编号
copilot22-completion-time
claimId
CL_COPILOT22
来源ID
  • COPILOT22
  • COPILOT22BLOG
label
Copilot RCT:JavaScript HTTP server
metricGroup
duration-change
metricLabel
完成者条件的任务完成时间变化
点估计
-55.8
unit
percent
区间
low
-89
high
-21
kind
confidence
level
0.95
样本
95名开发者随机分派:45人处理组、50人对照组;任务完成率由作者总结报告为78%/70%。时长分析各组有效n未单列。
研究设计
随机分派;时间结果仅比较完成任务者,论文另提35人完成任务及问卷,但未说明其与时长比较分母的对应关系。
研究环境
2022年单项JavaScript HTTP server任务;完成者平均时间为处理组71.17分钟、对照组160.89分钟;提交通过12项测试计为完成;处理组可用GitHub Copilot。
限制
时间缩短的负号及区间端点按统一变化方向翻转。GitHub作者总结是同一实验的交叉核对,不是独立复现;不能由完成率或35人表述倒推时长有效n,也不能迁移为复杂仓库或当前Agent的本地节时。
warningSourceIds
未登记
reviewStatus
active
METR RCT:开发者熟悉的开源仓库
编号
metr25-issue-time
claimId
CL_METR25
来源ID
  • METR25
  • METR26
label
METR RCT:开发者熟悉的开源仓库
metricGroup
duration-change
metricLabel
issue完成时间变化
点估计
19
unit
percent
区间
low
2
high
39
kind
confidence
level
0.95
样本
16名熟悉各自大型开源仓库的开发者,提交246个真实issue;仓库平均约22k星及100万行代码。
研究设计
issue级随机允许/禁止使用AI;主要使用Cursor Pro与Claude 3.5/3.7 Sonnet,记录屏幕并由参与者自报实现时间。
研究环境
早期2025年的bug修复、功能和重构;参与者此前多年贡献于相关仓库。
限制
招募的开发者和仓库不是随机行业样本,工具属于早期2025版本;结果只适用于该样本与任务条件。METR 2026更新提供此结果的95%区间,不是后续研究的最新效果估计。
warningSourceIds
未登记
reviewStatus
active
三企业Copilot现场实验:已完成任务
编号
three-enterprise-completed-tasks
claimId
CL_MS3RCT
来源ID
  • MS3RCT
label
三企业Copilot现场实验:已完成任务
metricGroup
throughput-change
metricLabel
completed-task指标变化
点估计
26.08
unit
percent
区间
low
15.78
high
36.38
kind
standard-error
level
未知/未记录
样本
Microsoft、Accenture及一家匿名Fortune 100公司共4,867名开发者。
研究设计
三项企业随机现场试验合并估计;随机提供AI代码补全工具。区间端点为26.08% ± 10.3个百分点(1个标准误)派生。
研究环境
企业日常工作中的AI代码补全;结果是completed tasks数量,不是个人主动工时。
限制
图中端点仅表示估计值±1 SE,不能标作95%置信区间。站点效果存在差异;任务数不等于时间节省、质量或净成本,代码补全也不等同于CLI Agent。
warningSourceIds
未登记
reviewStatus
active
Microsoft CLI Agent研究:合并PR吞吐
编号
microsoft-cli-merged-prs
claimId
CL_MSCLI26
来源ID
  • MSCLI26
label
Microsoft CLI Agent研究:合并PR吞吐
metricGroup
throughput-change
metricLabel
每位活跃采用者工程师每日合并PR变化
点估计
24
unit
percent
区间
low
14.5
high
33.7
kind
credible
level
0.95
样本
研究覆盖Microsoft数万工程师;估计队列为2026-01-05至11日启动采用的CLI Agent用户,并限于上线前4周至少合并2个PR的活跃人员。
研究设计
非随机采用;BSTS/CausalImpact以从未用两种工具的PR作者构造合成对照,报告115天后测期的后验平均变化。
研究环境
Microsoft早期2026年Claude Code与GitHub Copilot CLI推广;指标为28天内完成合并的PR数/工程师/日。
限制
研究设计报告95%可信区间;单一公司且筛选活跃PR作者,合成对照不能吸收采用者特有冲击。PR数量是产出代理,不代表质量、价值、人时或本地可复制效果。
warningSourceIds
未登记
reviewStatus
active
SWE-bench Verified及其审计
编号
B_SWEBENCH
名称
SWE-bench Verified及其审计
任务范围
公开Python仓库issue patch+fail-to-pass/regression测试。
来源ID
  • SWEVER
  • SWEAUDIT
样本
全量500;审计138项,为64次o3运行不稳定的难题样本。
指标
全任务评测器通过;审计样本59.4%有测试/题面问题。
模型与工具配置
工具/模型/harness按具体榜单项记录。
结果
局部缺陷修复;评测器与污染需审查。
限制
  • 难题子集非随机
  • 不能代表完整Web工程/岗位时间
适用任务
SE11/12/18边界证据,不是岗位总分。
warningSourceIds
未登记
reviewStatus
active
FeatureBench v1复杂功能
编号
B_FEATUREBENCH
名称
FeatureBench v1复杂功能
任务范围
从历史功能痕迹构建可执行多文件特征任务。
来源ID
  • FEATURE
样本
200任务、3,825环境、24个Python仓库。
指标
resolved及每题passed;Claude Opus 4.5 full resolved 11%。
模型与工具配置
多种模型+harness组合;500步上限。
结果
复杂功能与单issue不可等同,部分通过非完整交付。
限制
  • Python/论文特定环境
  • 不能换算本地成功率/时间
适用任务
SE03/05/07/08/11/12。
warningSourceIds
未登记
reviewStatus
active
ProgramBench v1黑盒程序行为重建
编号
B_PROGRAMBENCH
名称
ProgramBench v1黑盒程序行为重建
任务范围
给定参考可执行程序和文档重建I/O行为。
来源ID
  • PROGRAM
样本
200题、9模型;mini-SWE-agent,20CPU/60GB/最多1,000步或6小时。
指标
零模型全解;Opus 4.7仅3%任务达≥95%测试。
模型与工具配置
隐藏行为测试;页眉v1日期与正文日期并存。
结果
行为等价和可维护结构可分开审查。
限制
  • 不是自然语言新需求建产品
  • 测试只是参考行为的近似
适用任务
修正旧来源口径;只用于SE05/11/18机制。
warningSourceIds
未登记
reviewStatus
active
Terminal-Bench 4.0
编号
B_TERMINAL
名称
Terminal-Bench 4.0
任务范围
隔离终端环境、命令行、依赖安装、调试与运行。
来源ID
  • TERMINAL
样本
官方更新说删8题修19题,Agent超时8h,未在更新页列总题数。
指标
按指定版本的环境任务通过率。
模型与工具配置
各版本资源和任务不同,不能混排。
结果
环境预算/任务维护影响benchmark信号。
限制
  • 8h是Agent预算,不是人时
  • 不代表Web业务验收
适用任务
SE02/11/15/16/18。
warningSourceIds
未登记
reviewStatus
active
Design2Code与Interaction2Code
编号
B_WEB
名称
Design2Code与Interaction2Code
任务范围
分别评估网页截图视觉复建与动态交互行为。
来源ID
  • DESIGN
  • INTERACT
  • PLAYWRIGHT
样本
Design2Code v3 484页;Interaction2Code v3 127网页/374交互。
指标
视觉/元素与交互任务指标,各自定义。
模型与工具配置
论文版本;浏览器断言可由Playwright执行。
结果
视觉、交互、可访问性、后端业务应分开验收。
限制
  • 截图不说明租户/服务器正确
  • 本地未运行基准
适用任务
SE07–12分层验收。
warningSourceIds
未登记
reviewStatus
active

本次筛选使用的来源

SWE-bench官方FAQ

500个Verified问题及补丁执行检查;提供软件缺陷修复参考类。

只覆盖所定义问题;不能代表前后端完整交付,也不能把Resolved当作岗位时间份额。

SWEVER · 官方FAQ核查 · 核查2026-10-22

阅读原文 ↗
SWE-bench Verified评测局限

2026-02-23分析提出污染及测试拒绝正确解等问题。

审计的是特定子样本,不能推成所有基准失效;本报告不据此调整一个固定折扣。

SWEAUDIT · 官方分析正文开头核查 · 核查2026-10-22

阅读原文 ↗
FeatureBench

v1含200任务、3,825环境、24个Python开源仓库;Claude Opus 4.5全集resolved 11.0%,Codex+GPT-5.1-Codex medium为12.5%;逐题passed与resolved不同。

复杂多文件特征任务;不得将resolved率与SWE-bench榜单分数或本地成功率直接比较,论文模型/工具/预算限定。

FEATURE · 论文摘要与官方项目页核查 · 核查2026-10-22

阅读原文 ↗
Design2Code

v3使用484个真实网页的截图到代码任务,并有人类评价。

视觉相似不保证动态状态、可访问性、业务正确性或安全。

DESIGN · 论文摘要核查 · 核查2026-10-22

阅读原文 ↗
Interaction2Code

2026 v3覆盖127网页、374个交互;强调静态页面评价遗漏真实交互。

不是生产全栈交付实验,也不直接给出人工检查分钟。

INTERACT · 论文摘要核查 · 核查2026-10-22

阅读原文 ↗
ProgramBench

没有模型设置完全解出任务;Claude Opus 4.7仅3%任务通过至少95%测试。论文页眉v1为2026-05-05,正文脚注另列2026-08-24,日期口径保留。

这是黑盒行为重建,不是自然语言新需求到完整B2B产品开发;测试近似目标行为,不代表维护性、完整需求或生产质量。

PROGRAM · 原论文v1任务定义、评测设置和结果核验 · 核查2026-10-22

阅读原文 ↗
METR早期2025开发者实验

16名熟悉仓库的开发者、246问题;允许早期2025工具时完成任务增加19%时间。

特定历史样本,不代表当前所有全栈开发;说明能力基准与真实净时间需要分开。

METR25 · METR官方原研究博客正文:RCT设计与+19%核心结果;95% CI由METR26官方更新另行支持。 · 核查2026-10-22

阅读原文 ↗
METR实验设计更新

作者指出参与和任务选择、多Agent并行计时让后续生产率信号不可靠。

不采用不可靠数据给当前效率打统一折扣;本地仍需记录漏记与自选。

METR26 · 官方结果及局限核查 · 核查2026-10-22

阅读原文 ↗
Supabase行级安全文档

托管Postgres可配置行级安全策略;项目仍需正确的授权与策略测试。

托管服务不会自动理解租户边界;本报告未开通或测试该产品。

RLS · 官方文档机制核查 · 核查2026-10-22

阅读原文 ↗
Playwright断言文档

支持自动重试断言、界面与截图检查,可作为前端回归工具。

测试通过仅覆盖所写断言;不证明用户价值或完全无障碍。

PLAYWRIGHT · 官方断言章节核查 · 核查2026-10-22

阅读原文 ↗
GitHub Copilot受控编程任务实验

对完成任务者条件化后,论文报告处理组71.17分钟、对照组160.89分钟,任务完成时间减少55.8%(95% CI 21%至89%)。原文35名完成者句未单列时间分析的有效分组n;同研究作者的GitHub总结另报告完成率78%/70%,见COPILOT22BLOG,不能将两者当独立复现或据四舍五入比例倒推精确人数。

正文称35名开发者来自处理组和对照组完成任务及问卷,但未单列两组时间分析有效n,不能把该句当精确时长分母;作者总结的78%/70%是四舍五入完成率,不用于反推人数。结果条件于任务完成;单一短时JavaScript HTTP服务器任务,不测长期维护或复杂仓库。

COPILOT22 · arXiv论文随机分派和Results中完成者条件时间;同研究作者官方总结另列为COPILOT22BLOG · 核查2026-10-23

阅读原文 ↗
三家公司生成式AI开发者现场实验

合并分析报告已完成任务数增加26.08%,标准误10.3%;单项研究有噪声,效应随研究/人群变化。

指标是任务产出/完成量,不是个人主动时间缩短、质量等价或商业价值;早期编码补全助手和公司样本不等于Agent或本项目。

MS3RCT · Microsoft Research作者页面、论文摘要及出版信息核验 · 核查2026-10-23

阅读原文 ↗
Microsoft早期CLI编码Agent推广研究

作者报告采用者相较反事实每天合并PR约多24%,效应在四个月观察窗持续;merged PR明确作为输出代理。

单一公司、采用选择和合成对照假设限制因果外推;PR数量不等于PR价值、质量、净人时或业务产出;作者为Microsoft研究人员并披露利益关联。

MSCLI26 · arXiv摘要及全文识别方法、指标、作者声明核验 · 核查2026-10-23

阅读原文 ↗
Supabase MCP Server官方文档

MCP客户端可连接项目并查询/操作数据库、调试、函数与分支等工具组;文档支持按项目限定、只读选项和功能组启停,并明确连接LLM有安全风险。

功能说明不证明Agent操作准确、节时或生产适用;授权范围、客户端工具实现和当前文档版本需复核。

SUPABASEMCP · Supabase官方MCP文档核验 · 核查2026-10-23

阅读原文 ↗
Supabase行级安全与数据库安全文档

Postgres RLS需针对表启用并配置策略;服务端secret/service_role凭据绕过RLS,不能暴露给浏览器;应用仍需配置表权限并验证允许/拒绝路径。

平台提供机制而非自动正确的租户授权;具体表/grant/policy、视图、函数和密钥路径必须按项目审查。

SUPABASERLS · Supabase官方RLS及secure-data文档核验 · 核查2026-10-23

阅读原文 ↗
Supabase数据库分支官方文档

PR可建立独立预览环境;默认不复制生产数据或Storage对象;分支有独立API凭证,并复制指定项目设置与Edge Functions。

该页不说明分支资源规模或费用;若选择显式包含生产数据,仍需按生产数据保护;dashboard branch功能阶段/套餐需重核。

SUPABASEBRANCH · Supabase官方Deployment & Branching/Branching页面核验 · 核查2026-10-23

阅读原文 ↗
Supabase数据库备份与恢复文档

官方说明数据库备份可按计划/套餐保留;恢复时项目不可访问,停机时长取决于数据库规模,PITR/日备份选项与收费因套餐而异。

该页只描述数据库恢复,不说明对象、应用配置或其他服务的完整跨平台迁移;目标项目的RTO/RPO和费用未知。

SUPABASEBACKUP · Supabase官方Database Backups中备份类型、恢复过程及PITR说明核验 · 核查2026-10-23

阅读原文 ↗
Supabase自托管官方文档

自托管要求运营服务器、数据库、网络、安全更新、备份/灾备、监控/可用性等;托管版部分功能不一定自托管可用。

责任清单不估计人员配置或TCO,也不证明自托管等价于托管服务。

SUPABASESELF · Supabase官方self-hosting及backup文档核验 · 核查2026-10-23

阅读原文 ↗
Cloudflare Docs for Agents

Cloudflare提供供Agent发现和使用的文档、Skills及MCP/API工具,可覆盖查日志、调用API和部署等操作能力。

工具可调用不代表Agent正确、授权安全、部署可回滚或节省工时;文档和可用工具按账户/版本核验。

CFAGENT · Cloudflare官方Docs for Agents文档核验 · 核查2026-10-23

阅读原文 ↗
Cloudflare Queues投递保证

默认至少一次投递;重复消息可能发生且消息顺序不保证,消费者需要幂等处理并设计重试/失败路径。

产品投递语义不替代业务顺序、去重和一致性设计;可用选项按队列配置/版本核实。

CFQUEUE · Cloudflare官方delivery guarantees文档核验 · 核查2026-10-23

阅读原文 ↗
Cloudflare D1平台限制

付费D1单库最大10GB,免费单库500MB;单数据库查询串行且单线程,吞吐取决于查询时间。

额度和限制会随套餐/版本变化;容量上限不等于适用性,必须按真实数据、并发、SQLite语义和访问形态验证。

CFD1 · Cloudflare官方D1 limits文档核验 · 核查2026-10-23

阅读原文 ↗
Cloudflare Hyperdrive数据库兼容限制

Hyperdrive支持接入Supabase Postgres等数据库并提供连接池;PREPARE、advisory locks、LISTEN/NOTIFY和会话级状态等语义存在限制。

兼容表不是端到端性能或全量协议保证;事务/会话使用方式、驱动和数据库版本需单独验证。

CFHYPER · Cloudflare官方Hyperdrive supported databases/features文档核验 · 核查2026-10-23

阅读原文 ↗
Lovable GitHub集成文档

支持双向GitHub同步并可通过PR及本地工作流继续开发/在平台外部署;同步的是源代码。

代码同步不自动迁移或等价替换后端数据、认证、密钥、存储或托管运行服务。

LOVABLEGITHUB · Lovable官方GitHub integration文档核验 · 核查2026-10-23

阅读原文 ↗
Lovable Supabase集成与后端限制

可用自然语言生成应用并连接自有Supabase;Lovable内置Backend与自有Supabase不可一步自动切换,需分别处理目标后端数据/配置。

官方说明的是产品能力/切换边界,不给生产质量、节时、完全可移植性或固定迁移工时证据。

LOVABLESB · Lovable官方Supabase integration文档核验 · 核查2026-10-23

阅读原文 ↗
Supabase Data REST API文档

PostgREST从Postgres schema生成REST API,提供CRUD、关系查询及数据库函数访问,并可用于浏览器两层或自有API服务器三层架构。

自动API需按grant/RLS/密钥安全配置;不替代业务规则、复杂工作流或现有API契约;文档不提供本项目效果数据。

SUPABASEAPI · Supabase官方Data REST API文档核验 · 核查2026-10-23

阅读原文 ↗
Supabase Auth官方文档

Supabase Auth提供用户身份管理、客户端SDK与API endpoints,支持密码、OTP、社交登录和SSO等认证方式。

支持的认证流程不自动决定本地产品授权、租户隔离、账号迁移、合规配置或支持成本。

SUPABASEAUTH · Supabase官方Auth文档核验 · 核查2026-10-23

阅读原文 ↗
Supabase Storage官方文档

Storage提供文件对象管理、REST/S3兼容接口、CDN/转换及基于RLS的细粒度访问控制。

对象存储不等于本地业务元数据、保留/备份、合规或授权逻辑;数据库备份不包括Storage对象。

SUPABASESTORAGE · Supabase官方Storage文档核验 · 核查2026-10-23

阅读原文 ↗
Zod TypeScript schema validation文档

Zod提供TypeScript优先的schema定义与运行时数据验证,并可推导静态类型。

功能文档不证明适合既有运行时/版本或减少净开发时间;需评估bundle、schema所有权和依赖升级。

ZOD · Zod官方首页/功能文档核验 · 核查2026-10-23

阅读原文 ↗
Drizzle ORM官方概述

Drizzle允许在TypeScript中定义和管理数据库schema,执行类型化SQL-like/关系查询并提供迁移工具。

供应商功能声明不证明相对现有ORM/SQL的净收益;目标数据库、迁移历史和团队熟悉度决定适配成本。

DRIZZLE · Drizzle官方overview文档核验 · 核查2026-10-23

阅读原文 ↗
Radix UI Primitives官方介绍

Radix提供可组合、无样式的UI原语,帮助构建自定义组件/设计系统,并提供键盘操作和可访问性相关处理机制。

原语不是完整产品设计或业务界面;仍需样式、组合、内容、响应式、完整可访问性验证和维护。

RADIX · Radix UI官方primitives介绍文档核验 · 核查2026-10-23

阅读原文 ↗
Supabase平台项目恢复到自托管指南

数据库dump包含schema、data、roles、RLS policies、数据库functions/triggers和auth.users;指南要求另行设置JWT/API keys、Auth provider、Edge Functions、Storage objects、SMTP及自定义域名/DNS,并提示平台与自托管版本可能不兼容。

指南明确不涵盖Storage对象传输或Edge Functions重新部署;其步骤针对迁至自托管Docker,不代表迁至任意供应商的完整方案或固定迁移工时。

SUPABASERESTORE · Supabase官方Restore a Platform Project to Self-Hosted指南核验 · 核查2026-10-23

阅读原文 ↗
Supabase Preview Branch用量计费文档

每个Preview branch是独立Supabase服务环境;按环境实际Compute、Disk Size、Egress和Storage用量计费。用量计入订阅计划配额,且不受Spend Cap覆盖;页面称无固定分支费用,活跃/持久分支的存续会持续影响用量。

该来源定义计费机制,不估算具体项目费用、使用负载或总TCO;不同套餐、服务配置和分支存续时间影响实际用量。

SUPABASEBRANCHBILLING · Supabase官方Manage Branching usage页面,What you are charged for / How charges are calculated / Optimize usage核验 · 核查2026-10-23

阅读原文 ↗
GitHub作者对Copilot开发者生产率实验的官方总结

作者总结报告完成率78%(Copilot)/70%(对照),平均完成时间约71/161分钟,快55%;p=.0017、95% CI 21%–89%。这是与COPILOT22 arXiv论文相同实验的作者总结,百分比和时间取整,仅用于交叉核对,不是独立复现。

该总结未单列时间比较的有效分组n;完成率为取整报告,本报告不以该比例或论文关于35人完成任务及问卷的表述推导时长分析分母;作者/供应商总结不提供独立复现证据。

COPILOT22BLOG · GitHub官方作者总结Finding 2与95人随机实验段落核验;与arXiv同一研究交叉核对 · 核查2026-10-23

阅读原文 ↗

完整材料仍可回查

需要审计时再展开原始工件、完整登记和参数;它们不作为阅读主线的前置步骤。

具体案例工件、正反控制和执行身份

完整链路案例:租户订单 CSV 导出:从方案到变更与验收

共同合同 CSV-1:仅导出当前用户所属租户的订单;固定数据快照、稳定排序、游标分页、流式输出、CSV转义及失败恢复。以下候选和控制由作者构造,未运行AI或真实服务。

  1. W-C11 方案与契约
  2. W-C02 变更候选
  3. W-C12 正反控制与接收
W-C11 方案与契约
中间产物
两路线共用CSV-1。沿用既有API/数据库并复用成熟CSV库,或在允许的托管数据库/存储能力上选择性组合;保留相同业务授权与验收。
拒收条件
把数据库能导出当作业务授权正确;没有退出/恢复/配额说明。
W-C02 变更候选
中间产物
候选:服务端绑定actorTenant,按唯一ID游标读取;流式CSV编码并处理转义;返回日志与可重试游标。候选为设计材料,未声明代码运行通过。
拒收条件
客户端自行传租户即被信任;跨页漏重;整表一次加载;失败留下不可识别的半成品。
W-C12 正反控制与接收
中间产物
预期正例:仅ID1/3/4/5,跨页不漏重,逗号和引号可重读;替代分页实现也可接受。反例:ID2泄露、末页丢行、错误转义、重复重试、超限内存。控制尚未执行。
拒收条件
只检查文件存在/测试数,不核对实际内容、越权、资源与合法替代。
输入、控制与执行记录
材料身份
authored-method-example-not-executed
共同合同
CSV-1
执行状态
not-run
实测人工分钟
未知/未记录
实测成功率
未知/未记录
输入材料
actorTenant
tenant-a
pageSize
2
rows
  • 编号
    1
    tenant
    tenant-a
    数值
    普通订单
  • 编号
    2
    tenant
    tenant-b
    数值
    不得泄露
  • 编号
    3
    tenant
    tenant-a
    数值
    含,逗号
  • 编号
    4
    tenant
    tenant-a
    数值
    含"引号"
  • 编号
    5
    tenant
    tenant-a
    数值
    同租户末页
正反控制
  • 正确租户与顺序
  • 不同合法实现
  • 跨租户泄露
  • 重复/缺失末页
  • 逗号/引号转义
  • 失败重试与资源上限
intermediateArtifacts
材料身份
authored-artifacts-and-expected-outcomes-not-executed
contract
version
CSV-1
验收
  • 每行租户与服务端actorTenant相等
  • 唯一ID升序,ID1/3/4/5各一次,ID2零次
  • UTF-8 CSV由合规解析器往返读取,值完全相同
  • 固定快照上续读不漏重;失败工件不得作为完成发布
resourceBoundary
合成夹具pageSize=2,每次缓存≤2条业务记录;真实产品资源SLO尚未确定,不能从5条推断大规模性能。
recovery
固定数据快照。丢弃整个未完成临时工件时必须从起点重新生成,不复用旧游标。若选择保留已确认输出前缀,先验证前缀与lastConfirmedId一致,再从该游标追加;两种模式不得混用。完成原子标记后才可下载。
candidatePlan
  • 服务端从会话绑定tenant-a,拒绝客户端覆盖
  • 查询固定snapshot,where tenant=actorTenant and id>cursor,order by id,limit 2
  • 逐页流式CSV编码,独立记录lastConfirmedId
  • 失败保持status=incomplete;成功原子发布status=complete
expectedCsv
id,value 1,普通订单 3,"含,逗号" 4,"含""引号""" 5,同租户末页
expectedRows
  • 编号
    1
    数值
    普通订单
  • 编号
    3
    数值
    含,逗号
  • 编号
    4
    数值
    含"引号"
  • 编号
    5
    数值
    同租户末页
acceptedAlternative
name
具有固定快照且唯一ID排序的另一分页实现
rows
  • 1
  • 3
  • 4
  • 5
reason
实现路径不同;业务、完整性、资源与恢复合同相同
negativeArtifacts
  • 编号
    leak
    rows
    • 1
    • 2
    • 3
    • 4
    • 5
    expected
    拒收:跨租户ID2
  • 编号
    missing-last-page
    rows
    • 1
    • 3
    • 4
    expected
    拒收:少ID5
  • 编号
    duplicate
    rows
    • 1
    • 3
    • 3
    • 4
    • 5
    expected
    拒收:ID3重复
  • 编号
    escape
    csv
    id,value 3,含,逗号
    expected
    拒收:解析后列数/值不一致
  • 编号
    partial-published
    状态
    complete
    rows
    • 1
    • 3
    expected
    拒收:中断工件被标为完成
  • 编号
    unbounded-buffer
    peakBusinessRecords
    5
    expected
    拒收:超过本夹具2条缓存边界
controlExpectations
  • control
    正确参考材料
    expected
    按合同接收
    observed
    未知/未记录
  • control
    合理替代
    expected
    同合同接收
    observed
    未知/未记录
  • control
    六种错误工件
    expected
    分别拒收并指出合同条目
    observed
    未知/未记录
下载完整案例及中间材料 JSON →
所有来源、下载和输入指纹

完整来源与可带走的材料

36条登记来源;同一研究可能有多个入口,不能视为独立验证。核查日是研究中保留的日期,不代表今天重新阅读全文。

SWEVER · SWE-bench官方FAQ · 研究登记有效

原文 ↗ · SWE-bench官方FAQ

发现
500个Verified问题及补丁执行检查;提供软件缺陷修复参考类。
设计
官方任务与评测文档
不能推出
只覆盖所定义问题;不能代表前后端完整交付,也不能把Resolved当作岗位时间份额。
读取深度
官方FAQ核查
原版/日期
2026-10-22
核查
2026-10-22
原公开
未知
SWEAUDIT · SWE-bench Verified评测局限 · 研究登记有效

原文 ↗ · SWE-bench Verified评测局限

发现
2026-02-23分析提出污染及测试拒绝正确解等问题。
设计
基准审计
不能推出
审计的是特定子样本,不能推成所有基准失效;本报告不据此调整一个固定折扣。
读取深度
官方分析正文开头核查
原版/日期
2026-02-23
核查
2026-10-22
原公开
未知
LANCER · SWE-Lancer · 研究登记有效

原文 ↗ · SWE-Lancer

发现
2025 v4:1400余个真实自由职业任务,包含实现与方案选择,工程任务采用端到端测试。
设计
软件工程基准
不能推出
历史模型结果不作为2026排名;真实付款金额不是本地人工时间或SaaS价格。
读取深度
论文摘要核查
原版/日期
2025-05-29 v4
核查
2026-10-22
原公开
未知
FEATURE · FeatureBench · 研究登记有效

原文 ↗ · FeatureBench

发现
v1含200任务、3,825环境、24个Python开源仓库;Claude Opus 4.5全集resolved 11.0%,Codex+GPT-5.1-Codex medium为12.5%;逐题passed与resolved不同。
设计
复杂功能基准
不能推出
复杂多文件特征任务;不得将resolved率与SWE-bench榜单分数或本地成功率直接比较,论文模型/工具/预算限定。
读取深度
论文摘要与官方项目页核查
原版/日期
2026-02-11
核查
2026-10-22
原公开
未知
DESIGN · Design2Code · 研究登记有效

原文 ↗ · Design2Code

发现
v3使用484个真实网页的截图到代码任务,并有人类评价。
设计
前端视觉基准
不能推出
视觉相似不保证动态状态、可访问性、业务正确性或安全。
读取深度
论文摘要核查
原版/日期
2025-02-09 v3
核查
2026-10-22
原公开
未知
INTERACT · Interaction2Code · 研究登记有效

原文 ↗ · Interaction2Code

发现
2026 v3覆盖127网页、374个交互;强调静态页面评价遗漏真实交互。
设计
前端交互基准
不能推出
不是生产全栈交付实验,也不直接给出人工检查分钟。
读取深度
论文摘要核查
原版/日期
2026-03-01 v3
核查
2026-10-22
原公开
未知
PROGRAM · ProgramBench · 研究登记有效

原文 ↗ · ProgramBench

发现
没有模型设置完全解出任务;Claude Opus 4.7仅3%任务通过至少95%测试。论文页眉v1为2026-05-05,正文脚注另列2026-08-24,日期口径保留。
设计
基准给定参考可执行程序和文档,隐藏源代码/测试,要求重建输入输出行为;200题,9个模型设置,mini-SWE-agent,20 CPU/60GB RAM,上限1,000步或6小时。
不能推出
这是黑盒行为重建,不是自然语言新需求到完整B2B产品开发;测试近似目标行为,不代表维护性、完整需求或生产质量。
读取深度
原论文v1任务定义、评测设置和结果核验
原版/日期
2026-05-05
核查
2026-10-22
原公开
未知
TERMINAL · Terminal-Bench 4.0 · 研究登记有效

原文 ↗ · Terminal-Bench 4.0

发现
4.0校准资源、修复任务、移除饱和项,并将Agent超时设为8小时。
设计
环境与评测方法
不能推出
基础设施与时间预算影响成绩;不把2.0、3.0与4.0分数混排。
读取深度
官方更新正文核查
原版/日期
2026-08-28
核查
2026-10-22
原公开
未知
METR25 · METR早期2025开发者实验 · 研究登记有效

原文 ↗ · METR早期2025开发者实验

发现
16名熟悉仓库的开发者、246问题;允许早期2025工具时完成任务增加19%时间。
设计
随机现场实验
不能推出
特定历史样本,不代表当前所有全栈开发;说明能力基准与真实净时间需要分开。
读取深度
METR官方原研究博客正文:RCT设计与+19%核心结果;95% CI由METR26官方更新另行支持。
原版/日期
2025-07-10
核查
2026-10-22
原公开
未知
METR26 · METR实验设计更新 · 研究登记有效

原文 ↗ · METR实验设计更新

发现
作者指出参与和任务选择、多Agent并行计时让后续生产率信号不可靠。
设计
后续研究及偏差分析
不能推出
不采用不可靠数据给当前效率打统一折扣;本地仍需记录漏记与自选。
读取深度
官方结果及局限核查
原版/日期
2026-02-24
核查
2026-10-22
原公开
未知
RLS · Supabase行级安全文档 · 研究登记有效

原文 ↗ · Supabase行级安全文档

发现
托管Postgres可配置行级安全策略;项目仍需正确的授权与策略测试。
设计
官方产品机制
不能推出
托管服务不会自动理解租户边界;本报告未开通或测试该产品。
读取深度
官方文档机制核查
原版/日期
2026-10-22滚动文档
核查
2026-10-22
原公开
未知
WEBHOOK · Stripe webhook文档 · 研究登记有效

原文 ↗ · Stripe webhook文档

发现
webhook不保证事件顺序;集成应考虑重复事件、重试与最终状态。
设计
官方产品机制
不能推出
支付只是第三方事件集成的例子;不把供应商可靠性当作业务集成正确性。
读取深度
官方事件排序及重试章节核查
原版/日期
2026-10-22滚动文档
核查
2026-10-22
原公开
未知
PLAYWRIGHT · Playwright断言文档 · 研究登记有效

原文 ↗ · Playwright断言文档

发现
支持自动重试断言、界面与截图检查,可作为前端回归工具。
设计
官方验证工具
不能推出
测试通过仅覆盖所写断言;不证明用户价值或完全无障碍。
读取深度
官方断言章节核查
原版/日期
2026-10-22滚动文档
核查
2026-10-22
原公开
未知
COPILOT22 · GitHub Copilot受控编程任务实验 · 研究登记有效

原文 ↗ · GitHub Copilot受控编程任务实验

发现
对完成任务者条件化后,论文报告处理组71.17分钟、对照组160.89分钟,任务完成时间减少55.8%(95% CI 21%至89%)。原文35名完成者句未单列时间分析的有效分组n;同研究作者的GitHub总结另报告完成率78%/70%,见COPILOT22BLOG,不能将两者当独立复现或据四舍五入比例倒推精确人数。
设计
95名Upwork开发者随机分派:45人处理组、50人对照组。论文提及来自处理/对照两组的35名开发者完成任务及问卷,但未说明这35人与完成者时长分析样本的对应关系;不将该句作为时长分析的精确分母。
不能推出
正文称35名开发者来自处理组和对照组完成任务及问卷,但未单列两组时间分析有效n,不能把该句当精确时长分母;作者总结的78%/70%是四舍五入完成率,不用于反推人数。结果条件于任务完成;单一短时JavaScript HTTP服务器任务,不测长期维护或复杂仓库。
读取深度
arXiv论文随机分派和Results中完成者条件时间;同研究作者官方总结另列为COPILOT22BLOG
原版/日期
arXiv v1,2023-02-13
核查
2026-10-23
原公开
未知
MS3RCT · 三家公司生成式AI开发者现场实验 · 研究登记有效

原文 ↗ · 三家公司生成式AI开发者现场实验

发现
合并分析报告已完成任务数增加26.08%,标准误10.3%;单项研究有噪声,效应随研究/人群变化。
设计
Microsoft、Accenture及一家匿名Fortune 100公司在正常业务中开展三项随机提供AI编码助手的现场实验;合并样本4,867名开发者。
不能推出
指标是任务产出/完成量,不是个人主动时间缩短、质量等价或商业价值;早期编码补全助手和公司样本不等于Agent或本项目。
读取深度
Microsoft Research作者页面、论文摘要及出版信息核验
原版/日期
当前引用的Microsoft Research作者页:2025-06工作稿;原登记期刊出版信息:Management Science,2026-02-27(不作为本页发布日期)
核查
2026-10-23
原公开
2025-06
MSCLI26 · Microsoft早期CLI编码Agent推广研究 · 研究登记有效

原文 ↗ · Microsoft早期CLI编码Agent推广研究

发现
作者报告采用者相较反事实每天合并PR约多24%,效应在四个月观察窗持续;merged PR明确作为输出代理。
设计
研究Microsoft数万工程师在2026年初Claude Code与GitHub Copilot CLI推广;用合成对照估计采用者的merged PR变化,非随机采用。
不能推出
单一公司、采用选择和合成对照假设限制因果外推;PR数量不等于PR价值、质量、净人时或业务产出;作者为Microsoft研究人员并披露利益关联。
读取深度
arXiv摘要及全文识别方法、指标、作者声明核验
原版/日期
arXiv v1,2026-07-01
核查
2026-10-23
原公开
未知
SUPABASEMCP · Supabase MCP Server官方文档 · 研究登记有效

原文 ↗ · Supabase MCP Server官方文档

发现
MCP客户端可连接项目并查询/操作数据库、调试、函数与分支等工具组;文档支持按项目限定、只读选项和功能组启停,并明确连接LLM有安全风险。
设计
供应商功能、安全和配置文档。
不能推出
功能说明不证明Agent操作准确、节时或生产适用;授权范围、客户端工具实现和当前文档版本需复核。
读取深度
Supabase官方MCP文档核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
SUPABASERLS · Supabase行级安全与数据库安全文档 · 研究登记有效

原文 ↗ · Supabase行级安全与数据库安全文档

发现
Postgres RLS需针对表启用并配置策略;服务端secret/service_role凭据绕过RLS,不能暴露给浏览器;应用仍需配置表权限并验证允许/拒绝路径。
设计
供应商数据库授权机制与配置文档。
不能推出
平台提供机制而非自动正确的租户授权;具体表/grant/policy、视图、函数和密钥路径必须按项目审查。
读取深度
Supabase官方RLS及secure-data文档核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
SUPABASEBRANCH · Supabase数据库分支官方文档 · 研究登记有效

原文 ↗ · Supabase数据库分支官方文档

发现
PR可建立独立预览环境;默认不复制生产数据或Storage对象;分支有独立API凭证,并复制指定项目设置与Edge Functions。
设计
供应商PR预览分支、分支环境复制内容与部署流程文档。
不能推出
该页不说明分支资源规模或费用;若选择显式包含生产数据,仍需按生产数据保护;dashboard branch功能阶段/套餐需重核。
读取深度
Supabase官方Deployment & Branching/Branching页面核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
SUPABASEBACKUP · Supabase数据库备份与恢复文档 · 研究登记有效

原文 ↗ · Supabase数据库备份与恢复文档

发现
官方说明数据库备份可按计划/套餐保留;恢复时项目不可访问,停机时长取决于数据库规模,PITR/日备份选项与收费因套餐而异。
设计
供应商数据库备份保留与恢复操作文档。
不能推出
该页只描述数据库恢复,不说明对象、应用配置或其他服务的完整跨平台迁移;目标项目的RTO/RPO和费用未知。
读取深度
Supabase官方Database Backups中备份类型、恢复过程及PITR说明核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
SUPABASESELF · Supabase自托管官方文档 · 研究登记有效

原文 ↗ · Supabase自托管官方文档

发现
自托管要求运营服务器、数据库、网络、安全更新、备份/灾备、监控/可用性等;托管版部分功能不一定自托管可用。
设计
供应商自托管架构、部署与责任文档。
不能推出
责任清单不估计人员配置或TCO,也不证明自托管等价于托管服务。
读取深度
Supabase官方self-hosting及backup文档核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
CFAGENT · Cloudflare Docs for Agents · 研究登记有效

原文 ↗ · Cloudflare Docs for Agents

发现
Cloudflare提供供Agent发现和使用的文档、Skills及MCP/API工具,可覆盖查日志、调用API和部署等操作能力。
设计
供应商开发者文档索引、Skills、MCP、API/CLI与工具说明。
不能推出
工具可调用不代表Agent正确、授权安全、部署可回滚或节省工时;文档和可用工具按账户/版本核验。
读取深度
Cloudflare官方Docs for Agents文档核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
CFQUEUE · Cloudflare Queues投递保证 · 研究登记有效

原文 ↗ · Cloudflare Queues投递保证

发现
默认至少一次投递;重复消息可能发生且消息顺序不保证,消费者需要幂等处理并设计重试/失败路径。
设计
供应商队列语义和投递文档。
不能推出
产品投递语义不替代业务顺序、去重和一致性设计;可用选项按队列配置/版本核实。
读取深度
Cloudflare官方delivery guarantees文档核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
CFD1 · Cloudflare D1平台限制 · 研究登记有效

原文 ↗ · Cloudflare D1平台限制

发现
付费D1单库最大10GB,免费单库500MB;单数据库查询串行且单线程,吞吐取决于查询时间。
设计
供应商数据库容量、运行和查询限制文档。
不能推出
额度和限制会随套餐/版本变化;容量上限不等于适用性,必须按真实数据、并发、SQLite语义和访问形态验证。
读取深度
Cloudflare官方D1 limits文档核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
CFHYPER · Cloudflare Hyperdrive数据库兼容限制 · 研究登记有效

原文 ↗ · Cloudflare Hyperdrive数据库兼容限制

发现
Hyperdrive支持接入Supabase Postgres等数据库并提供连接池;PREPARE、advisory locks、LISTEN/NOTIFY和会话级状态等语义存在限制。
设计
供应商数据库连接池、支持数据库与会话功能兼容列表。
不能推出
兼容表不是端到端性能或全量协议保证;事务/会话使用方式、驱动和数据库版本需单独验证。
读取深度
Cloudflare官方Hyperdrive supported databases/features文档核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
LOVABLEGITHUB · Lovable GitHub集成文档 · 研究登记有效

原文 ↗ · Lovable GitHub集成文档

发现
支持双向GitHub同步并可通过PR及本地工作流继续开发/在平台外部署;同步的是源代码。
设计
供应商源码同步、PR和本地开发说明。
不能推出
代码同步不自动迁移或等价替换后端数据、认证、密钥、存储或托管运行服务。
读取深度
Lovable官方GitHub integration文档核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
LOVABLESB · Lovable Supabase集成与后端限制 · 研究登记有效

原文 ↗ · Lovable Supabase集成与后端限制

发现
可用自然语言生成应用并连接自有Supabase;Lovable内置Backend与自有Supabase不可一步自动切换,需分别处理目标后端数据/配置。
设计
供应商产品生成、托管后端和自有Supabase集成说明。
不能推出
官方说明的是产品能力/切换边界,不给生产质量、节时、完全可移植性或固定迁移工时证据。
读取深度
Lovable官方Supabase integration文档核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
SUPABASEAPI · Supabase Data REST API文档 · 研究登记有效

原文 ↗ · Supabase Data REST API文档

发现
PostgREST从Postgres schema生成REST API,提供CRUD、关系查询及数据库函数访问,并可用于浏览器两层或自有API服务器三层架构。
设计
供应商数据库自动API产品文档。
不能推出
自动API需按grant/RLS/密钥安全配置;不替代业务规则、复杂工作流或现有API契约;文档不提供本项目效果数据。
读取深度
Supabase官方Data REST API文档核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
SUPABASEAUTH · Supabase Auth官方文档 · 研究登记有效

原文 ↗ · Supabase Auth官方文档

发现
Supabase Auth提供用户身份管理、客户端SDK与API endpoints,支持密码、OTP、社交登录和SSO等认证方式。
设计
供应商认证/授权产品文档。
不能推出
支持的认证流程不自动决定本地产品授权、租户隔离、账号迁移、合规配置或支持成本。
读取深度
Supabase官方Auth文档核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
SUPABASESTORAGE · Supabase Storage官方文档 · 研究登记有效

原文 ↗ · Supabase Storage官方文档

发现
Storage提供文件对象管理、REST/S3兼容接口、CDN/转换及基于RLS的细粒度访问控制。
设计
供应商对象文件存储、交付和访问控制文档。
不能推出
对象存储不等于本地业务元数据、保留/备份、合规或授权逻辑;数据库备份不包括Storage对象。
读取深度
Supabase官方Storage文档核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
ZOD · Zod TypeScript schema validation文档 · 研究登记有效

原文 ↗ · Zod TypeScript schema validation文档

发现
Zod提供TypeScript优先的schema定义与运行时数据验证,并可推导静态类型。
设计
库官方功能和版本要求说明。
不能推出
功能文档不证明适合既有运行时/版本或减少净开发时间;需评估bundle、schema所有权和依赖升级。
读取深度
Zod官方首页/功能文档核验
原版/日期
Zod 4滚动文档
核查
2026-10-23
原公开
未知
DRIZZLE · Drizzle ORM官方概述 · 研究登记有效

原文 ↗ · Drizzle ORM官方概述

发现
Drizzle允许在TypeScript中定义和管理数据库schema,执行类型化SQL-like/关系查询并提供迁移工具。
设计
库官方schema、查询和迁移功能说明。
不能推出
供应商功能声明不证明相对现有ORM/SQL的净收益;目标数据库、迁移历史和团队熟悉度决定适配成本。
读取深度
Drizzle官方overview文档核验
原版/日期
滚动文档(文档标示v1.0)
核查
2026-10-23
原公开
未知
RADIX · Radix UI Primitives官方介绍 · 研究登记有效

原文 ↗ · Radix UI Primitives官方介绍

发现
Radix提供可组合、无样式的UI原语,帮助构建自定义组件/设计系统,并提供键盘操作和可访问性相关处理机制。
设计
组件库官方无样式UI primitives说明。
不能推出
原语不是完整产品设计或业务界面;仍需样式、组合、内容、响应式、完整可访问性验证和维护。
读取深度
Radix UI官方primitives介绍文档核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
SUPABASERESTORE · Supabase平台项目恢复到自托管指南 · 研究登记有效

原文 ↗ · Supabase平台项目恢复到自托管指南

发现
数据库dump包含schema、data、roles、RLS policies、数据库functions/triggers和auth.users;指南要求另行设置JWT/API keys、Auth provider、Edge Functions、Storage objects、SMTP及自定义域名/DNS,并提示平台与自托管版本可能不兼容。
设计
官方从Supabase托管项目迁往自托管Supabase的操作指南。
不能推出
指南明确不涵盖Storage对象传输或Edge Functions重新部署;其步骤针对迁至自托管Docker,不代表迁至任意供应商的完整方案或固定迁移工时。
读取深度
Supabase官方Restore a Platform Project to Self-Hosted指南核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
SUPABASEBRANCHBILLING · Supabase Preview Branch用量计费文档 · 研究登记有效

原文 ↗ · Supabase Preview Branch用量计费文档

发现
每个Preview branch是独立Supabase服务环境;按环境实际Compute、Disk Size、Egress和Storage用量计费。用量计入订阅计划配额,且不受Spend Cap覆盖;页面称无固定分支费用,活跃/持久分支的存续会持续影响用量。
设计
供应商官方分支用量、套餐额度和账单口径。
不能推出
该来源定义计费机制,不估算具体项目费用、使用负载或总TCO;不同套餐、服务配置和分支存续时间影响实际用量。
读取深度
Supabase官方Manage Branching usage页面,What you are charged for / How charges are calculated / Optimize usage核验
原版/日期
滚动文档
核查
2026-10-23
原公开
未知
COPILOT22BLOG · GitHub作者对Copilot开发者生产率实验的官方总结 · 研究登记有效

原文 ↗ · GitHub作者对Copilot开发者生产率实验的官方总结

发现
作者总结报告完成率78%(Copilot)/70%(对照),平均完成时间约71/161分钟,快55%;p=.0017、95% CI 21%–89%。这是与COPILOT22 arXiv论文相同实验的作者总结,百分比和时间取整,仅用于交叉核对,不是独立复现。
设计
Eirini Kalliamvakou的GitHub Next研究总结;2022-09-07发布、2024-05-21更新,Finding 2报告95名开发者的同一Copilot HTTP server受控实验。
不能推出
该总结未单列时间比较的有效分组n;完成率为取整报告,本报告不以该比例或论文关于35人完成任务及问卷的表述推导时长分析分母;作者/供应商总结不提供独立复现证据。
读取深度
GitHub官方作者总结Finding 2与95人随机实验段落核验;与arXiv同一研究交叉核对
原版/日期
发布于2022-09-07,更新于2024-05-21
核查
2026-10-23
原公开
未知
材料清单与输入指纹

ZIP为明确列出的材料集合,保留输入原字节;不是整个仓库或可独立运行的完整重建环境。原报告依赖其仓库构建器;EOW只读取本地导入快照。

源仓库 GILWorkTree · 固定提交 0e75a6191d53afa5bccffe14d07e624e0faf834e

research/ai-software-engineer/data/assumptions.json
SHA-256 f15d28d3ac8f25f5ebb2472046ff88ec643e49fbcb23b2197a041ba26533dda8

research/ai-software-engineer/data/evidence-review.json
SHA-256 b72630e859e3ef3c6c0133c8fb25c468ea880e2a6adc9746816978514362066e

research/ai-software-engineer/data/job-spec.json
SHA-256 12a8f748fba042df104d2a7fa01995d73878da05f501cb887e15b25afafa3493

research/ai-software-engineer/data/scenarios.json
SHA-256 59eb9d497e90a83c77e78d1ccb30206e57d3085327b8d3cb2ecdc706d3a8ea98

research/ai-software-engineer/data/sources.json
SHA-256 4bc14bab028923027a2031b34d11296bff10002e2ff81e41409ec7f059a7ac89

research/ai-software-engineer/data/tasks.json
SHA-256 2e14c8f559e3a50afc5b9da74a1dd3d945763e3d3e16d90206fa592df981511a

research/ai-software-engineer/data/workflows.json
SHA-256 1d053c2ef9b56d5ed619889a8819133bd863220d78f8db2fd8898c49541e65c0

research/work-analysis-method/README.md
SHA-256 e226e30bdbff86918e442b912463d33ea87db7e12007f611b66e9280ba83951e

research/work-analysis-method/acceptance.template.csv
SHA-256 5c6603e6d778619780fde747b2dfa21a1087101f2e392b81378bd67563f94f15

research/work-analysis-method/capability-assessment.md
SHA-256 ffd29b2c839e2fcb45b3ea299a6f522b34e5ed5a862936d37a63b0fbb391ae3b

research/work-analysis-method/job-brief.template.json
SHA-256 871d747ad737dceb2c42da16a643dd238877c919735e0ab0619f78b259e8a845

research/work-analysis-method/legacy-register.md
SHA-256 bc1586cb15915d91516b0084eb8faab942df41593bee251679756cea0892ec74

research/work-analysis-method/standard.md
SHA-256 b2466c1966900b254cbbefb9a4dd999b9ea91e4f39db284a5b44f3fee2e74301

research/work-analysis-method/templates.md
SHA-256 2621b82916ef26e063f85f7f4a5c1a67fda0c9ea9181c30e45832041dc592c4b

research/work-analysis-method/workflow.md
SHA-256 bad44b2730dd57f7e640373a75c90efc9cc2988b45fc87ee56e1b87927f85af5

research/ai-software-engineer/protocol.md
SHA-256 5a6f22d65be4af385bc360c6217837e45fe58b2d087a155011492ca4eb9b5cbf