W.AI工作标准面向个人与企业给我的 Agent
公开证据与条件建议;未测结果保留未知。方法与局限 →

职业 · 计算机

计算机与算法研究

提出并检验计算方法、算法或系统的新知识。

先看代表工作:研究问题与可检验假设 →

可让Agent整理既有结果、提出明确假设与最小反例检查;接收的是可反驳问题与评价器,而不是流畅选题段落。

只对应这项工作 · 有条件的编辑推断;不是整个职业的完成率。

职业范围、别名与核查日期

涵盖理论、AI与系统研究;不是所有“算法工程师”岗位都承担原创研究。 本页按职责提供公开参照;地域、职级和准入以目标组织的现行要求另核。

也常见于:算法研究员、计算机研究员、AI研究员、研究科学家、Research Scientist · 核查 2026-10-20

主要交付目标

范围依据、重要变体与未覆盖部分

按本职业主要交付组织工作范围;多个目标可以由同一结果包接收。职责来源用于核对工作定义,AI采用、工具可得性和实际表现按各项具体证据判断。这里不是所有地区与细分岗位的完整清单。

研究问题与可检验假设

既有工作对照、明确研究问题与反证条件

以该应用的具体产物与独立接收条件呈现目标;研究价值、新颖性和未公开结果不能由代码搜索案例直接证明。

重要变体:理论与反例

新算法或理论结果

算法定义、复杂性或正确性论证

以该应用的具体产物与独立接收条件呈现目标;专用AlphaEvolve成果不等于公开Agent可解任意新理论问题。

重要变体:理论与反例

新模型或系统原型

实现、基线与资源条件

以该应用的具体产物与独立接收条件呈现目标;既有算法/训练研究对新系统拓扑和新模型只是有条件迁移。

重要变体:经验模型与系统;研究复现与消融

实验研究结论

数据、消融、失败案例和可重现结果

以该应用的具体产物与独立接收条件呈现目标;公开评测的部分贡献评分不等于当前研究结论已成立。

重要变体:研究复现与消融;数值与理论贡献

研究复现与挑战

独立复现、差异解释或反例

以该应用的具体产物与独立接收条件呈现目标;理论结论与环境变化可能不能用原rubric完整覆盖。

重要变体:从零与复用原代码

研究传播与复用

论文及实际证明或计算产物、限制与复用说明

实际研究成果的传播/复用按理论或计算产物接收,与已有论文复现任务分开。

重要变体:原创研究传播;受限资产与复用

Computer and Information Research Scientists ↗ · 职责资料用于检查工作范围,不提供AI成绩。

当前范围以外

  • 仅按既定方案提供产品服务的常规工程
  • 研究资源组织及学术管理暂不深研

仍需补充的证据或内容

  • 需分别补理论正确性、实验新颖性和系统可复现性
  • 代码生成不能直接支持发现成立

主要做什么,AI 改变了哪些工作

按具体交付判断采用条件。下列条件评估与局部证据分别标示,不合成为一个职业自动化百分比。

研究问题与可检验假设

交付物:既有工作对照、明确研究问题与反证条件

关联局部工作证据

可让Agent整理既有结果、提出明确假设与最小反例检查;接收的是可反驳问题与评价器,而不是流畅选题段落。

依据身份:有条件的编辑推断;各条只支持自身范围。

已展示:当前所选依据为工具方法或编辑迁移判断,尚无该交付的直接结果。

尚待验证:研究价值、新颖性和未公开结果不能由代码搜索案例直接证明。

查看执行条件、逐条证据与完整验收

既有工作对照、明确研究问题与反证条件。可让Agent整理既有结果、提出明确假设与最小反例检查;接收的是可反驳问题与评价器,而不是流畅选题段落。

AI怎样组织交付:Agent可联合搜索算法/实现/验证路径,程序或求解器给反馈;目标语义、独立评价器和预算保持固定。

在本职业的适用范围:计算机与算法研究的“研究问题与可检验假设”使用算法候选交付:代码搜索、反例与正确性证据,输入/接收对象是既有工作对照、明确研究问题与反证条件;抽查关键文献原文,锁输入域/结论/基线,给反证条件和评价器正反控制。

执行条件、可用工具与场景差异

问题和独立评价器可把算法候选搜索与反证接成循环;结果可以包含代码、可核查特例或论证,但不能从得分直接推广一般理论。

公开研究成果可检查;研究系统可获得性、预算和目标问题依赖单独核实。

AlphaEvolve公开结果 ↗ · 2026-10-20公开仓库HEAD 4226acbf237ff9ad10ba7673a2af127a2d8a5971;实际运行另固定依赖/镜像/模型 · 可读成果公开;完整搜索服务/配置不据此假定可得

理论与反例:接收命题、复杂性或正确性证明,而非经验提升。 候选探索可委派,完整论证/反例才算相应结果。 验收:命题语义、假设、边界、逻辑依赖;若选形式化再验内核与公理。

判断的具体依据

有条件的编辑推断

在固定问题和独立评价器下可委派算法搜索,接收候选与反例/论证;一般性、复杂性和新颖性不能只靠样例得分。

AlphaEvolve 白皮书 ↗

支持:专用研究展示搜索与验证联合组织。

原文定位与适用范围

定位:evaluation and algorithm search

范围限制:公开Agent与新问题仍需独立任务检查。

判断限制:公开Agent与新问题仍需独立任务检查。

完整验收、失败处理和后续验证

算法候选交付:代码搜索、反例与正确性证据 →

问题语义保持:独立核对输入域、输出和约束,反例/边界及保留输入挑战候选。
拒收:放宽约束或只缓存公开样例。

证据匹配主张:一般性/复杂性给完整论证,经验改善同条件比较;数值搜索不能代替一般证明。
拒收:样例更快就声称一般最优。

结果可重查:固定环境重跑基线/候选,保留选择、预算与失败,记录评价器缺口。
拒收:只给最好一次,隐藏改过评分器。

预算内未找到有效候选就交失败/卡点;评价器有误先修正再重评,不以更容易问题宣告成功。

下一项验证:固定一个算法问题、基线、评价器和预算,先校准错误/合法替代,再搜索候选并在保留输入重跑,独立检查理论主张。

研究前沿:专用研究系统已有可检查算法成果;搜索配置、任务选择与预算限制公开Agent迁移,目标问题表现未知。

  • 新问题和独立保留输入上候选有可核验改进,论证不偷换目标,可考虑扩大相近输入范围。
  • 钻评价器漏洞、仅公开样例变好或一般性主张无相应证明,应收窄或暂停相应采用。

本站记录:本次只核查公开材料和任务契约;未在本站运行该任务、工具或模型。

本场景怎样接收:抽查关键文献原文,锁输入域/结论/基线,给反证条件和评价器正反控制。

适用缺口与验证方法

尚未覆盖:研究价值、新颖性和未公开结果不能由代码搜索案例直接证明。

怎样核对:抽查关键文献原文,锁输入域/结论/基线,给反证条件和评价器正反控制。

新算法或理论结果

交付物:算法定义、复杂性或正确性论证

关联局部工作证据

可委派算法候选、反例和论证循环,有独立评价器时一起搜索对象与验证;一般正确性另给完整证明。

依据身份:外部报告结果、可检查产物、有条件的编辑推断;各条只支持自身范围。

已展示:AlphaEvolve白皮书报告在可自动评价的算法与计算基础设施问题上产生改进,并有部分公开产物;可把算法和验证共同纳入委派研究。

尚待验证:专用AlphaEvolve成果不等于公开Agent可解任意新理论问题。

查看执行条件、逐条证据与完整验收

算法定义、复杂性或正确性论证。可委派算法候选、反例和论证循环,有独立评价器时一起搜索对象与验证;一般正确性另给完整证明。

AI怎样组织交付:Agent可联合搜索算法/实现/验证路径,程序或求解器给反馈;目标语义、独立评价器和预算保持固定。

在本职业的适用范围:计算机与算法研究的“新算法或理论结果”使用算法候选交付:代码搜索、反例与正确性证据,输入/接收对象是算法定义、复杂性或正确性论证;固定语义、边界与复杂性假设,独立反例/保留输入;形式交付才追加相应内核检查。

执行条件、可用工具与场景差异

问题和独立评价器可把算法候选搜索与反证接成循环;结果可以包含代码、可核查特例或论证,但不能从得分直接推广一般理论。

公开研究成果可检查;研究系统可获得性、预算和目标问题依赖单独核实。

AlphaEvolve公开结果 ↗ · 2026-10-20公开仓库HEAD 4226acbf237ff9ad10ba7673a2af127a2d8a5971;实际运行另固定依赖/镜像/模型 · 可读成果公开;完整搜索服务/配置不据此假定可得

理论与反例:接收命题、复杂性或正确性证明,而非经验提升。 候选探索可委派,完整论证/反例才算相应结果。 验收:命题语义、假设、边界、逻辑依赖;若选形式化再验内核与公理。

判断的具体依据

外部报告结果

AlphaEvolve白皮书报告在可自动评价的算法与计算基础设施问题上产生改进,并有部分公开产物;可把算法和验证共同纳入委派研究。

AlphaEvolve 白皮书 ↗

支持:直接算法探索研究。

原文定位与适用范围

定位:Abstract;evolution/evaluators;computational problems

范围限制:专用系统/选择性成果;不等于任意公开Agent或任意理论问题。

判断限制:专用系统/选择性成果;不等于任意公开Agent或任意理论问题。

研究配置与计分口径

2025白皮书专用AlphaEvolve;LLM代码变异、演化与一个或多个任务评价器;不推算未报告任务分母/成本。

可检查产物

公开AlphaEvolve成果库可作为独立检查和复现入口;不能把成果库当完整搜索系统已经开放。

AlphaEvolve 公开产物 ↗

支持:有可定位产物。

原文定位与适用范围

定位:README与结果目录

范围限制:本站未运行产物。

判断限制:本站未运行产物。

有条件的编辑推断

在固定问题和独立评价器下可委派算法搜索,接收候选与反例/论证;一般性、复杂性和新颖性不能只靠样例得分。

AlphaEvolve 白皮书 ↗

支持:专用研究展示搜索与验证联合组织。

原文定位与适用范围

定位:evaluation and algorithm search

范围限制:公开Agent与新问题仍需独立任务检查。

判断限制:公开Agent与新问题仍需独立任务检查。

与这项判断直接相关的进展

首次公开 2025-05-14

AlphaEvolve公开算法搜索与部分成果 →

专用系统以代码搜索和任务评价器得到算法/计算优化成果。

  • 对应工作:算法候选交付:代码搜索、反例与正确性证据;判断:AlphaEvolve白皮书报告在可自动评价的算法与计算基础设施问题上产生改进,并有部分公开产物;可把算法和验证共同纳入委派研究。

资料修订 2025-06-16:5月官方首次公布成果;6月白皮书补方法/产物说明,不重置能力首次公开日。

完整验收、失败处理和后续验证

算法候选交付:代码搜索、反例与正确性证据 →

问题语义保持:独立核对输入域、输出和约束,反例/边界及保留输入挑战候选。
拒收:放宽约束或只缓存公开样例。

证据匹配主张:一般性/复杂性给完整论证,经验改善同条件比较;数值搜索不能代替一般证明。
拒收:样例更快就声称一般最优。

结果可重查:固定环境重跑基线/候选,保留选择、预算与失败,记录评价器缺口。
拒收:只给最好一次,隐藏改过评分器。

预算内未找到有效候选就交失败/卡点;评价器有误先修正再重评,不以更容易问题宣告成功。

下一项验证:固定一个算法问题、基线、评价器和预算,先校准错误/合法替代,再搜索候选并在保留输入重跑,独立检查理论主张。

研究前沿:专用研究系统已有可检查算法成果;搜索配置、任务选择与预算限制公开Agent迁移,目标问题表现未知。

  • 新问题和独立保留输入上候选有可核验改进,论证不偷换目标,可考虑扩大相近输入范围。
  • 钻评价器漏洞、仅公开样例变好或一般性主张无相应证明,应收窄或暂停相应采用。

本站记录:本次只核查公开材料和任务契约;未在本站运行该任务、工具或模型。

本场景怎样接收:固定语义、边界与复杂性假设,独立反例/保留输入;形式交付才追加相应内核检查。

适用缺口与验证方法

尚未覆盖:专用AlphaEvolve成果不等于公开Agent可解任意新理论问题。

怎样核对:固定语义、边界与复杂性假设,独立反例/保留输入;形式交付才追加相应内核检查。

新模型或系统原型

交付物:实现、基线与资源条件

关联局部工作证据

原型可交Agent自主构建与实验,模型或系统的收益、资源和基线必须可重放,而不只接收新代码。

依据身份:外部报告结果、有条件的编辑推断、工具与方法依据;各条只支持自身范围。

已展示:AlphaEvolve白皮书报告在可自动评价的算法与计算基础设施问题上产生改进,并有部分公开产物;可把算法和验证共同纳入委派研究。

尚待验证:既有算法/训练研究对新系统拓扑和新模型只是有条件迁移。

查看执行条件、逐条证据与完整验收

实现、基线与资源条件。原型可交Agent自主构建与实验,模型或系统的收益、资源和基线必须可重放,而不只接收新代码。

AI怎样组织交付:Agent可联合搜索算法/实现/验证路径,程序或求解器给反馈;目标语义、独立评价器和预算保持固定。

在本职业的适用范围:计算机与算法研究的“新模型或系统原型”使用算法候选交付:代码搜索、反例与正确性证据,输入/接收对象是实现、基线与资源条件;保留分布、简单基线、资源、消融和失败;系统原型再跑实际负载/状态。

执行条件、可用工具与场景差异

问题和独立评价器可把算法候选搜索与反证接成循环;结果可以包含代码、可核查特例或论证,但不能从得分直接推广一般理论。

公开研究成果可检查;研究系统可获得性、预算和目标问题依赖单独核实。

AlphaEvolve公开结果 ↗ · 2026-10-20公开仓库HEAD 4226acbf237ff9ad10ba7673a2af127a2d8a5971;实际运行另固定依赖/镜像/模型 · 可读成果公开;完整搜索服务/配置不据此假定可得

经验模型与系统:接收新模型、调度/数据库等系统原型。 按实际运行、资源和保留分布阶段接收。 验收:W-C06实验/消融与W-C08系统负载,避免只汇报单次最好。

AI怎样组织交付:Agent可按评分反馈自主选择模型、代码与实验,确定性训练器直接运行;保留集和预算与搜索过程分离。

在本职业的适用范围:计算机与算法研究的“新模型或系统原型”使用机器学习实验包:数据、训练与可解释的保留集表现,输入/接收对象是实现、基线与资源条件;保留分布、简单基线、资源、消融和失败;系统原型再跑实际负载/状态。

执行条件、可用工具与场景差异

MLE-bench证明训练与实验可以被Agent组织成可评分交付;其预算、公开数据与榜单条件特定。独立保留集与数据机制限制迁移,不能用多次搜索最好一次作稳定表现。

训练框架和记录工具公开;竞赛/模型/计算资源有条件且本文未消耗新试验。

MLE-bench ↗ · 2026-10-20公开仓库HEAD 507f92e1138bb6e40dac5c6ee7a6758e6424bf97;实际运行另固定依赖/镜像/模型 · 公开代码;Kaggle条款、GPU/数据存储与模型API另备

MLflow Tracking ↗ · Tracking文档;具体包版本在实际试验固定 · 开源记录工具;存储/访问控制另配置

研究复现与消融:目标是论文结果或新方法比较。 按贡献与实验接收;理论结论与新颖性另核。 验收:对应W-C14的代码/结果/消融及复现差异。

判断的具体依据

外部报告结果

AlphaEvolve白皮书报告在可自动评价的算法与计算基础设施问题上产生改进,并有部分公开产物;可把算法和验证共同纳入委派研究。

AlphaEvolve 白皮书 ↗

支持:直接算法探索研究。

原文定位与适用范围

定位:Abstract;evolution/evaluators;computational problems

范围限制:专用系统/选择性成果;不等于任意公开Agent或任意理论问题。

判断限制:专用系统/选择性成果;不等于任意公开Agent或任意理论问题。

研究配置与计分口径

2025白皮书专用AlphaEvolve;LLM代码变异、演化与一个或多个任务评价器;不推算未报告任务分母/成本。

有条件的编辑推断

在固定问题和独立评价器下可委派算法搜索,接收候选与反例/论证;一般性、复杂性和新颖性不能只靠样例得分。

AlphaEvolve 白皮书 ↗

支持:专用研究展示搜索与验证联合组织。

原文定位与适用范围

定位:evaluation and algorithm search

范围限制:公开Agent与新问题仍需独立任务检查。

判断限制:公开Agent与新问题仍需独立任务检查。

外部报告结果

MLE-bench的公开研究在Kaggle工程任务上实测了Agent的数据准备、模型训练与实验能力;它支持离线实验交付存在,不能直接代表生产收益。

MLE-bench 原论文 ↗

支持:训练交付有直接研究而非只由编程成绩外推。

原文定位与适用范围

定位:Abstract;75 competitions;resource scaling

范围限制:历史竞赛样本;本页不采用或迁移其奖牌比例。

判断限制:历史竞赛样本;本页不采用或迁移其奖牌比例。

研究配置与计分口径

原论文75个Kaggle竞赛,含o1-preview+AIDE等配置;模型/脚手架和预算按原实验区分;未在本站重放。

工具与方法依据

MLflow能记录训练参数、代码版本、指标和输出文件,便于交付完整试验账本。

MLflow Tracking 官方说明 ↗

支持:提供可追踪实验接口。

原文定位与适用范围

定位:Tracking Runs;Runs/Models

范围限制:记录不证明无泄漏或指标适合业务。

判断限制:记录不证明无泄漏或指标适合业务。

有条件的编辑推断

在独立保留集和预算受控时,可整包委派训练搜索;采用决策以保留集切片、资源和下游条件作阶段接收。

MLE-bench 官方实现与可比性公告 ↗

支持:可运行训练及评分资产是迁移基础。

原文定位与适用范围

定位:README:leaderboard update/agents

范围限制:官方暂停新提交,任何目标任务成功率仍未知。

判断限制:官方暂停新提交,任何目标任务成功率仍未知。

与这项判断直接相关的进展

首次公开 2025-05-14

AlphaEvolve公开算法搜索与部分成果 →

专用系统以代码搜索和任务评价器得到算法/计算优化成果。

  • 对应工作:算法候选交付:代码搜索、反例与正确性证据;判断:AlphaEvolve白皮书报告在可自动评价的算法与计算基础设施问题上产生改进,并有部分公开产物;可把算法和验证共同纳入委派研究。

资料修订 2025-06-16:5月官方首次公布成果;6月白皮书补方法/产物说明,不重置能力首次公开日。

首次公开 2024-10-09

MLE-bench公开训练与实验任务资产 →

离线Kaggle工程任务有直接模型实验与公开运行资产。

  • 对应工作:机器学习实验包:数据、训练与可解释的保留集表现;判断:MLE-bench的公开研究在Kaggle工程任务上实测了Agent的数据准备、模型训练与实验能力;它支持离线实验交付存在,不能直接代表生产收益。
完整验收、失败处理和后续验证

算法候选交付:代码搜索、反例与正确性证据 →

问题语义保持:独立核对输入域、输出和约束,反例/边界及保留输入挑战候选。
拒收:放宽约束或只缓存公开样例。

证据匹配主张:一般性/复杂性给完整论证,经验改善同条件比较;数值搜索不能代替一般证明。
拒收:样例更快就声称一般最优。

结果可重查:固定环境重跑基线/候选,保留选择、预算与失败,记录评价器缺口。
拒收:只给最好一次,隐藏改过评分器。

预算内未找到有效候选就交失败/卡点;评价器有误先修正再重评,不以更容易问题宣告成功。

下一项验证:固定一个算法问题、基线、评价器和预算,先校准错误/合法替代,再搜索候选并在保留输入重跑,独立检查理论主张。

研究前沿:专用研究系统已有可检查算法成果;搜索配置、任务选择与预算限制公开Agent迁移,目标问题表现未知。

  • 新问题和独立保留输入上候选有可核验改进,论证不偷换目标,可考虑扩大相近输入范围。
  • 钻评价器漏洞、仅公开样例变好或一般性主张无相应证明,应收窄或暂停相应采用。

本站记录:本次只核查公开材料和任务契约;未在本站运行该任务、工具或模型。

机器学习实验包:数据、训练与可解释的保留集表现 →

评价不被开发污染:按时间/实体/组划分并审查特征可用时点,保留集由独立入口评分。
拒收:同一用户重复进入训练和测试,或使用未来标签。

结果可重现且代价明确:从固定环境重新训练/加载权重,核对种子、预处理、依赖、尝试次数与实际资源。
拒收:只交最好的截图,丢掉失败与调参预算。

泛化和结论相称:对关键业务群体、漂移与简单基线比较;研究结果含消融与可反证范围。
拒收:验证分上升就声称已改善生产效果或提出新理论。

数据质量或划分不成立时先交诊断和修复方案;预算内未达标是结果,不生成虚构成绩。

下一项验证:取一个未泄漏的小型真实数据问题,锁定时间/实体保留集与预算,先跑简单参考,再让Agent交完整模型和失败账本;服务化另测。

研究前沿:公开训练任务已有实测与可运行资产;当前排行榜暂停新提交,跨方法可比性有限,尚不能证明本组织数据上的泛化。

  • 在新时间窗/实体保留集持续超过简单基线且资源可追踪,可考虑扩大相近输入范围。
  • 标签/未来特征泄漏、切片退化或只保留最好一次结果,应收窄或暂停相应采用。

本站记录:本次只核查公开材料和任务契约;未在本站运行该任务、工具或模型。

本场景怎样接收:保留分布、简单基线、资源、消融和失败;系统原型再跑实际负载/状态。

适用缺口与验证方法

尚未覆盖:既有算法/训练研究对新系统拓扑和新模型只是有条件迁移。

怎样核对:保留分布、简单基线、资源、消融和失败;系统原型再跑实际负载/状态。

实验研究结论

交付物:数据、消融、失败案例和可重现结果

关联局部工作证据

让Agent合并数据准备、实验、消融与解释,按贡献和实际运行核对,数值结果不当定理。

依据身份:外部报告结果、工具与方法依据、有条件的编辑推断;各条只支持自身范围。

已展示:MLE-bench的公开研究在Kaggle工程任务上实测了Agent的数据准备、模型训练与实验能力;它支持离线实验交付存在,不能直接代表生产收益。

尚待验证:公开评测的部分贡献评分不等于当前研究结论已成立。

查看执行条件、逐条证据与完整验收

数据、消融、失败案例和可重现结果。让Agent合并数据准备、实验、消融与解释,按贡献和实际运行核对,数值结果不当定理。

AI怎样组织交付:Agent可按评分反馈自主选择模型、代码与实验,确定性训练器直接运行;保留集和预算与搜索过程分离。

在本职业的适用范围:计算机与算法研究的“实验研究结论”使用机器学习实验包:数据、训练与可解释的保留集表现,输入/接收对象是数据、消融、失败案例和可重现结果;固定数据/种子/选择预算,独立重跑关键表和消融,保留不确定性与未支持结论。

执行条件、可用工具与场景差异

MLE-bench证明训练与实验可以被Agent组织成可评分交付;其预算、公开数据与榜单条件特定。独立保留集与数据机制限制迁移,不能用多次搜索最好一次作稳定表现。

训练框架和记录工具公开;竞赛/模型/计算资源有条件且本文未消耗新试验。

MLE-bench ↗ · 2026-10-20公开仓库HEAD 507f92e1138bb6e40dac5c6ee7a6758e6424bf97;实际运行另固定依赖/镜像/模型 · 公开代码;Kaggle条款、GPU/数据存储与模型API另备

MLflow Tracking ↗ · Tracking文档;具体包版本在实际试验固定 · 开源记录工具;存储/访问控制另配置

研究复现与消融:目标是论文结果或新方法比较。 按贡献与实验接收;理论结论与新颖性另核。 验收:对应W-C14的代码/结果/消融及复现差异。

AI怎样组织交付:Agent可检索澄清、实现和运行,按失败/统计差异修订;目标贡献与独立复跑保持固定。

在本职业的适用范围:计算机与算法研究的“实验研究结论”使用论文复现交付:贡献到实际实验结果,输入/接收对象是数据、消融、失败案例和可重现结果;固定数据/种子/选择预算,独立重跑关键表和消融,保留不确定性与未支持结论。

执行条件、可用工具与场景差异

PaperBench直接把论文复现作为实际运行任务,提供贡献rubric与裁判校准;这比代码生成更贴近研究复用结果,但仍是有分布和评价误差的评估。

实际复现使用PaperBench与目标论文的贡献和执行入口;目标数据、环境与计算条件仍需准备。

PaperBench论文及作者代码入口 ↗ · 论文v3和目标贡献评分准则(rubric);代码/依赖/镜像执行时固定 · 公开论文链接代码;数据许可、计算硬件和模型预算另备

数值与理论贡献:论文同时有经验结果和定理。 经验按运行验收,理论另查完整论证。 验收:计算输出、统计不确定性与假设/证明分别有证据。

判断的具体依据

外部报告结果

MLE-bench的公开研究在Kaggle工程任务上实测了Agent的数据准备、模型训练与实验能力;它支持离线实验交付存在,不能直接代表生产收益。

MLE-bench 原论文 ↗

支持:训练交付有直接研究而非只由编程成绩外推。

原文定位与适用范围

定位:Abstract;75 competitions;resource scaling

范围限制:历史竞赛样本;本页不采用或迁移其奖牌比例。

判断限制:历史竞赛样本;本页不采用或迁移其奖牌比例。

研究配置与计分口径

原论文75个Kaggle竞赛,含o1-preview+AIDE等配置;模型/脚手架和预算按原实验区分;未在本站重放。

工具与方法依据

MLflow能记录训练参数、代码版本、指标和输出文件,便于交付完整试验账本。

MLflow Tracking 官方说明 ↗

支持:提供可追踪实验接口。

原文定位与适用范围

定位:Tracking Runs;Runs/Models

范围限制:记录不证明无泄漏或指标适合业务。

判断限制:记录不证明无泄漏或指标适合业务。

有条件的编辑推断

在独立保留集和预算受控时,可整包委派训练搜索;采用决策以保留集切片、资源和下游条件作阶段接收。

MLE-bench 官方实现与可比性公告 ↗

支持:可运行训练及评分资产是迁移基础。

原文定位与适用范围

定位:README:leaderboard update/agents

范围限制:官方暂停新提交,任何目标任务成功率仍未知。

判断限制:官方暂停新提交,任何目标任务成功率仍未知。

外部报告结果

PaperBench要求从论文到代码和实际实验,以贡献评分准则(rubric)分开检查;原实验报告部分复现能力且没有超过其人类参照。

PaperBench v3 ↗

支持:直接研究复现任务证据。

原文定位与适用范围

定位:Abstract;rubrics/judge/baselines

范围限制:部分评分和LLM裁判均有局限;不代表完整复现成功率。

判断限制:部分评分和LLM裁判均有局限;不代表完整复现成功率。

研究配置与计分口径

v3:20篇ICML2024论文,作者参与rubric,8316子项;原最佳Claude3.5 Sonnet(New)+开放脚手架,本站不转用评分。

有条件的编辑推断

可让Agent交从论文到实际实验的复现包,但每项贡献应由独立结果核对,部分成功与完整复现分开。

PaperBench v3 ↗

支持:直接复现评测支持按贡献接收。

原文定位与适用范围

定位:rubrics and judge

范围限制:裁判和数据分布有限;本目标未试验。

判断限制:裁判和数据分布有限;本目标未试验。

与这项判断直接相关的进展

首次公开 2025-04-02

PaperBench把论文复现拆为可检查贡献 →

要求从论文到代码并执行实验,部分贡献与完整复现需分开。

  • 对应工作:论文复现交付:贡献到实际实验结果;判断:PaperBench要求从论文到代码和实际实验,以贡献rubric分开检查;原实验报告部分复现能力且没有超过其人类参照。

资料修订 2025-04-07:文档版本/结果表述修订;没有据此推定新的模型能力跃迁。

首次公开 2024-10-09

MLE-bench公开训练与实验任务资产 →

离线Kaggle工程任务有直接模型实验与公开运行资产。

  • 对应工作:机器学习实验包:数据、训练与可解释的保留集表现;判断:MLE-bench的公开研究在Kaggle工程任务上实测了Agent的数据准备、模型训练与实验能力;它支持离线实验交付存在,不能直接代表生产收益。
完整验收、失败处理和后续验证

机器学习实验包:数据、训练与可解释的保留集表现 →

评价不被开发污染:按时间/实体/组划分并审查特征可用时点,保留集由独立入口评分。
拒收:同一用户重复进入训练和测试,或使用未来标签。

结果可重现且代价明确:从固定环境重新训练/加载权重,核对种子、预处理、依赖、尝试次数与实际资源。
拒收:只交最好的截图,丢掉失败与调参预算。

泛化和结论相称:对关键业务群体、漂移与简单基线比较;研究结果含消融与可反证范围。
拒收:验证分上升就声称已改善生产效果或提出新理论。

数据质量或划分不成立时先交诊断和修复方案;预算内未达标是结果,不生成虚构成绩。

下一项验证:取一个未泄漏的小型真实数据问题,锁定时间/实体保留集与预算,先跑简单参考,再让Agent交完整模型和失败账本;服务化另测。

研究前沿:公开训练任务已有实测与可运行资产;当前排行榜暂停新提交,跨方法可比性有限,尚不能证明本组织数据上的泛化。

  • 在新时间窗/实体保留集持续超过简单基线且资源可追踪,可考虑扩大相近输入范围。
  • 标签/未来特征泄漏、切片退化或只保留最好一次结果,应收窄或暂停相应采用。

本站记录:本次只核查公开材料和任务契约;未在本站运行该任务、工具或模型。

论文复现交付:贡献到实际实验结果 →

确实运行关键贡献:从固定环境重跑核心实验并核对产物/数据,代码存在或论文文字不计运行。
拒收:只生成完整仓库而没有训练/实验输出。

比较口径对应原文:检查数据划分、预处理、预算、硬件/模型版本与指标定义,差异显式报告。
拒收:换更容易数据或多用预算却宣称精确复现。

完成声明相称:每项贡献有证据与失败/缺口,不将部分分或裁判摘要改为整论文成功。
拒收:模型judge说像原文,就忽略数值/理论错误。

运行环境或预算不足交已实现/已运行/未运行分界,不能用预计成绩填结果。

下一项验证:选一项可公开且预算可控的论文贡献,校准独立rubric;让Agent交完整复现账本,再从干净环境复跑关键输出并解释差异。

研究前沿:PaperBench以20篇ICML2024论文、作者参与的贡献rubric和实际实验评估复现;其原实验展示部分贡献复现能力并有裁判局限。部分评分不等于整论文成功,本目标论文未运行。

  • 独立环境能重复关键贡献,差异/预算与失败全部可追踪,可考虑扩大相近输入范围。
  • 只生成代码/论文文本、隐藏未跑实验或把部分分写成完整复现,应收窄或暂停相应采用。

本站记录:本次只核查公开材料和任务契约;未在本站运行该任务、工具或模型。

本场景怎样接收:固定数据/种子/选择预算,独立重跑关键表和消融,保留不确定性与未支持结论。

适用缺口与验证方法

尚未覆盖:公开评测的部分贡献评分不等于当前研究结论已成立。

怎样核对:固定数据/种子/选择预算,独立重跑关键表和消融,保留不确定性与未支持结论。

研究复现与挑战

交付物:独立复现、差异解释或反例

关联局部工作证据

可整包委派论文理解到复现运行,逐贡献交状态和差异;未跑实验不能被代码完整度掩盖。

依据身份:外部报告结果、有条件的编辑推断;各条只支持自身范围。

已展示:PaperBench要求从论文到代码和实际实验,以贡献rubric分开检查;原实验报告部分复现能力且没有超过其人类参照。

尚待验证:理论结论与环境变化可能不能用原rubric完整覆盖。

查看执行条件、逐条证据与完整验收

独立复现、差异解释或反例。可整包委派论文理解到复现运行,逐贡献交状态和差异;未跑实验不能被代码完整度掩盖。

AI怎样组织交付:Agent可检索澄清、实现和运行,按失败/统计差异修订;目标贡献与独立复跑保持固定。

在本职业的适用范围:计算机与算法研究的“研究复现与挑战”使用论文复现交付:贡献到实际实验结果,输入/接收对象是独立复现、差异解释或反例;从干净环境重跑关键贡献,核对原文数据/指标/预算,清楚分开从零与复用。

执行条件、可用工具与场景差异

PaperBench直接把论文复现作为实际运行任务,提供贡献rubric与裁判校准;这比代码生成更贴近研究复用结果,但仍是有分布和评价误差的评估。

实际复现使用PaperBench与目标论文的贡献和执行入口;目标数据、环境与计算条件仍需准备。

PaperBench论文及作者代码入口 ↗ · 论文v3和目标贡献评分准则(rubric);代码/依赖/镜像执行时固定 · 公开论文链接代码;数据许可、计算硬件和模型预算另备

从零与复用原代码:是否能读取作者仓库,是否需从零实现。 必须保留使用条件,不混合两种成绩。 验收:依赖/代码来源、同数据指标和公平预算。

判断的具体依据

外部报告结果

PaperBench要求从论文到代码和实际实验,以贡献评分准则(rubric)分开检查;原实验报告部分复现能力且没有超过其人类参照。

PaperBench v3 ↗

支持:直接研究复现任务证据。

原文定位与适用范围

定位:Abstract;rubrics/judge/baselines

范围限制:部分评分和LLM裁判均有局限;不代表完整复现成功率。

判断限制:部分评分和LLM裁判均有局限;不代表完整复现成功率。

研究配置与计分口径

v3:20篇ICML2024论文,作者参与rubric,8316子项;原最佳Claude3.5 Sonnet(New)+开放脚手架,本站不转用评分。

有条件的编辑推断

可让Agent交从论文到实际实验的复现包,但每项贡献应由独立结果核对,部分成功与完整复现分开。

PaperBench v3 ↗

支持:直接复现评测支持按贡献接收。

原文定位与适用范围

定位:rubrics and judge

范围限制:裁判和数据分布有限;本目标未试验。

判断限制:裁判和数据分布有限;本目标未试验。

与这项判断直接相关的进展

首次公开 2025-04-02

PaperBench把论文复现拆为可检查贡献 →

要求从论文到代码并执行实验,部分贡献与完整复现需分开。

  • 对应工作:论文复现交付:贡献到实际实验结果;判断:PaperBench要求从论文到代码和实际实验,以贡献rubric分开检查;原实验报告部分复现能力且没有超过其人类参照。

资料修订 2025-04-07:文档版本/结果表述修订;没有据此推定新的模型能力跃迁。

完整验收、失败处理和后续验证

论文复现交付:贡献到实际实验结果 →

确实运行关键贡献:从固定环境重跑核心实验并核对产物/数据,代码存在或论文文字不计运行。
拒收:只生成完整仓库而没有训练/实验输出。

比较口径对应原文:检查数据划分、预处理、预算、硬件/模型版本与指标定义,差异显式报告。
拒收:换更容易数据或多用预算却宣称精确复现。

完成声明相称:每项贡献有证据与失败/缺口,不将部分分或裁判摘要改为整论文成功。
拒收:模型judge说像原文,就忽略数值/理论错误。

运行环境或预算不足交已实现/已运行/未运行分界,不能用预计成绩填结果。

下一项验证:选一项可公开且预算可控的论文贡献,校准独立rubric;让Agent交完整复现账本,再从干净环境复跑关键输出并解释差异。

研究前沿:PaperBench以20篇ICML2024论文、作者参与的贡献rubric和实际实验评估复现;其原实验展示部分贡献复现能力并有裁判局限。部分评分不等于整论文成功,本目标论文未运行。

  • 独立环境能重复关键贡献,差异/预算与失败全部可追踪,可考虑扩大相近输入范围。
  • 只生成代码/论文文本、隐藏未跑实验或把部分分写成完整复现,应收窄或暂停相应采用。

本站记录:本次只核查公开材料和任务契约;未在本站运行该任务、工具或模型。

本场景怎样接收:从干净环境重跑关键贡献,核对原文数据/指标/预算,清楚分开从零与复用。

适用缺口与验证方法

尚未覆盖:理论结论与环境变化可能不能用原rubric完整覆盖。

怎样核对:从干净环境重跑关键贡献,核对原文数据/指标/预算,清楚分开从零与复用。

研究传播与复用

交付物:论文/报告与关键陈述对应的证明、运行或引用材料;按实际产物提供理论核查记录,或代码/数据/环境与外部复算;许可、限制和不可公开项说明

关联局部工作证据

可委派真实成果的材料写作和打包;理论按命题、假设、论证与引文接收,有代码/数据时才在独立环境运行复算。PaperBench的部分复现结果不证明传播效果。

依据身份:工具与方法依据、有条件的编辑推断;各条只支持自身范围。

已展示:当前所选依据为工具方法或编辑迁移判断,尚无该交付的直接结果。

尚待验证:新颖性、意义与发表决定另有研究审阅;本成果的外部核查/复算及传播效果未试验。

查看执行条件、逐条证据与完整验收

针对实际原创或复现成果交付论文与可核查材料:理论连接完整命题、假设、证明和引文;有计算资产时另交代码、数据及可运行条件。

AI怎样组织交付:Agent可把真实产物连到正文、证明、图表和引用;理论按完整命题与论证反馈修订,有代码/数据时再编排环境并独立复算,缺证据就缩小陈述。

在本职业的适用范围:研究传播采用真实产物对应的材料任务;理论用命题、假设、证明和引文核查,实际含代码/数据时才独立运行复算,权利与限制分别标明。

执行条件、可用工具与场景差异

NeurIPS清单提供陈述、限制、复现及代码/数据权利检查方法;AI写作/打包建议为编辑迁移,不用PaperBench部分复现成绩证明科研传播。

公开方法与普通文档/代码工具即可组织材料;关键数据、证明、运行资产和权限必须真实可得。

研究材料检查清单 ↗ · 访问版2026-10-20;目标论文/代码/环境版本固定 · 公开方法;实际写作/构建/复算工具由成果环境提供

原创研究传播:对象为本研究新算法/模型/理论/系统的已有结果。 先核对贡献及证据,材料包不替代新颖性审阅。 验收:关键陈述对应完整证明或真实实验;理论按假设、论证和引用核查,有代码/数据时再运行复算,权利和限制均要明确。

受限资产与复用:代码/数据/硬件存在许可、隐私或私有条件。 可交诚实限制/获取接口,不伪装完全开放。 验收:可公开最小材料、授权获取、依赖与外部可复算范围。

判断的具体依据

工具与方法依据

NeurIPS Paper Checklist要求检查主张/限制、复现和代码/数据等信息,适用于把实际结果与可复用材料相连。

NeurIPS Paper Checklist ↗

支持:有公开研究材料检查方法。

原文定位与适用范围

定位:Claims/Limitations/Reproducibility/Code and Data

范围限制:作者清单不是AI写作成绩,也不保证录用。

判断限制:作者清单不是AI写作成绩,也不保证录用。

有条件的编辑推断

可委派真实成果的写作/打包,以逐陈述证据、相适用的理论核查或独立复算及许可/限制接收;不把已有论文复现任务等同原创成果传播。

NeurIPS Paper Checklist ↗

支持:方法使材料验收可执行。

原文定位与适用范围

定位:claim consistency and reproducibility

范围限制:本成果外部复算尚待实施,传播影响未知。

判断限制:本成果外部复算尚待实施,传播影响未知。

完整验收、失败处理和后续验证

研究材料交付:陈述到证据与可复用成果 →

陈述不扩大结果:每项关键结论反查证明/日志/数据与引用,不把未跑、探索或部分结果写成确认/完整成功。
拒收:正文声称所有实验通过,实际只运行一组。

材料确可复用:理论成果核对完整命题、假设、证明与引文是否足以复查;选择形式交付时追加内核及依赖检查。有代码/数据时才在干净环境获取、安装并复算核心结果,核对版本、图表与预算。
拒收:理论结论缺关键假设、证明或引文;或声称可运行的仓库缺数据/脚本,图表无法重建。

权利与限制透明:核对许可/引用/敏感数据与不可公开边界,说明失败/限制/人介入和适用范围。
拒收:用占位许可证或泄露数据,隐藏复用必需私有资产。

缺原始产物只交缺口与可写范围,不编结果/引用;敏感或权利不明材料保持本地并说明获取条件。

下一项验证:分别给一份理论结果和一份实验结果:理论注入漏假设/缺引文,实验保留未运行项/缺依赖,检查材料是否如实标注;只有计算产物需要独立环境复算。

研究前沿:公开有研究材料与复现自查要求;没有本成果传播效果或AI论文可靠率。可检查的包与外部复算比语言流畅更直接。

  • 外部环境复算且关键陈述均能回溯真实证据,可扩大同类材料整理。
  • 陈述超证据、关键材料缺失或许可不明时拒绝发布/复用声明。

本站记录:本次核查公开资料与任务契约,未在本站运行目标任务或新增模型试次。

本场景怎样接收:理论逐关键陈述检查完整命题、假设、证明与引文,选择形式交付才核对内核;有代码/数据时才在干净环境复算、核对图表。所有产物均核对许可、隐私、失败和不可公开项。

适用缺口与验证方法

尚未覆盖:新颖性、意义与发表决定另有研究审阅;本成果的外部核查/复算及传播效果未试验。

怎样核对:理论逐关键陈述检查完整命题、假设、证明与引文,选择形式交付才核对内核;有代码/数据时才在干净环境复算、核对图表。所有产物均核对许可、隐私、失败和不可公开项。

与这些工作关联的进展

公开 2025-05-14 · 资料修订 2025-06-16:5月官方首次公布成果;6月白皮书补方法/产物说明,不重置能力首次公开日。

AlphaEvolve公开算法搜索与部分成果 →

专用系统以代码搜索和任务评价器得到算法/计算优化成果。

适用边界:专用研究系统与选择性成果,不保证公开Agent复现或解决任意新题。

公开 2025-04-02 · 资料修订 2025-04-07:文档版本/结果表述修订;没有据此推定新的模型能力跃迁。

PaperBench把论文复现拆为可检查贡献 →

要求从论文到代码并执行实验,部分贡献与完整复现需分开。

适用边界:贡献分与LLM裁判均有限,不是完整论文复现率。

未来 3–5 年(2029–2031) · 条件情景

未来3–5年,工作组合可能怎样变化

未来 3–5 年是编辑条件情景,不是就业数量预测。每项均列基准、加速、受限路径和需观察的信号;职业职责来源不等于 AI 能力证据。

基准情景

2029–2031,候选构造、反例搜索与复现实验将更多连成研究交付;研究者集中选择贡献问题、审查实验条件和解释可推广范围。

加速情景

若在新问题/独立数据、可获得工具与预算下保持有效成果,可扩大跨文献研究和更长程自主探索。

受限情景

若基准污染和复现失败持续,生成更多实验也不必然增加可靠发现。

哪些信号会改变判断

  • 独立团队的复现结果
  • 预先设定评估下新方法的稳定收益

这些是围绕工作内容的条件推演,不是已测的职业替代率;当前分工也不是永久边界。

进入与成长,可用什么说明能力

本页目前主要提供工作与作品证据,基础课程、责任级别和中国地区准入尚未完成专题整理;请按目标机构原文另核。

完整交付可展示的证据

  • 既有工作对照、明确研究问题与反证条件;附抽查关键文献原文,锁输入域/结论/基线,给反证条件和评价器正反控制。
  • 算法定义、复杂性或正确性论证;附固定语义、边界与复杂性假设,独立反例/保留输入;形式交付才追加相应内核检查。

这是公开的能力证据参考。具体地区、职级与组织要求应按目标岗位原文核对;是否符合你的情况由你和自己的 Agent 判断。

用你已有的上下文继续

交给我的 Agent

带走当前公开资料,让你的 Agent 结合已有背景继续分析。也可以读完就结束。

阅读 Markdown →
查看可复制的内容
我正在了解:计算机与算法研究
提出并检验计算方法、算法或系统的新知识。
请先解释这些职业或岗位方向的工作差异、AI 当前影响和证据边界。如果我要结合个人情况做判断,复用你已经知道的我的经历、偏好和约束,只追问会改变结论的缺口;不要把本站已收录的方向当作全部选项。

公开资料:
职业与工作资料:https://edgeofwork.com/careers/computing-researcher.md?version=2026-10-21.careers.2
算法候选交付:代码搜索、反例与正确性证据:https://edgeofwork.com/work-units/W-C14.md?version=2026-10-21.workunits.2
机器学习实验包:数据、训练与可解释的保留集表现:https://edgeofwork.com/work-units/W-C06.md?version=2026-10-21.workunits.2
论文复现交付:贡献到实际实验结果:https://edgeofwork.com/work-units/W-C25.md?version=2026-10-21.workunits.2
研究材料交付:陈述到证据与可复用成果:https://edgeofwork.com/work-units/W-C32.md?version=2026-10-21.workunits.2

区分职业资料、研究结果、工具声明和编辑推断;读取资料给出的日期、版本与范围。需要时补充原始来源。使用自己的自然报告或对话继续,无需把个人材料和分析回填网站。

来源与职业名称的对应

官方分类提供职业参照;市场岗位方向按实际工作作较窄或相邻映射。美国资料的地区、学历和准入要求不能直接当作中国要求。

Computer and Information Research Scientists ↗

O*NET-SOC · 15-1221.00 · US · O*NET-SOC 2019;OnLine Updated 2026

本记录按该职业定义组织职责;中文为编辑译名,不声明中美资格等价。

职业对应 · Definition / Tasks

查看原文、日期与适用边界

Computer and Information Research Scientists ↗

美国 O*NET-SOC 职业职责参照;中文标题及导航由编辑按工作内容映射

原文定位:职业定义、Tasks、Work Activities;不采用薪酬和学历比例;核查 2026-10-20;来源已核对。

不证明中国岗位数量、准入资格或在招需求;不提供该职业的 AI 实测结论。