代码预训练影响任务表现
374M模型,控制代码/自然语言配比;competitive总token固定、additive语言token固定
原文位置:§3/4训练设置;§5结果;Tables3/5/6/7
不能据此推出:小模型与特定任务;加代码不统一改善所有语言任务;以正文定义为准,abs摘要标签有倒置
核查 2026-10-15 · 所属资料版本 2026-10-19.observations.2 · 来源ID D-PETTY
实际引用在哪里
代码训练会让数学和语言一起变好吗? →
训练配比、相同后续训练和程序提示是三种不同干预,结论要各自保留。
关系:解释引用