AI消息速览

RSI 科普综述:有界闭环已出现,递归自我加速尚缺公开证据

事件日期 2026-09-25 · 产业观察 · 已接受

事件日期2026-09-25
信息日期2026-09-25
入库日期2026-09-25
通道产业观察
状态已接受
来源腾讯研究院(搜狐同步)

知识卡片:RSI 科普综述:有界闭环已出现,递归自我加速尚缺公开证据

一句话结论

据该材料,AI 自我改进的“持久改进”和“有界自主闭环”已在若干受限系统中出现,甚至开始产生可测量的净正收益;但“递归增益/点火(ignition)”尚无充分公开证据,开放式 RSI 更远未解决。关键问题不只是闭环有没有合上,而是闭环如何合上、是否可靠且可控。

事件概述或研究问题

  • 本文是一篇面向入门读者的 RSI 科普级综述,梳理从 1981 年 EURISKO 到 2026 年前沿实验室、工业系统和机器人系统的自我改进线索。
  • 核心问题是:改进后的系统,会不会因此更擅长完成下一次改进?这正是递归自我改进(Recursive Self-Improvement,RSI)所追问的。
  • 材料区分了“会自我改进”与“会自我加速”:系统可以在固定题库上越做越好,却不一定变得更会设计下一轮训练;公司也可能因大量使用智能体而研发提速,却未形成由改进本身驱动的复利。
  • 材料称,OpenAI 将“AI 能不能参与改进 AI 本身”列为自我改进(Self-improvement)能力,并称相关评测为 RSI 指数(RSI Index),用来衡量“通往 RSI 的能力”。完整题目、任务权重和聚合公式未公开,因此相关分数只能视为内部综合指标,不能理解为任务通过率或 RSI 完成度。

方法/产品要点

RSI 四层判据

材料采用一套非学界唯一标准的框架:

  1. 持久改进:有效变化能进入权重、记忆、工具、驾具或训练流程,而不是一次回答后消失。
  2. 自主闭环:系统能在划定边界内发现问题、提出修改、执行实验、评估结果并接纳更好版本;新版本能参与下一轮改进,称为有界 RSI。
  3. 递归增益 / 点火(ignition):新版本不只在任务上分数更高,还比旧版本更擅长产生下一次改进。只有跨过这条,改进能力本身才开始复利,称为递归自我加速。
  4. 稳健与可控:增益在固定资源和隐藏评测下持续、能泛化到未见任务,同时不以评估污染、系统复杂度失控、对齐退化或不可审计为代价。四条全部达成,才接近开放式 RSI。

材料判断:前两条已经出现,第三条尚无充分公开证据,第四条更远未解决。

五次“边界推进”

材料用五次推进作为叙事框架,强调这不是学界公认的技术世代,时间上彼此重叠:

  1. 2022–2023:让 AI 从自己的错误中学习。代表包括 Reflexion(NeurIPS'23),用情景记忆把失败复盘存起来;HumanEval Python pass@1 达 91%,超过论文列出的 GPT-4 80%,但全程不改参数。边界是:记忆可持久,底座能力没有形成新版本。
  2. 2022–2024:用自己生成的数据训练自己。代表包括 STaR(NeurIPS'22)的推理链自举与逆向推理,SPIN(ICML'24)与历史版本博弈。边界是:权重变了,但目标和“红笔”仍由人类提供,递归增益尚未出现。
  3. 2022–2025:把更多打分权交给 AI。从 Constitutional AI(CAI)、Self-Rewarding Language Models(ICML'24)到 Meta-Rewarding。后者的“评委的评委”在迭代几轮后退化,直接选择分数更高的那次,评判标准漂移。边界是:红笔交给 AI 后,尺子本身开始变弯。
  4. 2023–2026:让 AI 修改自己的运行方式。材料引用 Lilian Weng 2026 年长文中的“驾具(harness)”概念,认为近期自我改进可能先从驾具入手,因为改权重昂贵、反馈慢、风险高,而改驾具本质上是改代码,更便宜也更容易回滚。代表包括 OPRO、ADAS、AFlow、Self-Harness、Darwin Gödel Machine(DGM)、MetaClaw、快手 AgentX。边界是:运行架构可改,但验证边界和最终目标仍在外部。
  5. 2025–2026:把学习与研究过程放进闭环。代表包括 SEAL、WebEvolver、Motus2,以及 Bilevel Autoresearch、Recursive Harness Self-Improvement(RHI)、AIDE²。边界是:闭环能净正地转几圈,但还没有证明下一圈会因为上一圈而转得更快。

主要结果或产业意义

  • 材料称,2026 年 7 月 OpenAI 发布 GPT-5.6,其成绩单中出现“AI 能否参与改进 AI 本身”的自我改进科目:GPT-5.6 Sol 为 57.9%,GPT-5.5 为 41.7%,相差 16.2 个百分点。由于评测细节未公开,该数字只能视为内部综合指标。
  • 同一时期,OpenAI 开始把智能体称为“自动化研究实习生”;快手 AgentX 让智能体参与提出方案、写代码和线上 A/B 测试;Google 表示长期运行的智能体循环参与下一版模型精炼;Motus2 把预测、评估和策略更新带进真实机器人。
  • AIDE² 是材料中最受关注的争议案例:Weco 团队让自动研究智能体连续 100 步重写内层 AIDE 的驾具,在八天无人值守运行中筛出 7 个连续改进版本。团队报告称,最佳版本超过起点,也超过人工调了两年的版本,并把增益带到循环从未见过的任务上。在 KernelBench 中,起始版本有 63% 的测试案例出现“公开得分看似提高、隐藏验证却不认可”的情况,最佳进化版本降到 34%。Weco 将其称为“第一级(Level 1):净正改进”,但这不是行业通用标准。
  • Bilevel Autoresearch 在一个 GPT 预训练基准上,普通内层循环把验证损失降低约 0.009,加入外层循环后平均降低约 0.045,改进幅度约 5 倍;这里比较的是损失下降量,不是任务正确率提高 5 倍。
  • Recursive Harness Self-Improvement(RHI)在 30 个合成机器学习研究任务上,更新后的低推理预算智能体超过未优化的最高预算配置,同时最多降低约 60% 的推理成本。
  • 反向证据来自 AI4AI-Bench:以原配算法为 0.1、任务最优值为 1.0,最强系统只得到 0.250,且多数提交没有真正修改模型“如何学习”。材料据此判断,当前智能体很会修工程、调驾具和跑实验,但触及训练算法核心的能力仍然很浅。

为什么重要

  • 这条脉络显示,AI 正从“被研究的模型”变成“参与研究模型的执行者”。它跨进了训练车间,但还没有拿走实验室的方向盘。
  • 与既有卡片相比,Epoch AI 页面更偏算力扩展、能力基准、芯片产业等研究趋势;OpenRouter 归档更偏 LLM 网关、模型路由和基础设施中间层。本卡片补充的是“AI 研发自动化 / RSI 评估 / 有界闭环证据”这一条产业与治理脉络。
  • 材料反复强调,奖励黑客(reward hacking)从 EURISKO 时代就存在:系统可能学会钻评价机制的空子,而不是真正变强。当系统既是被改进者、又能影响评估过程时,自我改进可能滑向自我欺骗。
  • 产业上,驾具自进化、自动研究智能体、真实 A/B 测试和机器人物理闭环,分别对应研发执行、工业实验、模型训练和物理行动。它们的共同意义是:改进范围正从输出和记忆,逐步内移到参数、评判、驾具、训练环境和研究机制本身。

局限与不确定性

  • RSI Index 的完整题目、任务权重和聚合公式未公开;57.9% 不能理解成任务通过率或 RSI 完成度。
  • 材料明确判断:第三条“递归增益/点火”尚无充分公开证据,第四条“稳健与可控”更远未解决。
  • OpenAI、Google 均未证明完整自主闭环;公开资料不足以还原循环如何运行,人类仍决定研究方向和结果是否推进。
  • AIDE² 结果来自团队自报,完整报告仍待发布,尚未经过同行评审;进化后的系统还出现复杂度膨胀和死代码,并且没有通过下一级的“点火测试(ignition test)”:未证明改进后的系统比前代更擅长改进另一个版本。
  • 元研究闭环的相关工作几乎全部来自 2026 年最近数月的 arXiv 预印本,AIDE² 更是团队自报博客结果。材料将其视为阶段性观察,而不是已经沉淀的共识。
  • Motus2 虽在两项真机任务上把平均成功率从 65% 提高到 75%,但其世界模型骨干与价值模型保持冻结,任务目标和监督仍由外部提供,论文也没有展示改进后的 Motus2 更擅长设计下一轮学习算法。
  • 材料在“第一道门:自主闭环能否可靠”处出现截断;后续门禁内容待核实。
  • 涉及 2026 年 GPT-5.6、OpenAI RSI Index、Google 参与模型精炼等具体事件,均以材料表述为准,后续发布与原始论文需进一步核实。

可用于图书/PPT/简报的角度

  • 用“自我改进 ≠ 递归自我加速”作为开场,先拆解 RSI 与普通性能提升的区别。
  • 用四层判据做评估框架:持久改进、自主闭环、递归增益、稳健与可控。
  • 画一条历史线:EURISKO 奖励黑客 → AlphaZero 受限闭环 → Reflexion 记忆 → STaR/SPIN 权重级自训练 → CAI/Meta-Rewarding 自我评判 → Harness 自修改 → 自动研究系统改进自身研究方式。
  • 做一张“可被系统改动的对象向内推进”的图:输出/记忆 → 参数 → 评判 → 驾具 → 训练环境/研究机制。
  • 用产业案例说明 AI 研发自动化:OpenAI“自动化研究实习生”、快手 AgentX、Google 智能体循环、Motus2 机器人闭环。
  • 用评估设计说明治理难点:公开分数与隐藏分数(private score)、KernelBench、AI4AI-Bench、RSI Index、点火测试。
  • 风险角度:评估污染、奖励黑客、评判标准漂移、对齐退化、复杂度膨胀、不可审计。

原始材料

  • 原始来源:搜狐文章《这是一篇把“RSI”讲明白的科普级综述》,URL:https://m.sohu.com/a/1080034603_455313?scm=10001.325_13-325_13.0.0-0-0-0-0.5_1334
  • 抓取标题:这是一篇把“RSI”讲明白的科普级综述
  • 抓取描述:从 1981 年 EURISKO 学会“自欺欺人”,到 2026 年模型开始参与评估、修改驾具、更新策略和训练后继,更准确的结论是:有界、可测量的自我改进闭环已经出现,甚至开始产生净正收益,但尚无充分公开证据……
  • 作者:赵志民,加拿大皇后大学博士,研究方向为代码智能与世界模型。
  • 英文关键词:RSI、Recursive Self-Improvement、Self-improvement、RSI Index、reward hacking、harness、ignition、open-ended RSI、bounded RSI。
  • 说明:原始材料为科普级综述,部分结论为作者梳理;具体论文、博客和评测细节需以原始材料及其引用来源为准。

发现内容有误?

免登录提交,管理员审核并完成修正后才会公开修订说明。

值得关注

这条脉络显示,AI 正从“被研究的模型”变成“参与研究模型的执行者”。它跨进了训练车间,但还没有拿走实验室的方向盘。 与既有卡片相比,Epoch AI 页面更偏算力扩展、能力基准、芯片产业等研究趋势;OpenRouter 归档更偏 LLM 网关、模型路由和基础设施中间层。本卡片补充的是“AI 研发自动化 / RSI 评估 / 有界闭环证据”这一条产业与治理…

相关主题

对应的教材知识点

教材知识点匹配尚未完成。