RSI正在取代AGI成为人工智能研究的新北极星

RSI正在取代AGI成为人工智能研究的新北极星

递归自我改进成为人工智能研究新焦点

一批新的人工智能实验室正在将研究重心从通用人工智能转向一个更具体但也更难实现的目标:递归自我改进。这个概念指的是人工智能系统能够自主优化自身的算法和架构,从而实现持续的性能提升,而不需要人类工程师的持续干预。

递归自我改进的吸引力在于它的增长潜力。当前的大语言模型进步主要依赖于三个因素:更多训练数据、更大计算资源、更好的人工设计。这三者都受到物理和经济约束。但如果模型能够自己发现更高效的训练方法或架构设计,理论上可以突破这些约束,实现指数级的能力增长。

实现递归自我改进的技术难度远超当前人工智能系统的工程挑战。现有的代码生成工具已经可以写出能运行的程序,但距离"写出比自身更优秀的程序"还有巨大差距。核心难点在于评估:一个系统如何判断自己生成的改进方案确实优于现有方案,而不是在某些维度上变好了但在其他维度上退步了。

从技术路径来看,当前有几种尝试方向。一种是让人工智能系统参与自身的训练过程,比如用模型生成合成训练数据或设计新的损失函数。另一种是让模型修改自身的推理策略,通过试错来发现更高效的问题解决方法。还有一种更激进的方向是让模型直接重写自身的代码和参数。

递归自我改进引发的安全担忧比通用人工智能更直接。如果一个系统能够自主变得更强大,而人类对其改进方向的控制力不足,就可能出现能力增长与价值对齐脱节的情况。这也是为什么一些安全研究机构呼吁在推进递归自我改进研究的同时,优先建立相应的监控和干预机制。

从商业化角度来看,递归自我改进如果能够实现,将大幅降低人工智能系统的维护和升级成本。目前大模型的每次迭代都需要大量人力参与数据标注、模型调优和测试验证。如果这些工作能够部分自动化,人工智能公司的运营效率将出现质的飞跃。这也是资本市场对这一方向保持高度关注的经济逻辑。

围绕递归自我改进的研究目前还处于非常早期的阶段,距离实际应用还有相当距离。但它已经吸引了相当数量的研究人员和资金投入,可能会成为继大语言模型之后人工智能领域的下一个研究热点。

递归自我改进的概念最早可以追溯到人工智能研究的早期阶段。在大语言模型出现之前,研究者就已经在探索如何让程序自己优化自己。但当时的技术条件限制了这种探索的深度,因为系统能够修改的范围非常有限。大语言模型的出现改变了一切:模型可以理解和生成代码,可以评估不同方案的优劣,可以进行复杂的推理。这些能力为递归自我改进提供了前所未有的技术基础。

围绕递归自我改进的安全研究也在同步推进。多个安全研究团队正在开发监控工具,用于检测模型在自我改进过程中是否出现了意料之外的行为变化。这些工具的核心思路是建立基准行为模型,然后在每次改进后对比实际行为与预期行为的偏差。如果偏差超过预设阈值,系统会自动暂停改进过程并发出警报。这种"带刹车的自动驾驶"模式可能是目前最务实的安全策略。