摘要

在第七届北京智源大会上，图灵奖得主Richard S. Sutton提出，人工智能的发展正从依赖人类数据的时代转向“经验时代”。他强调，AI需要通过与环境的实时交互生成新数据，而不是依赖于现有的人类文本数据。Sutton还讨论了去中心化合作的重要性，认为多元目标的生态系统能够促进创新。

关键点

• Sutton指出当前大型语言模型依赖人类数据，但高质量数据已被消耗殆尽，模型规模的扩展效果递减。
• Sutton认为，智能体应通过与环境交互生成并利用第一手经验，而不是模仿人类文本。
• 强化学习的理念已被工程化，Sutton与Andrew Barto因此获得图灵奖。
• Sutton强调“经验时代”技术特征，智能体需在真实环境中运行，以环境反馈作为奖励信号。
• Sutton提倡去中心化合作，反对用单一目标束缚AI，认为多元目标的生态系统更具创新活力。
• Sutton认为智能体应像婴儿或运动员那样，通过感知-行动循环自我学习。
• Sutton指出，我们正从人类数据时代迈向经验时代，AI需要从与世界的互动中获得数据。
• Sutton认为合作是人类的超能力，去中心化合作比中心化控制更强大和可持续。