Voyager：基于GPT-4的Minecraft自主智能体

来自加州理工学院、斯坦福大学、德克萨斯大学和NVIDIA的研究人员合作开发并发布了Voyager，这是一个利用GPT-4在《Minecraft》中进行游戏的大型语言模型（LLM）智能体。Voyager展示了卓越的能力，通过学习、保留知识并在《Minecraft》中表现出色。

Voyager的核心特点

1. 自主性：Voyager能够在虚拟世界中自主探索，获取多样化的技能，并在无需人类干预的情况下做出突破性发现。
2. 自动课程：优化探索过程，确保智能体在开放环境中的高效学习。
3. 技能库：存储和检索复杂行为，支持技能的持续扩展。
4. 迭代提示机制：结合环境反馈、执行错误和自我验证，不断改进程序。

技术架构

Voyager由三个关键组件构成：

• 自动课程：用于开放探索。
• 技能库：存储日益复杂的行为。
• 迭代提示机制：使用代码作为行动空间。

技术优势

• 无需微调：通过黑箱查询与GPT-4交互，避免模型参数微调。
• 可解释性：Voyager开发的技能具有时间扩展性和可解释性。
• 快速能力增长：智能体能力呈现复合增长，减少灾难性遗忘。

性能表现

与基线相比，Voyager在解锁技术树方面表现出色：

• 解锁木制等级的速度快15.3倍。
• 解锁石制等级的速度快8.5倍。
• 解锁铁制等级的速度快6.4倍。
• 唯一解锁钻石等级的智能体。

独特能力

Voyager能够在全新的《Minecraft》世界中利用已学习的技能库从头开始解决新任务，这是其他方法在泛化时难以实现的。

研究意义

项目研究人员Jim Fan指出，GPT-4在《Minecraft》中的实验是创建有效AI智能体的良好起点。具备广泛能力的自主智能体是人工智能的下一步发展方向，它们通过好奇心和生存动机在开放环境中探索、规划和学习新技能。

终身学习智能体

终身学习智能体是能够在整个操作生命周期内持续获取知识和技能的AI模型。它们具备适应、学习和改进的能力，能够有效处理多样化任务和领域。其持续学习能力在游戏、机器人技术、医疗保健和教育等领域具有重要价值。

未来展望

Voyager为《Minecraft》开启了创新新时代，为未来具身终身学习智能体的发展奠定了基础。