Awesome-Embodied-Agent-with-LLMs

项目介绍: Awesome-Embodied-Agent-with-LLMs

项目概述

Awesome-Embodied-Agent-with-LLMs（结合大型语言模型的自主智能体）是一个由Haonan维护的精选研究项目清单。该项目旨在收集和整理与“结合大型语言模型的智能体或具身AI”相关的学术研究。

更新动态

本项目的最新动态包括：

• 2024年8月1日：新增了关于社交代理和角色扮演的讨论板块。
• 2024年6月28日：开设了关于代理自进化研究的新板块。
• 2024年6月7日：增添了Mobile-Agent-v2，这是一款通过多智能体协作实现高效导航的移动设备操作助手。
• 2024年5月13日：加入了“学习交互式真实世界模拟器”，该论文在ICLR 2024中荣获杰出论文奖。
• 2024年4月24日：新增了一份名为“大型语言模型的自进化研究综述”的报告。
• 2024年4月16日：增加了一些CVPR 2024的论文。
• 2024年4月15日：新增了一篇名为“MetaGPT”的论文，在ICLR 2024中获得口头报告资格，并在基于LLM的智能体类别中排名第一。

主要内容目录

• 综述
• 社交智能体
• 自进化智能体
• 高级智能体应用
• 结合强化学习与世界模型的LLM
• 规划与操作或预训练
• 多智能体学习与协作
• 视觉与语言导航
• 检测
• 3D基础
• 交互式具身学习
• 重排
• 基准
• 模拟器
• 其他

LLM智能体趋势与想象

项目展示了结合LLM进行具身智能体研究的趋势图及设想的代理社会，为未来的研究方向提供了启迪和灵感。

研究方法

• 综述研究：包括对具身AI的视觉-语言-动作模型的大规模综述，以及关于大型语言模型自进化的系统调查。
• 社交代理：探讨人工智能在社会互动中的应用，促使智能体能模拟人类的社交行为。
• 自进化智能体：研究智能体通过神经符号自我训练框架进行自我进化的能力。
• 高级应用：例如集成先进的变压器模型到机器人流程中，开发更智能的移动设备操作助手等。
• 结合强化学习及世界模型：通过结合LLM与强化学习，提升智能体在真实环境中的适应能力与决策能力。
• 规划与操控：研发能够在虚拟与真实世界中执行复杂任务的智能体，并使用LLM进行计划与执行。

总结

Awesome-Embodied-Agent-with-LLMs项目涵盖了结合大型语言模型的多样化应用与研究前沿。该项目对行业学者、研究人员和开发者是一份宝贵的资源，为智能体技术的不断进步提供了重要的参考和启发。通过持续更新的研究成果，该项目确保了它在快速发展的学术领域中保持前沿地位。