DIAMBRA Arena: 一个创新的强化学习平台

DIAMBRA Arena简介

DIAMBRA Arena是一个专为强化学习研究和实验设计的创新软件平台。它提供了一系列高质量的环境,让研究人员能够在流行的街机模拟视频游戏中进行实验。DIAMBRA Arena的核心优势在于它提供了一个标准化的接口,完全兼容OpenAI Gym/Gymnasium格式的Python API,这使得它的使用变得简单直观。

主要特性

DIAMBRA Arena具有以下显著特点:

跨平台支持: 支持所有主流操作系统(Linux、Windows和MacOS)。
易于安装: 可以通过Python的PIP包管理器轻松安装。
免费使用: 用户只需在官方网站注册即可免费使用。
丰富的文档: 提供全面的文档支持。
示例代码: 包含多个涵盖主要用例的示例代码。
多种游戏模式: 支持单人(1P)和双人(2P)模式。
广泛的研究应用: 适用于多个强化学习子领域,包括标准强化学习、竞争性多智能体、人机竞争、自我对弈、模仿学习和人在环中学习等。

可用游戏

DIAMBRA Arena精心选择了一系列流行的格斗类复古游戏作为实验环境。这些游戏虽然有着相似的基本机制,但各自提供了独特的挑战,如不同类型和数量的角色、组合技的执行方式、生命值恢复机制等。目前可用的游戏包括:

Dead Or Alive ++
Street Fighter III: 3rd Strike
Tekken Tag Tournament
Ultimate Mortal Kombat 3
Samurai Shodown V Special
The King of Fighters '98 Ultimate Match Hero
Marvel VS Capcom
X-Men VS Street Fighter
Soul Calibur

更多游戏正在不断添加中。

安装和使用

要开始使用DIAMBRA Arena,请按照以下步骤操作:

在官方网站创建免费账户。
根据您的操作系统安装Docker Desktop。
安装DIAMBRA命令行界面: python3 -m pip install diambra
安装DIAMBRA Arena: python3 -m pip install diambra-arena

强烈建议使用虚拟环境来隔离Python包的安装。

快速开始

以下是一个使用随机智能体运行完整游戏回合的基本Python脚本:

import diambra.arena

env = diambra.arena.make("doapp", render_mode="human")
observation, info = env.reset(seed=42)

while True:
    env.render()

    actions = env.action_space.sample()
    observation, reward, terminated, truncated, info = env.step(actions)

    if terminated or truncated:
        observation, info = env.reset()
        break

env.close()

要运行此脚本,请使用以下命令:

diambra run -r your/roms/local/path python script.py

与强化学习库的兼容性

DIAMBRA Arena设计时考虑了与主流强化学习库的最大兼容性。它原生提供了与Stable Baselines 3和Ray RLlib的接口,同时也支持已弃用的Stable Baselines。这些接口的使用在官方文档和DIAMBRA Agents仓库中有详细说明。

支持的库版本如下:

Stable Baselines 3 (2.1.*)
Ray RLlib (2.7.*)
Stable Baselines (2.10.2, 已弃用)

竞赛平台

DIAMBRA还提供了一个竞赛平台,允许用户提交他们的智能体,参与全球视频游戏锦标赛。平台特点包括:

公开的全球排行榜
根据智能体表现解锁成就
在Twitch频道直播评估过程

结语

DIAMBRA Arena为强化学习研究和实验提供了一个强大而灵活的平台。通过提供高质量的游戏环境、标准化的接口和丰富的功能,它为研究人员和开发者创造了探索和推进强化学习领域的绝佳机会。无论您是研究人员、学生还是AI爱好者,DIAMBRA Arena都为您提供了一个独特的平台,让您能够在有趣的视频游戏环境中开发和测试先进的AI算法。

随着更多游戏和功能的不断加入,DIAMBRA Arena正在成为强化学习领域不可或缺的工具。我们期待看到更多创新的研究和应用在这个平台上诞生,推动人工智能在游戏和更广泛领域的发展。

如果您对DIAMBRA Arena感兴趣,不妨立即注册并开始您的强化学习之旅。谁知道呢,也许下一个突破性的AI算法就将诞生在您的实验中!