EyeTrackVR:开源且平价的虚拟现实眼动追踪平台

什么是EyeTrackVR?

EyeTrackVR是一个开源的虚拟现实眼动追踪平台,旨在为VR用户提供affordable且易用的眼动追踪解决方案。该项目由一群热衷于VR技术的开发者和爱好者发起,目标是让眼动追踪这一先进功能变得更加普及和平价。 EyeTrackVR的主要特点包括:

• 完全开源:所有代码和文档都在GitHub上公开,任何人都可以参与贡献
• 社区驱动:由用户和开发者共同推动项目发展
• 平价affordable:硬件成本远低于市面上的商业解决方案
• 适用于多数VR头显:可以与大多数VR头显兼容
• DIY友好:完全可自行组装,适合动手能力强的用户
• 开放平台:可与各种社交VR游戏兼容
• 注重隐私:所有数据都在本地处理,不会上传云端

EyeTrackVR如何工作?

EyeTrackVR的工作原理是在VR头显内部安装红外摄像头和IR LED灯,用于捕捉用户眼球的移动。具体步骤如下:

1. 在头显内部安装红外摄像头和IR LED灯
2. 摄像头捕捉眼球图像
3. 使用计算机视觉算法分析眼球位置和运动
4. 将眼动数据通过OSC或UDP协议传输给VR应用
5. VR应用根据眼动数据实现相应的交互效果 整个过程在本地完成,不需要将数据上传到云端,因此很好地保护了用户隐私。

硬件需求

要使用EyeTrackVR,你需要以下硬件:

• VR头显
• ESP32-CAM模块(作为红外摄像头)
• IR LED灯
• 3D打印支架(用于固定摄像头和LED)
• 连接线缆 具体的硬件清单和3D打印文件可以在EyeTrackVR的文档中找到。项目还提供了官方商店,可以购买预焊接好的PCB板等配件。

软件设置

EyeTrackVR的软件部分包括:

1. ESP32-CAM固件:由项目成员lorow和ZanzyTHEbar开发的OpenIris固件
2. EyeTrackVR应用:用于处理眼动数据并与VR应用通信
3. VR应用插件:用于接收和使用眼动数据 详细的软件安装和配置步骤可以参考EyeTrackVR的文档网站。

安全注意事项

在使用EyeTrackVR时,需要特别注意IR LED灯的安全性。项目文档中强调:

警告: 请确保使用非聚焦的发射器,且每只眼睛的总功率不超过 5mW cm^2。请阅读我们的LED安全页面,了解V3和V4 LED套件的详细计算。 不当使用IR LED可能会对眼睛造成伤害,因此在组装和使用过程中必须严格遵守安全指南。

应用场景

EyeTrackVR主要应用于社交VR游戏,如VRChat等。通过眼动追踪,可以实现以下交互效果:

• 更自然的虚拟角色眼神交流
• 基于注视点的UI交互
• 凝视触发的游戏机制
• 提高渲染效率(凝视点渲染) 除了游戏外,EyeTrackVR还可以应用于:
• VR教育培训
• 医疗康复
• 用户行为研究
• 可访问性改进

项目现状和未来计划

EyeTrackVR目前仍处于开发阶段,但已经可以使用。项目团队正在不断改进硬件设计和软件性能。未来的计划包括:

• 提高眼动追踪的精度和速度
• 扩大兼容的VR头显范围
• 开发更多VR应用插件
• 改进用户友好性 如果你对EyeTrackVR感兴趣,可以通过以下方式参与:
• 在GitHub上Star或Fork项目
• 加入Discord社区讨论交流
• 贡献代码或文档
• 分享你使用EyeTrackVR的经验

结语

EyeTrackVR代表了VR眼动追踪技术的一个重要发展方向 - 开源、平价且易用。虽然还在发展中,但已经展现出巨大的潜力。随着项目的不断完善和社区的壮大,相信EyeTrackVR会为更多VR用户带来全新的交互体验,推动VR技术向前发展。 无论你是VR开发者、研究人员还是普通用户,都可以尝试使用EyeTrackVR,感受眼动追踪为虚拟现实带来的变革。让我们共同期待EyeTrackVR的未来发展,见证VR交互的又一次飞跃。