EyeTrackVR:开源且平价的虚拟现实眼动追踪平台

什么是EyeTrackVR?

EyeTrackVR是一个开源的虚拟现实眼动追踪平台,旨在为VR用户提供affordable且易用的眼动追踪解决方案。该项目由一群热衷于VR技术的开发者和爱好者发起,目标是让眼动追踪这一先进功能变得更加普及和平价。 EyeTrackVR Logo EyeTrackVR的主要特点包括:

完全开源:所有代码和文档都在GitHub上公开,任何人都可以参与贡献
社区驱动:由用户和开发者共同推动项目发展
平价affordable:硬件成本远低于市面上的商业解决方案
适用于多数VR头显:可以与大多数VR头显兼容
DIY友好:完全可自行组装,适合动手能力强的用户
开放平台:可与各种社交VR游戏兼容
注重隐私:所有数据都在本地处理,不会上传云端

EyeTrackVR如何工作?

EyeTrackVR的工作原理是在VR头显内部安装红外摄像头和IR LED灯,用于捕捉用户眼球的移动。具体步骤如下:

在头显内部安装红外摄像头和IR LED灯
摄像头捕捉眼球图像
使用计算机视觉算法分析眼球位置和运动
将眼动数据通过OSC或UDP协议传输给VR应用
VR应用根据眼动数据实现相应的交互效果整个过程在本地完成,不需要将数据上传到云端,因此很好地保护了用户隐私。

硬件需求

要使用EyeTrackVR,你需要以下硬件:

VR头显
ESP32-CAM模块(作为红外摄像头)
IR LED灯
3D打印支架(用于固定摄像头和LED)
连接线缆具体的硬件清单和3D打印文件可以在EyeTrackVR的文档中找到。项目还提供了官方商店,可以购买预焊接好的PCB板等配件。

软件设置

EyeTrackVR的软件部分包括:

ESP32-CAM固件:由项目成员lorow和ZanzyTHEbar开发的OpenIris固件
EyeTrackVR应用:用于处理眼动数据并与VR应用通信
VR应用插件:用于接收和使用眼动数据详细的软件安装和配置步骤可以参考EyeTrackVR的文档网站。

安全注意事项

在使用EyeTrackVR时,需要特别注意IR LED灯的安全性。项目文档中强调:

警告: 请确保使用非聚焦的发射器,且每只眼睛的总功率不超过 5mW cm^2。请阅读我们的LED安全页面,了解V3和V4 LED套件的详细计算。不当使用IR LED可能会对眼睛造成伤害,因此在组装和使用过程中必须严格遵守安全指南。

应用场景

EyeTrackVR主要应用于社交VR游戏,如VRChat等。通过眼动追踪,可以实现以下交互效果:

更自然的虚拟角色眼神交流
基于注视点的UI交互
凝视触发的游戏机制
提高渲染效率(凝视点渲染) 除了游戏外,EyeTrackVR还可以应用于:
VR教育培训
医疗康复
用户行为研究
可访问性改进

项目现状和未来计划

EyeTrackVR目前仍处于开发阶段,但已经可以使用。项目团队正在不断改进硬件设计和软件性能。未来的计划包括:

提高眼动追踪的精度和速度
扩大兼容的VR头显范围
开发更多VR应用插件
改进用户友好性如果你对EyeTrackVR感兴趣,可以通过以下方式参与:
在GitHub上Star或Fork项目
加入Discord社区讨论交流
贡献代码或文档
分享你使用EyeTrackVR的经验

结语

EyeTrackVR代表了VR眼动追踪技术的一个重要发展方向 - 开源、平价且易用。虽然还在发展中,但已经展现出巨大的潜力。随着项目的不断完善和社区的壮大,相信EyeTrackVR会为更多VR用户带来全新的交互体验,推动VR技术向前发展。无论你是VR开发者、研究人员还是普通用户,都可以尝试使用EyeTrackVR,感受眼动追踪为虚拟现实带来的变革。让我们共同期待EyeTrackVR的未来发展,见证VR交互的又一次飞跃。