虚拟现实系统可追踪脑波玩游戏或不再用手

2015-03-06 11:58:04作者：河马神评论0

神经技术公司MindMaze近日公布了一个可使用脑电波进行操控的虚拟现实游戏系统——MindLeap。它原先的专属系统是为了在医学领域的运用而开发的，MindLeap可以感应到人类大脑与肌肉的活动，在虚拟现实与扩增实境中使用脑波控制与动态捕捉镜头进行游戏。

这家来自瑞士的公司趁Facebook的Oculus所掀起的虚拟现实热潮推出自己的产品，并在公布这款新产品的同时附带宣布自己获得了850万美元的天使投资，而MindMaze公司将会把这笔资金用于医学领域产品的开发，它的技术将可以帮助有神经功能缺陷的患者更快地恢复健康。这回也是该公司首次将这款脑波控制虚拟现实装置MindLeap应用在游戏领域。

MindMaze方面表示，这个系统让玩家们在玩一些早已熟悉的游戏时得到了一种新的体验。装有“神经护目镜”和3D动作摄像头的头戴式显示器在几个月后就可以使用。这款使用脑波操控解放双手的虚拟现实设备可以在多个游戏平台上使用，包括有Xbox与PlayStation（不过开发商没有明确透露MindLeap究竟是应用于PS4与Xbox One平台还是更老一些的系统），iOS与安卓平台也可适用。

MindLeap所使用的开发引擎将会在数个月后推出的软件开发工具包中提供给游戏开发者们，而这个系统自身也将在今年推出。

我们在2015年的游戏开发者大会上与MindMaze公司进行了一次会面，探讨了神经学技术如何能应用到虚拟现实之中。

MindLeap头戴式显示器让玩家可以进行无手柄控制的虚拟现实游戏

从医学设备到游戏设备

MindMaze的创始人兼首席执行官泰杰·塔迪博士（Dr. Tej Tadi）表示，任何给定的动作都会让大脑做出反应。比如移动一下手臂，在这个动作进行之前的毫秒之间，大脑就可以进行这个指令的传输。能够追踪大脑与肌肉的运动，让这间公司的设备可以收集到大脑传输给手臂让它进行移动的信号。据这位神经生物学家介绍，人类的动作、运动以及看到和触摸到的所有东西，全部都会整合到大脑的同一个地方，而MindMaze的设备就是从这个起源处开始追踪信号的。

因此，把握信号从大脑的这个地方传出的时机就是MindMaze公司技术的关键。塔迪博士介绍说，我们知道触感传递到大脑的时间为20毫秒，而视觉传递到大脑的时间则为70毫秒。知道了这些固定的时间之后，“就能够让用户的体验变得完美”。

而MindLeap设备背后的创意则在于，它可以将脑波追踪元素与现在的虚拟现实和扩增实境技术结合起来，为游戏平台的游戏操控创造出新的维度。

“现在，我们可以在它里面加入心理健康的元素。”塔迪博士说道，“你在训练大脑的同时也在监视着大脑的活动。这让我们可以在游戏黄总增加近一些全新的元素。内容创造者们如今就有了很多可以发挥的空间，这些空间多到令人难以置信。”

MindLeap的动作感知摄像头

MindLeap平台

MindMaze公司利用了多个系统来建造这个游戏平台——动作捕捉系统、大脑阅读系统、集成平台以及其他的一些高科技系统。与所有虚拟现实平台一样，头戴式显示器则是其中的核心部分。这个显示器的正面装备了动作捕捉摄像头与深度传感器，可以将虚拟现实与扩增实境混合在一起。这个设备的原型看起来就像是安装了众多传感器的无檐便帽，不过塔迪博士表示，最终版的设备将会更像是带了护目镜的头巾。

这个平台同时还装备有一个可以传输3D动作捕捉数据的无线平台，用以补充头戴式显示器的追踪功能。它可以进行头部运动追踪、全3D点云的身体动作追踪以及骨架识别式的身体运动追踪。塔迪博士称这与微软公司的Kinect体感系统有一些相似，不过他们针对原先的医疗应用而做出一些调整。

“我们不得不从零开始打造它。你们已经见识过Kinect了对不对？如果你们将Kinect放在病人的面前，离开它两米之外就无效了，或者你坐在床铺上，它也无法追踪你的动作。”塔迪博士说道，“因此，我们不得不自己来设计它。”

他们最终的目标是让这个设备的外型更为小巧，并且可以在移动设备上发挥作用。

“这就需要有一个无线摄像头，可以将3D动作捕捉的数据流传输到你的智能手机上。这样你就能用给你的平板电脑设备来捕捉动作。”塔迪博士说道，“因此我们想要做到这一点，希望让它能够支持智能手机。这是我们前进的方向，也是我们下一个将要实现的目标。”

MindLeap的大脑追踪技术在多用户条件下的使用演示