最近,日本名古屋大学信息学学院的研究人员创造了一款新的 VR 游戏,将沉浸式视听体验和触觉感知融为一体。这款游戏利用玩家的生物识别数据在虚拟现实空间中创建一个与玩家心脏同步跳动的球形物体。玩家可以通过这个球形物在视觉、听觉和触觉上感知自己的心跳。
图 | 游戏快照:中间的黑色圆圈与心脏对应,它周围的环就是目标,玩家需要抛出一个球体试图打破目标。(来源: Yasuhiro Suzuki)
在过去的几十年里,随着技术的进步,电子游戏发展得越来越复杂,场景越来越逼真,玩家能够得到身临其境的体验。这些进步中最值得注意的是虚拟现实(VR)游戏,用户可以通过电子可穿戴设备来深入体验游戏或其他模拟环境,好像他们就是游戏主角一样。
现有大多数 VR 系统主要专注于视觉,使用头戴设备将游戏场景从屏幕上移到了玩家眼前。这可以带来高度吸引人的视觉体验,但视觉体验并不总是能与其他感官体验相匹配。
从现在开始,这种情况似乎会逐渐有所改观。这款游戏发表在《机器人、网络和智能生活》(Journal of Robotics, Networking and Artificial Life)上的一篇论文中,研究人员在他们的论文中写道:“触觉感知的影响比视听感知更为显著。因此,如果触觉和视听感知相结合,我们就可以在虚拟现实空间中创造‘虚拟存在’的效果。”
这款新的多感官 VR 游戏是使用 Unity 开发的,Unity 是一个著名的视频游戏设计平台,由 Unity 科技公司开发。用于实现游戏的设备包括 HTC 的 Vive VR 眼镜、控制器和跟踪系统,以及集成在控制器单元内的触觉展示设备。游戏设备使用内置麦克风的听诊器,来收集玩家的生物特征信息。为了降低麦克风噪音,提高对球员心跳的检测,该团队还使用了 500Hz 的低通滤波器。
在这套系统中,用户的生物信息与呈现的视听数据相关联。玩家通过身体运动来玩虚拟物体,系统会反馈生物特征信息,并通过感官呈现将生物特征数据的变化传递给用户。
游戏过程中,玩家需要向一系列目标投掷球体并打破它们。在虚拟环境中,这个球体通过一根电线与玩家所站的地方相连。
从本质上说,研究人员的想法是通过视觉、听觉和触觉刺激的结合,在虚拟现实空间中创建一个与玩家心脏同步跳动的球形物体。在游戏的最后,当玩家摧毁了所有目标后,系统会要求玩家用一把在模拟环境中出现的剪刀剪断连接玩家和球体的电线。如果游戏产生了想要的效果,例如,玩家产生了球体与心脏相连的感觉,那么玩家在剪线时就会有一种奇怪的感觉,甚至可能会犹豫不决。
在未来,研究人员计划开展进一步的研究,评估游戏产生预期效果的有效性。到目前为止,他们收集到的反馈似乎很有希望:大多数游戏玩家都能感受到自己的心跳和模拟环境中的球形物体之间的联系。
根据论文记录,一名尝试过这款游戏进行初步调查的玩家说,“这个与心脏关联的球体是有生命的,因为物理运动产生的变化会通过触觉产生反馈”。有些玩家已经预见到它会影响情感,“我有一种感觉,我会犹豫是否要在最后切断电线”。
作为研究团队未来的目标,除了玩家评估之外,提高系统中生物信息分析的执行速度将对其更广泛的应用具有重要意义。