为了找出最适合虚拟现实的内容键入解决方案,计算机科学家使用了点亮虚拟键盘、自动校准算法和物理键盘。
键入文本是我们数字生活的重要组成部分,但虚拟现实领域对这方面研究的关注十分缺乏。
密歇根理工大学计算机科学的副教授斯科特·库尔(Scott Kuhl)说道:“许多人正在购买头显,但主要是为了玩游戏。我们正在试图找出如何通过头显进行办公的方法,如编写文档或向某人发送信息。”
计算机科学的一名讲师詹姆斯·沃克(James Walker)正在与库尔负责这项研究。他表示,挑战在于用户需要看到他们正在使用的文本键入工具,但这对佩戴头显的用户来说有点困难。于是他开发了一种可与物理键盘同步的点亮虚拟键盘。这种虚拟键盘可让VR用户在虚拟环境中看到自己正在按下的按钮。
其他VR键入系统依赖于悬空虚拟键盘或是实时视频。但两种方法都需要额外的设备(如追踪摄像头),而这容易导致错误,同时影响沉浸感。
沃克表示:“悬空键入文本会令人十分疲惫。我们的解决方案值得大家的注意,因为用户可以继续使用他们的物理外设,这可发挥他们最佳的表现,同时无需其他任何硬件或在虚拟环境中叠加真实视频片段。”
为评估物理键盘的有效性,沃克进行了一项实验。志愿者需要在看不见的键盘中键入文本,在一部分实验中,志愿者需要佩戴头显;在另一部分实验中,他们使用的是桌面显示器,但对键盘的视线则被遮盖起来。在两部分实验中,沃克都会测试志愿者在使用虚拟键盘和不使用虚拟键盘时的表现。
在开始实验前,许多志愿者表示他们的打字水平达到专家级别或至少是精通。作为人类我们都会犯错,尤其是在不使用虚拟键盘的情况下。这使得该设置不仅适用于测试VR文本输入硬件,同时还能够评估自动校准的有效性。
协助沃克和库尔进行语言模型校准的计算机科学助理教授基斯·维特尼(Keith Vertanen)说:“人们对自然语言的冗余感到不满。我们的触摸屏识别程序VelociTap十分准确,因为其已经接受了数十亿字的训练。”
维特尼表示,他与他的团队对自动更正算法的表现感到十分惊讶。另外,团队观察到当人们继续使用VelociTap的反馈时,错误率出现了下降,而该模型更正了约三分之二的文本错误。
来源: yivian