几位计算机科学家正在展示他们使用头戴式显示器的工作 用于 CHI 2017 上的文本输入。
什么比全息键盘更好？显然是真的。新研究来自 足球比赛结果的计算机科学家深入研究了不同的 在虚拟现实 (VR) 空间中打字的方法。他们正在 ACM 上展示他们的作品 计算机系统中的人为因素会议 (CHI 2017)，指出在启动时 文本是我们数字生活中不可或缺的一部分，这是一个研究领域 VR 开发令人惊讶地缺乏重视。
“很多人都在购买头戴式显示器，但主要是为了视频游戏，” 足球比赛结果计算机科学副教授斯科特·库尔说。 “我们是 试图弄清楚我们如何使用头戴式显示器进行办公（例如写作） 以及编辑文档或向某人发送消息。”
尽管这些平凡的任务在 VR 中尚不理想，但通过佩戴看起来 一个超大的睡眠面罩，VR 可以让迷人的森林漫步感觉真实——或者至少 超现实——并且可以将观众带到半个世界。关键是平衡 人们可以通过头戴式显示器看到什么以及可以物理触摸什么。 对于打字，人们需要视觉和触觉反馈。
头戴式显示器
计算机科学讲师詹姆斯·沃克 (James Walker) 领导了这项研究，作为其论文的一部分， 与库尔一起工作。他说挑战源于这样一个事实：人们需要看到 他们正在输入的内容——戴着遮眼式耳机有点困难——所以他开发了一种 发光虚拟键盘与物理键盘同步。 这个虚拟键盘 让 VR 打字员在头戴式显示器中看到他们在实体设备上键入的按键 键盘。
其他 VR 打字系统依赖于空中虚拟键盘或重叠 将现实世界的视频传输到 VR 显示器中。但这两种方法都需要额外的设备 例如容易出错且具有侵入性的跟踪摄像机。人们发短信的表现 仅使用虚拟键盘时也会下降。
“在半空中打字非常疲劳，”沃克说。 “我们的解决方案值得注意，因为 它使人们能够继续使用他们的物理外围设备，从而提供最好的 性能，并且不需要任何额外的硬件或需要叠加视频 馈送到虚拟环境中。”
VelociTap：自动更正算法
为了评估物理键盘的有效性，Walker 进行了一项实验 参与者在他们看不到的键盘上打字。一方面，参与者 佩戴头戴式显示器——在本例中为 Oculus Rift。另一部分，参与者 使用台式显示器，键盘的视野被盖子遮挡。在每个 其中，沃克测试了参与者使用和不使用虚拟键盘的表现。
首先，很多人都表示自己的打字能力是专家或水平 最不熟练。作为人类，参与者会犯错误——很多错误——尤其是 那些没有虚拟键盘发光键的。这使得这个实验成为 完美的设置不仅可以测试 VR 文本硬件，还可以检查自动更正的效果 适合。
“人们低估了自然语言中的冗余”，Keith Vertanen 说道， 计算机科学助理教授，帮助沃克和库尔学习一门语言 模型来纠正参与者的打字。 “我们的识别触摸屏程序，VelociTap， 非常准确，因为它经过了数十亿个单词的训练。”
Vertanen 表示，他和团队的其他成员仍然对如何做到这一点感到惊喜 自动更正算法从触摸屏起源转向预测 物理键盘上的预期字母。此外，该团队还观察到该错误 随着人们继续使用 VelociTap 反馈和模型打字，比率下降 纠正了大约三分之二的文本错误。
全文短信
该团队的研究重点是简短、非正式短信的输入。下一步 步骤包括支持数字、标点符号和大写字母的输入，并允许 文本的编辑和样式设置。
“长期目标是在佩戴头戴式显示器时促进任意输入，” 沃克说。
团队知道如何促进这种整合：利用手头的资源。物理键盘 可以帮助将 VR 推向充满文本的工作和娱乐世界。
足球比赛结果是一所 R1 公立研究型大学，成立于 1885 年，位于霍顿，拥有来自全球 60 多个国家的近 7,500 名学生。密歇根州旗舰科技大学的投资回报率一直名列全美最佳大学之列，提供超过 185 个本科和毕业生科学技术、工程、计算机、林业、商业、健康专业、人文、数学、社会科学和艺术领域的学位课程。乡村校园距离密歇根州上半岛的苏必利尔湖仅数英里，提供全年户外探险的机会。
评论