剑桥大学研究人员创建VR程序,支持用户通过快捷手势使用3D建模工具
热键是传统桌面应用程序中常见的键盘快捷组合方式。剑桥大学的一组研究人员探索了在键盘输入不再是唯一选择的 3D 交互空间中,什么是热键的合适替代品。科学家们创建了一个 VR 程序,允许用户通过挥手访问和使用多个 3D 建模工具。剑桥大学的团队利用机器学习创建了一个名为“HotGestures”的系统,其工作方式类似于计算机桌面上的快捷键。
人类是视觉动物。因此,手势是传递信息和建立文字间关系的一种自然方式。HotGestures 允许用户通过简单的手势快速访问和使用虚拟工具。此方法与标准菜单导航配合使用效果很好。通过两次用户测试,研究人员可以评估 HotGestures 的潜力,并发现基于手势的技术提供了快速有效的工具选择和快捷方式。
HotGestures 因其独特性、快速性和易用性而受到参与者的欢迎,并且与更传统的基于菜单的交互方式相辅相成。HotGestures 允许用户在不与菜单交互的情况下构建 VR 人物和造型,使他们能够在不分散注意力的情况下保持专注。
尽管多年来一直在炒作,但 VR 和相关应用的潜力尚未在游戏行业之外完全实现。热键(或 ctrl+c 和 ctrl+v 等命令快捷键)是任何使用过桌面应用程序的人的标准配置。这些快捷方式无需在菜单中搜索所需功能,从而节省了时间,但仅当用户已经知道相应的命令时,它们才有用。研究人员的团队合作开发了“HotGestures”的概念,以取代 3D VR 环境中的热键。
例如,剪刀工具通过切割动作激活,喷涂罐由喷涂动作工具激活。用户可以直接访问所需的功能,而无需翻阅菜单或记住键盘快捷键。用户可以快速轻松地在工具之间切换,而无需停止正在执行的操作来打开菜单或按下控制器或键盘上的按钮。
该研究开发了一种神经网络手势识别系统,可以通过对包含用户手关节位置的数据流进行预测来识别手势。该软件的开发是为了记住与创建 3D 模型相关的十个不同动作,包括使用笔、立方体、圆柱体、球体、调色板、喷涂、切割、缩放、复制和删除。
研究人员通过设计一个可以区分命令和自然手部动作的系统来确保不会意外激活。总体而言,基于手势的系统在速度方面超过了基于菜单的系统。研究人员已经发布了数据集和随附的源代码,以便 VR 应用开发人员可以将其包含在他们的业务中。
原文来自http://vr.sina.com.cn/news/yx/2023-11-23/doc-imzvqtuq6343913.shtml