美国密歇根大学科研团队近日开发出一款名为 HandProxy 的创新系统,用户只需通过语音指令,即可在虚拟现实(VR)与增强现实(AR)环境中操控一只虚拟手,实现“动口不动手”的交互体验。
该系统不仅能执行抓取物体、调整窗口等基础操作,更能理解如“清理桌面”之类的复合指令,无需逐步引导,智能化程度显著高于当前普遍仅支持基础操作的 VR 语音功能。
研究团队指出尽管手机等设备早已普及语音助手,但VR/AR领域在结合手部交互的语音控制方面仍近乎空白。HandProxy的推出使用户能在语音、手势与控制器之间自由切换,特别适用于空间受限、双手被占用,或有运动障碍的使用场景,让VR体验更具包容性与舒适度。
该技术可直接接入大多数现有VR程序,对开发者极为友好,目前研究团队正致力于解决系统偶尔误读指令的问题,未来计划为其加入问答确认功能,以进一步提升交互精准度。