当你进入一个 VR 世界时,沉浸式体验让你仿佛是身临其境,但当你举起双手想要去触碰感知周围环境时,却发现一无所获,顿时又让你从虚拟场景中跳脱出来。微软的一个研究小组正在研究一项名叫 Handpose 的手部追踪技术,希望可以让人类与 VR 环境的交互更自然,不仅局限在VR和AR,还包括与电脑或其他连接设备的交互。
Handpose 项目于 2014 年启动,并于今年年初在计算机视觉技术上取得了进步。
该研究小组的技术专家 David Sweeney 表示,人们与物理世界进行交互时,主要交互方式就是通过双手来完成。
该项目通过 Kinect 传感器捕获深度信息,由 Handpose 软件生成手部的三维点云,再将它们传输到VR模式中的模型手上,以此来追踪人类手部动作轨迹,并用机器学习技术来进行手势识别。
将该技术应用于 VR,效果自然更身临其境。而且相比起 Oculus Touch 和 HTC Vive 控制器等外设控制器,人类的手部动作更直观,即便从没见过一样东西,人手也能做出最直觉的动作。
Sweeney 表示,人类的双手在数百万年的进化过程中经历了无数次的微小和精密的结构调整,如今却要放弃它们去拿起一个靠电池工作的控制器未免太可惜。
Handpose 技术的优势不仅体现在速度和精度上,还有它的效率:软件将尽可能少的占用运算资源,只在 CPU 上运行,这样就可以空出显卡来更好的与 VR 世界进行互动。
Sweeney 并未透露 Handpose 技术何时会向公众开放。