Oculus Quest推出手部追踪功能 用户无需学习就可操作一体式VR头显

vr|ar|虚拟现实

167人已加入

描述

本周,Oculus Quest推出手部追踪功能,您可在本周V12更新发行版的“Experimental Features(实验功能)”菜单中启用体验。该手部追踪功能使用内置摄像头来识别用户手指及手部运动,用户无需学习控制器就可操作一体式VR头显。

这是一种固件更新,不仅没有添加新硬件,反而减少了硬件数量。Quest用户将首次在没有Oculus Touch控制器的情况下,向朋友和家人演示这款一体式头显的一些基本功能。Quest并不是首个支持手部追踪的头显,此前HTC Vive Cosmos VR头显也宣布支持光学手指追踪功能。不过,手部追踪对于一体式头显要困难许多,而且有报道称Cosmos手指追踪效果不佳。

Quest系统程序首发,本周只有一些系统应用程序可以支持手部追踪功能,其他游戏体验还需要等待一段时间。

Oculus主菜单,包括Store和Library

Oculus浏览器(内置网页浏览器)

Oculus TV(适用于2D内容和360视频)

这意味着您可以直接把Quest当作沉浸式媒体播放器或便携式影院,无需Touch控制器。不过UploadVR尚不清楚Facebook何时会推出入门级体验Elixir,之前曾用于向媒体展示手部追踪功能。

下周,Facebook计划发布用于手部追踪的软件开发工具包(SDK),此后所有Quest开发者都可以在应用程序或游戏中使用这项功能。Oculus Avatar计划于2020年支持手指追踪,将允许开发者在默认情况下添加与用户实际肤色匹配的手部皮肤。

UploadVR表示还不清楚会有哪些开发者支持手部追踪技术,但大多数社交和媒体应用应该都会支持。UploadVR正在整理一份支持手部追踪功能的Quest应用程序清单,所以如果您是VR开发者,请发邮件至tips@uploadvr.com。Bigscreen首席执行官已经表示加入,并且UploadVR已经证实Guy Godin的Virtual Desktop将会使用此功能。

Facebook预计第三方应用将于2020年首次开始支持这项功能。但该功能仅限制某些支持手部追踪的游戏 内容,其他更多游戏仍然需要按钮、模拟摇杆、触发器或触觉反馈。此外,追踪质量可能达不到高级双手交互体验的要求。

研发时间长 难度大

2014年底,Facebook首次表达了对VR手指追踪技术的兴趣。此后,公司收购了Nimble VR初创公司,并将其四名手控跟踪技术的资深研究员纳入麾下。收购时,Oculus非常清楚这项技术“甚至可能不会用于CV2或CV3”。

或许是因为Nimble技术需要一个专用的深度传感器。深度传感器能够提供良好的手指追踪效果,与现在的HoloLens 2 AR新头显类似。然而,专用传感器会增加头显的成本和重量,很可能不会被广泛采用。按照Quest的思路,在普通相机上挑战高质量的手指追踪效果,难度很大。Quest采用了与其他追踪技术相同的硬件,这一点可能会成为Facebook的竞争优势,也可能广泛用于Facebook的未来产品中。

在2016年Oculus Connect 3大会上,首席科学家Michael Abrash曾对2021年的VR发展做出一系列预测。他指出在手套上添加标记可以完美实现手指跟踪(并展示了出来),但当时还不能直接投入使用,预计2021年或许可以实现:

Facebook现在就推出这一功能,比Abash的预测早了一年。2018年,Facebook在年度F8大会上展示了高质量的无手套、无标记手指追踪技术。Oculus的一名代表在台上解释说,这一“突破”之所以成为可能,是因为Facebook在机器学习(“AI”)研究方面投入了大量资金。他们使用了2016年Abrash描述的手套系统来训练卷积神经网络,用以识别手部姿势。

进步潜力

Quest的手指追踪功能进步空间还很大:

“当我握拳或者手移动得太快时,手就会消失。如果我转头又回看手部动作时,会有一秒的延迟时间。当用指尖指向虚拟对象时,他们之间仍然有一些小间隙,然后才能迅速调整到合适位置。我认为所有这些都是追踪技术需要努力的方向。”

除非Facebook在过去的三个月里做出了巨大改进,否则您可能无法体验到与Touch控制器相同的追踪效果。(控制器包含一个加速度计和一组红外发光二极管,专门用于一定范围内的追踪定位。)

不过,对于社交VR、媒体及休闲类游戏来说,手指及手部追踪功能还是足够的。Facebook计划“在2020年添加新功能和功能,以改善Quest头显的手部追踪体验。”

与Touch控制器的发展轨迹相同,今后,Facebook可能会继续提高手指追踪的质量和稳定性。

在Oculus Connect 6大会上,工程经理Robert Wang解释说,目前迭代“只触及了手部追踪功能的皮毛”。虽然Robert很谨慎地没有透露发展计划,但也确实表示Facebook将“乐于”实现常规摄像头下的双手追踪交互体验。

我们期待看到Facebook未来的研发成果。

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分