谷歌开发者大会:ARCore新增迅速放置API等功能

电子说

1.3w人已加入

描述

2020谷歌开发者大会开启,AR软件工程总监王启文发布ARCore最新动态

VR陀螺11月18日消息,Google 开发者大会 (Google Developer Summit) 是谷歌面向开发者展示最新产品和平台的年度盛会。2020 Google 开发者大会于 11 月 16 日 至 21 日举行,这是谷歌首次以全线上大会的形式与中国开发者相聚。本次大会以“代码不止”为主题,介绍了相关产品更新以及一系列面向本地开发者的技术支持内容,旨在赋能开发者高效创新、持续不断地创造愉悦的产品体验。

其中,11月16日,谷歌软件工程总监王启文(Leon Wang)发表了关于“ARCore为用户创造有效的AR体验”的主题演讲。

王启文Leon是 Google AR 团队的软件工程总监,主管ARCore 的机器感知算法项目,如运动跟踪和深度感知等技术的开发。加入 Google 之前,他在 Microsoft, Facebook 和 Pinterest 先后担任过工程经理。Leon拥有麻省理工学院计算机科学的学士和硕士学位。

首先,王启文强调了AR作为一种视觉沉浸式媒介,能够吸引人们的注意力,是一种体验信息的新方式,并最终推动用户的行动。而谷歌发布于2018年的ARCore是AR开发者平台,提供了简单而强大的工具,为Android和iOS用户创造有效的AR体验。目前已被应用在7亿台设备和成千上万款app上,并且已获得一些更新。

其中,王启文介绍了包括美图、滴滴、有道少儿词典的中国开发者如何使用ARCore提高产品的性能和体验。

美图公司利用ARCore的增强面孔API(Augmented Faces API)构建了100多个自拍滤镜,就是现在我们在BeautyPlus上可以体验到的AR特效,用户可以拍摄照片和视频与朋友分享。

增强面孔API(Augmented Faces API)从2D图像中生成3D网格,可追踪嘴部动作、眨眼、点头和一些复杂的细节。

滴滴的ARCore导航功能帮助乘客在火车站、商场和机场等大型公共区域找到司机。滴滴地图中加入了AR路标,15%的用户使用AR来引导他们找到订单司机,80%的用户给出好评。

有道少儿词典应用使用AR来帮助孩子们以一种有趣和吸引人的方式学习新单词。该应用将“三角龙Triceratops ”等单词与其3D模型在AR中配对,父母可以把AR画面录制或拍照,方便日后成为孩子们可参考的学习材料。

另外,ARCore的新增功能如下:

迅速放置API(Instant Placement API)

一般来说,用户在空间中放置过ar对象时,需要先用手机扫描周围的环境,完成3D表面检测。但这个过程将耗费一些时间和精力。实际上,在大多数情况下,我们不需要知道AR对象确切的3D位置也可以正确地呈现它。

借助迅速放置API和几行代码,开发人员可让用户将AR对象锚定到2D图像中,而不需要确切知道AR对象具体的3D位置。如果需要更精确的比例,可以针对3D位置进行三角测量。

景深应用API(Depth API)

景深API可以从单个RGB相机生成地图。原理是通过不同角度拍摄多张图像,并在移动手机时进行比较,以估计到每个像素的距离。尽管只有一个RGB相机,添加了景深传感器(如飞行时间传感器),会让景深地图效果更好。

景深可以通过多种方式增强AR真实感,“遮挡”是其中一种景深应用,即隐藏数字物体在现实世界中被遮挡的部分,从而使它们看上去像是在现实场景中真实存在。

另一种是“表面交互”,即在设备中的世界里,添加3D层面的计算,可以实现与现实物品表面的交互,比如创意AR对象,并在其表面设计反弹和飞溅的动作。此功能可以用于开发新的交互式游戏机制,使玩家能够躲在真实物体的后面。Snapchat的Dancing Hotdog和Undersea World Lens效果都使用了景深。

Persistent Cloud Anchors API

Cloud Anchors API可用于与多个用户共享ar对象。在相同物理空间中的不同位置同时查看这些对象并与之交互,AR内容也因此可使用更长时间。

这相当于一个“保存按钮”,人们可以基于相同的AR体验进行创作并进行反复修改。比如,Sybo和iDreamSky的Mark应用采用了该功能,人们可以在现实世界中与朋友一起创建、发现和共享ar艺术。

Epic Games收购实时人脸动画公司Hyprsense

Epic Games本周收购实时人脸动画公司Hyprsense,该公司关注于能将面部动作实时转换为动画3D形象的人脸捕捉运动。

Hyprsense前身为Binary VR,该公司最开始从事VR解决方案,用悬挂在VR头显前方的3D红外线捕捉相机准确捕捉面部运动数据,并在2017年交付用于原始Oculus Rift 、HTC Vive等头显的开发套件。

现在,三年过去了,该公司更名为Hyprsense于本周被Epic Games收购。虽然Hyprsense不再是一家专注于VR的企业,但其使用的技术能通过手机摄像头进行实时面部动作捕捉,然后将其转换为手机屏幕上的实时3D动画,如下所示。

其原理类似于Instagram和Facebook等社交媒体应用程序中的AR脸部追踪技术,Hyprsense在此基础上向前迈了一步,允许用户使用高度相似的3D头像来替代用户的脸部。

Epic Games首席技术官Kim Libreri在一份声明中说:“Hyprsense团队的加入有助于我们继续推动数字角色创新,朝着让所有创作者能尽情表达其创意的目标靠近。”

Epic表示,Hyprsense团队的主要工作是与其合作进行游戏开发和数字人类项目的工作,这将加快Epic为开发人员和玩家构建更好的新工具和系统的过程。

2020年11月评论数和评分最高的Quest游戏与应用程序

虽然Oculus并没有公开多少信息供大家了解各个应用程序在其VR商店中的表现,但通过查看应用程序之间的相互关系,可以获得一些信息。以下是截至2020年11月排名前20的Oculus Quest游戏和应用程序快照。

为什么要发布这些数据?

虽然SteamVR库拥有全面的跟踪数据库,但却并没有类似数据库存来跟踪Oculus商店的应用程序。因此,我们发布这些数据以让用户、开发人员和分析师深入了解Oculus应用程序的前景。

做一个简要的介绍:

付费与免费的应用程序分开评定

参评应用程序的评论数量需达到100条及以上

四舍五入的评分会让部分应用程序评分相同,但其排名按精确评分排序

最受好评的付费Oculus Quest应用程序

每款应用程序的评分反映了用户的综合评论与大家对每款游戏的接受程度。

API

评分数量最多的付费Oculus Quest应用程序

一般通过评分数量便可大致了解每款游戏的相对销量,数量高的游戏很可能比低的游戏卖得好。不过这样的判断方式肯定存在一定误差。

最受好评的免费Oculus Quest应用程序

API

评分数量最多的免费Oculus Quest应用程序

API

《假期模拟器》增加Quest手部追踪支持

11月17日,《假期模拟器》(Vacation Simulator)开发者Owlchemy Labs的首席执行官Devin Reimer在Twitter上发布了一段视频,其中显示了《假期模拟器》的场景,我们可以看到该游戏增加了手部跟踪支持,测试者在视频中比出了胜利手势和大拇指。

Owlchemy的游戏我们都非常熟悉,因此玩家大概能很快识别出来手势识别的稳定性。虽然Oculus Quest手势追踪功能已推出,但是除了《里奇的木板体验》(Richie‘s Plank Experience),《巫师圆舞曲》(Waltz of the Wizard)和《虚拟桌面》(Virtual Desktop)之外,并没有其他游戏支持手部追踪功能。

Owlchemy的《假期模拟器》和《工作模拟器》(Job Simulator)目前都登陆了Oculus Quest,并且最近针对Oculus Quest 2进行了增强。这两款游戏的v23版本更新部分包括视觉上的升级,删除了偏重的渲染,并在Quest 2上支持90Hz。

《假期模拟器》 最近还提供了免费的“Back to Job”扩展功能,这是将模拟器系列第一部《工作模拟器》中的部分机制添加到了《假期模拟器》 中去,提高游戏的趣味性。

《Echo Arena》VR电竞联赛第三赛季将于2021年1月开赛

VR大师赛(VR Master League,简称“VRML”)的《Echo Arena》电竞联赛第三赛季将于2021年1月开始举行,其结构和形式与往届相比会有所扩展。

联赛具体时间是从1月4日开始,一直持续到5月2日,决赛定在5月8-9日和5月14-15日举行。

作为新赛季扩展的一部分,VRML Echo Arena Discord频道已在本周开放,它将作为玩家和社区领导人监督联盟的枢纽。频道将安排花名册、提供讨论联赛规则的场地等。

新赛季还将引入晋级/降级模式,该规则在游戏商店Discord中的概述如下:

“大师赛将以循环赛制进行,后续赛则采用阶梯赛制。本赛季将有多轮比赛,每轮都以挑战者杯结束。挑战者杯将由排名倒数2位的大师队和排名前4位的钻石队来决定哪些团队将有资格参加大师赛和阶梯赛。”

之前的《Echo Arena》电竞联赛都在Twitch以及Oculus Venues上进行了现场直播,VR用户能在虚拟社交环境中观看比赛。VRML还为其他竞技类VR游戏比如第一人称射击游戏《Onward》组织联盟。

于几个月前上线Oculus Quest平台的《Echo Arena》采用竞技类多人游戏模式,该游戏源自2017年在Rift推出的《Lone Echo》中独立的单人游戏故事。

有兴趣参加第三季联赛的玩家,现可在VRML Echo Arena Discord网站创建帐户,并加入VRML Echo Arena Discord服务器。

责任编辑:PSY

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分