怎样用AR全方位观看世界杯?

电子说

1.3w人已加入

描述

世界杯将于本周开幕。然而,尽管它可能会令人兴奋,但我们大多数人只能在平面电视上观看,而无法亲身感受现场观看的3d体验。不过,华盛顿大学的研究人员日前提出了一种增强现实的替代方案。

研究人员开发的是一种机器学习算法,可以将2D足球片段转换成3D重建,观众可以使用微软的HoloLens等增强现实头盔观看。观众可将他们的桌子或餐桌之类的平面变成一个虚拟的比赛场地,并可以从不同的角度来观看三维的比赛。

这并不等同于私人观看,但它比普通的电视的观看距离要近得多。而且观看成本明显低廉

“我们的目标是提高观看体育比赛的体验,”该项目的研究人员之一康斯坦丁诺斯·雷马塔斯(Konstantinos Rematas)表示。“我们没有在平面的2D屏幕上观看足球比赛或观看其中的精彩时刻,而是将原始视频转换为3D,并在增强现实中进行可视化观看。”从本质上讲,游戏变成了一个全息图,你可以在空间中四处移动它,从不同的视角观看,从而产生一种更浸染式的体验。

作为输入的数据内容, 生成AR体验的算法首先需要输入一个YouTube足球视频。但这不足以训练一个完整的能够将2D球员“升级”为3D的渲染系统,所以神经网络学会了通过已有的播放过的EA游戏“FIFA 2018”视频来估算出渲染深度。利用这些信息的总和,该算法系统可以准确地判断球员在场上的位置。

目前,该算法系统仍在开发中。例如,球还没有被正确地渲染出来(这在足球比赛中是相当重要的),球员们仍然保持二维剪切块。这亮点是研究人员未来希望做出的两个改进。

“下一步是提高比赛画面重建的质量,”Rematas继续说道。“特别是,我们想要精确地估计球的位置,并更好地重建球员——遮挡、完整的三维估计形状等等。”此外,研究人员还计划将这个算法框架应用扩展到其他运动中,如篮球、曲棍球和足球等。

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分