Docomo开发出一种新系统,用于依靠5G的8K VR直播视频流

电子说

1.2w人已加入

描述

VR直播并不是一个很新鲜的内容,Facebook、YouTube、Twitter等等早就推出了VR直播的功能,各种演唱会、大型比赛的VR直播也比比皆是。戴上VR眼镜后那种身临其境的沉浸感,那种能水平360度,垂直360度任意旋转的体验,的确带有一种强烈的冲击感,更是一种全新的直播互动模式,这也是VR令人着迷的原因。

最近,NTT Docomo公司宣布已经开发出一种新系统,用于依靠5G的8K VR直播视频流,相比普通视频格式的VR直播,画质将更好、沉浸感也会更上一层楼。这个系统将用于展示360度的现场活动,允许佩戴VR耳机的用户享受流畅逼真的VR体验,以观看现场音乐和体育赛事。

一般来说,VR直播主要包括现场全景拍摄、拼接、编码推流、传输分发、终端播放5个环节,现场全景拍摄需要多个镜头的组合如有双目鱼眼镜头、四目鱼眼镜头等将现场的全部方向都进行拍摄,拼接则需要把采集到的影像尽量无损的拼接成全景的图像,剩下的三个环节好理解,就不一一说明了。

一般情况下,VR在视频质量更高时往往也会更好地工作,因为高质量的图像意味着更少打破沉浸。但是,当图像是实时流式传输时,高质量的视频带来更大的数据量对视频的传输和图像的处理都是问题,降低延迟会有较大的困难,而对于360度的VR视频来说,它还有对实时拼接和压缩的处理需求,这部分同样需要更高速的处理。因此,Docomo选择的8K 360度视频,应该是困难比较多的。

在现场拍摄方面,Docomo的系统由五个4K鱼眼镜头输出以30fps实时拼接在一起的设备组成,同时采用H.264编码器用于实时压缩,而对于编码、拼接等方面,Docomo的解决方案是使用现场可编程门阵列(FPGA)进行处理,相比cpu的顺序操作处理,FPGA的处理是大规模并行的,因此所需要的时间比cpu更少,另外Docomo采用专门开发的算法,以每秒30帧的速度进行高密度应用。

高质量的视频对于传输速率的要求很高,对于这点,Docomo选择依靠5G传输,与6家公司进行合作,采用它们在VR和5G方面的高技术,比如采用NEC公司的 “NEC云系统”,具有很高的机密性和高可用性的5G利用率支持。

除此之外,为了减少传输需求,还使用了被Docomo称为foveated呈现的方法,将视频划分为不同的区块,只有对应于用户的观看方向的视频以完全的高质量呈现,其余部分的处理不如实现方向精密,节约时间,实际上,这个方法有点像是VR版本的中心渲染。

最后,由于实际情况下用于无线通信的无线电波不断受到障碍物以及反射物体的影响,因此接收错误是不可避免的。因此系统在接受端使用了具有错误检测和校正功能的接收设备,使8K视频能够以最小的干扰显示。

需要说明的是,Docomo和夏普在去年就已经有过类似的测试,同样是依靠5G传输8K视频,但并非VR的实时传输,显然,前几天宣布实施的这个系统就是去年实验的一个增强版。由此也可看出,Docomo的8K VR传输系统是为将要普及的5G 打造的,它对于通道传输速率必须在80Mbps以上的高要求也印证了这一点。

正如开头所说,VR直播并不新颖,但Docomo的方案的新鲜处在于利用了5G的高速传输,将VR的画质提升到了更高一层的水平,带给观众更好的体验感,并且基本解决了过大的数据量在传输和解码过程当中的问题,按照其新闻稿的说法,这是世界上第一个360° 8K VR视频传输系统。

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分