卡塔尔世界杯：一首关于VR技术的狂想曲

2022年12月19日，世界杯决赛落幕了，精彩的比赛汇聚全球数十亿目光的关注，对全球各地大部分的球迷来说，主要通过直播的方式观看比赛。传统观看直播的方式有很多种，比如电视、手机、平板电脑，电脑等等，如今VR一体机也成为了观看世界杯的一种新方式。
 
虽然在2018年俄罗斯世界杯是支持三星Gear VR、Oculus Go、PlayStatjionVR等VR设备观看比赛的，但由于独家转播权的缘故，当时在国内并没有引起多大的关注。近年来，VR在体育赛事上的应用已经明显增加，特别是本届卡塔尔世界杯，其官方转播商央视网，以及获得官方转播权的中国移动子公司咪咕和抖音集团等媒体都充分利用起了VR技术，让国内球迷能够用VR设备体验身临其境的观球感受。
 
VR解锁了哪些观看世界杯的新方式

随着拍摄和转播技术的提升，今年的世界杯平面直播分辨率达到了超高清标准，让球迷们即便相隔万里，也能欣赏到精彩的赛事。其实除了平面视频的进步，近几年VR视频，也就是全景视频，也在逐渐兴起。VR视频是通过专业的摄像机将真实环境，或虚拟环境360°地记录下来，经过处理后，当观众观看全景视频时，仿佛置身其中。
 
其实就算是平面视频，现在有不少厂商都在想办法跟现在火热的VR设备相结合起来，那么VR与世界杯结合的方式有什么新意呢？VR厂商们能玩出什么花样呢？从实际体验来说，VR厂商们的表现还真的让人感到惊讶，以头部的VR品牌PICO来说，他们这次的世界杯专题直播，打造了球迷广场、世界杯狂欢夜两大不同风格的主题看球模式，通过VR技术为用户带来了完全不同的观赛体验，大大超出了我的预期。


戴上PICO 4后，你会发现进入世界杯的入口是在PICO视频里，PICO专门为世界杯新设了一个分类，点击进入后，就直接进入了世界杯主会场，它由一个虚拟构建的球迷广场，及一块悬挂在球迷广场上的巨大屏幕组成，这是真正意义上的巨幕，视觉观感上就像以前观看露天电影的幕布一样，比标准的IMAX屏幕尺寸更大，而且屏幕的清晰度，比我们预想的要好很多。
 
这个球迷广场就像是一个标准足球场那么大，在这里，你可以与其他PICO用户一起观看世界杯比赛视频直播，而且你还能看到其他PICO用户的动作，听到他们的声音，甚至还能与他们一起合影发到抖音上。是不是很有意思？
 
当然，如果你只想一个人安静地看直播，也没有问题，点击“设置”里的屏蔽用户就可以了，还能屏蔽直播下方的弹幕。
 
而你如果喜欢热闹，则可以到球迷广场旁边的世界杯狂欢夜那个建筑里面去，进去之后，你就会发现自己已经置身于一个真实的酒吧二楼了，身边也有跟你一样的PICO用户。酒吧中间有一块平面大屏，大屏两侧也分别有一块屏幕，分别显示着赛程和赛事安排。由于这个场景设置得很热闹，也很有看球的氛围，所以在该场景下，PICO用户相互之间可以欢乐地讨论。


而如果你觉得这点热闹还不够，还想感受酒吧看球的氛围，那么你可以下到一楼 ，那里的讨论更热烈。不过下去之前，你需要选择一个阵营，选好之后，你就会位于他们中间。这时，你就会发现前后左右都是跟你一样阵营的球迷，而且他们会面对着你说话，就像你真的身处酒吧看球一样。而且，PICO邀请的明星可能就坐在你身边，用户可以近距离与明星一起聊比赛了，这种距离感，真的很神奇。不过，值得注意的是，在这里，基本上听不清电视里的解说，全都被现场的声音盖住了，就像热闹的酒吧一样。
 
也就是说，想一个人安静看球赛直播的，可以去主会场，那里的屏幕更大，清晰度更高，而且也没人打搅；想热闹一点，又想认真看球赛的，可以去世界杯狂欢夜的二楼吧台；而喜欢热闹，与球迷一起互动的，就去球迷酒吧；多种选择，随你挑。而无论是哪一个场景，进球瞬间都会有特效，主场地还会燃放烟花。
 
虽然在球迷广场以及球迷酒吧里，世界杯直播的画面在视觉上也是一块2D的巨幕，但是PICO却充分利用了VR的3D技术，为这块2D屏幕增加了VR体验，让PICO用户体验到了一个人在家看球体会不到的沉浸感和氛围感。总体来说，PICO这次直播与虚拟画面的细致融合，为行业带来了很多内容创新的启发。
 
花式VR观球背后的黑科技

VR行业在逐渐兴起，2010年之前，VR行业发展缓慢，主要应用于实验室和航天等领域，2014年是一个拐点，VR设备开始受到市场的关注，2014年~2016年期间，是VR行业发展最为火热的时期，当时大量的公司涌入这个行业，谷歌、索尼、Meta等都进入了这个领域，VR设备的迭代速度加快。到了2016年之后，VR的市场热度开始消退，VR行业开始更加关注应用内容的建设。
 
近几年，随着VR生态的日益完善，互联网巨头和创业者均在抢占生态建设、内容建设、硬件和技术等。字节跳动在去年时收购了VR创业公司PICO进军VR行业。如今，结合字节跳动原有的内容优势，PICO正在积极探索内容创作的新形态方向，比如演唱会、直播节目等节目化的VR内容；VR短片，IP合作的VR视频等剧本方向的内容；以及纯虚拟的内容等等。而前面提到的世界杯场景直播则是PICO的另一个新的尝试。
 
这次PICO世界杯与VR结合的尝试，受到了用户的喜爱，主要得益于PICO三大技术力的支持，即视频能力、音频能力和互动能力。
 
首先，在视频能力方面，若要实现球迷广场上的高清巨幕视频直播，就需要高清的信号源和传输通道，而PICO的巨幕支持超高清直播标准，且其自研的TrueLive全真超清显示技术，可以有效提升视频解码及渲染效率，观赛清晰度提升了近50%；而且在世界杯狂欢夜这种大数据量的直播中，其采用了自研的切片传输算法，码率节省了近50%，提升传输流畅度。
 
其次，在音频能力方面，比如在“世界杯狂欢夜”的现场，用户更换不同球迷阵营，能够明显感受到声音的变化，就像在现实世界中酒吧不同位置走动所听到的感受一样，而且随着用户转头等动作，环境的声音也会如同现实世界一样有着清洗的方位感和远近感。这种沉浸是听觉体验，就是空间音频带来的效果。那么这种技术是如何实现的呢？一是要在会场种布置数十个麦克风，结合小蜜蜂与虚拟音频源，在每一个视角结合画面定制音频制作与音效，进行多视角实时空间音频制作，带来独特而沉浸的声音体验；二是搭载针对PICO定制的自研空间音频渲染引擎，配合头部追踪能力，结合用户的视角实时计算播放信号，精准呈现360°声场，让用户感受到声音与会场融合在一起，忠实还原酒吧观赛现场体验。
 
还有，在互动能力方面，这包括实时语音和多元互动功能。比如在球赛中场休息时，现场主持人会邀请线上球迷观众进行连线交流，通过3D环境下的视觉捕捉将用户Avatar形象动作完整捕捉下来，并通过火山引擎RTC传输投射到现场的两侧大屏连线的全过程中，由于涉及到肢体动作和语言的互动，因此要保证用户Avatar动作和声音的高度实时同步。在实际体验中，连麦用户甚至可以跟着现场DJ一起起舞，实时程度可以做到不错过任何一个节拍。这背后需要实时的音视频采集、传输能力，以及音视频与3D环境下视觉捕捉系统的紧密配合。而火山引擎RTC可针对现场音视频源特点，对SDI类型音视频的输入输出源进行适配，无缝对接广电级设备环境，提供RTC连麦最简接入方案。在现场侧工作人员通过PC端连麦助手即可完成活动控制能力，包括邀请、连麦、Avatar上麦投屏等操作，并可以根据连麦助手提供的端到端质量监控可视化界面进行实时观测服务质量。
 
另外，不同用户之间还可以进行多种互动，包括自定义自己的虚拟形象、多人语音交流、充气棒和酒杯等道具互动。而在用户使用道具如充气棒，酒杯等进行互动时，结合PICO 4扬声器的空间音频效果，以及手柄上的宽频线性马达，会产生对应的音效，特效与震动反馈，体验更加逼真。
 
而为了提升“世界杯狂欢夜”现场的真实感和沉浸感，需要保持高效的高清画面传输效率。PICO此次采用了8K 360° 3D多机位实时直播，并结合PICO自研的切片传输算法，可以实现50%的码率节省，适应不同的用户网络环境。
 
观球只是开始，VR的未来更精彩

此次PICO带来的世界杯赛事直播新形式与体验标准只是一个开始。此次PICO将世界杯视频直播内容，与虚拟的VR立体世界做了非常巧妙的融合，为传统平面内容移植到VR平台提供了良好的思路，有助于打破VR行业的内容僵局。
 
当然，VR除了与体育的相结合，近年来，VR技术市场正蓬勃发展，整个行业在新场景、新应用方面的开发，都呈现出了快速发展的态势。随着VR技术的发展，它将渗透到多个领域，包括工业、文化、教育、医疗和娱乐等领域。比如在B端市场，2021年宝马宣布与英伟达合作，通过Omniverse建立数字孪生工厂，将优化生产规划的时间缩减了30%。之前沃尔玛也通过与VR提供商合作将员工培训满意度提高30%。另外，Meta的新品战略开始加强覆盖企业办公人群，包括将Office等办公软件引入VR场景。
 
VR可以做什么？也许我们现在无法给出一个标准答案，但我们已经看到，很多行业、很多开发者都已经开始不断探索VR行业的边界。他们中，有人将VR用来治疗心理疾病；有机构将VR与博物馆结合在了一起；有企业推出了VR学车；也有地产商推出了VR看房业务……总之，VR正以远超我们预期的速度，深入到我们的生活当中，并且通过数字化技术改变我们的生活方式，未来VR的想象空间还很大。
 
结语

VR一体机与体育赛事的结合是一个新的尝试，未来将会有更多具体应用场景的结合。相信这些具体的应用场景对VR市场也是一个推动作用。毕竟现在的硬件配置已经基本完善，剩下的就是软件的开发、内容的丰富，以及更多应用场景的开拓，此次PICO与世界杯相结合的尝试打了一个很好的样。