借助 NVIDIA CloudXR 以及 RTX 虚拟工作站(vWS),沙核科技(Sandman Studios)研发的虚拟社交娱乐平台“大千”(VAST)实现了从应用部署、算力编排、按需分配虚拟化、低延迟编解码与低带宽的云端图形计算与 XR 体验推流。
沙核科技让泛终端跨全球统一上线,高质量实时虚拟娱乐体验成功落地 2022 砂之盒沉浸艺术季(SIF, Sandbox Immersive Festival)。
VR 体验升级面临实时内容传输挑战
大千(VAST)为了提供给用户更加身临其境和逼真的内容体验,选择 VR 设备作为应用运行和用户体验的首要载体。在这类场景下,技术对设备性能要求较高,一次性采购设备的成本也相应提高。特别是新技术迭代周期短,很多端用户设备并不能完全兼容应用的运行。
同时,VR 硬件种类众多——包括了 PC VR 头显与 VR 一体机等,各个平台间存在着较大的性能差异。
VR 应用和常规游戏、视频、直播应用场景一样,需要通过 GPU 服务器渲染好画面后发送到端用户:采集画面一般是增加额外采集卡,后转至相应的软件来接受画面。增设采集卡也意味着数据传输过程中会有额外延迟,一般在 10ms-100ms。
如果是将原始画面通过网络传输到端用户,意味着网络带宽需要支持超大体积的数据包。普通用户所使用的带宽不足以低延迟接受原始画面数据;因此需要在网络传输画面数据之前,重新编码来压缩数据体积,同时还要保留较好的画面质量。
与常规云推流方案不同,VR 应用需要转发的端用户操作数据更多也更复杂。包括 VR 头显设备的姿态数据,手柄的姿态和按键操作数据,甚至是动作捕捉设备数据。相应在转发数据到云端后,要求服务器准确复现操作也是具备一定的困难。
VR 应用为了提供用户更好的沉浸感,一定离不开音频输出和语音输入,如果音频的传输延迟不能控制在较低的水平下,同样会让用户体验大打折扣。
NVIDIA CloudXR 赋能云推流解决方案
为了使更多用户可以体验到统一化的极致体验,以及较低的使用成本,沙核科技选择 NVIDIA CloudXR 云推流作为解决方案,为业务带来了巨大的升维。
结合 VR 应用和以往经验,为解决以上挑战,沙核科技决定选择基于 NVIDIA CloudXR 平台来构建解决方案。在 SIF 2022 期间, 方案为大千(VAST)和与电气樱桃合作的虚拟演唱会,提供了稳定的推流技术支持和 VR 体验提升。
SIF 展会上,无需采购和提前测试提供渲染服务的高配主机,而是按照使用需求启用云厂商提供的虚拟实例。NVIDIA A10 Tensor Core GPU 配合 NVIDIA CloudXR 与 RTX 虚拟工作站(vWS),极大降低了投入成本和设备维护的人力成本。并且在高峰时期,可支持快速启用新实例来满足峰值用户需求。
借助 NVIDIA CloudXR 提供的流式视频传输功能,减少了视频流的带宽占用,进一步提升了同一网络环境下能够支持的终端设备数量,同时保证了较好的画面效果。
在 VR 设备上,NVIDIA CloudXR 提供了精确的用户操作数据捕捉,同时在云端服务器准确还原端用户操作,让用户收获完整的沉浸体验。
虚拟娱乐平台丰富用户视听体验
NVIDIA CloudXR 全面提升了大千(VAST)平台的用户体验,为扩展元宇宙虚拟娱乐领域其他业务打下了良好的基础。
“NVIDIA CloudXR 省去了我们从零开始研发云推流方案的时间和成本,也让我们更加坚信多元化虚拟娱乐的未来发展前景。”
开发一个优质的 VR 虚拟社交娱乐内容平台、需要耗时两至三年,甚至可能收效甚微。
NVIDIA CloudXR 针对实时图形推流的解决方案,将 VR 上云的速度提升了一个量级,满足了处理海量图形计算的需求,极大地降低了用户的接入门槛,将原宇宙概念落地时间缩短到当下,而不是未来 5-10 年,极大地减少了时间成本,市场教育成本,更有利于用户抓住下一个时代的网络红利新趋势。
在网络传输环节,配合网络实施团队搭建的 WIFI 环境,实现了超乎预期的结果。在 SIF 2022 落地展示做到了业界创纪录的在同一狭小空间内 15 台无线 VR 设备同时上线(此前在实验室阶段的记录为 6 台),并且稳定流畅地保障了全场观众完整的观看和虚拟直播演出的全程体验。
砂之盒策展人兼沙核科技创始人 Eddie 表示:“大千(Vast)作为 NVIDIA 初创计划会员沙核科技的突破性平台产品,在 NVIDIA CloudXR 技术的支持下,激发出更多可能性——我们将与广大虚拟娱乐创作者继续尝试不同虚拟演出的形式和内容,更有信心在未来做出完整的互动音乐演出和音乐节,让每一个用户都有机会体验虚拟空间表演的魅力。”
审核编辑:汤梓红
全部0条评论
快来发表一下你的评论吧 !