XR1 平台为开发者带来逼真体验

人工智能

635人已加入

描述


扩展现实(XR)是指各种虚拟现实环境,包括VR(虚拟现实)、AR(增强现实)以及两者的组合。XR是一个热门话题,除了游戏和娱乐之外,这种技术正在进军新的应用领域,包括医疗卫生、教育、制造和零售。


最近,我们发布了Qualcomm® 骁龙™ XR1平台,这是首款专用的XR移动平台。XR1平台允许OEM开发新型的高质量、高性价比的独立XR设备,这种设备不需要具备顶级XR设备的全部高级特性。另一方面,开发者也可以通过为主要设备提供XR体验,扩大用户群。


虽然我们认为XR1平台令人印象深刻,但最激动人心的地方还是它带来的无限可能。本文中,我们将介绍三个潜在用例,说明如何使用XR1打造全新系列出色的XR体验。


为远程工作人员提供视觉支持


以企业为例,企业会派遣维修人员赴现场修理机械设备。使用配备摄像头、支持XR1的AR眼镜,通过Wi-Fi或千兆LTE接入互联网,远程支持人员可以看到和维修人员看到的相同画面,为现场维修人员提供协助。



维修人员看到的画面还可以呈现为AR视图,通过抬头显示器,显示使用OpenGL或Vulkan渲染的设备图。由于XR1平台采用Qualcomm Aqstic™音频技术,维修人员可以利用语音命令(例如“显示插入线的位置”),无需手动控制抬头显示器。Qualcomm Aqstic™音频技术具有“始终在线、始终聆听”的关键字唤醒检测和低功耗语音处理功能。


另外,由于XR1异构架构的节能设计,即使现场维修时长时间佩戴,AR眼镜也能保持一样的功能和舒适性。


利用增强视觉和音频体验教育孩子


不妨想象一下未来教室的样子,实际上这样的教室今天就可以实现。现在,我们可以使用搭载XR1平台的VR头显,让孩子们沉浸在虚拟重建的亚马逊热带雨林等环境,教导他们了解自然和环境。


以上面的热带雨林为例,XR1平台提供的6DoF头部跟踪和3DoF控制,允许学生探索环境,认识自然界复杂的生态系统。使用XR1硬件加速技术,在悬浮窗中呈现雨林对象的描述,以便在AR中显示附加信息。利用XR1对Qualcomm人工智能(AI)平台的支持,可以看到虚拟生物可以在丛林中走动,将环境变得栩栩如生。


学生还可以通过3D定向声音体验真实雨林环境下的各种声音。Qualcomm 3D音频工具可用于在XR1上开发逼真的沉浸式3D音频体验,通过XR1对Qualcomm® aptX™ HD音频的支持传输到蓝牙耳机,不管头部如何运动,声音听起来都很自然。


这样的体验结合Qualcomm® Adreno™ GPU,有助于确保运动到成像延迟不超过20ms,提供超逼真和流畅的体验。结合使用的话,XR1技术可以提供比现有2D内容传输机制更形象、更生动、更动态的体验。


增强医疗手术


在医疗环境中,AR的使用越来越广泛。外科医生经常需要在做手术的同时,监视多个显示器的信息。现在,想象一下外科医生使用支持XR1的AR眼镜,利用AR抬头显示器查看所有信息,不需要离开正在手术的部位去查看信息。这些信息包括从患者实时生命体征到根据患者检测数据重建的虚拟3D器官图像等所有内容。


与上面的远程维修用例一样,外科医生可以通过XR1眼镜,使用语音命令导航虚拟菜单或显示不同的信息。语音命令也可以通过Wi-Fi中继,以控制其他硬件,以便医生专注于手术过程。


XR1异构架构还支持对象检测和分类等功能,有助于医生在执行手术时识别可能需要检查的部位。在这里,XR1中的Qualcomm® Hexagon™矢量处理器,Qualcomm® Adreno™ GPU和Qualcomm® Kryo™ CPU协同工作,帮助使用Caffe2或TensorFlow等框架构建的AR应用程序更好地工作。


您可以利用XR1平台开发什么项目呢?


移动XR的潜力以及像XR1这样的平台带来的功能,光想想就令人激动不已。教育、企业和医疗卫生行业只是XR1帮助OEM和开发者将XR体验带入高质量、高性价比独立设备的几个领域。现在,我们很想知道您会通过XR1平台构建哪些体验?


 更多Qualcomm开发内容请详见:Qualcomm开发社区 


【免责声明:CSDN本栏目发布信息,目的在于传播更多信息,丰富网络文化,稿件仅代表作者个人观点,与CSDN无关。其原创性以及中文陈述文字和文字内容未经本网证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本网不做任何保证或者承诺,请读者仅作参考,并请自行核实相关内容。凡注明为其他媒体来源的信息,均为转载自其他媒体,转载并不代表本网赞同其观点,也不代表本网对其真实性负责。您若对该稿件由任何怀疑或质疑,请即与CSDN联系,我们将迅速给您回应并做处理。】  


打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分