独创融合视觉技术，锐思智芯打造AR/VR全新视觉传感器

 

电子发烧友网报道（文/莫婷婷）为了实现更加丰富和沉浸式的体验，眼动追踪功能、手势识别功能逐渐成为AR/VR设备的标配功能之一，上述技术的成熟是各大厂商攻克的方向。而视觉传感器正是在人机交互过程中发挥关键作用的元器件之一，可以帮助用户获得更加真实、自然和交互式的体验。

锐思智芯董事合伙人况山表示，AR/VR设备需要用到很多摄像头来实现SLAM空间的感知，交互识别等功能，这些功能需要机器识别判断。这也是在人工智能时代传感器面临的问题，不再只是单纯的摄影功能，在输出图像信息的同时，还需要输出事件信号，实现动静态信息捕捉融合。

 

为此，锐思智芯创新推出Hybrid Vision 融合视觉技术。该技术的特点就是能用一颗芯片输出图像数据和事件数据两路数据。图像数据可用来捕捉静态纹理信息，事件数据只捕捉变化信号，通过删除这种不变的信号，实现更低的延时、更高动态范围、更低功耗、低数据量的优势。

“传统图像传感器在帧率、数据量和动态范围三个方面相互制约，加上事件数据就可以打破这样瓶颈和制约。”况山表示。

基于Hybrid Vision 融合视觉技术，锐思智芯推出了融合视觉传感器，可以实现大于4000fps的帧率，动态范围大于100dB，在功耗方面，相较于传统图像传感器的几百毫瓦，锐思智芯的融合视觉传感器功耗仅为10毫瓦。

据了解，锐思智芯在2021年发布了首款融合视觉传感芯片——ALPIX-Pilatus，2022年后便发布了高端融合视觉感算一体传感芯片——ALPIX-Eiger。为了进一步适配市场需求，况山透露，公司即将发布了超低功耗融合视觉传感器——ALPIX-Titlis，适用于智能家居、IPC场景以及AR/VR行业。

 

在AR/VR的应用场景上，融合视觉传感芯片在需要高帧率、快速眼动追踪、人机交互- 跟踪与识别、SLAM、高动态范围的场景上具备明显的优势。

从去年开始， PICO 4 Pro、PS VR 2、Quest Pro等VR设备配备眼动追踪技术，预计在越来越多厂商的跟进下，眼动追踪技术将成为消费级VR设备的标配。在市场普及之前，技术的成熟是最为关键的。锐思智芯推出的融合视觉传感器将为眼动追踪技术带来更好的应用体验。

况山介绍，基于融合视觉传感器可以实现快速眼动追踪，一种方式是基于融合视觉传感芯片进行被动地识别判断优势在低延时、低功耗、节省后端处理器的算力消耗。二是结合结构光技术，追踪精度达到0.3度，比现有行业当中的方案提升了一个量级。

在AR/VR领域中，SLAM技术主要功能为建图功能、快速定位功能，可以实现对用户位置和周围环境的实时感知和建模，从而为AR/VR应用提供更加准确和可靠的基础，具体应用包括AR导航，在VR游戏/教育中的场景构建和地图构建。

基于融合视觉传感芯片的优势，能够用图像做精密建图，用事件做快速定位，从而让SLAM实现更高鲁棒性、更低功耗、更少数据量、 更少计算量。况山预判，可能后续的这个SOC能够用较低成本的芯片代替原来高算力、高成本的芯片。

如今，有不少AR智能眼镜能够在室外环境下使用，例如应用在工业领域时，就需要面对室外复杂的光线环境。传统图像传感器由于动态范围窄，容易出现过暗、过曝的问题。而锐思智芯的融合视觉传感器具备高动态范围，能够在一定程度上解决AR/VR设备受环境光影响的问题。

据了解，锐思智芯研发团队具备20年图像传感器、8年事件相机研发经验，产品广泛应用于智能手机、AIoT、智能安防等多个领域。未来，随着锐思智芯在融合视觉传感器上研究，以及该产品在AR/VR设备上的落地，AR/VR的人机交互体验将进一步提升。