近日,SynSense时识科技与苏黎世联邦理工学院联合研究成果在2024 CVPR Workshop发布。该研究是—项基于“感算一体”动态视觉智能SoC Speck的超低功耗眼动追踪技术,结果显示端到端系统功耗低至2.89mW,延迟仅5.57ms。
该成果凭借卓越的性能受到学术及产业界的广泛关注。这项研究成果不仅为低功耗、高性能的眼动追踪技术设定了新标准,也为类脑智能技术在智能和可穿戴设备中的应用带来了革命性进展。
研究团队在眼镜上搭载了两台来自iniVation的DVXplorer事件相机(图1左)作为数据采集硬件。从数名志愿者处收集了大量数据,形成了名为“Ini-30“的基于事件的眼动追踪数据集。为研究提供了丰富且真实的眼动信息。
图1. 数据收集硬件(左)及视频记录示例(右)
研究团队发明了名为"Retina"的SNN模型,它基于Integrate And Fire(IAF)神经元构建。在64x64 DVS输入条件下,Retina实现了仅3.24像素的瞳孔跟踪误差,显示出极高的追踪精度。与最新的基于事件的眼动追踪方法"3ET"相比,Retina在Ini-30数据集上更为精确,并显著减少了模型的计算复杂度,MAC运算减少了35倍。
通过在Speck上部署Retina模型,结果显示端到端功耗在2.89-4.8mW,延迟仅为5.57-8.01ms(图2)。研究结果不仅证明了模型的高效性,同时也再次展示了Speck在处理此类任务时功耗与实效性的巨大优势。可点击阅读原文查看文章。
图2. Speck运行眼动追踪算法的性能数据
SynSense时识科技一直坚持技术创新,此项研究成果不仅在理论上具有创新性获得了学术认可,更在实际应用中展现出了巨大的潜力。
凭借类脑智能技术低功耗、低延迟且支持高追踪精度等特点,SynSense时识科技将携手更多合作伙伴推动眼动追踪技术向更高效、更精准的方向跨越式迈进。引领智能设备如手机、XR/VR等领域的技术新变革,为用户带来更加自然、高效的交互体验。
关于SynSense时识科技
SynSense时识科技(原名aiCTX)创立于2017年,是全球领先的类脑智能与应用解决方案提供商。
SynSense时识科技专注类脑智能的研究与开发,以苏黎世大学和苏黎世联邦理工学院20+年全球领先的研发经验和技术积累为基石,聚焦边缘计算应用场景,提供横跨感知与计算的类脑智能应用与解决方案。
SynSense时识科技率先实现了类脑芯片商业化应用零的突破,为人工智能向认知智能发展,万物互联向万物智联发展迈出了关键一步。SynSense将和伙伴一起,共同构建“端到芯”“物与物”“物与人”万物智联的认知生态,引领全球类脑智能应用与发展,为人类未来美好生活创造福祉。
全部0条评论
快来发表一下你的评论吧 !