传统帧式相机长期受高功耗瓶颈制约,可穿戴设备难以实现持续眼动追踪。近日,索尼研究团队基于时识科技(SynSense)Speck2f芯片,成功研发出全球首个全集成、电池供电的可穿戴眼动追踪系统。该方案突破传统方案冗余计算逻辑,在100Hz高频追踪下实现每眼平均功耗低于5mW,为AR/VR、医疗诊断等场景带来永久续航可能。
技术核心
事件驱动感知+脉冲神经网络处理:利用 Speck2f 芯片高能效、低延迟的特性,实现微秒级响应与稀疏数据处理
自适应时序解码与不确定性量化:通过门控时序机制(Gated Decoding)在MCU上轻量运行,提升对眨眼、扫视的鲁棒性,并自动标记低置信度时段
全系统集成:双 Speck2f 芯片 + nRF52840 MCU + 红外照明,实现端到端低功耗运行
实测表现
精度验证:瞳孔中心L2误差10像素以内
动态适应性:平滑追踪误差<3像素,扫视阶段自动标记低置信度时段
系统功耗:双芯片并行平滑追踪的平均功耗低至2.5mW/眼,支持硬币电池长续航
应用前景
此项研究验证了类脑技术在“始终在线(always-on)”场景下的商业化潜力。基于Speck2f的方案可广泛应用于AR/VR眼镜、辅助医疗、智能机器人等场景,为下一代低功耗可穿戴设备提供技术蓝图。
全部0条评论
快来发表一下你的评论吧 !