肇观电子产品总监袁海先生受邀参加于10月在深圳举办的“智能无人机暨无人机反制技术应用论坛”,并就【3D+AI视觉芯片让无人机更加聪明懂“视”】发表主题演讲。
在20世纪的最后10年,随着视觉影像电子化跟数字化的落地,人们通过模式识别去解决工业场景下各类的故障检出和异常检出,这一点是被普遍认为在视觉领域感知能力的起点。随着21世纪计算能力的增强,包括图像数字化能力的改善,该类的应用逐步从工业领域往安防和农业等各个行业进行快速的演进跟落地。 当今到了21世纪的第二个10年,可以看到随着神经网络模型的快速部署和成熟,特别是安防领域,大量通过模型完成对人体和人脸的识别追踪与故障物的检测分类等,极大加强了安防领域对视觉感知的能力要求,同时在云端、边端和端侧都提出不同的算力要求。无人机作为一个自主可控、自主可飞、集群可飞等在复杂场景下具有自主飞行能力的机器人设备,对于整体环境的3D感知和对场景的理解都提出了更高程度的要求。
让无人机能够更好的满足对环境的整体感知的能力,肇观电子以D系列自研芯片为基础,推出了一揽子的前端算力加速方案,为客户尽早的打通整条技术线,同时以极优的成本与性能比,配合客户在不同产品平台上的方案落地。以此为基础,肇观的五大技术方案可以充分应对无人机市场的综合性诉求。
3D双目深度
01
肇观以自研芯片独立的硬件Depth引擎,能够提供最高VGA120帧的深度计算能力,满足无人机从320至800P不同分辨率等级下的3D深度计算能力。同时可支持多组双目模组并行深度计算,以及提供丰富的后处理算法,针对不同的使用场景做对应的异常场景的过滤与处理。
多目接入
02
肇观芯片可以直接支持4路摄像头的接入,并且可以通过集线器或密集的数据通道方式完成更多组摄像头的同时接入和分时接入,能够提供完整多目硬件帧同步的检测与同步能力。
VIO加速
03
为了应对整体无人机对自身位姿和位置能力的感知和计算的加速要求,肇观提供了支持众多OpenCV的前置算力与前置模型,并且提供了特征点加光流的一体化方案,供无人机快速的完成整个VIO计算的加速处理。
AI
04
为了更好的理解无人机所看到的场景以及现场的各种情况,肇观内置的NPU引擎,配合DSP算力,能够为客户提供全量神经网络模型的部署,并且支持INT8跟FP16的混合算力支持。
画质
05
针对无人机在远距离、夜晚、逆光等各种复杂光线场景下的图像和视频采集需求,肇观可以提供高质量的图像和视频效果,支持低延时的4K30FPS的H.265的实时视频流的存储和4G/Wi-Fi图传。
自标定
06
针对无人机出现易损、易跌落后解决快速修复现实场景的问题,肇观提供了自标定的完整的功能,可以供客户完成设备层面的功能整合,为无人机在现场的管损和快速修复提供了实战化的基础,最终能够为无人机提供像素和亚像素级别的校准能力。
肇观电子作为一家国内新兴的智能芯片设计及视觉模组厂商,致力于以自研AI视觉芯片为基础打造为各类智慧设备、移动设备、机器人提供核心的感知能力。肇观电子由衷感谢本次深圳无人机协会的邀请,期待与行业专家和企业更加深入的交流与合作。
审核编辑:彭菁
全部0条评论
快来发表一下你的评论吧 !