深度探索:Intel RealSense D400系列产品全方位解析

电子说

1.4w人已加入

描述

深度探索:Intel RealSense D400系列产品全方位解析

在当今科技飞速发展的时代,深度相机在众多领域展现出了巨大的应用潜力。Intel RealSense D400系列作为一款备受瞩目的深度相机系统,以其先进的技术和卓越的性能,为开发者和工程师们带来了全新的机遇。本文将深入剖析Intel RealSense D400系列产品,涵盖其特点、组件规格、功能特性、固件与软件支持以及系统集成等方面,为电子工程师们提供全面的参考。

文件下载:82635DSITR50P.pdf

一、产品概述

Intel RealSense D400系列是一套基于立体视觉技术的深度相机系统,具有小巧的体积和易于集成的特点,为系统集成商提供了极大的设计灵活性。该系列产品可应用于无人机、机器人、家庭监控、虚拟现实以及PC外设等多个领域。其具备第二代立体深度相机系统,搭载专用的Intel RealSense Vision Processor D4,运用先进算法,配备红外激光投影仪系统,采用全高清分辨率图像传感器,并支持主动电源管理。

产品特点

  1. 先进的视觉处理器:第二代专用的Intel RealSense Vision Processor D4,具备强大的深度立体视觉处理能力。
  2. 红外激光投影仪:采用Class 1激光合规的红外投影仪,可在低纹理场景中提高深度计算的准确性。
  3. 高分辨率图像传感器:配备全高清分辨率的图像传感器,能够提供清晰的图像和深度数据。
  4. 主动电源管理:支持主动电源管理,有效降低功耗。
  5. 多种模块可选:提供多种立体深度模块选项,可满足不同的使用需求。

产品型号

  1. D415:具有高达1280x720的主动立体深度分辨率和1920x1080的RGB分辨率,深度对角视野超过70°,采用双滚动快门传感器,深度流帧率最高可达90 FPS,测量范围为0.3m至超过10m。
  2. D435/D435i:同样具备高达1280x720的主动立体深度分辨率和1920x1080的RGB分辨率,深度对角视野超过90°,采用双全局快门传感器,深度流帧率最高可达90 FPS,测量范围为0.2m至超过10m。其中,D435i还配备了惯性测量单元(IMU),可提供6自由度(6DoF)数据。

二、组件规格

1. 视觉处理器D4

视觉处理器D4是整个系统的核心,采用28nm工艺技术,具备5个MIPI相机端口,每个MIPI通道的数据传输速率可达750 Mbps。它支持USB 2.0/USB 3.1 Gen 1或MIPI接口与主机系统连接,具备图像校正、IR投影仪控制、SPI接口、I2C端口和通用输入输出引脚等功能,还支持主动电源门控。

2. 时钟和串行闪存

视觉处理器D4需要一个24 MHz的时钟振荡器,所有立体深度模块所需的时钟均由其生成。同时,它还需要一个16Mbit的串行闪存用于固件存储,推荐使用IS25WP016或等效产品。

3. 立体深度模块

立体深度模块包含左右成像器、红外投影仪、彩色传感器、深度模块连接器、隐私LED、加强件、标签以及其他组件(如激光驱动器、EEPROM、电压调节器等)。不同型号的立体深度模块在基线、成像器类型、深度视野、红外投影仪和彩色传感器等方面存在差异。

4. 视觉处理器D4板

视觉处理器D4板为系统集成商提供了一种便捷的方式,将视觉处理器D4集成到系统中。它通过USB Type-C连接器和电缆连接到主机USB 3.1 Gen 1端口,包含视觉处理器D4、16Mb串行闪存、24MHz晶体时钟、Realtek ISP、深度模块插座、USB Type-C连接器、外部传感器同步连接器、电压调节器和安装孔等组件。

5. 深度相机D400系列

深度相机D400系列集成了视觉处理器、立体深度模块、RGB传感器和惯性测量单元(部分型号),具有不同的机械尺寸、热特性、存储和操作条件。

三、功能特性

1. 数据传输

Intel RealSense Vision Processor D4深度成像系统通过立体视觉技术为主机系统提供高质量的深度数据,可与彩色流同步。支持多种图像格式,包括深度、亮度、颜色等,在USB 3.1 Gen1和USB 2.0接口下具有不同的分辨率和帧率组合。

2. 深度视野

深度视野是左右成像器视野的共同重叠区域,Vision Processor D4在此区域提供深度数据。不同型号的深度视野在水平、垂直和对角方向上有所不同,且会随着场景距离的变化而变化。

3. 无效深度带

由于立体视觉计算以左成像器为参考,在左右成像器视野中会存在一个非重叠区域,即无效深度带。该区域的宽度与场景距离、基线、水平视野和焦距等因素有关。

4. 最小Z深度

最小Z深度是深度相机到场景的最小距离,Vision Processor D4在此距离以上提供深度数据。不同分辨率下,不同型号的最小Z深度有所不同。

5. 深度质量

深度质量通过一系列标准指标进行量化,包括深度准确性、填充率、深度标准差和像素时间噪声等。在80%的深度视野内,D400/D410/D415和D420/D430/D435/D435i在2米范围内的深度质量指标均满足一定要求。

6. 测量功率

不同型号的D400系列产品在不同操作系统(如Ubuntu 16.04和Windows 10)下的空闲功率、正常功率和最大功率有所不同,具体功率配置与分辨率、帧率和激光功率等因素有关。

7. 深度起始点和原点坐标

深度起始点是深度测量的参考点,对于深度模块和深度相机有不同的参考位置。深度原点X - Y坐标是左成像器的X - Y中心。

8. 相机功能

深度相机提供了一系列控制功能,如手动曝光、手动增益、激光功率控制、自动曝光模式、预设和元数据控制等。彩色相机也提供了多种控制功能,如自动曝光模式、手动曝光时间、亮度、对比度、增益、色相、饱和度、锐度、伽马、白平衡温度控制等。

9. IMU规格

D435i配备了惯性测量单元(IMU),提供6自由度(6DoF)数据,加速度计范围为±4g,采样率为62.5或250 Hz;陀螺仪范围为±1000 deg/s,采样率为200或400 Hz,采样时间戳精度为50 usec。

四、固件与软件

1. 固件更新与恢复

固件包含操作指令,Vision Processor D4在运行时加载固件并编程组件寄存器。固件更新时,固件实用程序会向Vision Processor D4发出设备固件更新命令,Vision Processor D4将重置进入固件更新模式。固件更新有一定的限制,更新引擎会建立一个基线版本,允许最多20次返回以前的版本,之后只能更新到比基线版本更高的版本。固件恢复通过将DFU引脚置低并重置成像系统进入恢复模式,可通过固件客户端实用程序触发。

2. 软件支持

Intel RealSense SDK 2.0是一个跨平台的库,用于与Intel RealSense D400系列产品配合使用。它是开源的,可从https://github.com/IntelRealSense/librealsense获取。SDK至少包括Intel RealSense Viewer、深度质量工具、调试工具、代码示例和软件包装器等。

五、系统集成

1. 系统级框图

系统主要由立体深度模块、视觉处理器D4和主机处理器组成,通过USB 2.0/USB 3.1 Gen 1或MIPI接口连接。

2. 视觉处理器D4集成方式

有两种集成方式:一是使用Vision Processor D4板,通过USB Type-C连接器和电缆连接到主机USB端口;二是将Vision Processor D4和支持组件直接放置在主机处理器主板上。

3. 电源供应

D4相机系统必须确保立体深度模块和视觉处理器D4在同一电源轨上,以保证安全逻辑的锁定。电源供应的实现应遵循相关建议。

4. 热设计

系统热设计必须确保组件的外壳温度不超过限制。Vision Processor D4板和深度模块的热模型可用于进行热评估和验证系统热设计。

5. 立体深度模块安装

立体深度模块在系统集成和使用过程中应避免弯曲,可采用螺丝安装或支架安装的方式,安装时应使用热界面材料以提高热耦合。同时,建议在模块最高组件与覆盖窗口之间保留至少0.3mm的气隙。

6. 覆盖设计和材料

立体深度模块组件应覆盖以减少灰尘和湿度,覆盖材料应提供可接受的传输率,建议使用抗反射涂层以增加传输率。垫片可用于提供光学隔离和防尘保护,但需注意其对视野和模块的影响。

7. 固件恢复

为支持固件恢复,必须将一个3.3V可控中断连接到Vision Processor D4的DFU引脚。当固件损坏时,通过将D4复位并将DFU引脚拉高160ms,可使D4进入DFU模式进行恢复。

8. 校准支持

需要一个可访问的USB端口来访问主机系统,以便可靠地将图像流传输到外部PC,确定校准参数并通过主机系统写回相机校准参数。

9. 多相机硬件同步

Intel RealSense D400系列支持硬件同步信号,可实现多相机配置。通过连接外部传感器同步连接器上的引脚5(SYNC)和引脚9(Ground),可使多个相机在相同的时间和帧率下进行捕获。

10. 处理条件

在D4系统组装和返工过程中,建议遵循JEDEC JESD625 - A要求标准,以提供一致的ESD保护水平。

六、平台设计指南

1. 支持平台

设计指南适用于Kaby Lake U/Y和Cherry Trail T4平台,支持Vision Processor D4与USB主机接口、MIPI主机接口以及用于USB集成外设的Vision Processor D4板的实现。

2. 布线指南

不同接口的布线有不同的要求,包括最大段长度、最大允许通道插入损耗、阻抗匹配、过孔数量等。例如,USB 3.1 Gen 1接口的总布线长度应不超过15英寸,插入损耗应不超过15 dB @2.5GHz;MIPI接口的总插入损耗应不超过5.5 dB @750MHz。

七、监管合规

1. 系统激光合规

Intel RealSense D400系列的认证可转移到系统,无需系统重新认证,但最终产品的用户手册中必须包含相关的认证声明、解释标签、警示声明、制造商信息、US FDA accession number和NRTL声明。

2. 生态合规

产品需符合中国RoHS声明和Waste Electrical and Electronic Equipment (WEEE)要求。

八、总结

Intel RealSense D400系列产品以其先进的技术和丰富的功能,为电子工程师们提供了一个强大的深度相机解决方案。在设计和应用过程中,工程师们需要充分考虑产品的组件规格、功能特性、固件与软件支持以及系统集成等方面的要求,以确保系统的稳定运行和性能优化。同时,遵循相关的平台设计指南和监管合规要求,也是保障产品质量和安全性的重要环节。希望本文能为电子工程师们在使用Intel RealSense D400系列产品时提供有益的参考。

在实际应用中,你是否遇到过类似产品的集成难题?你对Intel RealSense D400系列产品的未来发展有什么期待?欢迎在评论区分享你的想法和经验。

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分