英特尔RealSense D400系列深度相机系统：技术解析与设计指南

在当今科技飞速发展的时代，深度相机在众多领域发挥着至关重要的作用。英特尔RealSense D400系列深度相机系统凭借其卓越的性能和广泛的应用前景，成为了电子工程师们关注的焦点。本文将深入剖析该系列相机的技术特点、组件规格、功能特性以及系统集成等方面，为电子工程师们提供全面的设计参考。

文件下载：82635DSD455.pdf

一、产品概述

英特尔RealSense D400系列是一套基于立体视觉技术的深度相机系统，具有小巧的体积和易于集成的特点，为系统集成商提供了极大的设计灵活性。该系列涵盖了多种产品SKU，包括深度模块和深度相机，适用于自主移动机器人、自动导引车、无人机、碰撞避免、家庭监控、3D扫描、数字标牌和体积测量等众多领域。

（一）主要特点

1. 第二代立体深度相机系统：采用先进的立体视觉技术，能够精确计算物体的深度信息。
2. 专用的英特尔RealSense Vision Processor D4：具备强大的处理能力，可实现高效的深度处理和图像分析。
3. 红外激光投影仪系统：通过投射静态红外图案，提高在低纹理场景下的深度测量精度。
4. 全高清分辨率图像传感器：提供清晰、准确的图像数据。
5. 主动电源管理：有效降低功耗，延长设备的使用时间。
6. 多种立体深度模块选项：可根据不同的应用需求选择合适的模块。

（二）产品SKU

1. 深度模块：包括D400、D410、D415、D430、D450和D401等不同型号，各型号在基线、成像器类型、深度视场角、红外投影仪和颜色传感器等方面存在差异。
2. 深度相机：有D415、D435、D435i、D455和D405等型号，具备不同的性能特点和功能配置。

二、组件规格

（一）Vision Processor D4

Vision Processor D4是该系统的核心组件，主要负责深度立体视觉处理。它采用28nm CMOS工艺技术，具有5个MIPI相机端口，每个MIPI通道的数据传输速率可达750 Mbps。支持USB 2.0/USB 3.1 Gen 1或MIPI接口与主机系统连接，具备图像校正、红外投影仪控制、串行外设接口和集成I2C端口等功能。

1. 电源要求

Vision Processor D4需要多种电源供应，包括0.9V、1.8V和3.3V等不同电压，具体要求如下表所示：	电压球名称	最小值 (V)	标称值 (V)	最大值 (V)	峰值电流 (Icc)
VDD	0.85	0.9	0.95	0.4 A
VDD_PG	0.85	0.9	0.95	1.6 A
USB_DVDD	0.81	0.9	0.99	0.2 A
VPTX0	0.81	0.9	0.99	0.2 A
VP	0.81	0.9	0.99	0.2 A
*AVDD	1.71	1.8	1.89	0.2 A
VDDPLL	0.85	0.9	0.95	0.2 A
VDDTS	1.71	1.8	1.89	0.2 A
VDDPST18 (Left and Right)	1.71	1.8	1.89	0.2 A
USB_VDD330	3.13	3.3	3.46	0.2 A

2. 电源时序

Vision Processor D4的电源时序要求如下：

• 保持Vision Processor D4处于复位状态。
• 先对3.3V电源轨进行上电。
• 接着对0.9V电源轨进行上电。
• 最后对1.8V电源轨进行上电。
• 释放Vision Processor D4的复位信号。

（二）立体深度模块

立体深度模块包含左右成像器、红外投影仪、颜色传感器、深度模块连接器、加强件、标签和其他组件。

1. 左右成像器

根据不同的型号，成像器分为标准和宽视场两种类型，具有不同的图像传感器、像素、视野角和失真率等特性。例如，D400、D410和D415采用标准成像器，而D430、D450和D401采用宽视场成像器。

2. 红外投影仪

红外投影仪通过投射静态红外图案，提高立体相机系统在低纹理场景下的深度测量能力。分为标准和宽视场两种类型，满足不同的应用需求。

3. 颜色传感器

颜色传感器可生成彩色图像，并提供纹理信息，用于叠加在深度图像上创建彩色点云或用于3D模型重建。不同型号的颜色传感器在图像传感器、分辨率、视野角和失真率等方面存在差异。

4. 机械尺寸

不同型号的立体深度模块具有不同的机械尺寸，设计时需要根据实际需求进行选择。

（三）Vision Processor D4 Board

Vision Processor D4 Board为系统集成商提供了一种便捷的方式，将Vision Processor D4集成到系统中。它包含Vision Processor D4、16 Mb串行闪存、24 MHz晶体、Realtek ISP、深度模块插座、USB Type-C接口、外部传感器同步连接器、电压调节器和安装孔等组件。

1. 机械尺寸

Vision Processor D4 Board有不同的版本，如V1、V3和V4，各版本的机械尺寸有所不同。

2. 电源要求

Vision Processor D4 Board通过USB连接器的VBUS电源供电，其电源要求如下：	参数	最小值	标称值	最大值	单位
VCC 供电电压	4.75	5.00	5.25	V
ICC 供电电流		700		mA
供电电压上升速率	0.5		5	ms

（四）深度相机

深度相机集成了Vision Processor D4、立体深度模块、RGB传感器和惯性测量单元（IMU）等组件，具有不同的性能特点和功能配置。

1. 机械尺寸

不同型号的深度相机具有不同的机械尺寸，设计时需要考虑安装空间和布局。

2. 热管理

深度相机的热管理非常重要，需要确保组件的工作温度不超过限制。可采用被动冷却和主动冷却等方式进行散热，如使用散热支架、散热片和风扇等。

三、功能规格

（一）供应商识别和设备识别

每个深度模块和深度相机都有唯一的供应商ID和设备ID，用于识别和区分不同的产品。

（二）Vision Processor D4数据流

Vision Processor D4深度成像系统可向主机系统提供高质量的深度数据，支持多种图像格式和帧率。不同型号的产品在图像格式和帧率方面可能存在差异，具体信息可参考文档中的表格。

（三）深度视场角（FOV）

深度视场角是左右成像器视场的重叠区域，Vision Processor D4在此区域提供深度数据。视场角会根据分辨率和宽高比的不同而变化，可通过相关公式计算不同距离下的深度视场角。

（四）无效深度带

由于立体匹配算法以左成像器为参考，导致相机视场中存在一个未重叠的区域，该区域没有深度数据。无效深度带的宽度会随着相机/模块与场景的距离增加而减小，可通过相关公式计算。

（五）最小Z深度

最小Z深度是深度相机/模块到场景的最小距离，Vision Processor D4在此距离内提供深度数据。不同型号和分辨率下的最小Z深度不同，具体数值可参考文档中的表格。

（六）深度质量规格

采用一组基于准确性、数据有效性和时间稳定性的标准指标来量化深度质量，包括深度准确性、填充率、深度标准差和像素时间噪声等。不同型号和分辨率下的深度质量规格有所不同，具体信息可参考文档中的表格。

（七）深度起始点

深度起始点是深度测量的起始平面，对于深度模块和深度相机，其参考点有所不同。深度模块的参考点可以是镜头前端或模块背面，而深度相机的参考点是相机前盖玻璃。

（八）深度原点X-Y坐标

深度原点X-Y坐标是左成像器的X-Y中心，不同型号的深度模块和深度相机的深度原点X-Y坐标不同，具体数值可参考文档中的表格。

（九）深度相机功能

深度相机提供了一系列的深度图像设置，如手动曝光、手动增益、激光功率、自动曝光模式、自动曝光ROI、预设和元数据控制等。

（十）彩色相机功能

彩色相机提供了一系列的彩色图像设置，如自动曝光模式、自动曝光ROI、手动曝光时间、亮度、对比度、增益、色调、饱和度、锐度、伽马、白平衡温度控制和背光补偿等。

（十一）IMU规格

部分深度相机配备了惯性测量单元（IMU），可提供6自由度（6DoF）的数据。不同型号的IMU在加速度范围、加速度计采样率、陀螺仪范围、陀螺仪采样率和采样时间戳精度等方面可能存在差异。

四、固件和软件

（一）固件

固件包含Vision Processor D4的操作指令，启动时，Vision Processor D4会加载固件并对组件寄存器进行编程。固件更新时，固件工具会向Vision Processor D4发送设备固件更新命令，Vision Processor D4会进入固件更新模式。固件更新有一定的限制，更新引擎会根据最新安装的固件版本建立基线版本，允许返回之前版本或基线版本的次数有限。固件恢复时，可通过固件工具与恢复驱动通信，将DFU引脚置低并将成像系统重置为恢复模式。

（二）软件

英特尔RealSense SDK 2.0是一个跨平台的库，用于与英特尔RealSense D400系列相机进行交互。它包括英特尔RealSense Viewer、深度质量工具、调试工具、代码示例和软件包装器等，方便开发者进行相机的配置、数据采集和应用开发。

五、系统集成

（一）系统级框图

系统级框图展示了D415、D435、D435i、D455和D405等不同型号的系统架构，包括Vision Processor D4、立体深度模块、主机处理器和其他组件之间的连接关系。

（二）Vision Processor D4系统集成

有两种方式将Vision Processor D4集成到系统中：使用Vision Processor D4 Board或直接将Vision Processor D4和支持组件放置在主机处理器主板上。Vision Processor D4 Board简化了系统设计和集成，而将Vision Processor D4集成到主板上可实现空间优化。

（三）D4相机系统电源供应

D4相机系统必须确保立体深度模块和Vision Processor D4在同一电源轨上，以保证安全逻辑的锁定。设计时需遵循电源供应的实现建议，确保系统的稳定性和安全性。

（四）热管理

系统热设计必须确保组件的工作温度不超过限制。可通过热模型对Vision Processor D4 Board和深度模块进行热评估和验证。同时，需要注意立体深度模块的安装和固定，避免模块发生弯曲，影响深度数据的准确性。

（五）立体深度模块安装指南

根据不同的SKU，立体深度模块有多种安装方式，如螺丝安装/端部安装、支架安装/中间模块安装等。安装时需要使用热界面材料，确保良好的热传递，并保证模块与散热结构之间的间隙和压力合适。

（六）多相机硬件同步

英特尔RealSense D400系列支持多相机硬件同步信号，通过连接外部传感器同步连接器的引脚5（SYNC）和引脚9（Ground），可实现多个相机的数据同步采集。

（七）处理条件

在D4系统的组装和返工过程中，建议遵循JEDEC JESD625-A要求标准，提供一致的静电放电（ESD）保护水平。

六、平台设计指南

（一）Vision Processor D4在主板上的实现

设计指南提供了Vision Processor D4在Kaby Lake U/Y和Cherry Trail T4平台上的主板实现建议，包括USB主机接口、MIPI主机接口和USB集成外设等拓扑结构。

（二）Kaby Lake U和Kaby Lake Y平台

Kaby Lake U和Kaby Lake Y平台由处理器和平台控制器集线器（PCH）组成。设计时需要参考Kaby Lake U和Y平台设计指南，遵循阻抗标准和布线几何要求。

（三）Cherry Trail T4平台

Cherry Trail T4平台是一个集成了处理器核心、图形、内存控制器和I/O接口的系统级芯片解决方案。Vision Processor D4在该平台上的设计指南与Kaby Lake U和Y平台类似，需要参考Cherry Trail T4平台设计指南。

七、法规合规

（一）系统激光合规

英特尔RealSense深度相机和深度模块与英特尔RealSense Vision Processor D4 Board配对使用，并遵循集成指南，其认证可转移到系统，无需进行系统重新认证。但产品的用户手册中必须包含认证声明、解释标签和警示声明等内容。

（二）法规合规

产品需符合美国、欧盟、英国、加拿大、澳大利亚、日本、韩国和中国等不同地区的法规要求，包括激光产品认证、电气安全认证、电磁兼容性认证和环保合规等。

（三）生态合规

产品需符合中国RoHS指令，对产品中的有毒有害物质进行限制。同时，在欧盟，产品不能与家庭垃圾一起处理，应送到指定的回收点进行处理。

八、总结

英特尔RealSense D400系列深度相机系统具有丰富的功能和卓越的性能，为电子工程师们提供了广阔的设计空间。在设计过程中，需要充分考虑组件规格、功能特性、系统集成和法规合规等方面的要求，确保系统的稳定性、可靠性和安全性。同时，利用英特尔RealSense SDK 2.0等软件工具，可方便地进行相机的配置和应用开发，实现各种复杂的功能。希望本文能为电子工程师们在设计和开发基于英特尔RealSense D400系列深度相机系统的产品时提供有益的参考。

电子工程师们在实际应用中，还需要不断探索和实践，结合具体的需求和场景，优化设计方案，充分发挥英特尔RealSense D400系列深度相机系统的优势，为各个领域的发展做出贡献。你在使用过程中是否遇到过一些特殊的问题？又是如何解决的呢？欢迎在评论区分享你的经验和见解。