英特爾RealSense D400系列深度相機(jī)系統(tǒng)：技術(shù)解析與設(shè)計(jì)指南

在當(dāng)今科技飛速發(fā)展的時(shí)代，深度相機(jī)在眾多領(lǐng)域發(fā)揮著至關(guān)重要的作用。英特爾RealSense D400系列深度相機(jī)系統(tǒng)憑借其卓越的性能和廣泛的應(yīng)用前景，成為了電子工程師們關(guān)注的焦點(diǎn)。本文將深入剖析該系列相機(jī)的技術(shù)特點(diǎn)、組件規(guī)格、功能特性以及系統(tǒng)集成等方面，為電子工程師們提供全面的設(shè)計(jì)參考。

文件下載：82635DSD455.pdf

一、產(chǎn)品概述

英特爾RealSense D400系列是一套基于立體視覺(jué)技術(shù)的深度相機(jī)系統(tǒng)，具有小巧的體積和易于集成的特點(diǎn)，為系統(tǒng)集成商提供了極大的設(shè)計(jì)靈活性。該系列涵蓋了多種產(chǎn)品SKU，包括深度模塊和深度相機(jī)，適用于自主移動(dòng)機(jī)器人、自動(dòng)導(dǎo)引車(chē)、無(wú)人機(jī)、碰撞避免、家庭監(jiān)控、3D掃描、數(shù)字標(biāo)牌和體積測(cè)量等眾多領(lǐng)域。

（一）主要特點(diǎn)

1. 第二代立體深度相機(jī)系統(tǒng)：采用先進(jìn)的立體視覺(jué)技術(shù)，能夠精確計(jì)算物體的深度信息。
2. 專(zhuān)用的英特爾RealSense Vision Processor D4：具備強(qiáng)大的處理能力，可實(shí)現(xiàn)高效的深度處理和圖像分析。
3. 紅外激光投影儀系統(tǒng)：通過(guò)投射靜態(tài)紅外圖案，提高在低紋理場(chǎng)景下的深度測(cè)量精度。
4. 全高清分辨率圖像傳感器：提供清晰、準(zhǔn)確的圖像數(shù)據(jù)。
5. 主動(dòng)電源管理：有效降低功耗，延長(zhǎng)設(shè)備的使用時(shí)間。
6. 多種立體深度模塊選項(xiàng)：可根據(jù)不同的應(yīng)用需求選擇合適的模塊。

（二）產(chǎn)品SKU

1. 深度模塊：包括D400、D410、D415、D430、D450和D401等不同型號(hào)，各型號(hào)在基線、成像器類(lèi)型、深度視場(chǎng)角、紅外投影儀和顏色傳感器等方面存在差異。
2. 深度相機(jī)：有D415、D435、D435i、D455和D405等型號(hào)，具備不同的性能特點(diǎn)和功能配置。

二、組件規(guī)格

（一）Vision Processor D4

Vision Processor D4是該系統(tǒng)的核心組件，主要負(fù)責(zé)深度立體視覺(jué)處理。它采用28nm CMOS工藝技術(shù)，具有5個(gè)MIPI相機(jī)端口，每個(gè)MIPI通道的數(shù)據(jù)傳輸速率可達(dá)750 Mbps。支持USB 2.0/USB 3.1 Gen 1或MIPI接口與主機(jī)系統(tǒng)連接，具備圖像校正、紅外投影儀控制、串行外設(shè)接口和集成I2C端口等功能。

1. 電源要求

2. 電源時(shí)序

Vision Processor D4的電源時(shí)序要求如下：

• 保持Vision Processor D4處于復(fù)位狀態(tài)。
• 先對(duì)3.3V電源軌進(jìn)行上電。
• 接著對(duì)0.9V電源軌進(jìn)行上電。
• 最后對(duì)1.8V電源軌進(jìn)行上電。
• 釋放Vision Processor D4的復(fù)位信號(hào)。

（二）立體深度模塊

立體深度模塊包含左右成像器、紅外投影儀、顏色傳感器、深度模塊連接器、加強(qiáng)件、標(biāo)簽和其他組件。

1. 左右成像器

根據(jù)不同的型號(hào)，成像器分為標(biāo)準(zhǔn)和寬視場(chǎng)兩種類(lèi)型，具有不同的圖像傳感器、像素、視野角和失真率等特性。例如，D400、D410和D415采用標(biāo)準(zhǔn)成像器，而D430、D450和D401采用寬視場(chǎng)成像器。

2. 紅外投影儀

紅外投影儀通過(guò)投射靜態(tài)紅外圖案，提高立體相機(jī)系統(tǒng)在低紋理場(chǎng)景下的深度測(cè)量能力。分為標(biāo)準(zhǔn)和寬視場(chǎng)兩種類(lèi)型，滿足不同的應(yīng)用需求。

3. 顏色傳感器

顏色傳感器可生成彩色圖像，并提供紋理信息，用于疊加在深度圖像上創(chuàng)建彩色點(diǎn)云或用于3D模型重建。不同型號(hào)的顏色傳感器在圖像傳感器、分辨率、視野角和失真率等方面存在差異。

4. 機(jī)械尺寸

不同型號(hào)的立體深度模塊具有不同的機(jī)械尺寸，設(shè)計(jì)時(shí)需要根據(jù)實(shí)際需求進(jìn)行選擇。

（三）Vision Processor D4 Board

Vision Processor D4 Board為系統(tǒng)集成商提供了一種便捷的方式，將Vision Processor D4集成到系統(tǒng)中。它包含Vision Processor D4、16 Mb串行閃存、24 MHz晶體、Realtek ISP、深度模塊插座、USB Type-C接口、外部傳感器同步連接器、電壓調(diào)節(jié)器和安裝孔等組件。

1. 機(jī)械尺寸

Vision Processor D4 Board有不同的版本，如V1、V3和V4，各版本的機(jī)械尺寸有所不同。

2. 電源要求

（四）深度相機(jī)

深度相機(jī)集成了Vision Processor D4、立體深度模塊、RGB傳感器和慣性測(cè)量單元（IMU）等組件，具有不同的性能特點(diǎn)和功能配置。

1. 機(jī)械尺寸

不同型號(hào)的深度相機(jī)具有不同的機(jī)械尺寸，設(shè)計(jì)時(shí)需要考慮安裝空間和布局。

2. 熱管理

深度相機(jī)的熱管理非常重要，需要確保組件的工作溫度不超過(guò)限制?？刹捎帽粍?dòng)冷卻和主動(dòng)冷卻等方式進(jìn)行散熱，如使用散熱支架、散熱片和風(fēng)扇等。

三、功能規(guī)格

（一）供應(yīng)商識(shí)別和設(shè)備識(shí)別

每個(gè)深度模塊和深度相機(jī)都有唯一的供應(yīng)商ID和設(shè)備ID，用于識(shí)別和區(qū)分不同的產(chǎn)品。

（二）Vision Processor D4數(shù)據(jù)流

Vision Processor D4深度成像系統(tǒng)可向主機(jī)系統(tǒng)提供高質(zhì)量的深度數(shù)據(jù)，支持多種圖像格式和幀率。不同型號(hào)的產(chǎn)品在圖像格式和幀率方面可能存在差異，具體信息可參考文檔中的表格。

（三）深度視場(chǎng)角（FOV）

深度視場(chǎng)角是左右成像器視場(chǎng)的重疊區(qū)域，Vision Processor D4在此區(qū)域提供深度數(shù)據(jù)。視場(chǎng)角會(huì)根據(jù)分辨率和寬高比的不同而變化，可通過(guò)相關(guān)公式計(jì)算不同距離下的深度視場(chǎng)角。

（四）無(wú)效深度帶

由于立體匹配算法以左成像器為參考，導(dǎo)致相機(jī)視場(chǎng)中存在一個(gè)未重疊的區(qū)域，該區(qū)域沒(méi)有深度數(shù)據(jù)。無(wú)效深度帶的寬度會(huì)隨著相機(jī)/模塊與場(chǎng)景的距離增加而減小，可通過(guò)相關(guān)公式計(jì)算。

（五）最小Z深度

最小Z深度是深度相機(jī)/模塊到場(chǎng)景的最小距離，Vision Processor D4在此距離內(nèi)提供深度數(shù)據(jù)。不同型號(hào)和分辨率下的最小Z深度不同，具體數(shù)值可參考文檔中的表格。

（六）深度質(zhì)量規(guī)格

采用一組基于準(zhǔn)確性、數(shù)據(jù)有效性和時(shí)間穩(wěn)定性的標(biāo)準(zhǔn)指標(biāo)來(lái)量化深度質(zhì)量，包括深度準(zhǔn)確性、填充率、深度標(biāo)準(zhǔn)差和像素時(shí)間噪聲等。不同型號(hào)和分辨率下的深度質(zhì)量規(guī)格有所不同，具體信息可參考文檔中的表格。

（七）深度起始點(diǎn)

深度起始點(diǎn)是深度測(cè)量的起始平面，對(duì)于深度模塊和深度相機(jī)，其參考點(diǎn)有所不同。深度模塊的參考點(diǎn)可以是鏡頭前端或模塊背面，而深度相機(jī)的參考點(diǎn)是相機(jī)前蓋玻璃。

（八）深度原點(diǎn)X-Y坐標(biāo)

深度原點(diǎn)X-Y坐標(biāo)是左成像器的X-Y中心，不同型號(hào)的深度模塊和深度相機(jī)的深度原點(diǎn)X-Y坐標(biāo)不同，具體數(shù)值可參考文檔中的表格。

（九）深度相機(jī)功能

深度相機(jī)提供了一系列的深度圖像設(shè)置，如手動(dòng)曝光、手動(dòng)增益、激光功率、自動(dòng)曝光模式、自動(dòng)曝光ROI、預(yù)設(shè)和元數(shù)據(jù)控制等。

（十）彩色相機(jī)功能

彩色相機(jī)提供了一系列的彩色圖像設(shè)置，如自動(dòng)曝光模式、自動(dòng)曝光ROI、手動(dòng)曝光時(shí)間、亮度、對(duì)比度、增益、色調(diào)、飽和度、銳度、伽馬、白平衡溫度控制和背光補(bǔ)償?shù)取?/p>

（十一）IMU規(guī)格

部分深度相機(jī)配備了慣性測(cè)量單元（IMU），可提供6自由度（6DoF）的數(shù)據(jù)。不同型號(hào)的IMU在加速度范圍、加速度計(jì)采樣率、陀螺儀范圍、陀螺儀采樣率和采樣時(shí)間戳精度等方面可能存在差異。

四、固件和軟件

（一）固件

固件包含Vision Processor D4的操作指令，啟動(dòng)時(shí)，Vision Processor D4會(huì)加載固件并對(duì)組件寄存器進(jìn)行編程。固件更新時(shí)，固件工具會(huì)向Vision Processor D4發(fā)送設(shè)備固件更新命令，Vision Processor D4會(huì)進(jìn)入固件更新模式。固件更新有一定的限制，更新引擎會(huì)根據(jù)最新安裝的固件版本建立基線版本，允許返回之前版本或基線版本的次數(shù)有限。固件恢復(fù)時(shí)，可通過(guò)固件工具與恢復(fù)驅(qū)動(dòng)通信，將DFU引腳置低并將成像系統(tǒng)重置為恢復(fù)模式。

（二）軟件

英特爾RealSense SDK 2.0是一個(gè)跨平臺(tái)的庫(kù)，用于與英特爾RealSense D400系列相機(jī)進(jìn)行交互。它包括英特爾RealSense Viewer、深度質(zhì)量工具、調(diào)試工具、代碼示例和軟件包裝器等，方便開(kāi)發(fā)者進(jìn)行相機(jī)的配置、數(shù)據(jù)采集和應(yīng)用開(kāi)發(fā)。

五、系統(tǒng)集成

（一）系統(tǒng)級(jí)框圖

系統(tǒng)級(jí)框圖展示了D415、D435、D435i、D455和D405等不同型號(hào)的系統(tǒng)架構(gòu)，包括Vision Processor D4、立體深度模塊、主機(jī)處理器和其他組件之間的連接關(guān)系。

（二）Vision Processor D4系統(tǒng)集成

有兩種方式將Vision Processor D4集成到系統(tǒng)中：使用Vision Processor D4 Board或直接將Vision Processor D4和支持組件放置在主機(jī)處理器主板上。Vision Processor D4 Board簡(jiǎn)化了系統(tǒng)設(shè)計(jì)和集成，而將Vision Processor D4集成到主板上可實(shí)現(xiàn)空間優(yōu)化。

（三）D4相機(jī)系統(tǒng)電源供應(yīng)

D4相機(jī)系統(tǒng)必須確保立體深度模塊和Vision Processor D4在同一電源軌上，以保證安全邏輯的鎖定。設(shè)計(jì)時(shí)需遵循電源供應(yīng)的實(shí)現(xiàn)建議，確保系統(tǒng)的穩(wěn)定性和安全性。

（四）熱管理

系統(tǒng)熱設(shè)計(jì)必須確保組件的工作溫度不超過(guò)限制?？赏ㄟ^(guò)熱模型對(duì)Vision Processor D4 Board和深度模塊進(jìn)行熱評(píng)估和驗(yàn)證。同時(shí)，需要注意立體深度模塊的安裝和固定，避免模塊發(fā)生彎曲，影響深度數(shù)據(jù)的準(zhǔn)確性。

（五）立體深度模塊安裝指南

根據(jù)不同的SKU，立體深度模塊有多種安裝方式，如螺絲安裝/端部安裝、支架安裝/中間模塊安裝等。安裝時(shí)需要使用熱界面材料，確保良好的熱傳遞，并保證模塊與散熱結(jié)構(gòu)之間的間隙和壓力合適。

（六）多相機(jī)硬件同步

英特爾RealSense D400系列支持多相機(jī)硬件同步信號(hào)，通過(guò)連接外部傳感器同步連接器的引腳5（SYNC）和引腳9（Ground），可實(shí)現(xiàn)多個(gè)相機(jī)的數(shù)據(jù)同步采集。

（七）處理?xiàng)l件

在D4系統(tǒng)的組裝和返工過(guò)程中，建議遵循JEDEC JESD625-A要求標(biāo)準(zhǔn)，提供一致的靜電放電（ESD）保護(hù)水平。

六、平臺(tái)設(shè)計(jì)指南

（一）Vision Processor D4在主板上的實(shí)現(xiàn)

設(shè)計(jì)指南提供了Vision Processor D4在Kaby Lake U/Y和Cherry Trail T4平臺(tái)上的主板實(shí)現(xiàn)建議，包括USB主機(jī)接口、MIPI主機(jī)接口和USB集成外設(shè)等拓?fù)浣Y(jié)構(gòu)。

（二）Kaby Lake U和Kaby Lake Y平臺(tái)

Kaby Lake U和Kaby Lake Y平臺(tái)由處理器和平臺(tái)控制器集線器（PCH）組成。設(shè)計(jì)時(shí)需要參考Kaby Lake U和Y平臺(tái)設(shè)計(jì)指南，遵循阻抗標(biāo)準(zhǔn)和布線幾何要求。

（三）Cherry Trail T4平臺(tái)

Cherry Trail T4平臺(tái)是一個(gè)集成了處理器核心、圖形、內(nèi)存控制器和I/O接口的系統(tǒng)級(jí)芯片解決方案。Vision Processor D4在該平臺(tái)上的設(shè)計(jì)指南與Kaby Lake U和Y平臺(tái)類(lèi)似，需要參考Cherry Trail T4平臺(tái)設(shè)計(jì)指南。

七、法規(guī)合規(guī)

（一）系統(tǒng)激光合規(guī)

英特爾RealSense深度相機(jī)和深度模塊與英特爾RealSense Vision Processor D4 Board配對(duì)使用，并遵循集成指南，其認(rèn)證可轉(zhuǎn)移到系統(tǒng)，無(wú)需進(jìn)行系統(tǒng)重新認(rèn)證。但產(chǎn)品的用戶手冊(cè)中必須包含認(rèn)證聲明、解釋標(biāo)簽和警示聲明等內(nèi)容。

（二）法規(guī)合規(guī)

產(chǎn)品需符合美國(guó)、歐盟、英國(guó)、加拿大、澳大利亞、日本、韓國(guó)和中國(guó)等不同地區(qū)的法規(guī)要求，包括激光產(chǎn)品認(rèn)證、電氣安全認(rèn)證、電磁兼容性認(rèn)證和環(huán)保合規(guī)等。

（三）生態(tài)合規(guī)

產(chǎn)品需符合中國(guó)RoHS指令，對(duì)產(chǎn)品中的有毒有害物質(zhì)進(jìn)行限制。同時(shí)，在歐盟，產(chǎn)品不能與家庭垃圾一起處理，應(yīng)送到指定的回收點(diǎn)進(jìn)行處理。

八、總結(jié)

英特爾RealSense D400系列深度相機(jī)系統(tǒng)具有豐富的功能和卓越的性能，為電子工程師們提供了廣闊的設(shè)計(jì)空間。在設(shè)計(jì)過(guò)程中，需要充分考慮組件規(guī)格、功能特性、系統(tǒng)集成和法規(guī)合規(guī)等方面的要求，確保系統(tǒng)的穩(wěn)定性、可靠性和安全性。同時(shí)，利用英特爾RealSense SDK 2.0等軟件工具，可方便地進(jìn)行相機(jī)的配置和應(yīng)用開(kāi)發(fā)，實(shí)現(xiàn)各種復(fù)雜的功能。希望本文能為電子工程師們?cè)谠O(shè)計(jì)和開(kāi)發(fā)基于英特爾RealSense D400系列深度相機(jī)系統(tǒng)的產(chǎn)品時(shí)提供有益的參考。

電子工程師們?cè)趯?shí)際應(yīng)用中，還需要不斷探索和實(shí)踐，結(jié)合具體的需求和場(chǎng)景，優(yōu)化設(shè)計(jì)方案，充分發(fā)揮英特爾RealSense D400系列深度相機(jī)系統(tǒng)的優(yōu)勢(shì)，為各個(gè)領(lǐng)域的發(fā)展做出貢獻(xiàn)。你在使用過(guò)程中是否遇到過(guò)一些特殊的問(wèn)題？又是如何解決的呢？歡迎在評(píng)論區(qū)分享你的經(jīng)驗(yàn)和見(jiàn)解。