導(dǎo)語(yǔ)

友思特合作伙伴StereolabsZED SDK 5.1突破機(jī)器人平臺(tái)實(shí)時(shí)多相機(jī)感知技術(shù)極限，全新重構(gòu)采集與錄制管道，升級(jí)增強(qiáng)型位姿追蹤功能，新增近距深度感知能力，且官方原生支持 Jetson Thor 平臺(tái)。本次版本迭代讓 ZED 全生態(tài)體系，在工業(yè)場(chǎng)景中運(yùn)行更高速、更穩(wěn)定、更全能。

全新升級(jí)亮點(diǎn)

1. 為機(jī)器人場(chǎng)景重構(gòu)高性能采集系統(tǒng)

圖像采集系統(tǒng)完成全新重構(gòu)，全面支持實(shí)時(shí)低延遲多相機(jī)系統(tǒng)。ZED SDK 5.1 全新采集架構(gòu)，在采集、錄制、流媒體傳輸過(guò)程中，實(shí)現(xiàn)性能、可靠性雙提升，延遲進(jìn)一步降低。

在 Jetson 嵌入式設(shè)備上，流傳輸延遲現(xiàn)已低至100 毫秒以內(nèi)，為自主控制系統(tǒng)與遠(yuǎn)程操控打造更流暢的反饋閉環(huán)。錄制負(fù)載亦大幅優(yōu)化，SVO2 錄制模式的系統(tǒng)資源占用更少，長(zhǎng)時(shí)連續(xù)錄制的穩(wěn)定性顯著增強(qiáng)。

NVIDIA Jetson AGX Thor 開(kāi)發(fā)套件和 ZED 2i

基于 ZED Driver 1.3.1 版本，我們新增PREEMPT_RT 實(shí)時(shí)搶占內(nèi)核模式支持，為高時(shí)效性關(guān)鍵應(yīng)用提供更強(qiáng)的操控性與低延遲響應(yīng)能力，適配全系列 ZED Box、ZED Box Mini 及 NVIDIA AGX Orin 開(kāi)發(fā)套件。

2. 原生支持 Jetson Thor 平臺(tái)

ZED SDK 性能

ZED SDK 5.1 同步適配英偉達(dá)全新嵌入式平臺(tái) Jetson Thor，兼容 JetPack 7 開(kāi)發(fā)套件，并搭載基于 Ubuntu 24.04 系統(tǒng)的全新板級(jí)支持包（BSP）。ZED 相機(jī)可充分發(fā)揮 Thor 的算力優(yōu)勢(shì)，性能提升最高達(dá) 2.5 倍，賦能邊緣端實(shí)現(xiàn)更豐富的感知能力（硬件編解碼功能將隨后續(xù) JetPack 版本更新正式上線）。

3. ZED Studio 全新登場(chǎng)：?jiǎn)螒?yīng)用集成，無(wú)限相機(jī)掌控

多相機(jī)感知已成為新一代機(jī)器人技術(shù)的標(biāo)配方案。全新打造的 ZED Studio 工具，將所有相機(jī)、流傳輸及 SVO 文件管理功能，一站式整合至單款一體化應(yīng)用中。

全新 ZED Studio 多相機(jī)SDK

可同時(shí)查看并操控多臺(tái)相機(jī)，錄制同步數(shù)據(jù)流，并按需自定義布局，統(tǒng)籌回放內(nèi)容與實(shí)時(shí)畫(huà)面。

ZED Studio 核心功能支持：

?多相機(jī)實(shí)時(shí)可視化與同步錄制

?同步回放及流傳輸管理

?相機(jī)參數(shù)群組統(tǒng)一管控

?自動(dòng)化命令行啟動(dòng)配置

Windows 系統(tǒng)下，ZED Studio 已替代舊版查看器，成為打開(kāi) SVO 文件的默認(rèn)應(yīng)用程序 —— 為 ZED 生態(tài)管理打造統(tǒng)一跨平臺(tái)操作界面，體驗(yàn)更一致。

4. Isaac? ROS 集成：ROS 2 實(shí)時(shí)性能全面加速

ZED ROS 2 封裝包完成重磅更新，實(shí)現(xiàn)與英偉達(dá) ?Isaac? ROS 框架無(wú)縫集成，助力開(kāi)發(fā)者充分利用英偉達(dá) GPU 算力，高效完成實(shí)時(shí)感知及計(jì)算機(jī)視覺(jué)任務(wù)。

依托 NITROS（英偉達(dá) ?Isaac? ROS 傳輸協(xié)議），相較傳統(tǒng) CPU 傳輸方案，該封裝包的圖像話題發(fā)布延遲降低高達(dá) 90%。這一性能躍升源于 GPU 內(nèi)存共享機(jī)制，可徹底消除 CPU 與 GPU 之間高損耗的數(shù)據(jù)拷貝環(huán)節(jié)。

最終實(shí)現(xiàn)：數(shù)據(jù)流傳輸提速、CPU/GPU 算力負(fù)載降低，為高負(fù)載機(jī)器人及 AI 應(yīng)用，打造更流暢、更高效的 ROS 2 處理管道。

5. 近距深度感知能力重磅升級(jí)

全新升級(jí)的深度模塊，實(shí)現(xiàn)厘米級(jí)近距感知精度，成為操作、裝配、檢測(cè)類機(jī)器人的核心技術(shù)突破。即便目標(biāo)物體僅距相機(jī)數(shù)厘米，也能輸出穩(wěn)定無(wú)偽影的深度數(shù)據(jù) — 完美適配機(jī)械臂、人形機(jī)器人、夾爪、末端執(zhí)行器及近場(chǎng)場(chǎng)景重建等應(yīng)用場(chǎng)景。

近場(chǎng)場(chǎng)景下的自校準(zhǔn)能力同步優(yōu)化，對(duì)復(fù)雜工況的適配性大幅提升，可自動(dòng)診斷并修正相機(jī)潛在標(biāo)定偏差，保障設(shè)備7×24 小時(shí)穩(wěn)定可靠運(yùn)行。

RGB 圖像（DROID 數(shù)據(jù)集） ZED SDK 5.0 版深度圖 ?VS ZED SDK 5.1 版深度圖

6. 面向?qū)嶋H部署場(chǎng)景的高魯棒性 SLAM 方案

第三代位姿追蹤模塊全面強(qiáng)化，抗動(dòng)態(tài)遮擋、抗圖像失真能力大幅提升，可從容應(yīng)對(duì)更復(fù)雜的環(huán)境與動(dòng)態(tài)移動(dòng)物體，同時(shí)始終保持精準(zhǔn)定位。

視覺(jué) SLAM 關(guān)鍵幀

全新SPATIAL_MEMORY 空間內(nèi)存狀態(tài)功能，可在相機(jī)重定位及回環(huán)檢測(cè)過(guò)程中提供更詳實(shí)的狀態(tài)反饋，助力工程師便捷監(jiān)控定位與追蹤性能。

更新后的示例可視化工具中新增的視覺(jué) SLAM 2D模式

ZED SDK 5.1 新增2D 地面追蹤模式，專為地面移動(dòng)機(jī)器人及輪式設(shè)備打造。該模式將追蹤范圍約束于運(yùn)動(dòng)平面，有效減少定位漂移，大幅提升廠房車間、室內(nèi)導(dǎo)航等平面場(chǎng)景下的定位精度。

此外，SLAM 代碼示例同步升級(jí)，搭載更直觀的可視化界面，各類定位狀態(tài)與關(guān)鍵事件均可一鍵清晰呈現(xiàn)。

7. ZED X One 采集性能跨越式提升

依托全新實(shí)時(shí)虛擬立體視覺(jué) API（Live Virtual Stereo API），雙 ZED X One 相機(jī)搭建立體成像對(duì)的效率實(shí)現(xiàn)質(zhì)的飛躍，CPU 算力效率提升約 2.5 倍。開(kāi)發(fā)者可通過(guò) SDK 直接配置虛擬成像對(duì)，甚至支持未標(biāo)定模式開(kāi)展 SVO 錄制或原始圖像流傳輸，滿足后期校準(zhǔn)需求。

此次升級(jí)也正式宣告 ZED 媒體服務(wù)器（ZED Media Server）時(shí)代落幕，其原有功能已全面整合至 SDK 原生虛擬立體視覺(jué)工具中，且性能實(shí)現(xiàn)全面超越。

優(yōu)化后的虛擬立體視覺(jué) CPU 負(fù)載

8. 原生魚(yú)眼標(biāo)定功能全新上線

ZED SDK 5.1 原生支持 OpenCV 魚(yú)眼標(biāo)定文件，實(shí)現(xiàn) ZED SDK 系列相機(jī)對(duì)魚(yú)眼鏡頭的直接適配應(yīng)用。這一功能可助力開(kāi)發(fā)者輕松將廣角魚(yú)眼鏡頭集成至現(xiàn)有業(yè)務(wù)流程，是搭建大視場(chǎng)角導(dǎo)航系統(tǒng)或全景視覺(jué)設(shè)備的核心必備能力。如需為 ZED 相機(jī)搭配魚(yú)眼鏡頭完成標(biāo)定，可查閱 GitHub 官方開(kāi)源倉(cāng)庫(kù)。

原始魚(yú)眼視圖 校正后魚(yú)眼視圖

9. 更廣泛的兼容性，更精簡(jiǎn)的安裝程序

ZED SDK 5.1 新增多項(xiàng)核心開(kāi)發(fā)環(huán)境原生支持：

?支持 CUDA 13

?支持 JetPack 7

?支持 Python 3.14

?支持 C++17 及 C++20 標(biāo)準(zhǔn)

Python 開(kāi)發(fā)者可通過(guò)CuPy 集成實(shí)現(xiàn) GPU 數(shù)據(jù)傳輸提速，配套全新示例腳本，直觀展示深度感知與目標(biāo)檢測(cè)功能的優(yōu)化調(diào)用方式。

SDK 安裝包同步完成輕量化優(yōu)化，Linux 系統(tǒng)下搭載 TensorRT 10 的安裝包體積縮減 40%；Docker 鏡像實(shí)現(xiàn)版本化管理，助力部署流程更便捷、開(kāi)發(fā)環(huán)境復(fù)刻更高效。

結(jié)語(yǔ)：新一代空間AI感知方案

友思特合作伙伴Stereolabs ZED SDK 5.1 絕非只是進(jìn)行了簡(jiǎn)單的版本迭代，更是空間 AI 技術(shù)在效率、精度、靈活性上的跨越式升級(jí)。從優(yōu)化的多相機(jī)采集、厘米級(jí)近距深度感知、增強(qiáng)型 SLAM 算法，到 Jetson Thor 平臺(tái)原生支持、全新 ZED Studio 工具上線，ZED 全生態(tài)模塊均完成深度迭代，助力您打造更高速、更智能、更可靠的視覺(jué)感知系統(tǒng)。

即刻體驗(yàn)全新能力？立即下載ZED SDK 5.1，突破機(jī)器人與智能應(yīng)用的視覺(jué)感知邊界。

審核編輯 黃宇