日B视频 亚洲,啪啪啪网站一区二区,91色情精品久久,日日噜狠狠色综合久,超碰人妻少妇97在线,999青青视频,亚洲一区二卡,让本一区二区视频,日韩网站推荐

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

螞蟻靈波開源LingBot-VLA真機(jī)后訓(xùn)練代碼

科技綠洲 ? 2026-05-14 10:13 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

近日,螞蟻集團(tuán)旗下具身智能公司靈波科技宣布,全面開源其具身基座模型LingBot-VLA的真機(jī)后訓(xùn)練工具鏈。開發(fā)團(tuán)隊(duì)可基于這套工具鏈,使用自有數(shù)據(jù)將LingBot-VLA快速遷移到自有機(jī)器人和具體任務(wù)中。這是繼今年1月開源模型權(quán)重之后,靈波科技在具身智能工程化落地上邁出的關(guān)鍵一步。

真機(jī)部署的最大痛點(diǎn):不是沒有模型,而是用不起來

當(dāng)前具身智能領(lǐng)域開源模型持續(xù)增多,但把模型真正部署到自己的機(jī)器人上,仍需要完成大量適配工作。不同機(jī)器人在機(jī)械臂構(gòu)型、末端執(zhí)行器、傳感器配置和控制接口等方面存在差異,開發(fā)團(tuán)隊(duì)往往需要圍繞真機(jī)部署開展大量定制化工程。這套工程鏈路往往是各團(tuán)隊(duì)的核心know-how,過去鮮有完整開放。

靈波科技此次開源的工具鏈,正是針對這一痛點(diǎn),覆蓋了真機(jī)適配過程中的四個(gè)關(guān)鍵環(huán)節(jié):

  • 數(shù)據(jù)處理模塊 :支持多源LeRobot數(shù)據(jù)合并、關(guān)節(jié)維度映射標(biāo)準(zhǔn)化,解決不同機(jī)器人數(shù)據(jù)格式不統(tǒng)一的問題
  • 真機(jī)訓(xùn)練配置 :面向真機(jī)場景優(yōu)化的訓(xùn)練參數(shù)與流程
  • 離線評測工具 :方便開發(fā)者在部署前快速驗(yàn)證模型表現(xiàn)
  • 真機(jī)部署模塊 :支持編譯加速,降低推理延遲

模型同時(shí)提供含深度信息與不含深度信息兩個(gè)版本,開發(fā)團(tuán)隊(duì)可根據(jù)自身硬件條件靈活選擇。

2萬小時(shí)真機(jī)數(shù)據(jù)打底,9種機(jī)器人構(gòu)型通吃

LingBot-VLA的底層能力來自于一組罕見的大規(guī)模真機(jī)數(shù)據(jù)集:約20000小時(shí)真實(shí)機(jī)器人操作數(shù)據(jù),覆蓋AgileX Cobot Magic、Galaxea R1Pro/R1Lite、AgiBot G1、Realman RS-02、樂聚Kuavo 4 Pro、青龍機(jī)器人、ARX Lift2以及Bimanual Franka共9種主流雙臂機(jī)器人構(gòu)型。

這些數(shù)據(jù)全部通過真實(shí)機(jī)器人遙操作采集,而非仿真生成。研究團(tuán)隊(duì)設(shè)計(jì)了半自動(dòng)化標(biāo)注流水線:人工標(biāo)注員按原子動(dòng)作對多視角視頻進(jìn)行切分,再利用Qwen3-VL等大模型生成精確的自然語言指令描述,最終轉(zhuǎn)化為(多視角圖像,語言指令,動(dòng)作序列)三元組。這意味著模型從"小時(shí)候"就見識(shí)了不同機(jī)械臂的運(yùn)動(dòng)方式、不同攝像頭的視角、不同夾爪的特性,為跨本體泛化打下了堅(jiān)實(shí)基礎(chǔ)。

更關(guān)鍵的是,團(tuán)隊(duì)首次在真實(shí)機(jī)器人領(lǐng)域系統(tǒng)性驗(yàn)證了VLA模型的Scaling Law。通過將預(yù)訓(xùn)練數(shù)據(jù)量從3000小時(shí)階梯式增加至20000小時(shí),實(shí)驗(yàn)表明模型性能隨數(shù)據(jù)量增加持續(xù)提升,且在20000小時(shí)時(shí)仍未觀察到飽和跡象。

150條示教數(shù)據(jù)就夠了,訓(xùn)練效率最高提升2.8倍

LingBot-VLA最讓開發(fā)者心動(dòng)的數(shù)字,可能是"150條"。

實(shí)驗(yàn)表明,僅需150條演示數(shù)據(jù),LingBot-VLA即可實(shí)現(xiàn)高質(zhì)量的任務(wù)遷移。在Agibot G1平臺(tái)上,僅用80條示范數(shù)據(jù)進(jìn)行后訓(xùn)練,其表現(xiàn)就已超越使用130條完整數(shù)據(jù)訓(xùn)練的π0.5。而且隨著數(shù)據(jù)量增加,LingBot-VLA與π0.5的性能差距進(jìn)一步拉大。

在訓(xùn)練效率方面,得益于底層代碼庫對FSDP分布式訓(xùn)練、混合精度、算子融合等的深度優(yōu)化,LingBot-VLA在8卡GPU配置下實(shí)現(xiàn)了單卡每秒261個(gè)樣本的吞吐量,訓(xùn)練效率達(dá)到StarVLA、OpenPI等主流框架的1.5至2.8倍。以往需要一個(gè)月完成的實(shí)驗(yàn),現(xiàn)在可能一到兩周就能搞定。

真機(jī)評測全面超越π0.5,已與多家廠商完成適配

在權(quán)威評測中,LingBot-VLA的表現(xiàn)已經(jīng)說明了一切。

在上海交通大學(xué)開源的GM-100真機(jī)基準(zhǔn)(100項(xiàng)真實(shí)操作任務(wù))測試中,LingBot-VLA在AgileX、Agibot G1、Galaxea R1Pro三個(gè)真實(shí)機(jī)器人平臺(tái)上,跨本體泛化平均成功率達(dá)到17.30%(引入深度信息后),相比π0.5的13.0%提升了4.3個(gè)百分點(diǎn);任務(wù)進(jìn)度得分達(dá)到35.41%,相比π0.5提升了7.76%。

在RoboTwin 2.0仿真基準(zhǔn)測試中,面對高度隨機(jī)化的復(fù)雜環(huán)境(光照、雜物、背景波動(dòng)),LingBot-VLA的清潔場景成功率達(dá)到88.56%,隨機(jī)場景成功率依然維持在85.34%,操作成功率比π0.5提升了近10個(gè)百分點(diǎn)。

目前,LingBot-VLA已與星海圖、松靈、樂聚等機(jī)器人廠商完成多機(jī)型適配驗(yàn)證,證明了模型在不同構(gòu)型機(jī)器人上的跨本體遷移能力。

代碼已全面開源

目前,LingBot-VLA的完整代碼庫已在GitHub開源(github.com/Robbyant/lingbot-vla),模型權(quán)重同步發(fā)布于Hugging Face和ModelScope。開源內(nèi)容包含模型權(quán)重、數(shù)據(jù)處理工具、高效微調(diào)代碼、離線評測系統(tǒng)、部署方案以及技術(shù)報(bào)告,旨在推動(dòng)具身智能技術(shù)的標(biāo)準(zhǔn)化發(fā)展,讓更多開發(fā)團(tuán)隊(duì)能以更低成本快速適配自有場景。

從20000小時(shí)真機(jī)數(shù)據(jù)的預(yù)訓(xùn)練,到150條示教數(shù)據(jù)的高效遷移,再到1.5至2.8倍的訓(xùn)練加速,靈波科技用這套開源工具鏈證明了一件事:具身智能的規(guī)?;涞?,不再只是實(shí)驗(yàn)室里的愿景,而是一條可以走通的工程路徑。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    214

    文章

    31574

    瀏覽量

    224134
  • 模型
    +關(guān)注

    關(guān)注

    1

    文章

    3852

    瀏覽量

    52308
  • 代碼
    +關(guān)注

    關(guān)注

    30

    文章

    4981

    瀏覽量

    74472
  • 螞蟻集團(tuán)
    +關(guān)注

    關(guān)注

    0

    文章

    109

    瀏覽量

    4735
  • 具身智能
    +關(guān)注

    關(guān)注

    0

    文章

    519

    瀏覽量

    912
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    小米開源VLA大模型訓(xùn)練全流程:亞毫米級(jí)操作突破引領(lǐng)機(jī)器人產(chǎn)業(yè)革命

    在機(jī)器人技術(shù)領(lǐng)域,小米集團(tuán)近日宣布開源VLA大模型Xiaomi-Robotics-0的訓(xùn)練全流程,這一突破性進(jìn)展標(biāo)志著智能機(jī)器人從實(shí)驗(yàn)室走向?qū)嶋H生產(chǎn)的"最后一公里"正式打通。該模型展
    的頭像 發(fā)表于 04-28 09:24 ?1261次閱讀

    螞蟻集團(tuán)全模態(tài)代碼算法團(tuán)隊(duì)自研OpAgent技術(shù)框架

    為應(yīng)對真實(shí) Web 環(huán)境的非結(jié)構(gòu)化復(fù)雜性、時(shí)序不穩(wěn)定性與交互隱式邏輯等挑戰(zhàn),螞蟻集團(tuán)全模態(tài)代碼算法團(tuán)隊(duì)提出了一套結(jié)合了多任務(wù)微調(diào)、在線強(qiáng)化學(xué)習(xí)與模塊化協(xié)作的綜合解決方案:OpAgent。
    的頭像 發(fā)表于 03-18 17:13 ?1059次閱讀
    <b class='flag-5'>螞蟻</b>集團(tuán)全模態(tài)<b class='flag-5'>代碼</b>算法團(tuán)隊(duì)自研OpAgent技術(shù)框架

    地平線正式開源HoloBrain VLA基座模型

    2月13日,地平線正式宣布其HoloBrain-0基座模型及框架全面開源。本次開源不僅包括HoloBrain-0核心算法,地平線同步開放完整基礎(chǔ)設(shè)施RoboOrchard。作為地平線機(jī)器人實(shí)驗(yàn)室
    的頭像 發(fā)表于 02-26 10:05 ?525次閱讀
    地平線正式<b class='flag-5'>開源</b>HoloBrain <b class='flag-5'>VLA</b>基座模型

    開發(fā)智能體調(diào)試與預(yù)覽---機(jī)測試

    用戶組,開發(fā)者需要?jiǎng)?chuàng)建一個(gè)用戶組并添加用于機(jī)測試的用戶信息,創(chuàng)建方式見下方真機(jī)測試用戶組列表部分。 3、再次在調(diào)試與預(yù)覽區(qū)域點(diǎn)擊【機(jī)測試
    發(fā)表于 02-09 15:37

    從炫技到量產(chǎn),具身智能要突破哪些瓶頸?

    LingBot-VLA 開源,具身智能的 Stable Diffusion 來了?
    的頭像 發(fā)表于 01-28 17:12 ?9199次閱讀
    從炫技到量產(chǎn),具身智能要突破哪些瓶頸?

    小藝智能體調(diào)試與預(yù)覽---機(jī)測試

    用戶組,開發(fā)者需要?jiǎng)?chuàng)建一個(gè)用戶組并添加用于機(jī)測試的用戶信息,創(chuàng)建方式見下方真機(jī)測試用戶組列表部分。 3、再次在調(diào)試與預(yù)覽區(qū)域點(diǎn)擊【機(jī)測試
    發(fā)表于 01-28 14:16

    奧比中光與螞蟻達(dá)成戰(zhàn)略合作意向

    1月27日,螞蟻集團(tuán)旗下螞蟻科技發(fā)布其首個(gè)開源的空間感知模型LingBot-Depth,并宣
    的頭像 發(fā)表于 01-28 12:43 ?503次閱讀
    奧比中光與<b class='flag-5'>螞蟻</b><b class='flag-5'>靈</b><b class='flag-5'>波</b>達(dá)成戰(zhàn)略合作意向

    VLA模型是基于預(yù)置規(guī)則來指導(dǎo)行動(dòng)嗎?

    [首發(fā)于智駕最前沿微信公眾號(hào)]今天繼續(xù)來回答小伙伴的提問,最近有一位小伙伴提問,VLA模型中的理解是不是也基于一些預(yù)置的規(guī)則指導(dǎo)行動(dòng)的?其實(shí)這個(gè)問題非常值得討論,今天智駕最前沿就帶大家詳細(xì)聊一聊
    的頭像 發(fā)表于 12-25 09:22 ?1423次閱讀
    <b class='flag-5'>VLA</b>模型是基于預(yù)置規(guī)則來指導(dǎo)行動(dòng)嗎?

    VLA與世界模型有什么不同?

    Language Action,VLA),另一些則致力于構(gòu)建并應(yīng)用世界模型(World Model)。這兩種路徑有什么不同? 什么是VLA,什么是世界模型 先說說VLA。VLA是英文
    的頭像 發(fā)表于 12-17 09:13 ?954次閱讀
    <b class='flag-5'>VLA</b>與世界模型有什么不同?

    VLA能解決自動(dòng)駕駛中的哪些問題?

    [首發(fā)于智駕最前沿微信公眾號(hào)]很多從事自動(dòng)駕駛的小伙伴應(yīng)該對VLA這個(gè)概念已經(jīng)非常熟悉了。VLA即“Visual-Language-Action”(視覺—語言—?jiǎng)幼鳎┠P?,它的核心是將視覺信息
    的頭像 發(fā)表于 11-25 08:53 ?675次閱讀
    <b class='flag-5'>VLA</b>能解決自動(dòng)駕駛中的哪些問題?

    VLA和世界模型,誰才是自動(dòng)駕駛的最優(yōu)解?

    [首發(fā)于智駕最前沿微信公眾號(hào)]隨著自動(dòng)駕駛技術(shù)發(fā)展,其實(shí)現(xiàn)路徑也呈現(xiàn)出兩種趨勢,一邊是以理想、小鵬、小米為代表的VLA(視覺—語言—行動(dòng))模型路線;另一邊則是以華為、蔚來為主導(dǎo)的世界模型(World
    的頭像 發(fā)表于 11-05 08:55 ?977次閱讀
    <b class='flag-5'>VLA</b>和世界模型,誰才是自動(dòng)駕駛的最優(yōu)解?

    基于大規(guī)模人類操作數(shù)據(jù)預(yù)訓(xùn)練VLA模型H-RDT

    近年來,機(jī)器人操作領(lǐng)域的VLA模型普遍基于跨本體機(jī)器人數(shù)據(jù)集預(yù)訓(xùn)練,這類方法存在兩大局限:不同機(jī)器人本體和動(dòng)作空間的差異導(dǎo)致統(tǒng)一訓(xùn)練困難;現(xiàn)有大規(guī)模機(jī)器人演示數(shù)據(jù)稀缺且質(zhì)量參差不齊。得益于近年來VR
    的頭像 發(fā)表于 08-21 09:56 ?1262次閱讀
    基于大規(guī)模人類操作數(shù)據(jù)預(yù)<b class='flag-5'>訓(xùn)練</b>的<b class='flag-5'>VLA</b>模型H-RDT

    開放原子開源基金會(huì)發(fā)布150余個(gè)開源項(xiàng)目應(yīng)用案例

    近日,在2025開放原子開源生態(tài)大會(huì)開幕式上,開放原子開源基金會(huì)發(fā)布了150余個(gè)開源項(xiàng)目應(yīng)用案例,涵蓋中國南方電網(wǎng)、中國移動(dòng)、京東集團(tuán)、安貞醫(yī)院、南京郵電大學(xué)、螞蟻密算等100余家單位
    的頭像 發(fā)表于 07-28 17:10 ?1333次閱讀

    VLA,是完全自動(dòng)駕駛的必經(jīng)之路?

    電子發(fā)燒友網(wǎng)報(bào)道 (文/梁浩斌)最近,智駕領(lǐng)域又出現(xiàn)多個(gè)“新名詞”,比如蔚來推出的NWM、多家車企和智駕供應(yīng)商都在宣傳的VLA。實(shí)際上,從各家的路線來看,隨著更大算力的芯片,比如小鵬、蔚來自研的智駕
    的頭像 發(fā)表于 06-18 00:06 ?9813次閱讀

    OCR識(shí)別訓(xùn)練完成給的是空壓縮包,為什么?

    OCR識(shí)別 一共弄了26張圖片,都標(biāo)注好了,點(diǎn)擊開始訓(xùn)練,顯示訓(xùn)練成功了,也將壓縮包發(fā)到郵箱了,下載下來,壓縮包里面是空的 OCR圖片20幾張圖太少了。麻煩您多添加點(diǎn),參考我們的ocr識(shí)別
    發(fā)表于 05-28 06:46
    和田县| 新营市| 资源县| 天柱县| 德江县| 鄯善县| 昭苏县| 湖南省| 子长县| 盐山县| 齐河县| 如皋市| 永和县| 随州市| 永靖县| 叶城县| 迭部县| 上林县| 蓝山县| 梁平县| 通道| 始兴县| 忻州市| 泰顺县| 江阴市| 鸡东县| 深泽县| 大石桥市| 西城区| 镇坪县| 哈密市| 育儿| 延津县| 新田县| 兴文县| 攀枝花市| 唐山市| 平定县| 绍兴县| 肇庆市| 建宁县|