引言

2025年6月，全球計算機視覺與人工智能領(lǐng)域的頂級盛會——CVPR（IEEE/CVF Conference on Computer Vision and Pattern Recognition）將重磅亮相，本屆會議聚焦“生成式人工智能時代的多智能體具身系統(tǒng)”，深入探討人工智能技術(shù)的前沿發(fā)展與應用。作為CVPR協(xié)作智能workshop的核心賽事之一，RoboTwin雙臂協(xié)作競賽備受學界關(guān)注。

RoboTwin雙臂協(xié)作挑戰(zhàn)賽專注于雙臂機器人操作領(lǐng)域，將基于RoboTwin平臺進行剛體操作以及觸覺操作兩個賽道的賽題評測，旨在通過仿真和實戰(zhàn)任務(wù)推動雙臂操作技術(shù)的前沿發(fā)展。本次競賽由上海交通大學、香港大學、地瓜機器人多家單位聯(lián)合主辦，地瓜機器人承擔了本次賽事中的基礎(chǔ)設(shè)施建設(shè)工作，為參賽團隊提供了穩(wěn)定、高效、并行多卡的仿真評測平臺，最多可支持超百支隊伍實時在線PK各家的具身操作模型。

亮點速覽

難度升級，聚焦真實場景

競賽基于RoboTwin平臺，要求參賽者開發(fā)雙臂機器人控制策略，完成復雜物體操作任務(wù)，如工具使用、物體交接、雙臂動作協(xié)調(diào)等。任務(wù)數(shù)據(jù)融合了真實遙操作數(shù)據(jù)與數(shù)字孿生生成的合成數(shù)據(jù)，覆蓋多樣化場景，考驗算法在模擬與真實環(huán)境間的泛化能力。

技術(shù)挑戰(zhàn)：需解決雙臂運動規(guī)劃中的動力學干擾、多模態(tài)感知融合、任務(wù)序列優(yōu)化等難題。

獎金豐厚，國際影響力加持

參與競賽的團隊不僅獲得豐厚獎金，還將在CVPR Workshop現(xiàn)場展示成果，與全球頂尖學者、企業(yè)代表直接對話，提升技術(shù)影響力，優(yōu)秀團隊還將有機會獲得張江集團赴美參賽資助。

First Prize ($1500)

Second Prize ($1000)

Third Prize ($500)

突破限制，在線PK具身模型

本次競賽的模擬賽環(huán)節(jié)突破了傳統(tǒng)仿真框架強依賴顯示器及實體機環(huán)境的限制，地瓜機器人云平臺為參賽團隊提供了穩(wěn)定、高效、并行多卡的仿真評測平臺，最多可支持超百支隊伍實時在線PK各家的具身操作模型。本次競賽的評測平臺在競賽后也將長期對外開放，地瓜機器人作為業(yè)內(nèi)領(lǐng)先的軟硬件機器人通用底座提供商，甘愿做好底層賦能，助力改善算法效果驗證碎片化的現(xiàn)狀，加速具身智能的技術(shù)迭代。

參賽攻略

比賽內(nèi)容

比賽采用RoboTwin仿真平臺和Cobot-Magic實體平臺，分為模擬賽和線下賽兩個階段，旨在解決模擬和現(xiàn)實世界環(huán)境中機器人操作的復雜性問題。模擬賽階段的剛性物體操作項目著重于對剛性對象的精確操縱，要求參與者開發(fā)算法，使機器人能夠以受控的方式掌握，移動和與剛性對象進行交互。觸覺對象操縱賽道由于團隊數(shù)量過多和后勤限制已取消報名，作為本次競賽的bonus項。

第一階段：模擬賽階段（2025年3月20日-4月30日）

• 5個剛性物體操作任務(wù)，1個觸覺操作任務(wù)（作為加分項）
• 任務(wù)包括：放置杯子、放置鞋子、堆疊碗碟、堆疊積木、投放瓶子等

第二階段：現(xiàn)實賽階段（2025年4月30日-6月11日）

• 僅模擬賽中排名前5的隊伍可進入現(xiàn)實賽
• 現(xiàn)實賽任務(wù)將基于模擬賽任務(wù)設(shè)計，但在真實環(huán)境中進行

評分細則

1）模擬賽評分（總計100分）

• 放置杯子任務(wù)（10分）：將杯子準確放置在杯墊上
• 放置鞋子任務(wù)（20分）：第一只鞋子成功放置得6分，第二只鞋子成功放置額外得14分
• 堆疊碗碟任務(wù)（20分）：堆疊兩個碗得6分，堆疊第三個碗額外得14分
• 堆疊積木任務(wù)（25分）：堆疊兩個積木得10分，堆疊第三個積木額外得15分
• 投放瓶子任務(wù)（25分）：
• 成功投放全部三個瓶子得25分
• 成功投放兩個瓶子得12.5分
• 成功投放一個瓶子得5分
• 觸覺分類任務(wù)（5分額外加分）：成功區(qū)分矩形體和25面棱柱

2）模擬賽評估方法

• 使用地瓜機器人云平臺自動進行評估
• 每個任務(wù)進行100次測試（觸覺任務(wù)10次），取平均分數(shù)
• 實時更新排行榜，參賽團隊可隨時查看排名

3）現(xiàn)實賽評分

• 與模擬賽基本一致，但在真實環(huán)境中執(zhí)行
• 額外考慮以下因素：
• 系統(tǒng)穩(wěn)定性（10分）：在不同光照和物體位置變化下的表現(xiàn)
• 操作精度（10分）：機器人抓取和放置的精確度
• 執(zhí)行效率（10分）：完成任務(wù)所需的時間
• 系統(tǒng)魯棒性（10分）：應對干擾和不確定性的能力
• 代碼質(zhì)量（10分）：代碼結(jié)構(gòu)、可讀性和可擴展性

4）評分標準細則

• 成功標準：
• 放置任務(wù)：物體穩(wěn)定放置在目標區(qū)域中心5cm范圍內(nèi)
• 堆疊任務(wù)：上層物體與下層物體接觸面積≥60%且保持穩(wěn)定10秒
• 投放任務(wù)：物體完全落入目標容器內(nèi)部
• 時間限制：
• 每個任務(wù)有固定時間限制（90-120秒不等）
• 在時間限制內(nèi)完成任務(wù)的程度決定得分
• 失敗條件：
• 物體掉落或損壞
• 機器人與環(huán)境發(fā)生不安全碰撞
• 超出任務(wù)時間限制

5）代碼要求

• 必須為端到端策略：從感知到?jīng)Q策到執(zhí)行
• 不允許使用預設(shè)的硬編碼動作序列
• 所有代碼將被組織者審查，確保符合比賽規(guī)則
• 參賽團隊需提交可重現(xiàn)的訓練和評估代碼
• 系統(tǒng)應能適應初始位置和物體擺放的隨機變化

6）綜合評分計算

• 模擬賽總分 = 五項任務(wù)得分總和（100分）+ 觸覺任務(wù)加分（5分）
• 現(xiàn)實賽總分 = 任務(wù)完成度（100分）+ 系統(tǒng)性能評估（50分）
• 最終排名依據(jù)現(xiàn)實賽總分確定，模擬賽成績將作為參考

比賽日程

比賽階段

時間

報名開始

2025.3.20-2025.04.16

仿真平臺賽第一輪

2025.03.20-2025.04.30

晉級隊伍公布

2025.04.30

仿真平臺第二輪/現(xiàn)實賽開始

2025.04.30

真機評測賽代碼提交截止

2025.06.03

仿真平臺第二輪結(jié)束

2025.06.11

真機評測比賽

2025.06.11-2025.06.15