麻省理工學院CSAIL將人工智能中的視覺和觸覺結合起來
我們已經向人類層面的智慧邁進了一步。圖像識別技術和觸覺傳感器正在相互結合，以提高它們的能力。麻省理工學院計算機科學與人工智能實驗室(CSAIL)創(chuàng)建了一個觸覺和視覺信息數據庫，并利用它來訓練人工智能系統(tǒng)來推斷物體的外觀和感覺。
圖：李云珠，麻省理工學院CSAIL的博士生，領導了這個項目。
與麻省理工學院CSAIL的大多數項目一樣，這一系統(tǒng)仍處于早期研究階段，但通過將這兩種“感官”聯系起來，從數字角度看，團隊可能為人工智能提供了一種新的體驗世界的方式。這一突破可能會帶來更加敏感和實用的機器人手臂，可以改善任何數量微妙或任務關鍵的操作。它還保證在能夠像我們這樣理解、或至少可以理解世界的人工智能系統(tǒng)的發(fā)展中，會有更多的進展。
感覺與感性
通過一個簡單的攝像頭，這個研究小組負責人李云珠（中國科學院博士生，主要論文作者）在這個系統(tǒng)上，建立了200多個每天被觸摸超過12，000次的對象的數據集。然后，他們將12，000段視頻剪輯壓縮成靜態(tài)幀，并使用這些片段來編譯“VisGel”，這是一個包含300多萬個視覺/觸覺配對圖像的數據集。利用該數據集，研究小組訓練了一個人工智能模型，根據周圍區(qū)域的視覺數據預測物體的感覺，并使用KUKA機器人手臂與GelSight觸覺傳感器配對獲得相應的觸覺信息。例如，研究小組將在電腦鼠標上輸入某一點的系統(tǒng)圖像，而人工智能將使用生成的對抗性網絡(GAN)構建該地區(qū)的觸覺地圖。
GAN使用一對網絡來相互競爭并改進它們的輸出：一個生成器網絡，它為鑒別器網絡編譯一個圖像(或者一個觸覺圖)，以測試和比較真實（或ground truth）數據。然后，研究小組將把GAN生產的模型與KUKA機器人手臂獲取的觸覺數據進行比較，再一次對照可測量的“ground truth”。該系統(tǒng)也可以反過來工作，使用觸覺傳感器數據創(chuàng)建一個圖像預測對象上的某個點可能是什么樣子。這些圖像也將在GAN中運行，并將最后一次與ground truth圖像進行比較，以檢驗模型輸出的有效性。
靈巧數字
將圖像饋送和觸覺傳感器連接到AI模型中，代表了人工智能系統(tǒng)和機器人手臂的進步，它們更像我們這樣體驗世界。給數字智能一個雙重洞察力，有效地合成了信息和這個系統(tǒng)可以訪問的“知識”。理論上，這將允許人工智能系統(tǒng)比單一輸入系統(tǒng)更快、更有效地了解其環(huán)境和處理信息。例如，在外科手術中，機器人手臂目前可以處理令人難以置信的微妙的手術，比如使用微創(chuàng)手術或keyhole手術來切除前列腺，約占美國所有機器人手術的86%。
來源：Charles Towers-Clark，福布斯
編譯：南山
來源：Charles Towers-Clark，福布斯
編譯：南山
聲明：本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人，不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用，如有內容侵權或者其他違規(guī)問題，請聯系本站處理。
舉報投訴
-
麻省理工學院
+關注
關注
0文章
12瀏覽量
6983 -
CSAIL
+關注
關注
0文章
1瀏覽量
1586
發(fā)布評論請先 登錄
相關推薦
熱點推薦
解讀大型語言模型的偏見
。這種“位置偏差”意味著，若律師使用LLM支持的虛擬助手檢索30頁宣誓書中的某個短語，該短語位于第一頁或最后一頁時被找到的可能性會大得多。麻省理工學院的研究人員揭示了
從機械狗關節(jié)拆解看懂激光焊點里的硬核科技
最近，一篇關于拆解MITMiniCheetah（迷你獵豹）執(zhí)行器的文章在工程師圈子里熱傳。這只由麻省理工學院仿生機器人實驗室打造的機器狗，以其靈活的后空翻和高速奔跑能力驚艷世界，而其核心奧秘就在高速
從講義到學院：錢學森1963年的“星際藍圖”與2026年的現實回響
歷史的坐標：1961年的講臺與2026年的揭牌1961年秋，中國科學技術大學近代力學系的教室里，錢學森先生拿起了粉筆。在接下來的幾個月里，他將自己在美國加州理工學院和麻省理工學院積累的深厚學識
研究顯示，若無前所未有的合作，AI將無法變革交通領域
不斷擴大。 這份名為《展望AI驅動的交通未來》(Envisioning the Future of Mobility Powered by AI)的報告由麻省理工學院交通倡議和Kearney高級交通
東莞理工學院“小眼睛科技杯”第四屆集成電路設計與創(chuàng)新應用競賽圓滿落幕
BASEDINNOVATION“小眼睛科技杯”集成電路設計與創(chuàng)新應用競賽2025年11月23日，東莞理工學院第四屆集成電路設計與創(chuàng)新應用競賽于學術會議中心圓滿落幕。本屆競賽由校團委、學生工作部
格羅方德與新加坡理工學院簽署諒解備忘錄
2025年10月15日，格羅方德新加坡公司（GlobalFoundries Singapore，簡稱GFS）與新加坡理工學院（Singapore Polytechnic，簡稱SP）簽署了一份諒解備忘錄，旨在就新加坡半導體行業(yè)的數字人才培養(yǎng)展開合作。
蘇黎世聯邦理工學院、西南交通大學：關于研究MXenes-環(huán)境生化傳感平臺新型材料
近日， 蘇黎世聯邦理工學院王京課題組 聯合 西南交通大學趙志俊課題組 及 四川大學張傳芳課題組 ，在 高起點新刊Electron 發(fā)表了題為“MXenes: Emerging Materials
FiberCircuits 技術白皮書：將電路織入未來智能紡織品
“ ? FiberCircuits ?項目是一項由 麻省理工學院媒體實驗室 開發(fā)的微型化框架，旨在將高密度集成電路直接嵌入到可穿戴和可機洗的纖維中 。 ? 纖維內部封裝了 MCU、傳感器和 LED
Wolfspeed與紐約州立大學理工學院加強教育研究合作
紐約州立大學理工學院（SUNY Poly）在 近日舉行的新聞發(fā)布會上宣布，任命兩名教職人員為 Wolfspeed 捐贈講席教授（Wolfspeed Endowed Chairs），標志著該校研究擴展的重要里程碑。
【萬字長文】物聯網的激蕩二十年
（InternetofThings）”。雖然業(yè)界一致認為，1999年，麻省理工學院的KevinAshton首次提出”物聯網”這一術語，但僅僅只是一個理念，沒有成體系的解釋，也無法形成共識。而I
突破麻省理工學院技術壟斷，深圳傳感器公司帶來全新機器人觸覺傳感器技術
近日 戴盟機器人CEO段江嘩 赴亞特蘭大參加 2025 IEEE國際機器人 與自動化大會（ICRA 2025） 顧不上時差帶來的疲憊感 他一下飛機 就投入到籌備工作中 在這次海外首秀上 這家深企帶來
偉創(chuàng)力與麻省理工學院 (MIT) 就其全新的“新制造倡議”(INM) 達成戰(zhàn)略合作
行業(yè)巨擘+全球頂級學府? 近日，偉創(chuàng)力與 麻省理工學院? (MIT) 就其 全新的“新制造倡議”(INM) 達成戰(zhàn)略合作 。作為INM行業(yè)聯盟的 創(chuàng)始成員 ，偉創(chuàng)力將在這一項目中與MIT的研究人員
麻省理工學院香港校友會代表團到訪華沿機器人
近日，麻省理工學院香港校友會（MIT Club of Hong Kong）代表團40余人到訪華沿機器人總部，通過展廳參觀、技術交流與座談研討，深入了解國產機器人產業(yè)發(fā)展現狀，并就“機器人+人工智能”的融合發(fā)展趨勢展開深度對話。華沿機器人CEO王光能及相關人員出席。
通過易于使用的相機模組快速為應用添加機器視覺
作者： Steven Keeping 視覺是迄今為止最重要的感官。我們日常工作中所依賴的信息中，約 80% 來自視覺——我們的眼睛。視覺信息的處理速度極快，早在 2014 年，
美國加州理工學院：研究量子傳感技術可實現粒子時空高精度探測
? 據美國加州理工學院官網近日消息，由美國、瑞士、委內瑞拉等國組成的聯合團隊研發(fā)出了基于量子傳感技術的超導微線單光子探測器（SMSPDs），可實現粒子物理實驗中的時空同步高精度追蹤。目前該成果已在
評論