麻省理工學院CSAIL將人工智能中的視覺和觸覺結合起來
我們已經向人類層面的智慧邁進了一步。圖像識別技術和觸覺傳感器正在相互結合，以提高它們的能力。麻省理工學院計算機科學與人工智能實驗室(CSAIL)創建了一個觸覺和視覺信息數據庫，并利用它來訓練人工智能系統來推斷物體的外觀和感覺。
圖：李云珠，麻省理工學院CSAIL的博士生，領導了這個項目。
與麻省理工學院CSAIL的大多數項目一樣，這一系統仍處于早期研究階段，但通過將這兩種“感官”聯系起來，從數字角度看，團隊可能為人工智能提供了一種新的體驗世界的方式。這一突破可能會帶來更加敏感和實用的機器人手臂，可以改善任何數量微妙或任務關鍵的操作。它還保證在能夠像我們這樣理解、或至少可以理解世界的人工智能系統的發展中，會有更多的進展。
感覺與感性
通過一個簡單的攝像頭，這個研究小組負責人李云珠（中國科學院博士生，主要論文作者）在這個系統上，建立了200多個每天被觸摸超過12，000次的對象的數據集。然后，他們將12，000段視頻剪輯壓縮成靜態幀，并使用這些片段來編譯“VisGel”，這是一個包含300多萬個視覺/觸覺配對圖像的數據集。利用該數據集，研究小組訓練了一個人工智能模型，根據周圍區域的視覺數據預測物體的感覺，并使用KUKA機器人手臂與GelSight觸覺傳感器配對獲得相應的觸覺信息。例如，研究小組將在電腦鼠標上輸入某一點的系統圖像，而人工智能將使用生成的對抗性網絡(GAN)構建該地區的觸覺地圖。
GAN使用一對網絡來相互競爭并改進它們的輸出：一個生成器網絡，它為鑒別器網絡編譯一個圖像(或者一個觸覺圖)，以測試和比較真實（或ground truth）數據。然后，研究小組將把GAN生產的模型與KUKA機器人手臂獲取的觸覺數據進行比較，再一次對照可測量的“ground truth”。該系統也可以反過來工作，使用觸覺傳感器數據創建一個圖像預測對象上的某個點可能是什么樣子。這些圖像也將在GAN中運行，并將最后一次與ground truth圖像進行比較，以檢驗模型輸出的有效性。
靈巧數字
聲明：本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人，不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用，如有內容侵權或者其他違規問題，請聯系本站處理。
舉報投訴
-
麻省理工學院
+關注
關注
0文章
12瀏覽量
6873 -
CSAIL
+關注
關注
0文章
1瀏覽量
1527
發布評論請先 登錄
相關推薦
麻省理工學院研發全新納米級3D晶體管,突破性能極限
11月7日，有報道稱，美國麻省理工學院的研究團隊利用超薄半導體材料，成功開發出一種前所未有的納米級3D晶體管。這款晶體管被譽為迄今為止最小的3D晶體管，其性能與功能不僅與現有的硅基晶體管相當，甚至在某些方面還超越了后者。
麻省理工學院推出新型機器人訓練模型
近日，據TechCrunch報道，麻省理工學院的研究團隊展示了一種創新的機器人訓練模型，該模型突破了傳統模仿學習方法的局限，不再依賴標準數據集，而是借鑒了大型語言模型（LLM）如GPT-4等所使用的大規模信息處理方式，為機器人學習新技能開辟了全新的道路。
VILA與其他模型在提供邊緣AI 2.0方面的表現
VILA 是 NVIDIA 研究部門與麻省理工學院共同開發的高性能視覺語言模型系列。最大的模型約有 400 億參數，最小的模型約有 30 億參數，并且完全開源（包括模型檢查點、訓練代碼和訓練數據）。
美國佐治亞理工學院一行蒞臨達實智能調研
近日，美國佐治亞理工學院“聚焦數據科學領域·深度探訪粵港澳大灣區”學生代表團來深交流。美國佐治亞理工學院(Georgia Institute of Technology)一行探訪了大灣區科技企業代表達實智能。
貴州理工學院采購南京大展的DZ-STA200同步熱分析儀
理工學院采購了南京大展的DZ-STA200同步熱分析儀，就是客戶對于我們品牌產品的認可。DZ-STA200同步熱分析儀作為集熱重分析（TG）與差示掃描量熱分析（DSC）
麻省理工學院研發RoboGrocery系統，雜貨店自動化裝袋新篇章
在科技日新月異的今天，自動化和智能化正逐漸滲透到我們生活的方方面面。近日，麻省理工學院計算機科學與人工智能實驗室（CSAIL）的一項創新技術引起了廣泛關注——RoboGrocery系統
感謝東莞理工學院對我司導熱系數測試儀的認可
東莞理工學院作為國內的高等學府，一直致力于科學研究和教育事業的發展，能夠得到這樣一所學府的認可，無疑是對我們技術實力和產品質量的肯定。這份認可，如同春日里的一縷陽光，溫暖而明亮，照亮了我們前行的道路
蘇黎世聯邦理工學院報告：Rowhammer攻擊對高端RISC-V CPU的潛在風險
來源：內容由RISC-V國際人才培養認證中心編譯自DRAMSec，作者：MicheleMarazzi；KavehRazavi。蘇黎世聯邦理工學院的研究人員發表了一篇題為“RISC-H：針對
麻省理工與Adobe新技術DMD提升圖像生成速度
2023年3月27日，據傳，新型文生圖算法雖然使得圖像生成無比逼真，但奈何運行速度較慢。近期，美國麻省理工學院聯合Adobe推出新型DMD方法，僅略微犧牲圖像質量就大幅度提高圖像生成效率。
霍尼韋爾與南方泵業開展戰略合作，四川成都一家紅外熱成像專用圖像處理芯片服務商完成A+輪融資
傳感新品 【麻省理工學院：研發出自供電傳感器，可從環境中獲取能量】 3 月 4 日消息，來自美國頂尖學府之一麻省理工學院的研究人員發明了一種無需電池、自供電，且不產生污染的傳感器。 研究團隊負責人
瑞士蘇黎世聯邦理工學院新型四足機器人單腿完成開關門、移動任務
據本周五出版的Popular Science雜志報道，近日瑞士蘇黎世聯邦理工學院機器人系統實驗室的科研團隊展示了新研究進展：他們訓練了自家的機器狗，讓其用單腿操控門鎖和移動物品，同時依靠其余三腿維持正常行走及平衡。
麻省理工學院開發出新的RFID標簽防篡改技術
的解決方案。 麻省理工學院的研究人員推出了一項革命性的發明——新型防篡改ID標簽。它不僅尺寸小巧、成本低廉，而且具備強大的防偽功能，有望徹底改變商品真偽鑒定的格局。 研究人員巧妙地利用太赫茲波的特性，設計出了這種新型防篡改
生物神經元和M-P神經元模型簡介
近年來，作為人工智能領域最重要的進展--深度學習(Deep Learning)，在諸多領域都有很多驚人的表現。早在2013年，深度學習就被麻省理工學院的《MIT科技評論》(MIT Technology Review)評為世界10大突破性技術之一。
Innovusion駛入持續增長快車道，消息稱中國特供版英偉達 H20 AI 芯片推遲到明年一季度發布
? 傳感新品 【麻省理工學院：測試了一種新的可攝入傳感器,從胃腸道內監測包括心率和呼吸模式在內的生命體征】 麻省理工學院的研究人員開發了一種可攝取的膠囊，可以從病人的胃腸道內監測包括心率和呼吸模式
工商網監
評論