Toyota 的「機器人幼兒園」正在教導機器人學習如何製作早餐!

Toyota Research Institute (TRI) 利用生成式 AI 在一個被稱為「機器人幼兒園」的環境中教導機器人如何製作早餐,這不是通過數百小時的編碼、錯誤和錯誤修復來完成的。相反,研究人員通過給予機器人觸覺,將它們接入 AI 模型,然後像教導人類一樣向它們展示操作方法。研究人員表示,觸覺是“一個關鍵的啟動器”,通過給予機器人在下面視頻中看到的大型、蓬鬆的拇指,該模型可以“感覺”到它正在做的事情,從而獲得更多的信息,這使得僅憑視覺難以完成的困難任務變得更容易。

Toyota 的「機器人幼兒園」正在教導機器人學習如何製作早餐!

Toyota Research Institute (TRI) 利用生成式 AI 在一個被稱為「機器人幼兒園」的環境中教導機器人如何製作早餐,這不是通過數百小時的編碼、錯誤和錯誤修復來完成的。相反,研究人員通過給予機器人觸覺,將它們接入 AI 模型,然後像教導人類一樣向它們展示操作方法。研究人員表示,觸覺是“一個關鍵的啟動器”,通過給予機器人在下面視頻中看到的大型、蓬鬆的拇指,該模型可以“感覺”到它正在做的事情,從而獲得更多的信息,這使得僅憑視覺難以完成的困難任務變得更容易。

實驗室的操作經理 Ben Burchfiel 表示,看到機器人與其環境互動“非常令人興奮”。首先,一位“教師”展示了一套技能,然後模型在幾個小時內學習,他補充說,“我們常常在下午教導機器人,讓它在夜間學習,然後在第二天早上看到一個新的行為。”

研究人員表示,他們正在嘗試為機器人創建“大型行為模型”或 LBMs。與 LLMs 通過注意人類寫作中的模式進行訓練類似,Toyota 的 LBMs 會通過觀察學習,然後“概括,執行他們從未被教導過的新技能”,TRI 的機器人研究副總裁兼 MIT 機器人學教授 Russ Tedrake 說。

研究人員表示他們已經訓練了超過 60 項具有挑戰性的技能,如“倒液體、使用工具和操作可變形的物體”,他們希望到 2024 年底能提高到 1,000項。

Read more

【影音工具教學】AI ASMR 影片怎麼做?用 Veo 3 生成高品質畫面與聲音!

【影音工具教學】AI ASMR 影片怎麼做?用 Veo 3 生成高品質畫面與聲音!

Veo 3 是目前最懂「聲音」的 AI 影片工具,能根據提示詞自動生成同步的畫面與音效,成為打造 ASMR 類影片的秘密武器。這篇教學將帶你從撰寫 prompt 開始,教你如何讓 Veo 不只「看見」你想像的畫面,也能「聽見」你腦中的聲音節奏。附上範本與實例,讓你第一次寫 prompt 就能切出一刀療癒的紅蘿蔔。

lock-1