極客網(wǎng)·極客觀察8月8日，大模型風起云涌，正在從虛擬世界進入現(xiàn)實世界。谷歌DeepMind日前推出 Robotic Transformer 2（簡稱RT-2）大語言模型，讓人類可以通過純語言命令優(yōu)化機器人控制，邁出了重要一步。
不同于此前的大模型，這是一個“視覺-語言-動作”（vision-language-action，簡稱VLA）模型。業(yè)界認為，谷歌此舉是想打造可以適應人類環(huán)境的通用機器人，類似于機器人瓦力或者C-3PO。
谷歌RT-2無需針對特定任務專門訓練
當人類需要學習某項任務時，往往會通過閱讀和觀察來實現(xiàn)。RT-2有點類似，它用到了大語言模型（也就是驅(qū)動ChatGPT的技術(shù)）。RT-2從網(wǎng)上尋找文本和圖片，然后訓練模型，即使沒有針對特定任務專門訓練過，RT-2也可以識別模式和動作。
舉個例子，按谷歌的說法，在沒有經(jīng)過特別訓練的前提下，RT-2可以識別并扔掉垃圾。RT-2會理解垃圾是什么，了解如何處理，然后完成一系列動作。RT-2甚至知道食品包裝紙或香蕉皮也是垃圾。
谷歌工程師甚至說，向RT-2下達一條命令，讓它撿起已經(jīng)滅絕的動物，RT-2機器人可以從三個雕像中找出恐龍。
放在以前，如果想讓AI處理垃圾——無論是識別垃圾、撿起垃圾還是扔掉，都要專門訓練。RT-2不太一樣，它從網(wǎng)絡數(shù)據(jù)中獲得大量知識，已經(jīng)知道垃圾是什么，能夠識別垃圾，不需要專門訓練。
又比如要讓AI機器人撿起蘋果，先要訓練機器人，讓它知道蘋果的一切，比如蘋果是如何生長的，它的物理特點有什么；不只如此，還要在環(huán)境中識別蘋果，不能將蘋果和紅球混淆；還有最重要的，AI要知道如何將蘋果撿起來。
谷歌RT-2是打造通用機器人的一大步
一般來說科學家會用大量人工獲取的數(shù)據(jù)點來訓練機器人AI，為了覆蓋每一種可能場景，訓練時會消耗大量時間和成本?，F(xiàn)實世界紛繁多變，機器人助手如果想變得實用，必須正確應對那些不太可能編程的場景。
在開發(fā)RT-2時，DeepMind深入挖掘變形AI模型的優(yōu)點，這種模型擁有很強的概括能力。RT-2借鑒了谷歌早期開發(fā)的AI，比如PaLI-X和PaLM-E。有了RT-2模型，機器人可以處理攝像頭圖像，對應該執(zhí)行的動作進行預測。
谷歌發(fā)現(xiàn)，如果是訓練過的任務，RT-2試驗6000多次后效果便與RT-1一樣好。如果是沒有訓練過的任務，RT-2的表現(xiàn)比RT-1好一倍。簡單來說，谷歌認為RT-2在學習新場景新任務時表現(xiàn)更好，雖然它仍不完美。
DeepMind的目標是打造通用機器人，但谷歌也承認還有很多研究工作要做，不過RT-2應該是正確的研究方向。如果RT-2真的能變得完美，人類可以向機器人下達“文字命令”，讓機器人按指令行動。
谷歌RT-2可以像人類一樣將學到的知識用于新場景
RT-2最大的突破在于，它從網(wǎng)絡數(shù)據(jù)中學習基本概念和構(gòu)想，然后將學到的知識用來指揮機器人完成動作，讓機器理解甚至“說出”它們的操作語言。
要讓機器人在多變的環(huán)境中執(zhí)行通用任務，它必須管理好復雜抽象任務。如果是之前沒有遇到的過的環(huán)境，更是需要機器人正確應對。
聊天機器人純粹在虛擬世界運行，機器人不一樣，它存在于真實世界。機器人要理解抽象概念，在實際、物理環(huán)境中應用。
在RT-2出現(xiàn)之前，機器人依賴復雜系統(tǒng)堆棧來運行，也就是高級推理系統(tǒng)與低級操作系統(tǒng)聯(lián)合作戰(zhàn)，讓機器人正常運轉(zhuǎn)，這種方法有些笨重！RT-2簡單一些，它將復雜推理與動作輸出整合到一個模型。
RT-2的最大特點在于：它從語言和視覺訓練數(shù)據(jù)中學習概念，將概念變成機器人動作，即使是之前沒有訓練過的任務，它的處理能力也更強。簡言之，RT-2可以像人類一樣，將以前學到的概念應用于新場景。
谷歌的研究似乎在告訴人類，AI正在以更快的速度影響機器人。開發(fā)多功能通用型機器人是人類的一個夢想，希望RT-2能帶來突破。（小刀）
- 投行稱英偉達市值將沖擊6萬億美元 AI之外還有機器人萬億市場
- 中國信通院提出AI WAN目標架構(gòu)，運營商IP廣域網(wǎng)價值變現(xiàn)迎契機
- 5G-A，聯(lián)通用AI幫你這么玩兒
- 共建AI時代全球化開發(fā)者生態(tài)，華為云持續(xù)加碼海外布局
- 直擊2025 MWC上海：5G-A加速跑，AItoX落地忙
- 行業(yè)熱議“芯片問題沒必要擔心”，背后的AI創(chuàng)新范式已變
- 28歲華裔創(chuàng)建Scale AI，憑什么拿到Meta天價投資？
- 昇騰CANN再進化：開放創(chuàng)新繁榮AI生態(tài)
- 報告稱83%的Z世代愿與AI結(jié)婚 專家警告本質(zhì)上屬于"行為上癮"
- 鯤鵬向“智”，“轅”啟未來
免責聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性，但不保證有關(guān)資料的準確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏，概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時，應及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明，并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關(guān)文章源頭核實，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。
