現(xiàn)場削黃瓜、疊衣服,曾爆火的刮胡子機器人再進化,穹徹的具身智能大腦來了!
現(xiàn)場削黃瓜、疊衣服,曾爆火的刮胡子機器人再進化,穹徹的具身智能大腦來了!
7 月 4 日,在 2024 世界人工智能大會上,具身智能公司穹徹智能 Noematrix (展位號:H1-A715) 宣布推出穹徹具身大腦 Noematrix Brain,加速具身智能大模型落地。
結(jié)合實體機器人,穹徹在完全開放的環(huán)境中向現(xiàn)場觀眾近距離展示了 “隨手一扔就能疊的衣物折疊”(無限自由度物體操作,復(fù)雜物體理解堪比人類)和 “削完就能吃的黃瓜削皮”(不規(guī)則曲面操作,精細度甚至超越人類水平)等突破性技術(shù),以及家庭地面整理等落地應(yīng)用。通過這些實時演示和真實互動,穹徹具身大腦的通用性和魯棒性得以全方位展現(xiàn)。
穹徹具身大腦提供 “以力為中心” 的具身智能大模型、原子技能庫 AnySkill、基礎(chǔ)軟件框架及相關(guān)開發(fā)者工具鏈,助力機器人輕松掌握更多技能、完成更多應(yīng)用,充分發(fā)揮具身智能的價值。
穹徹具身大腦產(chǎn)品展示
穹徹智能成立于 2023 年,由通用智能機器人公司 Flexiv 非夕科技戰(zhàn)略孵化,上海交通大學(xué)教授,長江學(xué)者特聘教授、2023 年 “科學(xué)探索獎” 獲得者(目前具身智能領(lǐng)域唯一)盧策吾教授擔(dān)任聯(lián)合創(chuàng)始人。
基于多年深耕人工智能領(lǐng)域的經(jīng)驗和深厚的技術(shù)積累(發(fā)表頂會頂刊 100 多篇,多次獲得國際機器人頂會最佳論文獎),盧策吾及其團隊在構(gòu)建具身智能大模型時,將技術(shù)重點放在了對操作物理常識和力反饋嵌入智能體行為決策的聯(lián)合訓(xùn)練上,從而打造了 Noematrix Brain 穹徹具身大腦。
穹徹具身大腦具備全鏈路的具身智能技術(shù)框架。其中,穹徹自研的兩個具身智能大模型:實體世界大模型和機器人行為大模型,可以看作此框架中的主要助推器,承擔(dān)了推進操作物理常識和智能體行為決策的聯(lián)合訓(xùn)練的重擔(dān)。
穹徹具身智能大腦技術(shù)框架
實體世界大模型能夠通過訓(xùn)練來學(xué)習(xí)操作物理常識表征,并做到低成本可規(guī)模化地讓穹徹具身大腦理解 “世界是什么”,本次大會上所展示的衣物折疊正是這一強大能力的具象呈現(xiàn):在 AI 的世界里,對操作對象的本質(zhì)理解會隨著其自由度增加而提升,但柔性物體的自由度是無窮維的,因此可以基于衣物的任意初始狀態(tài)完成折疊操作這一展示,成功體現(xiàn)了穹徹具身大腦對復(fù)雜物體操作的理解的頂級能力。調(diào)研表明,這也是全球第一次在公開展會上開放展示初始狀態(tài)混亂的衣物折疊。
基于通用柔性物體折疊技能 AnyFold,機器人可以完成柔性衣物的展開、識別與折疊等操作
而機器人行為大模型則可以做到以力和操作對象為中心坍縮訓(xùn)練空間,讓穹徹具身大腦以極高的訓(xùn)練效率學(xué)會 “如何決策”,且具有極佳的魯棒性和安全性。
以兩個大模型為基礎(chǔ),穹徹具身大腦得以具備規(guī)劃、記憶、執(zhí)行這三種核心能力。在上個月的機器之心訪談中,盧教授親自嘗試了 “世界上首個刮胡子機器人” 的服務(wù),其演示全程就生動呈現(xiàn)了這三種能力的交叉和融合。
當(dāng)人頭部移動時,嵌入了高精度力反饋模塊的具身智能大模型能夠瞬時感知并決策力的變化
同時,為盧教授刮胡子的機器人還被賦予了通用物體表面刮削技能(AnyShave)。基于穹徹具身大腦,穹徹提供不斷擴張的機器人原子技能庫 AnySkill,從而使智能體具備通用操作能力。通過提升單一技能的泛化通用性和可靠性,增強多技能組合的復(fù)雜任務(wù)處理和復(fù)雜環(huán)境適應(yīng)能力,AnySkill 能夠以最精簡的原子能力集,支持各類場景的快速開發(fā)。
AnyShave 同樣可以用于黃瓜削皮等操作中,并組合其他技能一起使用,精細程度達到人類水平
基于每個原子技能強大的泛化遷移能力,在世界人工智能大會現(xiàn)場,穹徹展臺也展出了 AnyShave 的另一個有趣應(yīng)用 —— 給黃瓜精細削皮。無需提前建模,AnyShave 可以根據(jù)黃瓜表面狀況自主判斷最優(yōu)刮削軌跡、用刃方向、適宜速度和力,并自適應(yīng)其曲面,操作如人一般精細,甚至某些時候超過人。
如果大模型僅依靠視覺進行判定和決策,那對黃瓜這類物體的起伏表面的刮削將很難順利完成,即使使用遙操作等方式,也無法做到與人相似的程度。
此外,穹徹具身大腦還提供生態(tài)應(yīng)用開發(fā)所需的全生命周期工具鏈,覆蓋從數(shù)字孿生、數(shù)據(jù)采集、模型訓(xùn)練到業(yè)務(wù)開發(fā)、機器人集群管理等多種需求。
據(jù)穹徹表示,Noematrix Brain 穹徹具身大腦聚焦在非結(jié)構(gòu)化、開放場景、開放任務(wù)下的機器人智能邊界的突破,與各種類型的機器人本體、甚至工業(yè)設(shè)備都能有機結(jié)合,包括但不限于工業(yè)機器人、人形機器人、服務(wù)型機器人、智能家居設(shè)備等等。
當(dāng)執(zhí)行體被具身智能加持,它們就有了能指引感知、記憶、執(zhí)行、交互的 “大腦”,用武之地十分廣闊,能更易協(xié)助或替代人類完成枯燥、繁重的工作,成為人們的好幫手。
在目前階段,穹徹將在零售運營、物流揀選、食材處理、家庭服務(wù)和科研教育領(lǐng)域充分探索和打磨 Noematrix Brain 的核心應(yīng)用。盧策吾教授表示:“具身智能是技術(shù)發(fā)展邁向人工通用智能(AGI)路上的重要一步。我們希望在堅持不斷創(chuàng)新的同時,做好技術(shù)應(yīng)用落地,與行業(yè)領(lǐng)先的合作伙伴攜手,為不同領(lǐng)域提供創(chuàng)新的具身智能解決方案和服務(wù),不斷積累實現(xiàn)形態(tài)涌現(xiàn),最終做到更便捷、更通用的智能服務(wù)于人。”
風(fēng)險提示:
本網(wǎng)站內(nèi)用戶發(fā)表的所有信息(包括但不限于文字、視頻、音頻、數(shù)據(jù)及圖表)僅代表個人觀點,僅供參考,與本網(wǎng)站立場無關(guān),不構(gòu)成任何投資建議,市場有風(fēng)險,選擇需謹(jǐn)慎,據(jù)此操作風(fēng)險自擔(dān)。
版權(quán)聲明:
此文為原作者或媒體授權(quán)發(fā)表于野馬財經(jīng)網(wǎng),且已標(biāo)注作者及來源。如需轉(zhuǎn)載,請聯(lián)系原作者或媒體獲取授權(quán)。
本網(wǎng)站轉(zhuǎn)載的屬于第三方的信息,并不代表本網(wǎng)站觀點及對其真實性負責(zé)。如其他媒體、網(wǎng)站或個人擅自轉(zhuǎn)載使用,請自負相關(guān)法律責(zé)任。如對本文內(nèi)容有異議,請聯(lián)系:contact@yemamedia.com