視頻中，這款人形機器人在廚房與主人流利對話，通過理解主人喜好，搭配食材，并烹飪菜肴；在工廠完成掃碼包裝、物流搬運、沾錫工序等任務，臟活、累活、危險活一舉拿下......讓人有一種科幻電影中的場景走進現(xiàn)實的恍惚感。

 

據(jù)悉，這款“上廚房，進工廠”的具身智能人形機器人來自樂聚機器人，在6月21日華為開發(fā)者大會（HDC2024）上盤古大模型5.0發(fā)布環(huán)節(jié)亮相，華為常務董事、華為云CEO張平安在華為開發(fā)者大會上，不僅介紹了樂聚夸父人形機器人搭載盤古具身智能大模型后，在工業(yè)、家庭場景中的展現(xiàn)出的泛化潛力，還與機器人進行了物體識別、問答、擊掌等互動，引發(fā)了市場廣泛關注。

 

“盤古具身智能大模型”賦能，“夸父人形機器人”泛化性能顯著提升

 

此次亮相HDC的夸父人形機器人，系華為云與樂聚機器人戰(zhàn)略合作以來取得的階段性成果，通過盤古具身智能大模型使得人形機器人在智能化、泛化能力上得到了顯著提升。

 

目前已經(jīng)實現(xiàn)人形機器人小樣本下的泛化操作，在工業(yè)、家庭場景中展開測試，是人形機器人泛化能力提升的標志性成果。

 

據(jù)悉，自2024年3月華為云與樂聚機器人簽署戰(zhàn)略合作以來，雙方就“盤古具身智能大模型+夸父人形機器人”技術路線展開了充分溝通。4月，通過擬定家庭、工業(yè)等場景中示范應用案例孵化為探索目標展開了集智攻關，目前研發(fā)進程中已經(jīng)打通了人形機器人數(shù)據(jù)收集、云端訓練、部署推理的工作流程，形成了系列工具鏈。

 

目前，雙方正基于華為云的算力和AI能力，賦能人形機器人大腦；基于樂聚本體設計和運動控制能力，對機器人小腦和肢體的研發(fā)工作展開持續(xù)攻關，致力于打造系列pipeline和可復制推廣的人形機器人產(chǎn)品及具身智能綜合解決方案，共同構(gòu)建人形機器人標準數(shù)據(jù)集、系統(tǒng)和工具鏈。

 

 

當前，盡管工業(yè)機器人技術已相當成熟，但在應對柔性生產(chǎn)需求和泛化性問題時仍顯局限。相比之下，人形機器人憑借其在工業(yè)制造、商業(yè)服務和家庭養(yǎng)老等多個場景中的智能化應用，展現(xiàn)出其獨特的"通用+智能"核心價值，這正是其與傳統(tǒng)工業(yè)機器人的主要區(qū)別。

 

此次華為云與樂聚的合作圍繞“盤古具身智能大模型+人形機器人”，在特種、制造業(yè)、家庭典型場景下機器人泛化能力的提升進行了市場調(diào)研、測試開發(fā)和場景驗證，為打造邁向通用場景的人形機器人展開了聯(lián)合創(chuàng)新。

 

在特種、制造場景下，華為云與樂聚團隊深入一線場景調(diào)研，了解到亨通線纜車間中存在招工用工難、非標工序自動化難、部分危險場景安全隱患等業(yè)務痛點，例如：線束車間每年生產(chǎn)線纜種類達幾千款，產(chǎn)品需求、工序流程、生產(chǎn)數(shù)量復雜多樣無法標準化；電測工序有強壓強電風險，以及沾錫、灌錫等場景下存在有毒有害、高溫強噪等情況。亨通作為線纜行業(yè)領軍企業(yè)，希望在原有基礎上繼續(xù)推進工廠現(xiàn)代化智能化車間建設，解決生產(chǎn)效率、安全性提升問題，完成產(chǎn)線智能制造升級改造。

 

針對以上需求，雙方進行了技術可行性分析，定義了整體產(chǎn)品形態(tài)、任務指標和行動計劃，以掃碼包裝、物流搬運、沾錫工序等做為典型場景進行驗證。

 

在家庭場景方面，雙方以炒菜、掃地等生活中常見的家務為典型案例，聯(lián)動智能家居設備進行配合完成任務。以自動炒菜任務為例，盤古具身智能大模型為人形機器人與自動炒菜機賦能，讓設備間能夠擁有共同的大腦。在盤古具身智能大模型具身Agent框架下，機器人可以自主完成從場景理解、自然語言指令識別、任務規(guī)劃的具身規(guī)劃，到雙臂協(xié)同、自主執(zhí)行、可泛化操作的具身執(zhí)行的全流程任務。

 

“通過‘大模型+人形機器人’的融合，機器人具備了自然語言和視覺/觸覺的多模態(tài)交互能力、適應多場景的泛化能力，這是之前所不能想也做不到的事。華為云與樂聚此次基于工業(yè)、家庭典型真實場景的探索，對人形機器人推進到場景應用現(xiàn)實意義非常大，上半年樂聚一直在埋頭推進機器人進入到生產(chǎn)生活場景應用，協(xié)同生態(tài)鏈合作伙伴真正推動行業(yè)規(guī)?；a(chǎn)業(yè)化落地。在這其中除了樂聚自身產(chǎn)品技術不斷更新迭代之外，強強聯(lián)合的技術團隊，強需求強適配度的場景都是推動樂聚小步快跑的關鍵因素”樂聚機器人副總裁柯真東表示。

 

 

當前階段社會面臨傳統(tǒng)產(chǎn)業(yè)招工難、人才找工作難的雙重困境，而低人口出生率、人口老齡化將會是下階段不得不直面的社會問題。在國內(nèi)新舊動能轉(zhuǎn)換的關鍵節(jié)點，百年未有之大變局中，新質(zhì)生產(chǎn)力的發(fā)展將會破局關鍵。

 

政策方面，2023年，工信部印發(fā)的《人形機器人創(chuàng)新發(fā)展指導意見》中表示人形機器人將有望成為繼計算機、智能手機、新能源汽車后的顛覆性產(chǎn)品。同時強調(diào)需拓展場景應用，加快在特種領域、制造業(yè)典型場景、民生及重點行業(yè)推廣，鼓勵企業(yè)加強技術與場景深度融合。

 

市場方面，比亞迪2022年年報顯示，生產(chǎn)工人占比員工總數(shù)的78%。假設比亞迪投入生產(chǎn)工人總數(shù)10%的人形機器人，按單臺機器人20萬估算，僅一家企業(yè)就能貢獻88億元市場規(guī)模。6月14日，馬斯克在特斯拉2024股東大會上表示，未來的人形機器人和人類的比例可達1：1，總量將可達100-200億臺，光擎天柱一項就能帶來20萬億美元的市值。

 

市場需求、政策支持、資本涌入，將人形機器人關注推向了新的高度，同時也為產(chǎn)業(yè)的發(fā)展按下了加速鍵。但人形機器人能否真的爆發(fā)，下階段看的是能否真正進入場景產(chǎn)生可量化價值。

 

“當前，樂聚的產(chǎn)業(yè)化落地也正不斷加速?？涓溉诵螜C器人已在高?？蒲?、交通勸導、展廳導覽、家庭服務等場景中陸續(xù)上崗實習，此次與華為云聯(lián)創(chuàng)在工業(yè)、家庭場景的嘗試標志著機器人未來有在多場景完成多任務的潛力。”樂聚機器人副總裁柯真東表示。

 

未來樂聚機器人將攜手“人形機器人+”生態(tài)合作伙伴，致力于關鍵核心技術的攻關和產(chǎn)品創(chuàng)新，打造“像家電一樣便宜，像博士一樣聰明”的人形機器人產(chǎn)品。通過建立行業(yè)標準化解決方案，推動人形機器人邁向通用化，讓人形機器人真正服務于千行萬業(yè)，便利于人類生產(chǎn)生活。