今年伊始,从Figure 01与Open AI联合、英伟达在GTC大会发布人形机器人通用基础模型“Project GR00T”到马斯克在特斯拉2024年股东大会上表示,特斯拉的人形机器人将采用大语言模型。
“大模型+人形机器人”热浪不断,国外大厂纷纷入局卷得如火如荼,而今这股风终于也从国外卷到了国内。
6月21日,华为开发者大会(HDC2024)在东莞松山湖正式开幕。华为常务董事、华为云CEO张平安在会上发布盘古大模型5.0,在介绍盘古具身智能大模型的环节中,向观众展示了乐聚夸父人形机器人搭载盘古具身智能大模型后在工业、家庭场景中的泛化潜力,引起了广泛关注。
注入“AI”大脑的夸父人形机器人,能力边界得到拓宽
此次亮相HDC的夸父人形机器人,系华为云与乐聚机器人战略合作以来取得的阶段性成果,通过盘古具身智能大模型接入使得人形机器人在智能化、泛化能力上得到了显著提升。
目前已经实现人形机器人小样本下的泛化操作,在工业、家庭场景中展开测试,是人形机器人泛化能力提升的标志性成果。
据悉,自2024年3月华为云与乐聚机器人签署战略合作以来,双方就“盘古具身智能大模型+夸父人形机器人”技术路线展开了充分沟通。4月,通过拟定家庭、工业等场景中示范应用案例孵化为探索目标展开了集智攻关,目前研发进程中已经打通了人形机器人数据收集、云端训练、部署推理的工作流程,形成了系列工具链。
目前,双方正基于华为云的算力和AI能力,赋能人形机器人大脑;基于乐聚本体设计和运动控制能力,对机器人小脑和肢体的研发工作展开持续攻关,致力于打造系列pipeline和可复制推广的人形机器人产品及具身智能综合解决方案,共同构建人形机器人标准数据集、系统和工具链。
从“实验室”到“工业、家庭”真实场景,一步步走进现实
当前,尽管工业机器人技术已相当成熟,但在应对柔性生产需求和泛化性问题时仍显局限。相比之下,人形机器人凭借其在工业制造、商业服务和家庭养老等多个场景中的智能化应用,展现出其独特的"通用+智能"核心价值,这正是其与传统工业机器人的主要区别。
此次华为云与乐聚的合作围绕“盘古具身智能大模型+人形机器人”,在特种、制造业、家庭典型场景下机器人泛化能力的提升进行了市场调研、测试开发和场景验证,为打造迈向通用场景的人形机器人展开了联合创新。
在特种、制造场景下,华为云与乐聚团队深入一线场景调研,了解到亨通线缆车间中存在招工用工难、非标工序自动化难、部分危险场景安全隐患等业务痛点,例如:线束车间每年生产线缆种类达几千款,产品需求、工序流程、生产数量复杂多样无法标准化;电测工序有强压强电风险,以及沾锡、灌锡等场景下存在有毒有害、高温强噪等情况。亨通作为线缆行业领军企业,希望在原有基础上继续推进工厂现代化智能化车间建设,解决生产效率、安全性提升问题,完成产线智能制造升级改造。
针对以上需求,双方进行了技术可行性分析,定义了整体产品形态、任务指标和行动计划,以扫码包装、物流搬运、沾锡工序等做为典型场景进行验证。
在家庭场景方面,双方以炒菜、扫地等生活中常见的家务为典型案例,联动智能家居设备进行配合完成任务。以自动炒菜任务为例,盘古具身智能大模型为人形机器人与自动炒菜机赋能,让设备间能够拥有共同的大脑。在盘古具身智能大模型具身Agent框架下,机器人可以自主完成从场景理解、自然语言指令识别、任务规划的具身规划,到双臂协同、自主执行、可泛化操作的具身执行的全流程任务。
“通过‘大模型+人形机器人’的融合,机器人具备了自然语言和视觉/触觉的多模态交互能力、适应多场景的泛化能力,这是之前所不能想也做不到的事。华为云与乐聚此次基于工业、家庭典型真实场景的探索,对人形机器人推进到场景应用现实意义非常大,上半年乐聚一直在埋头推进机器人进入到生产生活场景应用,协同生态链合作伙伴真正推动行业规模化产业化落地。在这其中除了乐聚自身产品技术不断更新迭代之外,强强联合的技术团队,强需求强适配度的场景都是推动乐聚小步快跑的关键因素”乐聚机器人副总裁柯真东表示。
推动人形机器人迈向通用服务千行万业
当前阶段社会面临传统产业招工难、人才找工作难的双重困境,而低人口出生率、人口老龄化将会是下阶段不得不直面的社会问题。新旧动能转换,新质生产力发展或将成为破局关键。
人形机器人作为新质生产力的典型代表,能否在这一轮科技革命和产业变革加速演进的进程中发挥作用,未来看的会是机器人能否真正进入场景产生可量化价值。
2023年,工信部印发的《人形机器人创新发展指导意见》中表示人形机器人将有望成为继计算机、智能手机、新能源汽车后的颠覆性产品。同时强调需拓展场景应用,加快在特种领域、制造业典型场景、民生及重点行业推广,鼓励企业加强技术与场景深度融合。
“站在企业的角度,我们是希望人形机器人的发展能够解决传统产业招工难、特种行业高危作业的问题,将人从危险、繁复的工作中释放出来,去从事更安全、有趣、有创造性的工作,并通过产学研用的拉通,助推人形机器人产业化加速。希望新技术、新行业的兴起能够助力新经济增长,同时为社会创造新岗位机会,给大家提供新的生产生活方式。”乐聚机器人副总裁柯真东表示。
此次与华为云联创在工业、家庭场景的尝试标志着机器人具备在多场景完成多任务的潜力。未来,将积极携手“人形机器人+”生态合作伙伴,打造“像家电一样便宜,像博士一样聪明”的人形机器人产品。通过建立行业标准化解决方案,推动具身智能机器人向通用化,让人形机器人真正服务于千行万业,便利于人类生产生活。