最近，ByteDance Research 的第二代机器人大模型 —— GR-2，终于放出了官宣视频和技术报告。GR-2 以其卓越的泛化能力和多任务通用性，预示着机器人大模型技术将爆发出巨大潜力和无限可能。GR-2 官方项目页面：https://gr2-manipulation.github.io 初识 GR-2：百炼出真金 和许多大模型一样，GR-2 的训练包括预...
达闼在上海2024世界人工智能大会上展出的人形双足机器人XR4小紫，搭载了大模型RobotGPT。人工智能公司OpenAI与人形机器人公司FigureAI合作，推出了大模型加持的人形机器人Figure01。“目前，国内许多人形机器人已经接入大模型。据不完全统计，截至目前，优必选、傅立叶、智源以及北京银河通用等企业均已载入大模型，科大讯飞人...
简单来说，RobotGPT并非ChatGPT那种单一的大语言模型，该技术背后还涵盖或者说融合着几个关键模型，分别是大语言模型（LLM）、开放域检测视觉大模型（VLM）、机器人导航与抓取大模型（VNM）、基于深度强化学习专家小模型（MoE）。大模型对于机器人有点像是大脑，这四个模型每一个都是学术界和产业界的前沿领域，而在...
大模型的一大功能，首先体现在人形机器人“脑力”的升级。熊友军说，人形机器人的“大脑”以多模态大模型增强人机交互，实现对人类意图的理解、对复杂外部环境的理解与认知。科大讯飞人形机器人首席科学家季超举例说，例如星火大模型在复杂任务拆解、开放场景物体识别、多模态感知与理解等维度，显著提升了人形机器人的智能...
\pi_0 模型的核心设计理念在于通过多任务大规模数据训练,赋予机器人在各种复杂场景中展现广泛适应能力的能力。 为实现这一目标,研究团队在预训练阶段使用了OXE数据集[1](涵盖22个机器人)和自采的 \pi 数据集(包括7个机器人和68个任务),这两个数据集的总时长超过10000小时,极大丰富了训练数据的多样性和物理交互...
这是被称为“全球首例可以线下真机展示泛化干活技能的大模型机器人”，是现象级人形机器人企业「银河通用」的首个人形机器人GALBOT G1。 当前，大模型在技术的推动下不断迭代进化，涌现出具备多能力的“全能选手”。然而，这些模型仍面临着感知模态不足、实时性响应不足以及泛化能力较弱等挑战。机器人大模型发展...
最近，具身智能成为人工智能领域关注的一个焦点。从斯坦福大学的 VIMA 机器人智能体，到谷歌 DeepMind 推出首个控制机器人的视觉 - 语言 - 动作（VLA）的模型 RT-2，大模型加持的机器人研究备受关注。当前，自监督和语言监督的图像模型已经包含丰富的世界知识，这对于泛化来说非常重要，但图像特征是二维的。我们知道...
过去数年，国内人形机器人领域技术不断迭发，不少企业前仆后继地进入。大模型火爆以来，人形机器人在环境理解、智能交互等方面正在显著突破。根据国际机器人协会预测，2021年至2030年，全球人形机器人市场的年化复合增长率将达到71%。“激进派”和“保守派”马斯克在特斯拉股东大会正式通过他的560亿美元薪酬方案后，对...
今天,世界见证了 RDT 大模型的诞生,它就像 “小脑” 一样负责控制机器人的运动。 无需人类背后操作,RDT 即可指挥机器人双臂并用,完美调出如晚霞般梦幻的鸡尾酒 Malibu Sunset。 和人类调酒师一样,首先,RDT 将冰块稳稳倒入高脚杯中,不撒不漏,一套动作行云流水。 倒完冰块后,RDT 先后倒入椰子酒、橙汁、菠萝汁,...