“如今正是涉足机器人领域的绝佳时机，”然而，雷伯特也强调，相对于人类所做的任务，AI大语言模型（LLM）与人形机器人能做的任务之间，仍然会有非常大的差距。“因此，我真的很期待，缩小基于语言的认知智能，和我们动态智能之间的差距。”据悉，今年75岁的雷伯特，是Boston Dynamics（波士顿动力机器人）创始人。在...
王兴兴：大语言模型或多模态模型可以运用在机器人领域，但真正的机器人模型要发展，只是大语言模型还不够。机器人模型本质上跟大语言模型有很大区别，大语言模型是机器人模型的一部分，例如与机器人沟通需要语言。对机器人或具身智能来说，最主要的还是让它干活，而不是在家里听你的唠叨或和你对话。让机器人干活还是...
为了利用LLMs提升类人机器人的运动操作能力,本文提出了一种基于语言模型的新框架,该框架使机器人能够根据文本指令自主规划行为和执行低级任务,同时在任务执行过程中观察并纠正可能出现的失败。为了系统评估本框架对LLMs的grounding效果,作者创建了机器人的“动作”和“感知”行为库,用于任务规划,并在仿真和真实环境中使用...
近年来，随着机器人在工业、交通和家庭环境中扮演越来越重要的角色，如何在规划机器人任务和运动时考虑到周围人类的动作，已经成为一个关键课题。得益于自然语言处理（NLP）研究的重大进展，大型语言模型（LLMs）的出现极大地提升了机器人任务和运动规划（TAMP）的性能。然而，之前的方法往往忽视了动态环境中的人类因素。
由Abbeel及其学生创办的机器人公司Covariant推出了全新的机器人基础模型RFM-1。该系统利用公司积累的大量机器人操作数据，结合网络上的图像、文本等海量信息进行训练，使机器人获得了一系列通用技能。RFM-1能识别图像、传感器数据、自然语言，并将它们映射到合适的机器人动作。即使面对全新物体如香蕉，它也能迅速理解如何...
大语言模型与知识网络的相互补充 孙宇教授从事机器人领域的研究已二十余年。在USF，孙宇教授带领的机器人概念和行为实验室（RPAL）多年来围绕机器臂抓取和操作、人机交互、医学影像及虚拟现实、机器触觉及力学传感控制等诸多方向进行了大量研究。后来在机器人任务规划研究中得到大量应用的FOON这一成果，就是出自RPAL。孙...
Planning中的大语言模型 1)Task Planning 2)Task and Motion Planning Control中的大模型 1)Direct Approach 2)Indirect Approach Prompt Guideline 参考 写在最后 推荐阅读 近年来,大型语言模型(LLMs)的兴起为机器人技术领域带来了革命性的变革,使机器人能够以人类般的熟练程度进行通信、理解和推理。本文探讨了LLMs...
大数据文摘授权转载自机器人大讲堂 近年来,随着机器人在工业、交通和家庭环境中扮演越来越重要的角色,如何在规划机器人任务和运动时考虑到周围人类的动作,已经成为一个关键课题。得益于自然语言处理(NLP)研究的重大进展,大型语言模型(LLMs)的出现极大地提升了机器人任务和运动规划(TAMP)的性能。然而,之前的方法往往忽视...
5月11日，在 2023 年谷歌年度开发者大会上，谷歌宣布了其在人工智能领域的最新进展，包括其最新的第二代大语言模型，谷歌搜索引入人工智能加持，聊天机器人“巴德”加入图片聊天功能并向180多个国家和地区开放，谷歌的办公套件开始与人工智能协作等。值得注意的是，谷歌的团队也正在训练下一代基础模型“双子星”。谷歌...
江磊表示,对于机器人来说,“我们更希望用更自然的方式跟机器人交流,而不是通过很复杂的代码编程来实现。”正因如此,现在几乎所有人形机器人公司首选方式就是用大语言模型来驱动,“这件事已经走通了,就是机器人的规划、决策以及与人的交互,可以用大语言模型实现闭环。” ...