深耕具身智能的 2024-11-19 12:45 北京
具身智能的GPT时刻还有多远?
让机器人“丝滑”理解、应对纷繁复杂的物理世界,这是具身智能行业努力的一个重要方向。
近日,云启天使轮领投项目「星尘智能」牵手通用机器人基础模型“独角兽”「Physical Intelligence 」,在模型层展开合作,共同探路世界模型。双方合作会解锁具身智能的哪些新图景?本期「云启伙伴」和你一起了解详情。
01
Astribot S1 +π0
泛化能力升级
11月15日,星尘智能和Physical Intelligence共同发布一则视频,展示了合作研发具身模型加持下的Astribot S1如何顺畅操作胶囊咖啡机。
无论是拿取胶囊咖啡,还是打开咖啡机胶囊咖啡仓、制取咖啡,S1 都可以毫无卡顿地完成任务。值得一提的是,在这段Demo中,当S1被指定制作Nopoli风味的咖啡时,不管红色的Nopoli风味胶囊被放在什么位置,S1都能精准拿取,展示了出令人印象深刻的泛化能力。
实际上,自今年8月份发布AI机器人助理Astribot S1以来,星尘智能即凭借出色的全能操作和具身人形设计迅速出圈。Astribot S1机器人不仅在多模态感知、认知处理、实时决策以及智能交互执行方面等能力维度上有出色表现,其在AI训练方面也取得了卓越进展。
作为AI三大核心要素之一,数据对机器人训练至关重要。星尘智能在数据方面优势凸显,其能够以较低成本和较高效率利用真实世界数据进行模型训练,从第一人称视角收集触觉、力觉、视觉、听觉等多维度的高质量数据,为AI学习与执行提供更高维度的数据支持。
此外,星尘智能“软硬一体”架构了支撑其机器人产品具备业内领先的操作能力。从结构设计到底层硬件设计,S1都追求硬度和软度的平衡,确保在实际操作中既能控制硬的准度,又能把握软的力度,从而精准、灵活地适配各类场景的操作需求。
与星尘智能展开合作的Physical Intelligence亦是机器人领域快速崛起的创业公司,11月初宣布获得4亿美元融资。该公司专注开发通用基础模型和学习算法,旨在为机器人构建大脑,创始成员包括Google DeepMind资深科学家、斯坦福大学教授、UC Berkley 助理教授等。10月31日发布的π0模型即是Physical Intelligence 研发8个月后推出的首款通用机器人基础模型。
此番嵌入S1的机器人模型再度进化,是星尘智能和Physical Intelligence携手对通用机器人模型的提升改进。
星尘智能在模仿学习和强化学习方面积累的突出优势,加上Physical Intelligence在多模态具身模型的技术进展,构建起具身大脑小脑反馈迭代的闭环,共同探路世界模型是此次合作的内涵所在。
02
强强联合
探路世界模型
“在2022年创业之初,也是Yann Lecun刚刚提出世界模型相关构想的时候,我们就开始思考机器人和世界模型相关的事情。”
在今年11月初举行的“智源论坛·2024具身与世界模型专题峰会”上,星尘智能创始人兼CEO来杰表示,构建世界模型是星尘智能的目标之一。“我们的机器人正是在世界与世界模型之间收集数据、理解数据,再与物理世界交互,把结果反馈给世界模型。”
世界模型被认为是通往AGI的一大关键路径,也为具身智能的通用化提供了重要基础。其通过预测未来范式对数字世界和物理世界进行深度理解,让机器人等智能体充分感知、预测、规划和适应复杂多变的场景。
当前世界模型尚处探索起步期。作为天使轮领投方,云启乐见并看好「星尘智能」与机器人通用模型领域的创新力量联合研发,期待其在世界模型的构建和机器人AGI道路上创造新的里程碑。