具身大脑评测榜出炉GPT-6全球第一
IT时代网10月4日消息,评测机构SuperCLUE公布最新的具身大脑评测榜单,用来衡量各大AI模型担任机器人大脑的实际水平:OpenAI的GPT-6 Astra拿下综合全球第一,国内阵营中阿里、中兴两家并列国内第一。
具身大脑就是给机器人用的AI大脑,不光要看得懂画面、听得懂语言,还得会规划动作,指挥机器人去抓取物品、移动导航,处理现实环境里的各种突发状况,与普通聊天大模型有本质区别。这份榜单做了大量真机实测,不只是跑虚拟仿真题目,评测覆盖环境感知、物体识别、长任务规划、物理世界预判等多个维度,把国内外主流模型拉到同一个标准下打分。
最终GPT综合得分遥遥领先,在长逻辑推理、复杂任务拆解上优势明显。国内阵营里,阿里达摩院和中兴的模型分数一致,并列国内第一:阿里模型擅长时空记忆,机器人任务被打断之后还能记住之前没做完的事;中兴的版本则更偏向端侧落地,适配硬件,更适合放到实体机器人设备上运行。
榜单同时显示,国内头部选手与GPT相比总分上还有一截距离,遇到步骤繁多的复杂连锁任务,国产模型偶尔会出现判断出错,处理陌生环境的泛化能力也还有提升空间。当前市面上的评测榜单测试集各异,排名常有出入,这份榜单的优势在于加入大量真机测试,参考价值更高。
目前人形机器人仍处早期阶段,具身大脑的能力会直接决定机器人未来能承担多少实际工作,后续各家模型还会持续迭代,国内外的差距大概率会继续缩小。

注:本文中包含AI辅助创作的内容。
编辑:林一舟