DeepMind 发布 Gemini Robotics-ER 1.6:机器人学会看仪表盘,空间推理全面升级
Google DeepMind 推出具身推理模型 Gemini Robotics-ER 1.6。新模型大幅增强了空间指向、多视角任务完成检测以及原生工具调用能力。DeepMind 还联手波士顿动力为四足机器人 Spot 引入仪表读数能力,结合代码执行精准读取工业压力表与视镜。
Google DeepMind 推出具身推理模型 Gemini Robotics-ER 1.6。新模型大幅增强了空间指向、多视角任务完成检测以及原生工具调用能力。DeepMind 还联手波士顿动力为四足机器人 Spot 引入仪表读数能力,结合代码执行精准读取工业压力表与视镜。
Boston Dynamics 展示了由 Google Gemini Robotics-ER 1.5 驱动的 Spot 机器狗,在住宅内拾取鞋子与易拉罐。工程师无需编写状态机代码,仅用自然语言指令配合 API 工具,就让大模型充当操作员自主规划动作。目前这仍属实验演示,但展现了具身推理加速机器人落地的潜力。
据报道多家科技巨头开始引入波士顿动力等厂商的四足机器狗,自主巡逻庞大的 AI 数据中心。单台售价最高 30 万美元,能排查漏水等固定传感器漏掉的隐患。运营商表示削减人工安保后,约两年即可收回成本。
马里兰大学RoboScout团队展示了一套AI搜救系统。无人机先入场搜寻伤者,再将位置同步给配备大模型的机器狗Apollo,由其接近伤员、对话扫描体征并将分诊结果发给医护人员手机。这种无人协作能在伤员远超医护人数时快速救急。
Boston Dynamics 发布新视频,展示其纯电版人形机器人 Atlas 完成侧手翻、前滚翻与霹雳舞「扫腿」等动作。团队联合 RAI,通过动捕服采集人类动作并结合强化学习完成训练。这展示了双足机器人的敏捷极限,不过其实际商业化落地仍面临资金考验。
Boston Dynamics 展示了一项概念验证:将 ChatGPT、BLIP-2 视觉模型与 ElevenLabs 语音合成接入机器狗 Spot。机器人不仅能看懂周围环境沿途解说,还能根据设定扮演讽刺、搞笑等性格回答提问。最值得关注的是大模型在实体机器人上展现出的自主联想能力,不过目前每次回答仍有约 6 秒延迟。