DeepMind 釋出 Gemini Robotics-ER 1.6:機器人學會看儀表盤,空間推理全面升級
Google DeepMind 推出具身推理模型 Gemini Robotics-ER 1.6。新模型大幅增強了空間指向、多視角任務完成檢測以及原生工具呼叫能力。DeepMind 還聯手波士頓動力為四足機器人 Spot 引入儀表讀數能力,結合程式碼執行精準讀取工業壓力錶與視鏡。
Google DeepMind 推出具身推理模型 Gemini Robotics-ER 1.6。新模型大幅增強了空間指向、多視角任務完成檢測以及原生工具呼叫能力。DeepMind 還聯手波士頓動力為四足機器人 Spot 引入儀表讀數能力,結合程式碼執行精準讀取工業壓力錶與視鏡。
Boston Dynamics 展示了由 Google Gemini Robotics-ER 1.5 驅動的 Spot 機器狗,在住宅內拾取鞋子與易拉罐。工程師無需編寫狀態機程式碼,僅用自然語言指令配合 API 工具,就讓大模型充當操作員自主規劃動作。目前這仍屬實驗演示,但展現了具身推理加速機器人落地的潛力。
據報道多家科技巨頭開始引入波士頓動力等廠商的四足機器狗,自主巡邏龐大的 AI 資料中心。單臺售價最高 30 萬美元,能排查漏水等固定感測器漏掉的隱患。運營商表示削減人工安保後,約兩年即可收回成本。
馬里蘭大學RoboScout團隊展示了一套AI搜救系統。無人機先入場搜尋傷者,再將位置同步給配備大模型的機器狗Apollo,由其接近傷員、對話掃描體徵並將分診結果發給醫護人員手機。這種無人協作能在傷員遠超醫護人數時快速救急。
Boston Dynamics 釋出新影片,展示其純電版人形機器人 Atlas 完成側手翻、前滾翻與霹靂舞「掃腿」等動作。團隊聯合 RAI,通過動捕服採集人類動作並結合強化學習完成訓練。這展示了雙足機器人的敏捷極限,不過其實際商業化落地仍面臨資金考驗。
Boston Dynamics 展示了一項概念驗證:將 ChatGPT、BLIP-2 視覺模型與 ElevenLabs 語音合成接入機器狗 Spot。機器人不僅能看懂周圍環境沿途解說,還能根據設定扮演諷刺、搞笑等性格回答提問。最值得關注的是大模型在實體機器人上展現出的自主聯想能力,不過目前每次回答仍有約 6 秒延遲。