清華伯克利開源 uni-robot-agent:給千問套上機器人外殼,跑分反超 Astra
清華與伯克利聯合開源機器人智慧體框架 uni-robot-agent,讓現成開源模型直接操控機械臂與模擬環境。在不依賴模擬器特權資訊的前提下,本地執行的 Qwen3.8-Flash-Next 在 RoboDojo 拿到 31.39 分反超 GPT-6 Astra,單次執行成本降至後者的二十分之一。
清華與伯克利聯合開源機器人智慧體框架 uni-robot-agent,讓現成開源模型直接操控機械臂與模擬環境。在不依賴模擬器特權資訊的前提下,本地執行的 Qwen3.8-Flash-Next 在 RoboDojo 拿到 31.39 分反超 GPT-6 Astra,單次執行成本降至後者的二十分之一。
清華團隊開源目標說話人提取模型 Falcon。它將攝像頭畫面與麥克風聲音對應,靠追蹤嘴部在嘈雜環境中即時提取指定人物語音,可訓練引數僅 50 萬。配套的 Falcon Studio 支援在筆記本本地執行,並能通過虛擬音訊裝置直連騰訊會議或 Zoom。
螞蟻集團與清華大學推出即時多模態 Agent 系統 Realtime-Venus。它採用雙迴圈架構,由兩個 9B 模型負責音影片感知與全雙工語音,複雜推理則由後臺非同步處理。使用者不用為了等 AI 幹活而中斷對話,很適合智慧眼鏡和車載場景。
面壁智慧聯合清華大學及 OpenBMB 正式開源端側多模態模型 MiniCPM-V 4.6。模型僅 1.3B 引數,約 6GB 記憶體即可在端側裝置流暢執行,效能超越同級 Qwen3.5-0.8B,計算 Token 消耗僅為其十九分之一。這大幅降低了端側多模態部署門檻,一張消費級顯示卡即可完成微調。
清華大學開源互動課堂平臺 OpenMAIC。輸入任意主題或文件,系統就能一鍵生成課件、測驗和互動模擬,並由會畫白板、能語音講解的 AI 老師和插話討論的 AI 同學即時帶練。它讓自學從單向看影片變成了可提問、可辯論的虛擬教室,程式碼基於 MIT 協議開源。
字節跳動與清華大學團隊釋出 DreamID-Omni。它能接收影像、文本與參考音訊,讓虛擬角色用對應原聲說話,並解決了多人同屏對嘴混亂的問題,還支援現有影片的換臉換聲。團隊預計 3 月正式開源。
清華大學 Xmax AI 團隊推出即時互動影片模型 X1。它支援通過手機攝像頭捕捉手勢,無需手柄即可即時觸控並操控虛擬角色,具備毫秒級超低延遲和無限時長生成能力。目前團隊已開啟免費內測申請。
上海交通大學與清華大學團隊展示全光計算晶片 LightGen。在影像生成等複雜任務中,其速度和能效比輝達 A100 提升了百倍以上。團隊利用超構表面構建了「光學潛在空間」。不過該晶片目前仍依賴外接雷射器,尚處於實驗室階段。
生數科技聯合清華大學釋出文本生成影片模型 Vidu。它基於自研的 U-ViT 架構,能一鍵生成 16 秒、1080p 解析度的影片,支援單場景多機位切換與物理規律模擬。雖然畫質和真實感與 Sora 相比仍有差距,但其畫面連貫性表現亮眼。