Wan Streamer 0.3 釋出:虛擬角色支援自然語言即時動作控制
Wan Streamer 釋出 0.3 版本,讓虛擬角色從肖像對話升級為能與環境互動的動作控制。核心機制是將影片拆解為保持一致的「世界」與隨時間變化的「事件流」,能即時響應比耶、叉腰等自然語言指令。目前團隊僅釋出了技術論文。
Wan Streamer 釋出 0.3 版本,讓虛擬角色從肖像對話升級為能與環境互動的動作控制。核心機制是將影片拆解為保持一致的「世界」與隨時間變化的「事件流」,能即時響應比耶、叉腰等自然語言指令。目前團隊僅釋出了技術論文。
阿里巴巴公佈端到端互動模型 Wan Streamer,讓 AI 在視訊通話中即時看、聽並同步回應。它用單一 Transformer 統一處理音影片和文本,支援全雙工通訊,模型端延遲約 200 毫秒。目前 v0.1 仍為 192p 概念驗證,未開放即時體驗。