Cactusが視覚モデルMirageを公開:わずか22MBでスマホ上で74msの超高速動作
Cactusがパラメータ数5130万、2ビット量子化で約22MBに収まる超軽量視覚モデル「Mirage」を公開しました。1回の推論で物体検出、OCR、セグメンテーション、空間関係の推論を同時に行い、スマホのNPUならわずか74ミリ秒で処理します。ウェアラブルやモバイル端末のローカル環境でも高度な視覚処理が軽快に動きます。
Cactusがパラメータ数5130万、2ビット量子化で約22MBに収まる超軽量視覚モデル「Mirage」を公開しました。1回の推論で物体検出、OCR、セグメンテーション、空間関係の推論を同時に行い、スマホのNPUならわずか74ミリ秒で処理します。ウェアラブルやモバイル端末のローカル環境でも高度な視覚処理が軽快に動きます。
MirageはAIアバターモデル「Avatar X」を発表した。わずか10秒の動画からクローンを作成でき、あくびや苦笑いなどの細かな微表情を忠実に再現する。音声駆動による全身のモーション生成や、画質を落とさない長時間の連続動画生成に対応する。
Mirage は Captions アプリに対話型の動画編集機能を導入した。「3 秒でズーム」や字幕追加といった要望をテキストで入力するだけで、AI が 10 秒以内に反映する。タイムライン操作をチャットに置き換え、短尺動画の作成を手軽にする。
AI動画アプリのCaptionsが社名を「Mirage」に変更すると発表した。TikTokやReelsなどの短尺動画に特化したマルチモーダル基底モデルを開発する研究所への転換を目指し、既存の制作ツールと広告向けMirage Studioを統合する。
Dynamicslabがリアルタイム生成型ゲームエンジン「Mirage」を発表しました。従来のマップや静的アセットを一切使わず、プレイヤーの操作やプロンプトに応じてクラウド上で3D映像を1フレームずつリアルタイム生成します。現在約16fpsでブラウザ配信されており、画像からワールドを即時生成することも可能です。
CaptionsはUGC(ユーザー生成コンテンツ)スタイルの動画広告に特化したAIモデル「Mirage」を公開した。台本や音声を入力するだけで、身振りや微表情を備えた架空のアバター動画を生成でき、外見や背景、感情も指定できる。実写撮影なしで広告の大量制作が可能になる。