Ai2がMolmoMotionを公開:言語指示から物体の3D軌跡を予測
Ai2は言語指示に基づき物体の3D運動を予測するモデル「MolmoMotion」と116万本の動画データセットをオープンソースで公開した。Molmo 2をベースにし、画像内の指定点と指示文から数秒先の3D軌跡を推定する。シミュレーション実験ではロボットのピッキング成功率が76.3%に向上した。
Ai2は言語指示に基づき物体の3D運動を予測するモデル「MolmoMotion」と116万本の動画データセットをオープンソースで公開した。Molmo 2をベースにし、画像内の指定点と指示文から数秒先の3D軌跡を推定する。シミュレーション実験ではロボットのピッキング成功率が76.3%に向上した。
AI2は動画理解・追跡に特化したオープンソースマルチモーダルモデル「Molmo 2」を発表しました。4B、7B、8Bの各モデルに加え、データ処理から学習、推論に至る全コードを公開。8Bモデルは前世代72BやGemini 3 Proを上回る動画追跡精度を達成しています。