Ai2がMolmoMotionを公開:言語指示から物体の3D軌跡を予測
Ai2は言語指示に基づき物体の3D運動を予測するモデル「MolmoMotion」と116万本の動画データセットをオープンソースで公開した。Molmo 2をベースにし、画像内の指定点と指示文から数秒先の3D軌跡を推定する。シミュレーション実験ではロボットのピッキング成功率が76.3%に向上した。
Ai2は言語指示に基づき物体の3D運動を予測するモデル「MolmoMotion」と116万本の動画データセットをオープンソースで公開した。Molmo 2をベースにし、画像内の指定点と指示文から数秒先の3D軌跡を推定する。シミュレーション実験ではロボットのピッキング成功率が76.3%に向上した。