AI2のMolmoActモデルは「3Dで考える」ことで、ロボット工学AI分野でNvidiaとGoogleに挑戦する from venturebeat.com

新しいオープンソースモデル「MolmoAct」は、ロボットが3D空間で推論することを可能にします。
このモデルは、ベクトル量子化変分オートエンコーディングアルゴリズムを用いて事前学習・抽出されたトークンを用いて、動作計画や物体操作などに利用されます。
Ai2によるベンチマークテストでは、成功率は72%でした。