JetBrains、12BのMoEモデル「Mellum2」をApache 2.0で公開
JetBrainsは、テキストとコードに特化した12Bの混合エキスパートモデル「Mellum2」をオープンソースで公開した。トークンごとに2.5Bパラメータのみをアクティブ化し、同規模のオープンモデルと比べて2倍以上高速に推論可能。ルーティングやRAG、サブエージェントなどの低遅延タスクに最適化されている。
JetBrainsは、テキストとコードに特化した12Bの混合エキスパートモデル「Mellum2」をオープンソースで公開した。トークンごとに2.5Bパラメータのみをアクティブ化し、同規模のオープンモデルと比べて2倍以上高速に推論可能。ルーティングやRAG、サブエージェントなどの低遅延タスクに最適化されている。