本文にスキップ
AI News HubLIVE
その他
要約のみ

JetBrains、Mellum2 をリリース:マルチモデル AI パイプライン向け高速特化型 12B MoE モデル

JetBrains は、Mellum2 を Apache 2.0 ライセンスでオープンソース化しました。これは、12B パラメータの Mixture-of-Experts (MoE) モデルで、アクティブパラメータは 2.5B のみ、10.6 兆トークンで学習されています。ソフトウェアエンジニアリングタスクに特化し、大規模 AI システム内の高速コンポーネントとして、ルーティング、RAG、エージェントワークフローなどに適しています。

ソースMarkTechPost著者: Asif Razzaq
JetBrains、Mellum2 をリリース:マルチモデル AI パイプライン向け高速特化型 12B MoE モデル
誤りを報告

訂正窓口はまだ利用できません。記事情報をコピーして保存できます。

訂正案内

要約のみ

配信元のコンテンツ権限に基づき、編集要約、要点、原文へのリンクのみを提供します。

要点と分析を開く

記事インテリジェンス

エンジニア上級

要点

  • Mellum2 は MoE アーキテクチャを採用し、トークンあたり 2.5B のみアクティブで、高い効率を実現。
  • 131K トークンのコンテキスト長、MTP ヘッドによる投機的復号、Apache 2.0 ライセンスでの提供。
  • コード生成 (EvalPlus 78.4) やツール使用 (BFCL v3 66.3) で良好なスコアを示すが、一部の推論タスクでは大型モデルに劣る。
  • ルーティング、RAG、サブエージェント、プライベートデプロイに最適で、vLLM をサポート。

要点と分析は自動生成され、誤りを含む場合があります。原典をご確認ください。