フランスのMistralが公開プレビューを始めたフラッグシップ「Mistral Large 4」は、1兆パラメータのネイティブ・マルチモーダルモデルだ。ただし重みが配布されるのは10月末。今すぐ試せるのはAPIだけになる。
Mistral Large 4がプレビューで提供を始めた中身
Mistral Large 4は10月6日、公開プレビューとして登場した。パリのラボが付けた愛称は「Le Chonk」。冗談めいた名前の裏に、真面目なハードウェアの話が隠れている。総パラメータは1兆で、そのうち実際に動くのは490億。ここで効いてくるのがMixture-of-Experts（複数の専門家を切り替えて使う仕組み）の採用だ。
この分け方が何をもたらすのか。ここが理解の要になる。MoEのモデルは膨大な知識を蓄えつつ、1回のリクエストごとにその一部だけを呼び出す。巨大モデルの守備範囲を、全パラメータ分の計算コストを払わずに手に入れられる。API経由でモデルを動かす人にとっては、説明のつく請求額とつかない請求額の差になる。
Mistralによれば、このモデルは生まれつきマルチモーダルで、画像とテキストを同じ処理の中で扱う。視覚専用のモデルを後付けする方式ではない。テキスト専用版は100万トークンのコンテキストウィンドウを持ち、書類をまとめて1回のリクエストに放り込める。トレーニングは自社の欧州データセンター内のNVIDIA Grace Blackwell GPU 3800基でゼロから実施された。
Mistralの言う「オープンウェイト」とは何か
MistralはML4を、オープンウェイト性能の最前線と位置づける。米国や欧州がこれまでに出したオープンウェイトモデルを上回ると主張している。視覚分野ではさらに踏み込み、画像の該当領域を指し示す「視覚グラウンディング」で一部のクローズドなフロンティアモデルを超えたとしている。
オープンウェイトの約束には期限が付く。重みの公開は10月末の予定で、Hugging Faceのページは現在10月31日を目安として示している。それまではMistral StudioのAPI上のプレビューにすぎず、ダウンロードして自前でホストし、微調整したい開発者にとっては、まだ本当の意味でのオープンモデルではない。
Mistral Large 4が狙う企業向け業務
プレビューの売り込みは、チャットボットの芸ではなく企業の実務に置かれている。Mistralは、サイバーセキュリティ、金融、法務といったタスクで、オープンモデルの中でも最先端の結果に達すると説明する。この3分野は、欧州の企業が米国企業が運営するシステムへの業務委託に慎重だった領域だ。機密契約や脅威分析をEU域内のインフラで扱えるモデルは、性能だけでなくコンプライアンスの問いにも答える。
多言語対応はもっと静かな売りだ。ML4は160以上の言語でトレーニングされ、EUの全公用語を網羅する。十数カ国でカスタマーサポートを回す銀行にとって、ポーランド語やオランダ語、ギリシャ語を崩さず読むモデルが1つあれば実務上の利点になる。米国のフラッグシップが後回しにしがちな範囲をカバーしている。
Mistralは公開当日、Artificial Analysisの評価アリーナにもML4を投入した。プレスリリースだけで終わらせず、第三者の目を数字に入れたいという意思表示だ。初期の登録ではML4はオープンウェイト勢の上位に付けたが、プレビュー開始時点でリーダーボードはまだ埋まりきっていなかった。
1兆パラメータが実務で何を変えるか
パラメータ数は見出しを飾る。Le Chonkはその恩恵を存分に受けた。だが日々の使い勝手を決める数字はもっと小さい。1トークンあたりに動く490億、その部分だ。コーディングでは、複数ファイルにまたがる変更を推論してから編集に入れる。1行ずつパターンマッチする動きとは違う。契約レビューでは100万トークンのコンテキストのおかげで、契約書を丸ごと渡して責任条項だけを洗い出せる。
マルチモーダルも同じ流れに乗る。壊れたダッシュボードのスクリーンショットを渡せば、画面の内容と一緒に渡したインシデントレポートを結び付けられる。画像とテキストを同時に読むからだ。前世代では視覚モデルを別に走らせ、その出力をプロンプトに組み直す必要があった。
まだできないのは、自分で動かすことだ。1兆パラメータのモデルはMoE構成でもホスティング費用がかさむ。だから今のプレビューはAPIの話になる。セルフホストの話は、重みが届いてから始まる。
Mistral Large 4を今試す方法
プレビューAPIはMistral Studioで利用でき、重みが来る前に自分のプロンプトでML4を試せる。製品への採用を検討しているなら、今後数週間が、他人のベンチマークではなく自分の実データで比較する期間になる。重みは10月末までに公開予定で、そこで初めて、呼び出すだけでなくダウンロードし、ホストし、調整できるモデルになる。
