国産LLM「LLM-jp-4」が日本語MT-BenchでGPT-4oを上回った ── 技術的背景と実用性を検証する

概要

国立情報学研究所（NII）が公開した『LLM-jp-4』は、日本語特化トークナイザーとMoEアーキテクチャにより、日本語MT-BenchでGPT-4oを超える性能を達成したオープンソースLLMです。

詳細内容

2026年4月、NIIが主導するLLM-jpプロジェクトは、最新の国産LLM「LLM-jp-4」を公開しました。このモデルは8BおよびMoE（Mixture of Experts）を採用した32B-A3Bの2つのバリエーションを持ち、日本語MT-BenchにおいてGPT-4oのスコアを上回る快挙を成し遂げました。技術面では、日本語の圧縮効率を最大化した独自トークナイザー「llm-jp-tokenizer v4.0」と、11.7兆トークンに及ぶ膨大な学習データ（LLM-jp Corpus v4）が性能向上の鍵となっています。特に32B-A3Bモデルは、総パラメータ数は320億でありながら、推論時には38億パラメータのみを稼働させるMoE構造により、高い知識量と低コストな推論を両立しています。Apache 2.0ライセンスで公開されており、機密情報を扱う法務・行政分野でのローカル運用や、コストを抑えた社内チャットボット構築など、実務への強力な活用が期待されます。

元記事を読む他のサマリーを見る