続・Qwen追跡:Arenaに現れたQwen4と3.8 Maxの69.7

📌 エグゼクティブサマリー
RedditでQwen4がArenaに現れたとの投稿が話題になっています。一方ランキングではQwen3.8 Maxが69.7で首位、Flash-Nextとは6.9ポイントの差。本記事では伝聞レベルの新情報と、暫定スコアの正しい読み方を整理します。

「Qwen4がArenaに載っているらしい」——Redditのr/LocalLLaMAに投稿されたこの一言が、ローカルLLMカルチャーで静かに話題になっています[1]。Arenaは複数のモデルを並べて比較できる評価サイトで、未発表モデルがテスト用に姿を見せる場所としても知られています。投稿者は「qwen4 flashに期待している」と書いており、評価サイトに未発表モデルの姿が現れたこと自体を、リリースが近い証拠と受け止める向きがあるようです。

ただし、この投稿は「apperantly(らしい)」という伝聞の形そのままで、モデルの実体や性能に関する情報は一切ありません。Arenaへの掲載が正式リリースにつながるかも現時点では不明です。周辺を見ると、Qwen4のリリース日や確認済みスペックをまとめた解説記事が複数出ています[5][6][6]。中には「Qwen 4 27B」という特定サイズに絞り、準備すべきハードウェアを解説した記事まで登場しています[4]。ただし、これらの記事から性能の実測値や具体的なスペック数値を読み取ることはできませんでした。

一方、現行ラインナップの実力は数値で追えます。AIモデルのベンチマーク比較サイトBenchLMの2026年10月20日時点のランキングでは、AlibabaのQwenモデル20個が評価され、首位はQwen3.8 Maxです[3]。BenchAlign v5.8という総合スコアで69.7を記録しています。2位はQwen3.8-Flash-Nextの62.8、3位はQwen3.7 Maxの62.6。上位3モデルの間には6.9ポイントという明確な差が開いており、同サイト自身も「上位モデル間には意味のある分離がある」としています[3]。

注目したいのは、この首位のQwen3.8 Maxがオープンウェイト(重みが公開され、誰でもダウンロードできる形のモデル)としても1位という点です[3]。同サイトは「この分野ではオープンウェイトモデルが非常に競争力があり、セルフホストは専用APIの現実的な代替になり得る」と評価しています。同じAlibabaのラインナップ内で並べることで、用途や予算に合うモデルを選びやすくする、というのがこのランキングの狙いでもあります[3]。

Qwenモデルが何を測られているのかを見ると、評価の幅の広さがわかります。公式ドキュメントにまとめられたベンチマークは、中国語の学識を52科目で試すC-Eval、英語の理解を57タスクで試すMMLU、コード生成の成功率を測るHumanEval、小学校レベルの数学問題で推論を試すGSM8Kなど多岐にわたります[2]。評価対象は事前学習済みの素のモデルと、チャット向けに調整されたモデルの両方です[2]。さらにWMT22による中英翻訳の品質、長文の理解度、ReAct(モデルが外部ツールを使って作業する能力を試す評価)まで含まれています[2]。長文については、arXivの論文テキストを使い、長さ別に困惑度(次の単語をどれだけ予測しにくいかを示す指標)を測る方式も取られています[2]。

しかし、ここには落とし穴もあります。BenchLMのランキングは「暫定(provisional)」のレーンで算出されたスコアであり、より厳格な「検証済み」リーダーボードとは別物だと同サイト自身が明記しています[3]。また、新しいモデルは公開直後はベンチマークのカバー範囲が限定的になりがちだという注意書きもあり[3]、69.7という数字の解釈には幅が残ります。このページはAlibabaモデルだけを並べたもので、他社との比較には全体ランキングが必要だとされています[3]。リーダーボード全体も2026年10月時点のデータで構成されています[6]。そして忘れてならないのは、Qwen4がArenaに載ったという情報自体が検証を経ていない伝聞だという点です[1]。

Qwen4の正体が明らかになるまでの間は、暫定的なスコアと伝聞レベルの情報を丁寧に読み分ける時期のようです。それでも、Qwen3.8 Maxの69.7とFlash-Nextの62.8という差は、次の世代がどこまで迫れるかを測る基準になりそうです。「qwen4 flashに期待」と書いた投稿者の期待が、この69.7を超えられるかどうか。次にArenaでその名前を見つけたときは、スコアと合わせて出典の性質も確かめてみたいところです。