Kimi K3.1 Pro、最強主張の実力は?独立評価と価格で検証

「GPT-6 Astraに勝った」——中国Moonshot AIはそう主張するモデルを出しました。Kimi K3.1 Proです。前モデルKimi K3からわずか3ヶ月での登場です[3]。自社ベンチではClaude Opus 5.5やGPT-6 Astraに匹敵、あるいは上回るとしています[3]。しかし、独立系の評価やローカル実行派の反応は、もう少し複雑なようです。

グラフ: Artificial Analysis Intelligence Indexの比較

画像出典: 記事全文: Kimi K3.1 Pro Benchmarks: Does It Really Beat GPT-6 Astra?

まずモデルの規模から見てみましょう。Kimi K3.1 Proは総パラメータ約2.8兆の巨大モデルで、MoE(混合エキスパート)という構造を使います。MoEは、トークンごとに必要な一部のネットワークだけを動かし、計算量を抑える仕組みです。このモデルでは1トークンあたり約1040億のパラメータが動きます。コンテキスト(一度に扱える文章量の上限)は100万トークンで、画像入力にも対応しています[2][3]。

画像出典: 記事全文: Kimi K3.1 Pro Intelligence, Performance & Price Analysis

実力はどうでしょうか。独立系評価サイトArtificial AnalysisのIntelligence Indexでは55を記録しました。比較対象の中央値は27なので、平均よりかなり上です[2]。ただし頂点ではありません。Claude Opus 5.5の58に3ポイント及ばず、全体で4位という評価です[3]。オープンウェイト(重みを公開して誰でもダウンロードできる形)としては強いものの、最前線では中堅というのが独立テストの結論です[3]。

気になるのは推論速度と出力の量です。評価時の速度は73トークン/秒で、平均の82より遅めです[2]。評価のために1億5000万トークンを生成しており、中央値の8700万を大きく上回ります。出力が非常に冗長なのも弱点です[2]。1タスクあたりの評価コストは2.11ドルでした[2]。一方でAPI価格は強力です。入力100万トークンあたり2ドル、出力は10ドル[2]。Opus 5.5の約4ドル/20ドル、GPT-6 Astraの報告値10ドル/50ドルを大きく下回ります[3]。同価格帯のモデルと比べても価格は妥当という評価があります[2]。

手を動かすコーディングテストでは、話が変わります。KingBenchという実践ベンチのスコアは53.7%。11モデル中の6位です[3]。Opus 5.5やGPT-6 Astra、GPT-6.1 Soul、Gemini 4 Argon、さらにClaude Haiku 5.5にも後れを取りました[3]。一方、Web開発のリーダーボードでは、前モデルK3の17位から8位へと浮上しています[3]。得意と苦手がはっきり分かれた結果です。

ここで視点を変えて、ローカル実行派の声です。Reddit r/LocalLLaMAには「Kimi K3.1 ProはDeepSeek 4.1 Flashより大したことないのでは」という投稿が立っています[1]。投稿者はKimiが巨大パラメータモデルに踏み込む挑戦を評価しつつ、こう指摘します。K3は量子化(重みを圧縮してメモリを節約する仕組み)してもローカルで動かすのが難しく、動いても遅いといいます。理由は、1トークンを作るのに104もの活性レイヤー(計算の層)を通るためです[1]。DeepSeek 4.1 Flashの1017版は、ずっと小さなフットプリント(必要なメモリや資源の規模)で速く、結果もかなり近いというのです[1]。さらに「量子化したK3.1 Proより、高精度な量子化のDeepSeekの方が出力が良い」とまで書かれています[1]。投稿者の結論は「11月4日のオープンウェイトを待たず、4.1 Flashの1017版を使えばいい」というものでした[1]。両者の比較は、ベンチマークや価格を扱う比較サイトにも複数あります[4][5][6][7]。

実世界のコーディングでも穴が見つかっています。依頼した3システムのうち1つしかビルドできなかったエミュレータや、コンテナを実際にビルド・実行できない「Dockerの代替」などです[3]。意外なことに、モデルはこれらの失敗を偽らず、正直に報告したといいます[3]。コーディング、3D、データ分析を試す実用レビューも出ており、得意と限界の両面が検証され始めています[8]。

まとめると、「最強」かどうかは測り方次第のようです。自社ベンチのHumanity’s Last Examでは70%に達し、Opus 5.5の67.7%、GPT-6 Astraの57.2%を上回ります[3]。しかし独立スコアでは3ポイント差の4位、実践コーディングでは6位です[3]。それでも価格の優位は明確です。しかも11月4日にはオープンウェイト公開の予定で、少なくとも1つの独立インデックスではオープンウェイト最高スコアになる見込みです[3]。ローカル勢には既にDeepSeek 4.1 Flashという選択肢があります[1]。公開後の評価がどう動くか、注目したいところです。

引用ソース

Reddit Reddit r/LocalLLaMA: Is it just me or Kimi K3.1 Pro don’t look much better than DeepSeek 4.1 Flash? — https://www.reddit.com/r/LocalLLaMA/comments/1xemxoq/is_it_just_me_or_kimi_k31_pro_dont_look_much/

Is it just me or Kimi K3.1 Pro don’t look much better than DeepSeek 4.1 Flash?
Web記事 記事全文: Kimi K3.1 Pro Intelligence, Performance & Price Analysis — https://artificialanalysis.ai/models/kimi-k3-1-pro

Kimi K3.1 Pro Intelligence, Performance & Price Analysis
Model summary
Kimi K3.1 Pro is amongst the leading models in intelligence and reasonably priced when comparing to other models of similar price. It’s also slower t
Web記事 記事全文: Kimi K3.1 Pro Benchmarks: Does It Really Beat GPT-6 Astra? — https://www.mindstudio.ai/blog/kimi-k3-1-pro-benchmarks-review

What is Kimi K3.1 Pro?
Kimi K3.1 Pro is a large language model from the Chinese AI lab Moonshot AI, released as an upgrade to Kimi K3 just three months after that model launched. Moonshot’s own benchmarks claim it matche
Web記事 Web検索: Kimi K3 vs DeepSeek-V4.1 Flash – Detailed Performance & Feature Comparison — https://docsbot.ai/models/compare/kimi-k3/deepseek-v4-1-flash

Kimi K3 vs DeepSeek-V4.1 Flash – Detailed Performance & Feature Comparison
Web記事 Web検索: DeepSeek-V4.1-Flash vs Kimi K3: Benchmarks, Pricing & Which Is Better … — https://llm-stats.com/models/compare/deepseek-v4.1-flash-vs-kimi-k3

DeepSeek-V4.1-Flash vs Kimi K3: Benchmarks, Pricing & Which Is Better …
Web記事 Web検索: DeepSeek-V4.1-Flash-1017 vs Kimi K3: Benchmarks, Pricing & Which Is … — https://llm-stats.com/models/compare/deepseek-v4.1-flash-1017-vs-kimi-k3

DeepSeek-V4.1-Flash-1017 vs Kimi K3: Benchmarks, Pricing & Which Is …
Web記事 Web検索: DeepSeek V4.1 Flash 1017 vs Kimi K3.1 Pro: Benchmarks & Cost — https://benchlm.ai/compare/deepseek-v4-1-flash-vs-kimi-3-1-pro

DeepSeek V4.1 Flash 1017 vs Kimi K3.1 Pro: Benchmarks & Cost
Web記事 Web検索: Kimi K3.1 Pro Review: Coding, 3D, Data Analysis, and Limits — https://evolink.ai/blog/kimi-k3-1-pro-review

Kimi K3.1 Pro Review: Coding, 3D, Data Analysis, and Limits

※ 本記事はAIにより、Reddit・Hacker News・5ch・Xトレンドの公開投稿・トレンドを軸に、その話題をWeb検索で深掘りして集めた一次情報(記事全文・HNコメント)を併せて自動生成されました。本文中の[n]は末尾の引用ソース番号です。内容の正確性は保証されません。引用先を必ずご確認ください。