- 2026年7月27日に公開。オープンウェイトとして初の3兆パラメータクラス
- トークンあたり16エキスパートを活性化し、約1040億パラメータで推論
- SageMaker HyperPodとAmazon EKSの2方式でデプロイ可能
Kimi K3発表の概要
Moonshot AIは2026年7月27日、オープンウェイトの大規模言語モデル「Kimi K3」を公開した。2.8兆パラメータのMoEモデルで、オープンウェイトとしては初めて3兆パラメータクラスに到達したとされる。これにより、誰でも自社のインフラストラクチャにホスティングできる最先端モデルが登場した。
ウェイトはHugging Face上で公開され、MXFP4形式で配布されている。MXFP4は4ビットの量子化形式で、メモリ効率とモデル品質のバランスを取る。外部APIに依存せず利用できる点が特徴だ。
技術的な新しさ
Kimi K3は「Kimi Delta Attention」や「Gated Multi Head Latent Attention」、「Stable LatentMoE」といった独自構成を採用している。モデルは896のエキスパートを持ち、トークンごとに16個だけを活性化する。1回のフォワードパスで動作するパラメータは約1040億個に抑えられている。
これにより、2.8兆パラメータという巨大なモデルでも計算コストを抑制しながら、長期的なコーディング、エージェントワークフロー、複雑な推論といった高度なタスクを処理できる。ネイティブのツール呼び出しや構造化出力、複数ステップの推論を想定した常時オン型の思考モードもサポートする。推論時に使うパラメータを減らすことで、実用的な運用が可能になっているとみられる。
既存モデルとの比較・位置づけ
Moonshot AIの前作「Kimi K2」と比較すると、スケーリング効率は2.5倍に改善されている。MoEアーキテクチャの特性を生かし、アクティブなパラメータ数を抑えながらモデル全体を拡大することで、性能とコストのバランスを高めたとみられる。
オープンウェイトのモデルが3兆パラメータクラスに達したのは初めてであり、自社運用を前提としたモデルの性能水準が大きく引き上げられたと言える。外部のAPIにデータを送信せず、自社環境で最先端モデルを動かしたい企業にとっては選択肢が広がる。ただし、モデルが大きい分、推論のためのインフラコストも大きくなる点には注意が必要だ。
AWSでのデプロイと注意点
AWSでは、SageMaker HyperPodを使う方法と、Amazon EKSを使う方法の2通りが紹介されている。どちらの場合も、NVIDIA B300 Blackwell Ultra GPUを8基搭載するp6-b300インスタンス(ml.p6-b300.48xlarge)が必要で、推論エンジンにはvLLMを利用する。SageMaker HyperPodはマネージドサービスで運用の手間を減らし、EKSは自前のKubernetes環境を好むチームに向く。
注意点として、vLLMのKimi K3対応はまだメインストリームにはマージされておらず、専用コンテナ(vllm/vllm-openai:kimi-k3)を使用する必要がある。p6-b300もオンデマンドではなく予約したキャパシティでのみ利用できるため、Flexible Training PlansやCapacity Blocksによる事前の確保が必須だ。デプロイ後はOpenAI互換のAPIとして利用できる。
Kimi K3 represents a new frontier in open-weight model capabilities, and AWS provides the infrastructure and managed services to deploy it at scale.
Kimi K3はオープンウェイトモデルの能力における新たな境地を示すものであり、AWSはそれを大規模に展開するためのインフラストラクチャとマネージドサービスを提供します。
日本の開発者・IT企業にとっての意味
Kimi K3のような大規模オープンウェイトモデルが登場したことで、日本のIT企業も最先端モデルを自社データセンターやクラウド上で運用する選択肢が広がる。特に、機密データを外部のAPIに送りたくない企業にとって、オープンウェイトモデルを自社インフラでホストできるのは大きな意味を持つ。ただし、p6-b300インスタンスのコストは高額で、予約制のキャパシティを事前に確保する必要がある。AWSのSageMaker HyperPodやEKSを使えばデプロイ自体は容易になるが、GPUリソースの計画とコスト管理は従来以上に重要になるだろう。長期的なコーディングやエージェントのような業務での活用が期待される一方で、導入前に必要なリソースとコストを慎重に見積もる必要がある。
用語解説
- MoE
- Mixture of Expertsの略。複数の専門化されたネットワークを持ち、入力に応じて一部のみを活性化するニューラルネットワークの構造。
- MXFP4
- 4ビットのマイクロスケーリング浮動小数点形式。メモリ使用量を抑えつつモデルの品質を保つ量子化技術。
- vLLM
- 大規模言語モデル向けの高速推論エンジン。MoEや量子化形式にネイティブ対応している。
- SageMaker HyperPod
- Amazon SageMakerの一機能。大規模な基盤モデルの学習・推論用にクラスタを管理するサービス。
- Capacity Blocks
- EC2のGPUインスタンスを特定期間予約する仕組み。オンデマンド需要と分離して確実にキャパシティを確保できる。
出典
Deploying Kimi K3 on Amazon SageMaker HyperPod and Amazon EKS
企業のAI活用顧問を、いまなら無料で承っています
何から手をつけるか、どこまでAIに任せるか。自社の業務に合わせて一緒に整理します。導入前の相談だけでも構いません。
無料でAI活用の相談をする