
- 電力あたりの処理量が既存比1.5〜1.9倍、レイテンシは最大3.6倍改善
- 対話型ワークロードでは性能2.1〜4.1倍、3つの公開モデルで検証
- 年内に自社インフラへ導入、第2世代も開発中
自社設計チップの性能初公開
OpenAIは2026年8月25日、自社初の推論専用チップ「Jalapeño」のベンチマーク結果を初めて公開しました。同社はこれまでこのチップと周辺システムを実際のワークロードでテストを重ねており、その結果として電力あたりのAI処理量と応答速度の両方で既存の商用アクセラレータを上回ったとしています。
OpenAIによれば、Jalapeñoは1つのアーキテクチャで高スループットと低レイテンシを両立しているのが特徴です。従来のハードウェアでは、効率を優先すると応答が遅くなり、応答速度を優先すると効率が落ちるというトレードオフがしばしば発生します。このチップはその両方を高い水準で満たせるため、顧客に対してはより速いレスポンスや、より応答性の高いAIエージェントを提供できるようになるとみられます。
測定方法と比較対象
性能測定には、SemiAnalysisが提供する公開ベンチマーク「InferenceX」が使われました。このベンチマークは、AIリクエストの処理プロセス全体を測定します。比較対象は「主要な商用アクセラレータ」とされており、モデルはGPT-OSS 120B、DeepSeek R1 670B、Kimi K2.5 1Tの3つです。いずれも公開されているモデルです。
評価指標は、ユーザー体験を一致させた上で、電力単位あたりにどれだけ有用なAI処理を完了できるかというものです。電力効率の比較では、各社が公表しているチップの定格電力で正規化しています。Jalapeñoの定格は700ワットですが、実測の持続電力はテストしたワークロードで550ワット以下にとどまったと報告されています。
モデル別の性能比較結果
記事に掲載されたデータでは、Jalapeñoはすべてのモデルで電力あたりのピーク処理量が比較システムを上回り、エンドツーエンドの応答時間も短縮しました。以下は、記事から引用した主要な数値です。なお、比較システムの具体的なチップ名は原文では明かされていません。
設計思想とAIによる開発支援
Jalapeñoの性能向上は、チップ、メモリ、ネットワーク、ソフトウェア、ラックスケールのシステムを一体で設計した結果だとOpenAIは説明します。言語モデルの推論は、プロンプトを処理する「プリフィル」と、トークンを1つずつ生成する「デコード」でボトルネックが異なります。同社は、データ移動と通信遅延を最小化し、KVキャッシュの配置を局所化することで、各フェーズに合わせて計算・メモリ・ネットワークを切り替えられるようにしたといいます。
チップの設計自体にもAIを活用しています。初期設計からテープアウトまで9か月で到達したほか、AIによる演算回路の最適化も行われました。また、プログラミング環境をシンプルで予測しやすい構造にすることで、AIが並列プログラミングを最適化しやすくしています。記事によれば、CodexとGPT-Astraの組み合わせにより、当初予定していなかった3つのオープンウェイトモデルを2か月で高性能化できたということです。選択されたアテンションやMoE(混合専門家)ブロックでは、AI生成の実装が人手による実装より1.5〜1.8倍高速だったと報告されています。
| 測定モデル | Jalapeño(ピーク混合TPS/kW) | 比較システム(同) | エンドツーエンド遅延(Jalapeño vs 比較) |
|---|---|---|---|
| GPT-OSS 120B | 85,448 | 44,960 | 1.03秒 vs 1.80秒 |
| DeepSeek R1 670B | 19,641 | 11,781 | 1.65秒 vs 5.99秒 |
| Kimi K2.5 1T | 18,195 | 11,862 | 1.56秒 vs 5.31秒 |
Jalapeño delivers both higher throughput and lower latency with one architecture, where existing hardware systems often have to make a tradeoff between the two.
Jalapeñoは1つのアーキテクチャで高いスループットと低レイテンシの両方を実現する。既存のハードウェアでは多くの場合、この2つはトレードオフになる。
今後の見通し
OpenAIは2026年末までにJalapeñoを自社インフラへ導入し始めるとしています。第2世代は開発が深く進み、第3世代も形になりつつあるとしています。今後は、実際の運用時に公称値どおりの効果が得られるか、自社モデルでの性能向上がどの程度になるかが焦点です。また、外部のAPI利用者にとっては、効率改善が料金や応答速度にどう反映されるかが注目されます。次の情報として、Jalapeñoを搭載した環境での実測ベンチマークや、モデル別の詳細データが公開されれば、導入効果をより明確に判断できそうです。
日本の開発者・IT企業にとっての意味
日本のIT企業がAIを活用したサービスを開発する際、推論コストと応答速度は重要な要素です。Jalapeñoは現時点で外部向け販売がアナウンスされておらず、主にOpenAIのサービス品質向上に寄与するとみられますが、APIの価格や性能改善を通じて間接的に恩恵を受けられる可能性があります。また、AIをチップ設計に用いる手法は、ハードウェアとソフトウェアの協調設計の新しい事例として参考になります。さらに、OpenAIがNVIDIAなど既存のベンダーと併用しながら自社チップを育てる方針は、AIインフラの安定性と競争性の両面で産業全体に影響を与えるとみられます。日本企業が自前の推論基盤を検討する際には、こうした技術動向を踏まえた投資判断が求められます。
気になる点
- Jalapeñoは外部の企業も購入できるのか?
- 現時点では、OpenAIが自社のコンピュート基盤に導入する計画が公表されており、外部向けに販売するかは明らかにされていません。他社製アクセラレータについても今後も広く使う方針が示されています。
- 既存のNVIDIA GPUと置き換わることになるのか?
- OpenAIはNVIDIA製を含む他社のアクセラレータを引き続き訓練と推論の両方で広く導入するとしています。Jalapeñoは自社製の第一世代であり、需要の増加に応じるために併用が続くとみられます。
- 性能はどのモデルで確認されたのか?
- GPT-OSS 120B、DeepSeek R1 670B、Kimi K2.5 1Tの3つの公開モデルで検証されました。このほか、OpenAIの最先端モデルではさらに大きな性能向上が社内テストで確認されたと報告されています。
用語解説
- 推論(inference)
- 学習済みモデルが入力データから予測や生成を行う処理。AIサービスでは毎回実行される。
- プリフィル
- プロンプト全体を一括処理する推論の初期フェーズ。計算負荷が高い。
- デコード
- トークンを1つずつ生成するフェーズ。メモリ帯域の影響を受けやすい。
- KVキャッシュ
- 生成中にそれまでのキーとバリューを保持し、再計算を避けるためのメモリ領域。
- TPS
- Tokens Per Second。1秒間に処理できるトークン数。処理性能の指標。
- パレート最適
- 複数の指標があるとき、どれかを改善するには他を犠牲にせざるを得ない状態で、他に劣らない解のこと。
出典
Jalapeño’s first results show industry-leading speed and efficiency in AI inference
AI導入も顧問も、お任せください
何から手をつけるか、どこまでAIに任せるか。自社の業務に合わせて整理し、導入から運用まで伴走します。相談だけでも構いません。
AI導入について相談する