AIインフラ
OpenAI、Cerebras推論によるGPT-5.6 SolのUltrafastモードをプレビュー
OpenAIは、限定プレビューのUltrafastモードでGPT-5.6 SolをStandard処理より最大14倍高速に実行し、毎秒最大750出力トークンを生成できるとしている。
OpenAIは、応答速度そのものが製品体験を左右する用途に向けて、GPT-5.6 Solを高速実行する新しいサービス階層Ultrafastをプレビューした。8月13日の発表によると、UltrafastはStandard処理より最大14倍高速で、毎秒最大750出力トークンを生成できる。まずOpenAI APIで一部顧客向けの限定プレビューとして始まる。
この発表が注目されるのは、AIアプリケーションの長年のトレードオフを小さくしようとしているからだ。音声アシスタント、ライブサポート、監視システム、対話型リサーチでは、即時応答のために小型モデルを選ぶことが多かった。OpenAIは、Ultrafast上のGPT-5.6 Solなら、速度を保ちながらフロンティア級の知能を使えると主張する。
OpenAIは複数の利用例を挙げている。インシデント対応では、障害が進行中のうちにログ、最近のコード変更、エンジニアの報告を読み、原因の候補と修正案を人間の確認用にまとめられる。金融調査やセキュリティでは、変化する市場シグナルや不審な取引を、文脈が古くなる前に分析できる。
社内でもこの階層は試されている。OpenAIの開発者は、GPT-5.6 Sol on Ultrafastでトレースを読み、会話を統合し、次に確認すべき点を短時間で絞り込んでいるという。研究チームは知識源の検索、データ照会、情報整理を速め、夜間バッチに依存していた一部の作業を勤務時間中の反復に変えている。
初期顧客の反応は、デモではなく本番環境を狙った発表であることを示す。Jane StreetはCerebrasによる速度向上が開発者の集中した作業を可能にすると述べた。Podiumは複雑な音声スタックで通話体験が変わったと説明した。Basisは、速い製品の壁はトークン速度だけでなく知能にもあると指摘した。
Cerebrasとの提携はインフラ面でも重要だ。モデル提供者が能力を競う一方、推論速度とコストは商用導入の重要条件になっている。強力だが遅いモデルは夜間の研究には向くが、決済支援、ライブ分析、顧客通話、障害対応には合わない場合がある。OpenAIは、レイテンシを調整可能な製品要素にしようとしている。
限定プレビューである以上、主張は初期顧客以外でも検証される必要がある。毎秒トークン数が高くても、工具呼び出し、検索、ネットワーク、レビュー工程が全体速度を支配することはある。とはいえ、発表は高性能AIサービスがより良い答えだけでなく、意思決定や会話が進行中のうちに届く答えへ向かっていることを示している。