AI関連の最新ニュースをピックアップ
米OpenAI(米国のAI研究開発企業)は10月22日、推論モデル「GPT-6 Luna(OpenAIの最新軽量・高速推論モデル)」を活用して高速な判定処理を行う「Decisions API」の一般提供(GA)を開始した。アプリケーションや自律型AIエージェントのワークフローにおいて生じるテキストや画像の分類、リクエストの振り分け、次のアクション決定といった軽量な判断処理に特化している。モデルによる自由記述の長文生成を省くことで、従来のResponses API経由のGPT-6 Lunaと比較して最大10倍の高速化と低コスト化を実現する。
Decisions APIは専用エンドポイント(POST /v1/decisions)を通じて提供され、利用者は質問と許容される回答の選択肢を定義し、コンテキスト(テキスト、画像、またはJSON構造化データ)を渡すことで利用できる。
APIが返す結果は以下の3種類に限定されている:
料金は入力トークン100万件あたり0.10ドルで、プロンプトキャッシュ(過去の入力文脈をキャッシュして推論コストと遅延を低減する機能)適用時は0.01ドルとなる。判定結果のみを出力する設計のため出力トークン課金は発生せず、入力トークンのみが課金対象となる。
パブリックベータからの正式提供にあたり、大幅な機能強化が行われた。1リクエストあたり最大400問までの質問送信(ベータ時の2倍)に対応したほか、画像を含む指示の送信やネイティブJSON入力(input_json)が可能になった。さらに、音声対話基盤「GPT-Live(低遅延なリアルタイム双方向音声対話を実現するAPI基盤)」とのネイティブ連携が追加され、リアルタイムの会話音声ストリームから相槌やアバターの表情変更、エスカレーション要否を極小遅延で判断できるようになった。
導入企業の検証でも顕著な性能向上が報告されている:
今回の正式提供では、米国および欧州でのデータ保管(Inference residency)への対応に加え、アジア地域の複数リージョンに推論キャパシティが増強された。
これにより、日本の開発者が音声エージェントやカスタマーサポート基盤を構築する際、海外リージョンへの問い合わせに伴う通信遅延を抑え、リアルタイム対話に必要な低遅延環境を確保しやすくなる。また、1,024トークン以上の共通プロンプトをキャッシュするプロンプトキャッシュを活用することで、システムプロンプトや文脈データを頻繁に再利用する多段エージェントの運用コストを従来の10分の1に圧縮できる。
生成AIの実用化が「単一のチャットボット」から「複数エージェントによる協調動作」へと進む中、システム全体のボトルネックはモデルの思考力そのものよりも、各エージェント間の小さな判断に伴う「累積レイテンシ」と「呼び出しコスト」に移りつつある。
OpenAIが自由文生成を行わないDecisions APIを独立したエンドポイントとして投入した背景には、エージェント運用の主戦場が「長文出力」から「高頻度・低遅延な意思決定ループ」へ移行したという構造変化がある。出力トークンを無償化し、キャッシュを前提とした極小レイテンシを提供することで、各社が進めるエージェント基盤のワークフロー制御を自社APIエコシステム内に強固に囲い込む狙いがあるとみられる。
引用元:OpenAI | X (@OpenAIDevs) | Unite.AI | ビジネス+IT

X (formerly Twitter)
Post by @OpenAIDevs on X
Add near real-time decisions to your workflow with the Decisions API, now generally available. Build faster, more cost-efficient apps and agents that can classify text and images, evaluate inputs, and determine what happens next without generating a full model response.
https://x.com/OpenAIDevs/status/2113346642787086538

ビジネス+IT
OpenAI、判断特化「Decisions API」一般提供 最大10倍高速 入力100万トークン0.10ドル
OpenAIは10月22日(米国時間)、分類など小さな判断に特化した「Decisions API」の一般提供を始めた。GPT-6 Lunaを基盤とし、Responses API経由より最大10倍高速という。料金は入力100万トークンあたり0.10ドル(約16円)で、出力は課金しない。1リクエストで最大400問を処理でき、ボックスなどが利用している。
https://www.sbbit.jp/article/cont1/187707