AI関連の最新ニュースをピックアップ

中国・上海のAIスタートアップStartLuxは、自律エージェント(タスクの達成に向けて次の実行ステップやツール選択を自ら判断・制御するAIシステム)の意思決定やルーティングに特化したAIモデル群「StartLux-Decision」をオープンソースとして公開しました。最上位の27Bモデルから軽量な0.8Bモデルまで全5段階のパラメータ規模を展開し、業界のベンチマーク評価において先行する商用API「Jev」を上回ったとアピールしています。
StartLux-Decisionの最大モデル(27B)は、意思決定タスクの評価指標であるDecision Indexにおいて63.88点をマークし、TypeSafe AIが提供する商用クラウドモデル「Jev 1.13」(57.91点)を凌駕したと発表されました。
さらに実務でのローカル運用を重視し、4Bモデルでは4ビット量子化(モデルの重みデータを少ないビット数に圧縮してメモリ消費を抑え、高速化する技術)(Q4)を施すことで容量を約2.71GBまで縮小可能です。非量子化モデルと98.3%の推論一致率を保ちながら、NVIDIA H200単体上で26ミリ秒という極めて短い応答時間で複数の判定処理を完了できます。
本モデル群の最大の価値は、エージェントの分岐判断処理を有料クラウドAPIからローカルPCや社内サーバーへとオフロードできる点です。通信遅延とAPI利用コストをゼロにし、機密データを外部に出さずにエージェントワークフローを完結させられます。
ただし、提示されたベンチマーク結果はStartLuxによる社内テストに基づくものであり、第三者による再現性の検証が待たれます。また、特化型の決定モデルは構造が比較的シンプルなため、競合による類似モデルの追従が容易であるという課題も指摘されています。
Cloudflareの「Clef」に続き、中国スタートアップからもエッジ向け意思決定モデルがオープン公開されたことで、エージェントの「頭脳」と「判断制御レイヤー」を分離してローカルで動かす分散アーキテクチャが急速に現実味を帯びてきました。巨大な汎用モデルを毎回呼び出すのではなく、小型の専用モデルで迅速に判断を下す設計パターンが現場への普及を後押しするとみられます。
引用元:AIPressRoom