AI関連の最新ニュースをピックアップ
エンタープライズ向けAI開発を手掛ける米Cohere(カナダ発のエンタープライズ向けLLM・検索AI開発企業)は、企業内検索およびRAG(検索で得た外部情報を生成AIに組み込む手法)向けテキスト・マルチモーダル埋め込みモデルの最新ファミリー「Embed 5」の提供を開始した。前世代のEmbed 4と比べて図表混じりの文書や財務報告書、コード、多言語検索における検索精度が大幅に向上しており、高精度重視の「Pro」と低遅延・高スループット重視の「Fast」の2モデルを展開する。
Embed 5は、大規模な企業データを取り扱う検索基盤やエージェントシステムの実運用に最適化された機能群を備えている。
embed-v5.0-pro: 最も高い検索品質に最適化。オフラインのドキュメントインデックス作成や品質が最優先される検索に推奨される。embed-v5.0-fast: 低遅延かつ高スループットに最適化。リアルタイムの対話型検索やエージェントの推論ループ、大量クエリ処理に適している。[256, 512, 768, 1024, 1536, 2048] の可変次元数を選択可能。出力データ型も float に加え、ストレージを削減できる int8 や binary に対応する。用途に応じた2モデルの特性差は下表の通りである。
| 項目 | embed-v5.0-pro | embed-v5.0-fast |
|---|---|---|
| 設計思想 | 最高水準の検索品質・精度 | 低遅延・高スループット |
| 推奨用途 | 事前インデックス作成、精緻な調査業務 | 対話型検索、エージェントループ、高頻度クエリ |
| 埋め込み空間 | Fastと同一の空間を共有 | Proと同一の空間を共有 |
| コンテキスト長 | 128kトークン | 128kトークン |
| 入力モダリティ | テキスト、画像、複合文書(PDF等) | テキスト、画像、複合文書(PDF等) |
| 出力次元数 | 256〜2048次元(マトリョーシカ) | 256〜2048次元(マトリョーシカ) |
Embed 5の多言語対応(100言語以上)およびPDFなどのビジュアル文書対応は、日本の企業向け検索・RAGシステム構築にも直接的なメリットをもたらす。
企業向けRAGの現場では、「全ドキュメントを高精度モデルで埋め込むとインデックス作成と検索応答のコスト・遅延が過大になり、軽量モデルでは検索漏れが増える」というジレンマが長年の課題だった。Cohereが提示した「Proで埋め込み、Fastで引く」という共通空間アプローチは、精度と速度の両立を図る実用的な解として設計されている。
また、128kトークンへの拡張と画像・PDFの直接埋め込みは、文書を細かくチャンク(断片化)する従来の手法を簡素化する可能性を持つ。今後は、マルチモーダル入力時の具体的なトークン消費量や価格体系、および日本語特有の専門用語に対する検索再現率の検証が実務上の焦点になるとみられる。