OpenSearch:検索プラットフォームの概要

AI 検索オープンプラットフォームは、インテリジェント検索と取得拡張生成 (RAG) シナリオ向けのコンポーネントベースのアルゴリズムサービスを提供します。 AI 検索オープンプラットフォームは、ドキュメント解析、ドキュメントチャンキング、テキスト埋め込み、クエリ分析、取得、ソート、パフォーマンス評価、大規模言語モデル (LLM) など、さまざまな組み込みサービスを備えています。 開発者は、ビジネス要件に基づいて、検索サービス開発のためのコンポーネントを柔軟に選択できます。

特徴

ドキュメントコンテンツ解析

分単位のドキュメント解析をサポートします。 PDF、DOC、HTML、TXT、その他のドキュメント形式の場合、AI 検索オープンプラットフォームはさまざまなレイアウトを区別し、タイトルや段落などの論理階層構造を非構造化ドキュメントから抽出できます。テキスト、表、画像、コードなどのコンテンツ要素も同様です。 また、AI 検索オープンプラットフォームは、ヘッダーとフッターを削除し、上付き文字、下付き文字、その他の情報を識別し、構造化形式でドキュメントを生成します。

画像コンテンツ解析

マルチモーダル LLM に基づいて、アーキテクチャ図や分析チャートなどの画像のコンテンツを解析し、テキストを識別できます。 また、光学式文字認識 (OCR) 機能を使用して画像内のテキストを識別し、抽出されたテキストを画像検索や画像ベースの Q&A に使用することもできます。

ドキュメントチャンキング

ドキュメントセマンティクス、段落構造、および特定のルールに基づいて汎用ドキュメントチャンキングサービスを提供し、後続のドキュメント処理と取得の効率を向上させます。 生成されたチャンクツリーは、取得中のコンテキスト補完に使用できます。

多言語埋め込みモデル

• テキスト埋め込みは、テキストデータを密ベクトルに変換します。 さまざまな言語、入力長、出力ディメンションに対応した複数のモデルが用意されています。 このサービスを使用して、情報を検索したり、テキストを分類したり、関連性を比較したりできます。

• テキストスパース埋め込みは、テキストデータを、ストレージ容量の少ないスパースベクトルに変換します。 スパースベクトルを使用して、キーワードと頻繁に使用される用語に関する情報を表現できます。 スパースベクトルと密ベクトルを使用してハイブリッド検索を実行し、取得パフォーマンスを向上させることができます。

• ベクトルモデルベースの調整サービスがサポートされています。 取得結果に過度に影響を与えることなくベクトルの次元を削減するために、次元削減モデルをカスタマイズおよびトレーニングできます。

クエリ分析

LLM と NLP 機能に基づいてクエリのコンテンツ分析サービスを提供し、ユーザーの意図を理解し、類似の質問を拡張し、自然言語の質問を SQL 文に変換します。 これにより、RAG シナリオでの会話型検索の効果が向上します。

検索エンジン

ベクトルおよびテキスト取得エンジンを提供します。 ベクトルとテキストを保存し、インデックスを作成し、オンラインベクトルおよびテキスト取得を実行できます。 エンジンを有効にすると、AI 検索オープンプラットフォームの API 操作と共にエンジンを使用して、データを処理および取得できます。

ソート

クエリとドキュメント関連のソートサービスを提供します。 RAG および検索シナリオでは、ソートサービスを使用してより関連性の高いコンテンツを見つけ、コンテンツを順番に返すことができます。 ソートサービスは、取得と LLM 生成の精度を効果的に向上させることができます。

LLM ベースのテキスト生成

Qwen3-235B-A22B モデル、QwQ モデル、すべての DeepSeek モデル (DeepSeek R1 および V3、7B および 14B 蒸留モデルを含む)、Qwen シリーズ (Qwen-Turbo、Qwen-Plus、Qwen-Max) など、さまざまな LLM を提供します。 また、AI 検索オープンプラットフォームは、qwen-turbo モデルに基づいて開発された組み込みの OpenSearch-Qwen-Turbo モデルも提供します。これは、教師ありファインチューニング後に RAG 機能が強化され、ハルシネーション率が低下しています。

メリット

• 豊富な AI 検索機能: AI 検索オープンプラットフォームを使用すると、主要なモデルベースに基づいて専用の AI 検索モデルをトレーニングできます。 AI 検索オープンプラットフォームは、検索および RAG シナリオ向けのエンドツーエンドのコンポーネントベースのサービスを統合しています。

• 柔軟な呼び出し方法: 開発者、企業顧客、独立系ソフトウェアベンダー (ISV) は、API 操作を呼び出すか、SDK を使用して、一部またはすべての AI 検索サービスを業務システムと統合できます。

• すぐに使える可用性: AI 検索オープンプラットフォームをアクティベートすると、すべてのサービス をすぐに利用できます。

• ベストプラクティス: AI 検索オープンプラットフォームは、インテリジェント検索と RAG における長年の蓄積により、ビジネス要件に合わせて調整された検索パイプラインを迅速に構築するのに役立つさまざまな AI 検索ベストプラクティスを提供します。

シナリオ

AI 検索オープンプラットフォームでは、次のシナリオでサービス開発を実行できます。