このドキュメントは AI によって自動翻訳されています。不正確な部分がある場合は、英語版 を参照してください。コンテンツのインデックスが作成され、検索できる状態になりました。ただし本当に大事なのは、ユーザーが実際に尋ねる質問に対して、適切なチャンクが返るかどうかです。 アプリに接続する前に、そうした質問で検索を試し、結果に応じて次のように扱います。
- 正しい結果が返った質問は、評価用の基準質問として保存します。後の変更で、気づかないうちに結果が崩れるのを防げます。
- 誤った結果が返った質問は、問題ケースとして保存し、修正の対象にします。
検索のテスト
ナレッジベースの 検索テスト ページで、質問を入力して実行します。キーワードだけでなく、ユーザーが実際に尋ねるような文の形で質問してください。 同じ質問をそれぞれの 検索の深度 で実行し、最も安定して適切なチャンクが返る深度を、ナレッジベースのデフォルトにします。 質問には画像を添付することもできます。そのために必要なモデルについては、マルチモーダル検索 を参照してください。 実行した内容はすべて 履歴 に残るため、設定を変更する前と後で結果を比較できます。評価用の基準質問
ユーザーが特によく尋ねる質問のように、後で何を変更しても、適切なチャンクを返し続けなければならない質問があります。そうした質問は、それぞれ返されるべきチャンクと合わせて、評価用の基準質問として保存します。その後は設定やモデルを変更するたびに 評価 を 1 回実行し、すべてが引き続き合格することを確認します。 実行結果に適切なチャンクが返ったら、結果の下にある 評価用の基準質問として保存 をクリックします。必ず返されるべきチャンクにチェックを入れ、合格の条件として、そのすべてが返る必要があるか、いずれか 1 つでよいかを選びます。 テストを実行せずに追加することもできます。品質 ページで 評価用の基準質問を追加 をクリックし、質問を入力して、期待するチャンクの内容を記述します。根拠を検索 をクリックすると、近い候補から選べます。質問のリストがすでにある場合は、同じページで CSV ファイル（最大 1 MB）からインポートできます。 次の状態にある評価用の基準質問は、評価の対象外です。- 下書き：期待するチャンクがまだ設定されていません。質問を編集して、チャンクを選んでください。
- 要更新：期待するチャンクの 1 つがもう存在しません。ドキュメントを再アップロードしたときや、同期でその部分が削除されたときなどに起こります。質問を編集して、新しいチャンクを選んでください。
- 一時停止：期待するチャンクのドキュメントが無効になっています。ドキュメントを有効にすると、再び評価の対象になります。
問題ケース
適切なチャンクが返らない場合や、順位が低すぎる場合は、結果の下にある 問題ケースとして保存 をクリックし、理由を選びます。理由によって、対処方法が異なります。- 該当する内容が見つからない：チャンクがまったく返らなかった場合。 まず、ドキュメントのインデックス作成の結果を確認 します。 問題がなければ、検索設定 で検索の深度を深くする、Top K を大きくする、スコアしきい値を下げるなどして、検索の範囲を広げます。ただし範囲を広げると、関係のないチャンクも多く返るようになることがあります。
- 低スコア：チャンクは返ったものの、順位が低すぎた場合。 スコアはリランクモデルが付けます。別のリランクモデルを試すと、同じチャンクがより上位に来ることがあります。