文脈の関連性評価指標
文脈関連性メトリックは、モデルが取得した文脈が、プロンプトで指定された質問とどの程度関連しているかを測定します。
メトリックの詳細
文脈の関連性は、生成型AIの品質評価のための検索品質指標であり、検索システムが関連文脈をランク付けする方法の品質を測定する。
範囲
コンテクスト関連性メトリックは、生成型AI 資産のみを評価します。
- AI 資産の種類: テンプレートを即座に表示
- 生成型AIのタスク ：検索拡張生成（RAG）
- 対応言語 ：英語、日本語、スペイン語
スコアと価値
文脈の関連性メトリックスコアは、プロンプトの質問に対する検索された文脈の関連性を示します。 スコアが高いほど、その文脈が質問とより関連性が高いことを示します。 複数のコンテキスト変数が存在する場合、スコアは、 ファイン・チューニングモデルのみでメトリクスが計算されたときに生成されます。
値の範囲 ： 0.0-1.0
設定
- しきいち：
- 下限値：0
- 上限：1