JSONの評価指標は

Is JSON メトリクスは、予測の行に有効な JSON 構文が含まれているかどうかを測定します。

メトリックの詳細

JSONは、LLM出力テキストを生成する際に使用される文字列ベースの関数で、生成されたテキストを分析および検証するコンテンツ検証メトリックです。 この評価指標は、 Python SDK を使用して評価指標を計算する場合のみ利用可能です。

範囲

これは、生成型AI 資産のみを評価するJSONメトリックです。

  • AI 資産の種類: テンプレートを即座に表示
  • 生成型AIのタスク
    • テキストの要約
    • コンテンツの生成
    • 質問への回答
    • エンティティー抽出
    • 検索強化型生成(RAG)
  • 対応言語 :英語

スコアと価値

これは、予測行に有効なJSON構文が含まれているかどうかを示すJSONメトリックスコアです。

  • 値の範囲 : 0.0-1.0
  • 比率:
    • 0: 予測行には有効なJSON構文が含まれていません。
    • 1: 予測行には有効なJSON構文が含まれています。

設定

  • しきいち:
    • 下限値:0
    • 上限:1