忠诚度评估指标

忠实度指标用于衡量模型输出在模型语境中的基础程度,并提供从语境中提取的属性,以显示对模型输出贡献最大的句子。 当仅使用微调模型计算指标时,才会提供归因。

度量详细信息

对于生成式人工智能质量评估,忠诚度是一个衡量答案质量的标准,有助于衡量模型答案的质量。 答案质量指标通过LLM-as-a-judge模型计算得出。

作用域

“忠诚度”指标仅评估生成性人工智能资产。

  • 人工智能资产的类型 :即时模板
  • 生成式人工智能任务 :检索增强生成(RAG)
  • 支持的语言 :英语、日语和西班牙语

分数和数值

忠实度指标得分表明模型输出在模型环境中的基础程度。 分数越高,表明输出结果越真实,越少出现幻觉。

  • 价值范围 : 0.0-1.0
  • 最佳成绩 : 1.0

设置

  • 门槛:
    • 下限:0
    • 上限:1