忠诚度评估指标
忠实度指标用于衡量模型输出在模型语境中的基础程度,并提供从语境中提取的属性,以显示对模型输出贡献最大的句子。 当仅使用微调模型计算指标时,才会提供归因。
度量详细信息
对于生成式人工智能质量评估,忠诚度是一个衡量答案质量的标准,有助于衡量模型答案的质量。 答案质量指标通过LLM-as-a-judge模型计算得出。
作用域
“忠诚度”指标仅评估生成性人工智能资产。
- 人工智能资产的类型 :即时模板
- 生成式人工智能任务 :检索增强生成(RAG)
- 支持的语言 :英语、日语和西班牙语
分数和数值
忠实度指标得分表明模型输出在模型环境中的基础程度。 分数越高,表明输出结果越真实,越少出现幻觉。
- 价值范围 : 0.0-1.0
- 最佳成绩 : 1.0
设置
- 门槛:
- 下限:0
- 上限:1