퍼지 매치 평가 지표

퍼지 매치 평가 지표는 생성된 예측과 참조 답변의 키워드 간의 유사성을 측정합니다.

메트릭 세부사항

퍼지 매치는 문자열 기반 함수를 사용하여 생성된 LLM 출력 텍스트를 분석하고 검증하는 콘텐츠 검증 지표입니다. 이 측정 기준은 평가 측정 기준을 계산하기 위해 Python SDK를 사용할 때만 사용할 수 있습니다.

범위

퍼지 매치 지표는 생성적 AI 자산만을 평가합니다.

  • AI 자산의 유형 : 프롬프트 템플릿
  • 생성적 AI 작업 :
    • 텍스트 요약
    • 컨텐츠 생성
    • 질문 응답
    • 엔티티 추출
    • 검색 증강 생성(RAG)
  • 지원 언어 : 영어

점수와 가치

퍼지 매치 지표 점수는 생성된 예측과 참조 키워드 간의 유사성 수준을 나타냅니다.

  • 비율:
    • 0시에: 예측이 키워드와 일치하지 않습니다.
    • 1: 예측이 키워드와 일치합니다.

설정

  • 임계치 :
    • 하한: 0
    • 상한: 1