영향력 점수 평가 지표
영향 점수 평가 지표는 모니터링 대상 그룹이 긍정적인 결과를 얻기 위해 선택되는 비율과 참조 대상 그룹이 긍정적인 결과를 얻기 위해 선택되는 비율을 비교합니다.
메트릭 세부사항
영향 점수는 자산이 편향된 결과를 생성하는지 여부를 판단하는 데 도움이 되는 공정성 평가 지표입니다.
범위
영향력 점수 측정 기준은 생성적 AI 자산과 기계 학습 모델을 평가합니다.
- 인공지능 자산의 유형 :
- 프롬프트 템플리트
- 기계 학습 모델
- 생성적 AI 작업 : 텍스트 분류
- 머신 러닝 문제 유형 : 이분법적 분류
점수와 가치
영향 점수 지표 점수는 모니터링 대상 그룹이 참조 그룹보다 더 높은 선택 비율을 받는지를 나타냅니다. 점수가 높을수록 모니터링 대상 그룹의 선택률이 높음을 나타냅니다.
- 값의 범위 : 0.0-1.0
- 최상의 점수 : 0.0
설정
- 임계치 :
- 하한: 0.8
- 상한: 1.0
계산법
다음 공식은 각 그룹의 선택 비율을 계산합니다
다음 공식은 영향 점수를 계산합니다