Metrik zur Bewertung der Differenz der Fehlerquote
Die Kennzahl für die Fehlerratenabweichung misst den Prozentsatz der Transaktionen, die von Ihrem Modell falsch bewertet werden.
Metrikdetails
Die Differenz der Fehlerquote ist eine Metrik zur Bewertung der Fairness, mit deren Hilfe festgestellt werden kann, ob Ihr Vermögenswert zu verzerrten Ergebnissen führt.
Bereich
Die Fehlerraten-Differenzmetrik bewertet generative KI-Assets und maschinelle Lernmodelle.
- Arten von KI-Vermögenswerten :
- Eingabeaufforderungsvorlagen
- Modelle für maschinelles Lernen
- Aufgaben der generativen KI : Textklassifizierung
- Art des Problems beim maschinellen Lernen : Binäre Klassifizierung
Ergebnisse und Werte
Der metrische Wert für die Differenz der Fehlerquote gibt die Differenz der Fehlerquote für die überwachte Gruppe und die Referenzgruppe an.
- Wertebereich : 0.0-1.0
- Kennzahlen:
- Bei 0: Beide Gruppen haben die gleichen Chancen
Mathematische Berechnung
Die folgende Formel wird zur Berechnung der Fehlerquote (ER) verwendet:
Die folgende Formel wird zur Berechnung der Differenz der Fehlerquote verwendet:
