Metrica di valutazione della differenza del tasso di falsa omissione
La metrica della differenza del tasso di falsa omissione calcola il numero di transazioni false negative come percentuale di tutte le transazioni con esito negativo.
Dettagli metrica
La differenza del tasso di falsa omissione è una metrica di valutazione dell'equità che può aiutare a determinare se la risorsa produce risultati distorti.
Ambito
La metrica della differenza del tasso di falsa omissione valuta le risorse di IA generativa e i modelli di apprendimento automatico.
Punteggi e valori
Il punteggio della metrica della differenza del tasso di falsa omissione indica la pervasività dei falsi negativi tra tutte le transazioni negative per i gruppi monitorati e di riferimento.
- Intervallo di valori : 0.0-1.0
- Il miglior punteggio possibile : 0.0
- Rapporti :
- Sotto 0: Meno falsi negativi nel gruppo monitorato
- A 0: entrambi i gruppi hanno le stesse probabilità
- Oltre 0: Tasso più elevato di falsi negativi nel gruppo monitorato
Processo di valutazione
Per calcolare la differenza del tasso di falsi positivi, vengono generate matrici di confusione per i gruppi monitorati e di riferimento per identificare la quantità di falsi e veri negativi per ciascun gruppo. I valori falsi e veri negativi sono utilizzati per calcolare il tasso di falsa omissione per ciascun gruppo. Il tasso di false omissioni del gruppo di riferimento viene sottratto dal tasso di false omissioni del gruppo monitorato per calcolare la differenza del tasso di false omissioni.
Calcolo matematico
La seguente formula viene utilizzata per calcolare il tasso di falsa omissione (FOR):
La seguente formula è utilizzata per la differenza del tasso di falsa omissione:
