Area sotto la metrica di valutazione PR
L'area sotto la metrica PR misura quanto il modello sia in grado di bilanciare la corretta identificazione delle classi positive con la ricerca di tutte le classi positive.
Dettagli metrica
L'area sotto il richiamo di precisione (PR) è una metrica di valutazione della qualità che misura la qualità delle prestazioni dei modelli di apprendimento automatico di classificazione binaria in watsonx.governance.
Ambito
La metrica area sotto PR valuta solo i modelli di apprendimento automatico.
Tipi di risorse AI : Modelli di apprendimento automatico
Tipo di problema di apprendimento automatico : Classificazione binaria
Punteggi e valori
Il punteggio della metrica Area under PR indica quanto il modello sia in grado di bilanciare precisione e richiamo. Punteggi più alti indicano migliori prestazioni del modello nell'identificare e trovare classi positive.
- Intervallo di valori : 0.0-1.0
- Il miglior punteggio possibile : 1.0
- Valori del grafico : Ultimo valore nel timeframe
Un punteggio di 0.5 suggerisce un'ipotesi casuale, mentre un punteggio di 1.0 rappresenta una classificazione perfetta.
Impostazioni
Soglia predefinita : Limite inferiore = 80%
Processo di valutazione
L'area sotto PR viene calcolata tracciando la precisione rispetto al richiamo per diversi valori di soglia. Per ogni soglia, viene generata una matrice di confusione che specifica le classi di veri positivi, falsi positivi e falsi negativi.
La precisione e il richiamo vengono calcolati con queste classi e tracciati per creare la curva PR. L'area sotto questa curva viene calcolata per generare il punteggio della metrica.
Calcolo matematico
L'area sotto PR calcola il totale della precisione e del richiamo con la seguente formula:
La precisione (P) è calcolata come il numero di veri positivi (Tp) rispetto al numero di veri positivi più il numero di falsi positivi (Fp) con la seguente formula:
Il richiamo (R) è calcolato come il numero di veri positivi (Tp) rispetto al numero di veri positivi più il numero di falsi negativi (Fn) con la seguente formula: