Area sotto la metrica di valutazione PR

L'area sotto la metrica PR misura quanto il modello sia in grado di bilanciare la corretta identificazione delle classi positive con la ricerca di tutte le classi positive.

Dettagli metrica

L'area sotto il richiamo di precisione (PR) è una metrica di valutazione della qualità che misura la qualità delle prestazioni dei modelli di apprendimento automatico di classificazione binaria in watsonx.governance.

Ambito

La metrica area sotto PR valuta solo i modelli di apprendimento automatico.

  • Tipi di risorse AI : Modelli di apprendimento automatico

  • Tipo di problema di apprendimento automatico : Classificazione binaria

Punteggi e valori

Il punteggio della metrica Area under PR indica quanto il modello sia in grado di bilanciare precisione e richiamo. Punteggi più alti indicano migliori prestazioni del modello nell'identificare e trovare classi positive.

  • Intervallo di valori : 0.0-1.0
  • Il miglior punteggio possibile : 1.0
  • Valori del grafico : Ultimo valore nel timeframe

Un punteggio di 0.5 suggerisce un'ipotesi casuale, mentre un punteggio di 1.0 rappresenta una classificazione perfetta.

Impostazioni

Soglia predefinita : Limite inferiore = 80%

Processo di valutazione

L'area sotto PR viene calcolata tracciando la precisione rispetto al richiamo per diversi valori di soglia. Per ogni soglia, viene generata una matrice di confusione che specifica le classi di veri positivi, falsi positivi e falsi negativi.

La precisione e il richiamo vengono calcolati con queste classi e tracciati per creare la curva PR. L'area sotto questa curva viene calcolata per generare il punteggio della metrica.

Calcolo matematico

L'area sotto PR calcola il totale della precisione e del richiamo con la seguente formula:

viene visualizzata l'area sotto la formula PR

La precisione (P) è calcolata come il numero di veri positivi (Tp) rispetto al numero di veri positivi più il numero di falsi positivi (Fp) con la seguente formula:

viene visualizzata la formula di precisione

Il richiamo (R) è calcolato come il numero di veri positivi (Tp) rispetto al numero di veri positivi più il numero di falsi negativi (Fn) con la seguente formula:

viene visualizzata la formula di richiamo