Área sob a métrica de avaliação de PR

A área sob a métrica PR mede o quanto seu modelo equilibra a identificação correta de classes positivas com a localização de todas as classes positivas.

Detalhes da métrica

A área sob precisão, recall (PR) é uma métrica de avaliação de qualidade que mede a qualidade do desempenho dos modelos de aprendizado de máquina de classificação binária em watsonx.governance.

Escopo

A área sob a métrica PR avalia apenas os modelos de aprendizado de máquina.

  • Tipos de ativos de IA : Modelos de aprendizado de máquina

  • Tipo de problema de aprendizado de máquina : Classificação binária

Pontuações e valores

A área sob a pontuação da métrica PR indica quão bem o modelo equilibra precisão e recuperação. Pontuações mais altas indicam melhor desempenho do modelo na identificação e localização de classes positivas.

  • Faixa de valores : 0.0-1.0
  • Melhor pontuação possível : 1.0
  • Valores do gráfico: último valor no intervalo de tempo

Uma pontuação de 0.5 sugere adivinhação aleatória, enquanto uma pontuação de 1.0 representa uma classificação perfeita.

Configurações

Limite padrão : Limite inferior = 80%

Processo de avaliação

A área sob PR é calculada plotando a precisão em relação à recuperação para diferentes valores de limite. Para cada limite, é gerada uma matriz de confusão que especifica as classes de verdadeiros positivos, falsos positivos e falsos negativos.

A precisão e a revocação são calculadas com essas classes e plotadas para criar a curva PR. A área sob essa curva é calculada para gerar a pontuação do índice.

Fazer os cálculos

A área sob PR calcula o total de precisão e recuperação com a seguinte fórmula:

a área sob a fórmula PR é exibida

A precisão (P) é calculada como o número de verdadeiros positivos (Tp) sobre o número de verdadeiros positivos mais o número de falsos positivos (Fp) com a seguinte fórmula:

a fórmula de precisão é exibida

O recall (R) é calculado como o número de verdadeiros positivos (Tp) sobre o número de verdadeiros positivos mais o número de falsos negativos (Fn) com a seguinte fórmula:

a fórmula de retirada é exibida