Métrica de avaliação da diferença da taxa de omissão falsa

A métrica de diferença de taxa de omissão falsa calcula o número de transações negativas falsas como uma porcentagem de todas as transações com um resultado negativo.

Detalhes da métrica

A diferença de taxa de omissão falsa é uma métrica de avaliação de imparcialidade que pode ajudar a determinar se o seu ativo produz resultados tendenciosos.

Escopo

A métrica de diferença de taxa de omissão falsa avalia os ativos de IA generativa e os modelos de aprendizado de máquina.

Pontuações e valores

A pontuação da métrica de diferença da taxa de omissão falsa indica a abrangência de falsos negativos entre todas as transações negativas para grupos monitorados e de referência.

  • Faixa de valores : 0.0-1.0
  • Melhor pontuação possível : 0.0
  • Proporções :
    • Abaixo de 0: menos falsos negativos no grupo monitorado
    • Em 0: ambos os grupos têm chances iguais
    • Acima de 0: Maior taxa de falsos negativos no grupo monitorado

Processo de avaliação

Para calcular a diferença da taxa de descoberta falsa, as matrizes de confusão são geradas para os grupos monitorados e de referência para identificar a quantidade de negativos falsos e verdadeiros para cada grupo. Os valores negativos falsos e verdadeiros são usados para calcular a taxa de omissão falsa para cada grupo. A taxa de omissão falsa do grupo de referência é subtraída da taxa de omissão falsa do grupo monitorado para calcular a diferença da taxa de omissão falsa.

Fazer os cálculos

A fórmula a seguir é usada para calcular a taxa de falsa omissão (FOR):

a fórmula da taxa de omissão falsa é exibida

A fórmula a seguir é usada para a diferença da taxa de omissão falsa:

a fórmula de diferença da taxa de omissão falsa é exibida