Métrica de avaliação de cobertura

A métrica de cobertura mede a extensão em que a saída do modelo da fundação é gerada a partir da entrada do modelo, calculando a porcentagem do texto de saída que também está na entrada.

Detalhes da métrica

A cobertura é uma métrica de análise de conteúdo para avaliações de qualidade de IA generativa que avalia a saída do modelo em relação à entrada ou ao contexto do modelo.

Escopo

A métrica de cobertura avalia apenas os ativos de IA generativa.

  • Tipos de ativos de IA : Modelos de prompts
  • Tarefas de IA generativa :
    • Geração Aumentada de Recuperação (RAG)
    • Resumo de textos
  • Idiomas suportados : Inglês

Pontuações e valores

A pontuação da métrica de cobertura indica a extensão em que a saída do modelo da fundação é gerada a partir da entrada do modelo. Pontuações mais altas indicam que uma porcentagem maior de palavras de saída está dentro do texto de entrada.

Faixa de valores : 0.0-1.0

Configurações

  • Limiares :
    • Limite inferior: 0
    • Limite superior: 1