Métrica de avaliação da precisão da recuperação

A métrica de precisão de recuperação mede a quantidade de contextos relevantes em relação ao total de contextos recuperados.

Detalhes da métrica

A precisão da recuperação é uma métrica de qualidade de recuperação para avaliações de qualidade de IA generativa que mede a qualidade de como um sistema de recuperação classifica os contextos relevantes. As métricas de qualidade de recuperação são calculadas com modelos LLM como juiz.

Escopo

A métrica de precisão de recuperação avalia apenas os ativos de IA generativa.

  • Tipos de ativos de IA : Modelos de prompts
  • Tarefas de IA generativa : Geração Aumentada de Recuperação (RAG)
  • Idiomas suportados : Inglês

Pontuações e valores

A pontuação da métrica de precisão da recuperação indica se os contextos recuperados são relevantes. Pontuações mais altas indicam que os contextos recuperados são relevantes para a pergunta. Pontuações mais baixas indicam que os contextos recuperados não são relevantes para a pergunta.

  • Faixa de valores : 0.0-1.0
  • Melhor pontuação possível : 1.0
  • Proporções :
    • Em 0: Nenhum dos contextos recuperados é relevante.
    • Em 1: Todos os contextos relevantes são relevantes.

Configurações

  • Limiares :
    • Limite inferior: 0
    • Limite superior: 1