Metrica di precisione media

La metrica di precisione media valuta se tutti i contesti rilevanti sono classificati più in alto o meno, calcolando la media dei punteggi di precisione dei contesti rilevanti.

Dettagli metrica

La precisione media è una metrica di qualità del reperimento per le valutazioni di qualità dell'IA generativa che misura la qualità del modo in cui un sistema di reperimento classifica i contesti rilevanti. Le metriche di qualità del recupero sono calcolate con modelli LLM-as-a-judge.

Ambito

La metrica della precisione media valuta solo le risorse di IA generativa.

  • Tipi di risorse AI : Modelli di prompt
  • Compiti di IA generativa : Generazione Aumentata del Recupero (RAG)
  • Lingue supportate : Inglese

Punteggi e valori

Il punteggio medio della metrica di precisione indica il grado di classificazione dei contesti rilevanti. Punteggi più alti indicano che i contesti rilevanti sono classificati più in alto. I punteggi più bassi indicano che i contesti rilevanti non sono classificati più in basso.

  • Intervallo di valori : 0.0-1.0
  • Il miglior punteggio possibile : 1.0
  • Rapporti :
    • A 0: nessuno dei contesti recuperati è rilevante.
    • Oltre 0: tutti i contesti rilevanti sono classificati più in alto.

Impostazioni

  • Soglie :
    • Limite inferiore: 0
    • Limite superiore: 1