Metrica di valutazione reciproca del grado

La metrica del rango reciproco misura il rango reciproco del primo contesto rilevante.

Dettagli metrica

Il rango reciproco è una metrica di qualità del recupero per le valutazioni della qualità dell'IA generativa che misura la qualità del modo in cui un sistema di recupero classifica i contesti rilevanti. Le metriche di qualità del recupero vengono calcolate con modelli LLM-as-a-judge.

Ambito

La metrica del rango reciproco valuta solo le risorse di IA generativa.

  • Tipi di risorse AI : Modelli di prompt
  • Compiti di IA generativa : Recupero Generazione Aumentata (RAG)
  • Lingue supportate : inglese

Punteggi e valori

Il punteggio della metrica di rango reciproco indica se vengono recuperati contesti rilevanti e dove sono classificati. I punteggi più alti indicano che il primo contesto rilevante è classificato più in alto. I punteggi più bassi indicano che il contesto pertinente è classificato più in basso.

  • Intervallo di valori : 0.0-1.0
  • Il miglior punteggio possibile : 1.0
  • Rapporti :
    • A 0: Nessuno dei contesti rilevanti viene recuperato
    • A 1: Il primo contesto rilevante è in prima posizione.

Impostazioni

  • Soglie:
    • Limite inferiore: 0
    • Limite superiore: 1