Metrica di valutazione della rilevanza del contesto

La metrica della rilevanza del contesto misura la pertinenza del contesto recuperato dal modello rispetto alla domanda specificata nel prompt.

Dettagli metrica

La rilevanza del contesto è una metrica di qualità del reperimento per le valutazioni della qualità dell'IA generativa che misura la qualità del modo in cui i sistemi di reperimento classificano i contesti rilevanti.

Ambito

La metrica della rilevanza del contesto valuta solo le risorse di IA generativa.

  • Tipi di risorse AI : Modelli di prompt
  • Compiti di IA generativa : Generazione Aumentata del Recupero (RAG)
  • Lingue supportate : Inglese

Punteggi e valori

Il punteggio della metrica della rilevanza del contesto indica la rilevanza dei contesti recuperati rispetto alla domanda del prompt. Punteggi più alti indicano che il contesto è più pertinente alla domanda del prompt. Quando esistono più variabili di contesto, i punteggi vengono generati quando la metrica viene calcolata solo con modelli ottimizzati.

Intervallo di valori : 0.0-1.0

Impostazioni

  • Soglie :
    • Limite inferiore: 0
    • Limite superiore: 1