Metrica di valutazione dell'astrattezza
La metrica dell'astrattezza misura il rapporto tra gli n-grammi presenti nell'output del testo generato che non compaiono nel contenuto di partenza dei modelli di fondazione per identificare l'astrattezza del testo generato.
Dettagli metrica
L'astrattezza è una metrica di analisi del contenuto per la valutazione della qualità dell'IA generativa che può aiutare a valutare i risultati dei modelli di IA generativa rispetto agli input o al contesto del modello.
Ambito
La metrica dell'astrattezza valuta solo le risorse di IA generativa.
- Tipi di risorse AI : Modelli di prompt
- Compiti di IA generativa :
- Riepilogo del testo
- Generazione aumentata di recupero (RAG)
- Lingue supportate : Inglese
Punteggi e valori
Il punteggio della metrica di astrattezza indica il livello di astrattezza identificato nell'output. Punteggi più alti indicano alti livelli di astrattezza nell'output.
- Intervallo di valori : 0.0-1.0
Impostazioni
- Soglie :
- Limite inferiore: 0
- Limite superiore: 1