Metrica di valutazione Regex

La metrica regex misura se le righe nella previsione contengono l'espressione regex specificata.

Dettagli metrica

Regex è una metrica di convalida dei contenuti che utilizza funzioni basate su stringhe per analizzare e convalidare il testo di output LLM generato. La metrica è disponibile solo quando si utilizza l'SDK di " Python " per calcolare le metriche di valutazione.

Ambito

La metrica regex valuta solo le risorse AI generative.

  • Tipi di risorse AI : Modelli di prompt
  • Compiti di IA generativa :
    • Riepilogo del testo
    • Generazione di contenuto
    • Risposta alle domande
    • Estrazione di entità
    • Generazione aumentata di recupero (RAG)
  • Lingue supportate : inglese

Punteggi e valori

Il punteggio metrico regex indica se le righe di previsione contengono l'espressione regex specificata.

  • Intervallo di valori : 0.0-1.0
  • Rapporti :
    • A 0: Le righe di previsione non contengono l'espressione regex specificata
    • A 1: Le righe di previsione contengono l'espressione regex specificata.

Impostazioni

  • Soglie:
    • Limite inferiore: 0
    • Limite superiore: 1