Entspricht Bewertungsmetrik

Die Gleichheits-Auswertungsmetrik misst, ob die Zeilen in der Vorhersage mit der angegebenen Teilzeichenfolge übereinstimmen.

Metrikdetails

"Equals to" ist eine Inhaltsvalidierungsmetrik, die zeichenfolgenbasierte Funktionen verwendet, um generierten LLM-Ausgabetext zu analysieren und zu validieren. Die Metrik ist nur verfügbar, wenn Sie das Python SDK zur Berechnung von Bewertungsmetriken verwenden.

Umfang

Die Gleichsetzung mit metrischen Werten bewertet nur generative KI-Assets.

  • Arten von KI-Assets : Vorlagen für Aufforderungen
  • Aufgaben der generativen KI :
    • Textausfassung
    • Inhaltsgenerierung
    • Beantwortung von Fragen
    • Entitätsextraktion
    • Retrieval-Augmented-Generation (RAG)
  • Unterstützte Sprachen : Englisch

Ergebnisse und Werte

Der Wert "entspricht metrischer Bewertung" gibt an, ob die Zeilen in der Vorhersage mit der angegebenen Zeichenfolge übereinstimmen.

  • Wertebereich: 0.0-1.0
  • Kennzahlen:
    • Bei 0: Die Vorhersagereihe entspricht nicht der angegebenen Teilzeichenfolge.
    • Bei 1: Die Vorhersagereihe entspricht der angegebenen Teilzeichenfolge.

Einstellungen

  • Schwellenwerte:
    • Untere Grenze: 0
    • Obergrenze: 1