Beginnt mit Bewertungsmetrik

Die Bewertungsmetrik „Beginnt mit“ prüft, ob die Zeilen in der Vorhersage mit der angegebenen Teilzeichenfolge beginnen.

Metrikdetails

Beginnt mit einer Inhaltsvalidierungsmetrik, die zeichenfolgenbasierte Funktionen verwendet, um generierten LLM-Ausgabetext zu analysieren und zu validieren. Die Metrik ist nur verfügbar, wenn Sie das Python SDK zur Berechnung von Bewertungsmetriken verwenden.

Umfang

Die Starts mit Metrik werten nur generative KI-Assets aus.

  • Arten von KI-Assets : Vorlagen für Aufforderungen
  • Aufgaben der generativen KI :
    • Textausfassung
    • Inhaltsgenerierung
    • Beantwortung von Fragen
    • Entitätsextraktion
    • Retrieval-Augmented-Generation (RAG)
  • Unterstützte Sprachen : Englisch

Ergebnisse und Werte

Der mit metrischer Bewertung beginnt, gibt an, ob die Zeilen mit der angegebenen Teilzeichenfolge beginnen.

  • Wertebereich : 0.0-1.0
  • Kennzahlen:
    • Bei 0: Die Vorhersagereihen beginnen nicht mit der angegebenen Teilzeichenfolge.
    • Bei 1: Die Vorhersagereihen beginnen mit der angegebenen Teilzeichenfolge.

Einstellungen

  • Schwellenwerte:
    • Untere Grenze: 0
    • Obergrenze: 1