Contient toute mesure d'évaluation

La métrique "contient tout" mesure si les lignes de la prédiction contiennent l'un des mots-clés spécifiés.

Détails de la métrique

Contains any est une mesure de validation du contenu qui utilise des fonctions basées sur les chaînes de caractères pour analyser et valider le texte de sortie généré par le LLM. Cette mesure n'est disponible que lorsque vous utilisez le SDK Python pour calculer les mesures d'évaluation.

Portée

La métrique "contient tout" évalue uniquement les actifs d'IA générative.

  • Types d'actifs IA : Modèles d'invites
  • Tâches d'IA générative :
    • Synthèse de texte
    • Génération de contenu
    • Réponse aux questions
    • Extraction d'entités
    • Génération augmentée de recherche (RAG)
  • Langues prises en charge : Anglais

Scores et valeurs

Le score de la métrique contient tout indique si l'un des mots-clés spécifiés se trouve dans les lignes de prédiction.

  • Plage de valeurs : 0.0-1.0
  • Ratios :
    • A 0 : la prédiction ne contient aucun des mots-clés spécifiés.
    • Au niveau 1 : la prédiction contient les mots-clés spécifiés.

Paramètres

  • Seuils :
    • Limite inférieure : 0
    • Limite supérieure : 1