Métricas de evaluación de cobertura

La métrica de cobertura mide el grado en que la salida del modelo de cimentación se genera a partir de la entrada del modelo calculando el porcentaje de texto de salida que también se encuentra en la entrada.

Detalles de métrica

La cobertura es una métrica de análisis de contenido para evaluaciones de calidad de IA generativa que evalúa el resultado de su modelo en comparación con la entrada o el contexto de su modelo.

Ámbito

La métrica de cobertura evalúa únicamente los activos de IA generativa.

  • Tipos de activos de IA : plantillas de mensajes
  • Tareas de IA generativa :
    • Generación aumentada de recuperación (RAG)
    • Resumen de texto
  • Idiomas disponibles : inglés

Puntuaciones y valores

La puntuación de la métrica de cobertura indica en qué medida la salida del modelo de cimentación se genera a partir de la entrada del modelo. Las puntuaciones más altas indican que un porcentaje más alto de palabras de salida están dentro del texto de entrada.

Rango de valores : 0.0-1.0

Valores

  • Umbrales:
    • Límite inferior: 0
    • Límite superior: 1