Detalles del patrón AutoAI RAG

Una vez finalizado el experimento de AutoAI RAG, visualice los detalles de un patrón para comprender la composición y el rendimiento.

Si utiliza una base de conocimientos preexistente, algunos detalles no se muestran porque no son aplicables.

Descripción general del patrón

Desde la tabla de clasificación del pipeline, puede ver una tabla con la siguiente información para cada uno de los patrones que genera el experimento:

Columna Descripción
Clasificar Clasificación de la colocación según el mejor rendimiento para la métrica optimizada
Nombre Nombre del patrón
Nombre de modelo Nombre del modelo de incrustación utilizado para vectorizar e indexar los documentos
Optimizar la métrica Resultado del rendimiento de la métrica optimizada seleccionada para el experimento. Un patrón RAG puede optimizarse para la fidelidad de la respuesta y la corrección de la respuesta
Tamaño del fragmento Cantidad de datos recuperados de los documentos indexados
Método de recuperación Método (Window o Simple) utilizado para recuperar los documentos indexados
Métrica de distancia de almacén vectorial Métrica (coseno o euclídea) utilizada para medir la relación entre los vectores almacenados y los vectores de entrada

Detalles de patrón

Haga clic en un nombre de patrón para revisar los siguientes detalles de configuración de un patrón. Para comparar dos patrones, active Comparar patrones y seleccione un patrón para comparar. Algunos de los parámetros de configuración se pueden editar al crear el experimento. Para más detalles, consulte Personalización de la configuración del experimento RAG.

Información sobre el patrón

Columna Descripción
Patrón Nombre del patrón
Pasos de la composición Pasos dados en el experimento.
Tipo de puntuación Cómo se calcula y presenta la métrica de rendimiento.
- Media: La puntuación media de la métrica.
- CI Alto: El límite superior del intervalo de confianza (CI) para la puntuación media, que muestra el valor más alto que es probable que alcance la métrica. Si no hay variación en las puntuaciones de la métrica, no se puede calcular este valor.
- CI Bajo: El límite inferior del intervalo de confianza (CI) para la puntuación media, que muestra el valor más bajo que es probable que alcance la métrica. Si no hay variación en las puntuaciones métricas, este valor no puede calcularse.
Exactitud de las respuestas Corrección de la respuesta generada, incluyendo tanto la relevancia del contexto recuperado como la calidad de la respuesta generada.
Fidelidad de la respuesta Precisión de la respuesta generada al texto recuperado.
Exactitud contextual Pertinencia de la respuesta generada con respecto a la entrada.

Almacén de vectores

Columna Descripción
Tipo de fuente de datos del almacén vectorial Fuente de datos que se conecta al almacén de vectores.
Métrica de distancia de almacén vectorial Métrica utilizada para medir la relevancia de los vectores almacenados con respecto al vector de entrada.
Nombre del índice del almacén vectorial Índice utilizado como estructura de datos para almacenar y recuperar almacenes vectoriales.
Operación de almacenamiento vectorial Operación de almacenamiento vectorial para recuperar datos. Por ejemplo, upsert para insertar o actualizar filas en la tabla de la base de datos.
Campos del esquema del almacén vectorial Esquema para almacenar el índice de documentos vectorizados.
ID del esquema del almacén vectorial Identificador único del esquema del almacén de vectores.
Nombre del esquema del almacén vectorial Nombre del esquema utilizado para estructurar la tabla de la base de datos
Tipo de esquema de almacén vectorial Determina el tipo de datos que pueden almacenarse en el esquema y las operaciones que pueden realizarse con los datos. El tipo de esquema struct se utiliza para almacenar datos estructurados.

Fragmentación

Columna Descripción
Solapamiento de fragmentos Número de trozos que comparten palabras o frases comunes.
Tamaño del fragmento Cantidad de datos recuperados de los documentos índice.
Método de fragmentación Cómo se recupera el texto relevante para cada trozo de la entrada después de dividir la entrada en varios trozos.

Inclusiones

Columna Descripción
Modelo de inclusión Modelo de incrustación utilizado para vectorizar e indexar la colección de documentos.
Truncar los tokens de entrada Número máximo de fichas aceptadas como entrada.
Estrategia de truncamiento Estrategia utilizada para determinar cómo procesar los documentos recuperados para optimizar el rendimiento del modelo.

Recuperación

Columna Descripción
Método de recuperación Método utilizado para recuperar los documentos indexados: Ventana o Simple.
Número de trozos Número de trozos recuperados de los documentos indexados.
Tamaño de ventana Número de tokens adyacentes considerados por el modelo al recuperar texto de documentos indexados.

Generación

Columna Descripción
Texto de plantilla de contexto Plantilla estructurada para la respuesta generada.
Modelo base Modelo de cimentación utilizado en el experimento. Haz clic en el icono de vista previa para ver los detalles del modelo.
Método de decodificación Proceso que utiliza un modelo para elegir los tokens en la salida generada.
Máximo de nuevas fichas Número máximo de tokens nuevos que se pueden generar además de los tokens recuperados de los documentos indexados.
Longitud máxima de secuencia Número máximo total de tokens que representan la entrada y la salida.
Nuevas fichas mínimas Número mínimo de nuevos tokens que se pueden generar.
Texto de la plantilla Estructura con directrices para el modelo a utilizar cuando se recupera texto de documentos indexados.
Relación entre palabras y fichas Número de palabras de un texto dividido por el número de tokens generados.

Ejemplos de preguntas y respuestas

Columna Descripción
Ejemplos de preguntas y respuestas Preguntas y respuestas correctas proporcionadas como datos de prueba para medir el rendimiento del patrón.
Ejemplo:
Ejemplos de preguntas y respuestas en detalles de patrones