Automatización de importaciones de datos

Puede cargar los datos de forma periódica en un grupo de object storage utilizando archivos CSV o JSON. El administrador de Supply Chain Intelligence Suite crea reglas de importación para importar datos a intervalos predefinidos desde el grupo de object storage .

Para automatizar la importación de datos, realice los pasos siguientes:
  1. Revise el diccionario de datos y prepare los archivos CSV o JSON . Asegúrese de que los archivos de datos estén formateados correctamente en formato CSV o JSON . Para obtener más información, consulte Muestra de archivos CSV o Muestra de datos JSON.
    Nota: La última columna (utilizada como identificador (esquema csv predeterminado)) del diccionario de datos no es aplicable a la importación del archivo JSON.
  2. Analice los datos y determine qué modelos de datos necesita utilizar para su caso de negocio.
  3. Si todavía no tiene almacenamiento de objetos, suministre el grupo de object storage donde cargue los datos. Para obtener más información, consulte Gestión del almacenamiento de objetos.
    Nota: Para automatizar la ingestión de datos utilizando un grupo de almacenamiento de objetos, debe crear un grupo personalizado con permisos de acceso completo. El grupo predeterminado incluido con Supply Chain Intelligence Suite tiene funciones y acceso limitados, y es adecuado para la mayoría de las necesidades básicas.
  4. Cree una regla de importación utilizando el creador de reglas dentro de Supply Chain Intelligence Suite para procesar los datos del grupo de object storage definido. Para obtener más información, consulte Creación de reglas de importación.
  5. Cargue sus archivos CSV o JSON en object storage utilizando la API adecuada para su instancia object storage. Para obtener más información, consulte Ingesta de datos CSV o Ingesta de datos JSON.
  6. Asegúrese de que la carga object storage devolvió el código de estado 200 para indicar el éxito y que el objeto se carga en su instancia object storage. Una vez que el archivo ha sido leído y procesado por Supply Chain Intelligence Suite, se crea un archivo de estado JSON con el formato de YOURFILENAME_READDATE_status.json, por ejemplo testFile_2024-05-01T220611Z_status.json en el directorio importStatus del bucket object storage.
  7. Opcional: Para determinar cuándo los datos cargados en COS han sido importados y procesados por Supply Chain Intelligence Suite se requiere el estado del trabajo Supply Chain Intelligence Suite. Para acceder al estado del trabajo, utilice la API del gestor de trabajos o lea y analice el archivo de estado JSON creado en el directorio importStatus del bucket object storage. Se puede acceder al archivo de estado JSON mediante la API object storage.