Pipeline de données Amazon

Le service Amazon Data Pipeline traite et transfère les données entre les services de calcul et de stockage AWS, ainsi que les sources de données sur site, à intervalles réguliers. Compte tenu de l'adoption généralisée des services de calcul et de stockage AWS, il est essentiel pour les entreprises de garantir la connectivité à ces services.

Actions

  • reportTaskRunnerHeartbeat: Appelle Report Task Runner Heartbeat toutes les 15 minutes pour indiquer que les task runners sont opérationnels.

  • removeTags: Supprime les balises du pipeline spécifié.

  • evaluateExpression: Analyse une chaîne de caractères dans le contexte d'un objet spécifié.

  • listPipelines: Fournit une liste de tous les identificateurs de pipelines actifs.

  • describePipelines: Renvoie des métadonnées sur un ou plusieurs pipelines.

  • deactivatePipeline: Désactive le pipeline spécifié.

  • reportTaskProgress: Met régulièrement à jour le service AWS Data Pipeline en ce qui concerne la progression de l'exécution de la tâche appelée.

  • setStatus: Met à jour l'état d'un tableau d'objets physiques ou logiques du pipeline.

  • activatePipeline: Active le pipeline et lance les tâches liées au pipeline.

  • putPipelineDefinition: Crée des tâches, des calendriers et des conditions préalables pour contrôler le comportement du pipeline.

  • createPipeline: Crée un pipeline.

  • queryObjects: Recherche des noms d'objets correspondant aux conditions spécifiées dans un pipeline.

  • addTags: Ajoute ou modifie des balises pour le pipeline spécifié.

  • setTaskStatus: Notifie à AWS Data Pipeline qu'une tâche est terminée et fournit des informations sur le statut final.

  • describeObjects: Fournit des définitions d'objets pour un ensemble d'objets de pipeline.

  • deletePipeline: Supprime un pipeline de données.

  • validatePipelineDefinition: Valide la définition du pipeline pour s'assurer qu'il s'exécute sans erreur.

  • getPipelineDefinition: Récupère la définition du pipeline définie dans la méthode Put Pipeline Definition.

  • pollForTask: Appelle PollForTask pour recevoir les détails de la tâche qui doit être effectuée à partir de AWS Data Pipeline.

Actions personnalisées

Vous pouvez utiliser ce connecteur pour créer vos propres actions personnalisées afin d'effectuer des tâches spécifiques. Les actions que vous créez se présentent et fonctionnent exactement comme les autres actions.

En savoir plus sur la création d'actions personnalisées.