IBM Cloud Data Engine (anciennement IBM Cloud SQL Query)
Lisez, analysez, stockez et diffusez des données dans IBM Cloud Object Storage avec ANSI SQL. Gérez les métadonnées des tables dans un catalogue compatible avec Hive Metastore.
Commencez votre essai gratuit Voir les documents
Une femme travaille concentrée avec son ordinateur portable dans une pièce sombre
Pourquoi utiliser IBM Cloud Data Engine ?

IBM Cloud Data Engine est le service central d'IBM Cloud pour les data lakes. La combinaison d'IBM Cloud Data Engine avec les données d'IBM Cloud Object Storage vous permet de créer un espace de travail actif pour toute une série de cas d'utilisation de l'analyse des big data.

Fonctionnalités d'IBM Cloud Data Engine Exploration facile des données

IBM Cloud Data Engine utilise Apache Spark, un moteur de traitement de données In-Memory open source, rapide, extensible et optimisé pour une faible latence et une analyse ad hoc des données.

Interrogation instantanée

Aucune définition ETL ou de schéma nécessaire pour activer les requêtes SQL. Analysez les données là où elles se trouvent dans IBM Cloud Object Storage à l'aide de notre éditeur de requêtes et de notre API REST.

Gain de temps et de ressources

Exécutez autant de requêtes que vous le souhaitez ; avec la tarification à la requête, vous ne payez que pour l'analyse des données. Compressez ou partitionnez les données pour générer des économies et des performances.

Hautement disponible et durable

IBM Cloud Data Engine est hautement disponible et exécute les requêtes en utilisant des ressources de calcul sur plusieurs sites.

Protégé

Contrôlez l'accès à vos données avec IBM Identity and Access Management et IBM Key Protect. Accordez aux utilisateurs un contrôle granulaire de vos compartiments IBM Cloud Object Storage.

Prise en charge des formats de données ouverts

IBM Cloud Data Engine prend en charge une variété de formats de données tels que CSV, JSON et Parquet, et autorise le SQL ANSI standard.

Comment les clients l’utilisent

Analyse des journaux de mégadonnées Créez et exécutez des pipelines de données et des analyses des données de vos messages de journal avec toute la puissance de SQL. IBM Cloud Object Storage offre une évolutivité et une élasticité sans faille pour un stockage durable et économique. Voir le tutoriel

Création d’un lac de données Stockez les données dans des formats natifs et interrogez-les instantanément. Aucune configuration de serveur ou ETL n'est requise. Voir le tutoriel

Pipelines de données Exécutez des pipelines de données hautement parallèles depuis IBM Cloud Object Storage vers des bases de données IBM Cloud telles qu'IBM Db2® Warehouse ou Db2 sur le cloud. La connexion de votre base de données cloud à votre data lake peut vous aider à mieux contrôler la qualité et le cycle de vie des données.

Consolidation des bases de données Déplacez les bases de données sur site vers IBM Cloud Object Storage tout en consolidant les coûts de licence et en retirant les serveurs. Identifiez les ensembles de données pertinents avec IBM Cloud Data Engine et transférez-les vers des bases de données open source.

Foire aux questions

Obtenez des réponses aux questions les plus fréquemment posées et des liens pour plus d’informations.

Pour utiliser IBM Cloud Data Engine, vous avez besoin d'un compte IBM Cloud Object Store pour stocker les résultats de vos requêtes.

Suivez ces étapes pour commencer :

  1. Provisionnez IBM Cloud Object Storage.
  2. Mettez à disposition une instance IBM Cloud Data Engine.
  3. Cliquez sur « Gérer » dans le volet gauche de l'instance IBM Cloud Data Engine provisionnée.
  4. Ouvrez l'interface utilisateur IBM Cloud Data Engine.
  5. Votre cible IBM Cloud Object Storage apparaîtra automatiquement.

Vous êtes maintenant prêt à soumettre des requêtes sur notre exemple de jeu de données ou sur le vôtre.

Vous devez apporter vos propres comptes IBM Cloud Object Storage et vous êtes responsable de tous les coûts encourus dans votre compte IBM Cloud Object Storage, en plus de vos coûts IBM Cloud Data Engine.

1. IBM Cloud Data Engine analyse les données dans vos volumes de données.

  • Vos données sont en lecture seule pour IBM Cloud Data Engine.
  • IBM Cloud Data Engine n'effectue pas d'insertions ou de suppressions dans le volume lorsque les données sont numérisées.

2. IBM Cloud Data Engine écrit les résultats dans les nouveaux fichiers de votre compartiment IBM Cloud Object Storage spécifié.

  • L'utilisation d'IBM Cloud Data Engine augmentera votre utilisation d'IBM Cloud Object Storage et votre facture mensuelle.
  • Les clients sont responsables de la suppression des volumes qu'ils ne souhaitent plus conserver dans IBM Cloud Object Storage.

IBM Cloud Data Engine repose sur Apache Spark et utilise Spark SQL pour exécuter vos requêtes. Vous pouvez soumettre vos requêtes via l'interface utilisateur ou l'API REST.

Aujourd'hui, IBM Cloud Data Engine n'est pas encore intégré à IBM Watson Knowledge Catalog. Cependant, cette intégration figure en tête de notre liste de priorités afin que les clients puissent publier des requêtes, des métadonnées et des ensembles de données dans le catalogue, ainsi que des actifs de données de référence enregistrés dans le catalogue.

IBM Cloud Data Engine est disponible dans le monde entier.

IBM Cloud Data Engine vous permet d'accéder à vos données à l'aide des politiques IBM Identity and Access Management.

IBM Cloud Data Engine est conçu pour être tolérant aux pannes et hautement disponible. Il prend en charge le SLA IBM Cloud.

IBM Cloud Data Engine est disponible dans IBM Cloud. Vous serez facturé par requête, en fonction du nombre de données analysées par mois. Aucuns frais ne seront facturés en cas d'échec des requêtes, mais les requêtes annulées vous seront facturées en fonction de la quantité de données numérisées.

Non.

Vous ne serez facturé que pour les données qui ont déjà été analysées au moment où vous avez annulé la requête.

Il n'y a aucun frais supplémentaire pour IBM Cloud Data Engine. Les données stockées dans IBM Cloud Object Storage vous seront facturées. L'utilisation d'IBM Cloud Data Engine augmentera votre utilisation d'IBM Cloud Object Storage et votre facture mensuelle. Vous êtes responsable de la suppression des volumes que vous ne souhaitez plus conserver dans IBM Cloud Object Storage.

Étapes suivantes

Accédez à la version d'essai gratuite d'IBM Cloud Data Engine ou contactez-nous pour en savoir plus sur les tarifs.

Commencez votre essai gratuit