IBM Cloud Data Engine ist der zentrale Service von IBM Cloud für Data Lakes. Durch die Kombination von IBM Cloud Data Engine mit Daten in IBM Cloud Object Storage können Sie einen aktiven Workspace für eine Reihe von Big-Data-Analyseanwendungen erstellen.
IBM Cloud Data Engine verwendet Apache Spark, eine schnelle, erweiterbare Open-Source-Engine für die In-Memory-Datenverarbeitung, die für geringe Latenzzeiten und Ad-hoc-Analysen von Daten optimiert ist.
Für SQL-Abfragen ist keine ETL- oder Schemadefinition erforderlich. Analysieren Sie die Daten mit unserem Abfrage-Editor und der REST-API dort, wo sie sich im IBM Cloud Object Storage befinden.
Führen Sie so viele Abfragen durch, wie Sie benötigen. Mit dem Preismodell, bei dem die Abrechnung pro Abfrage erfolgt, zahlen Sie nur für den Datenscan. Komprimieren oder partitionieren Sie Daten für mehr Einsparungen und höhere Leistung.
IBM Cloud Data Engine ist hochverfügbar und führt Abfragen unter Verwendung von Rechenressourcen über mehrere Einrichtungen hinweg aus.
Kontrollieren Sie den Zugriff auf Ihre Daten mit IBM Identity and Access Management und IBM Key Protect. Geben Sie Benutzern die Möglichkeit, Ihre IBM Cloud Object Storage-Buckets genau zu kontrollieren.
IBM Cloud Data Engine unterstützt eine Vielzahl von Datenformaten wie CSV, JSON und Parquet und ermöglicht die Verwendung von Standard-ANSI-SQL.
So wird die Lösung von Kunden genutzt
Ein webbasierter Service zur Datenspeicherung, der hochgradig sicher, kosteneffizient und resilient ist und einen kontinuierlichen Zugriff auf Ihre Daten gewährleistet.
Übertragen Sie große Datensätze zuverlässig und mit maximaler Geschwindigkeit zu und von IBM Cloud Object Storage.
Beschleunigen Sie die sichere Übertragung großer Datenmengen in IBM Cloud Object Storage mit robusten, portablen Speichergeräten mit 120 TB nutzbarer Kapazität.
Häufig gestellte Fragen
Antworten auf die häufigsten Fragen mit Links zu weiterführenden Informationen
Für die Nutzung von IBM Cloud Data Engine benötigen Sie ein IBM Cloud Object Store-Konto, um die resultierenden Datensätze Ihrer Abfragen zu speichern.
Mit diesen Schritten können Sie loslegen:
- Bereitstellung von IBM Cloud Object Storage.
- Bereitstellung einer IBM Cloud Data Engine-Instanz.
- Klicken Sie im linken Bereich der bereitgestellten IBM Cloud Data Engine-Instanz auf „Verwalten“.
- Öffnen Sie die Benutzeroberfläche der IBM Cloud Data Engine.
- Ihr IBM Cloud Object Storage-Ziel wird automatisch angezeigt.
Sie können nun Abfragen für unseren Beispieldatensatz oder Ihre eigenen Daten durchführen.
Sie benötigen Ihre eigenen IBM Cloud Object Storage-Konten und sind für alle Kosten verantwortlich, die für Ihr IBM Cloud Object Storage-Konto anfallen, zusätzlich zu den Kosten für Ihre IBM Cloud Data Engine.
1. Die IBM Cloud Data Engine scannt Daten in Ihren Datenträgern.
- Die IBM Cloud Data Engine kann Ihre Daten nur lesen (sie sind also schreibgeschützt).
- Die IBM Cloud Data Engine nimmt keine Einfügungen oder Löschungen im Datenträger mit den gescannten Daten vor.
2. Die IBM Cloud Data Engine schreibt die Ergebnisse in neue Dateien in Ihrem angegebenen IBM Cloud Object Storage-Bucket.
- Durch die Nutzung von IBM Cloud Data Engine erhöht sich Ihre IBM Cloud Object Storage-Nutzung und damit auch Ihre monatliche Rechnung.
- Kunden sind dafür verantwortlich, Datenträger zu löschen, die sie nicht mehr in IBM Cloud Object Storage behalten möchten.
IBM Cloud Data Engine basiert auf Apache Spark und verwendet Spark SQL, um Ihre Abfragen auszuführen. Sie können Ihre Abfragen über die Benutzeroberfläche oder die REST-API senden.
Derzeit ist die IBM Cloud Data Engine noch nicht in den IBM Watson Knowledge Catalog integriert. Diese Integration steht aber ganz oben auf unserer Prioritätenliste, damit Kunden Abfragen, Metadaten und Datensätze im Katalog veröffentlichen und auf im Katalog registrierte Daten-Assets verweisen können.
IBM Cloud Data Engine ist weltweit verfügbar.
IBM Cloud Data Engine ermöglicht Ihnen die Kontrolle über den Zugriff auf Ihre Daten mithilfe von IBM Identity and Access Management-Richtlinien.
IBM Cloud Data Engine ist auf Fehlertoleranz und Hochverfügbarkeit ausgelegt. Es unterstützt das IBM Cloud-SLA.
IBM Cloud Data Engine ist in der IBM Cloud verfügbar. Die Abrechnung erfolgt pro Abfrage, basierend auf der Menge der pro Monat gescannten Daten. Für fehlgeschlagene Abfragen fallen keine Gebühren an, aber abgebrochene Abfragen werden Ihnen basierend auf der Menge der gescannten Daten in Rechnung gestellt.
Nein.
Ihnen werden nur die Daten in Rechnung gestellt, die zu dem Zeitpunkt, an dem Sie die Abfrage abgebrochen haben, bereits gescannt wurden.
Für IBM Cloud Data Engine fallen keine zusätzlichen Gebühren an. Für die in IBM Cloud Object Storage gespeicherten Daten fallen Gebühren an. Durch die Nutzung von IBM Cloud Data Engine erhöht sich Ihre IBM Cloud Object Storage-Nutzung und damit auch Ihre monatliche Rechnung. Sie sind für das Löschen von Datenträgern verantwortlich, die Sie nicht mehr in IBM Cloud Object Storage behalten möchten.