IBM Cloud Data Engine(前身为 IBM Cloud SQL Query)
使用 ANSI SQL,在 IBM Cloud Object Storage 中读取、分析、存储和流式传输数据。管理与 Hive 元存储兼容的目录中的表元数据。
开始免费试用 查看文档
在一个黑暗的房间里,一名女性在笔记本电脑上专心致志地工作
为何使用 IBM Cloud Data Engine?

IBM Cloud Data Engine 是 IBM Cloud 的数据湖中央服务,将 IBM Cloud Data Engine 与 IBM Cloud Object Storage 中的数据相结合,使企业能够为一系列大数据分析用例创建当前使用的工作区。

IBM Cloud Data Engine 功能 轻松探搜数据

IBM Cloud Data Engine 使用 Apache Spark,后者是一个开源、快速、可扩展的内存中数据处理引擎,并针对低延迟和临时数据分析进行了优化。

即时查询

无需使用 ETL 或模式定义,即可支持 SQL 查询。使用我们的查询编辑器和 REST API,分析 IBM Cloud Object Storage 中的数据。

节省时间和资源

根据需要运行任意数量的查询;采用按查询次数付费定价,您只需为数据扫描付费。对数据进行压缩或分区,以节省成本和提高性能。

高可用性和高耐用性

IBM Cloud Data Engine 具有高可用性,并使用跨多个设施的计算资源执行查询。

受到保护

使用 IBM Identity and Access Management 和 IBM Key Protect 控制对数据的访问。授予用户对 IBM Cloud Object Storage 存储桶的精细控制。

支持开放数据格式

IBM Cloud Data Engine 支持多种数据格式,例如 CSV、JSON 和 Parquet,并支持标准 ANSI SQL。

客户成功案例

大数据日志分析 利用 SQL 的全部功能,为日志消息数据构建和运行数据管道和分析。IBM Cloud Object Storage 为物美价廉的持久存储提供了无缝可扩展性和弹性。 查看教程

构建数据湖 以本机格式存储数据并立即查询。无需服务器配置或 ETL。 查看教程

数据管道 运行从 IBM Cloud Object Storage 到 IBM Cloud 数据库(例如 IBM Db2® Warehouse 或 Db2 on Cloud)的高度并行化数据管道。通过将云数据库连接到数据湖,可以帮助更精确地控制数据质量和生命周期。

数据库整合 将本地数据库迁移到 IBM Cloud Object Storage,同时整合许可证成本并淘汰服务器。利用 IBM Cloud Data Engine 识别相关数据集,并推送到开源数据库。

常见问题解答

获取常见问题解答及相关链接,以了解更多信息。

要使用 IBM Cloud Data Engine,您需要拥有一个 IBM Cloud Object Store 帐户,用来存储查询的结果集。

请按照以下步骤开始操作:

  1. 配置 IBM Cloud Object Storage
  2. 配置一个 IBM Cloud Data Engine 实例
  3. 在已配置的 IBM Cloud Data Engine 实例中,单击左侧窗格上的“管理”(Manage)。
  4. 打开 IBM Cloud Data Engine UI。
  5. 您的 IBM Cloud Object Storage 目标会随即自动出现。

现在,可以针对我们的示例数据集或您自己的数据集提交查询。

您必须使用自己的 IBM Cloud Object Storage 帐户,而且除了 IBM Cloud Data Engine 成本以外,您还要承担 IBM Cloud Object Storage 帐户中产生的全部费用。

1. IBM Cloud Data Engine 会扫描数据卷中的数据。

  • 您的数据对 IBM Cloud Data Engine 是只读的。
  • IBM Cloud Data Engine 不会在包含被扫描数据的卷中执行插入或删除操作。

2. IBM Cloud Data Engine 将结果写入到指定的 IBM Cloud Object Storage 存储桶中的新文件中。

  • 使用 IBM Cloud Data Engine 会导致您的 IBM Cloud Object Storage 使用量和每月账单增加。
  • 客户负责删除他们不希望继续保留在 IBM Cloud Object Storage 中的卷。

IBM Cloud Data Engine 基于 Apache Spark 而构建,并使用 Spark SQL 执行查询。您可以通过 UI 或 REST API 提交查询。

IBM Cloud Data Engine 目前尚未与 IBM Watson Knowledge Catalog 整合。不过,该整合是我们优先考虑的事项,以便客户将查询、元数据和数据集发布到目录中,并参考在目录中注册的数据资产。

IBM Cloud Data Engine 已面向全球推出。

IBM Cloud Data Engine 使您能够利用 IBM Identity and Access Management 策略来控制对数据的访问。

IBM Cloud Data Engine 专为实现容错和极高的可用性而设计。它支持 IBM Cloud SLA。

可以在 IBM Cloud 中使用 IBM Cloud Data Engine。我们将根据每月扫描的数据量,按查询次数收费。失败的查询不会产生任何费用,但会根据扫描的数据量,对取消的查询收费。

不。

您只需为取消查询时已扫描的数据付费。

IBM Cloud Data Engine 不收取任何其他费用。您需要为 IBM Cloud Object Storage 中存储的数据付费。使用 IBM Cloud Data Engine 会导致您的 IBM Cloud Object Storage 使用量和每月账单增加。您负责删除您不希望继续保留在 IBM Cloud Object Storage 中的卷。

后续步骤

访问 IBM Cloud Data Engine 免费试用版,或者联系我们以了解定价详细信息。

开始免费试用