在文件存储连接器中写入分区数据 DataStage

文件存储连接器支持特定文件格式,并在写入分区数据时具有不同的执行模式行为。

对于这些文件存储连接器,支持的文件格式和执行模式行为如下:

  • Amazon S3选中 DataStage 属性)
  • Box
  • Dropbox
  • Google Cloud Storage
  • IBM Cloud® Object Storage
  • Microsoft Azure Blob Storage
  • Microsoft Azure 文件存储
文件格式
分区属性仅支持CSV和分隔符文件。
执行模式行为
当您选择 “分区” 属性时,连接器将始终采用并行执行模式进行写入,而非默认的顺序模式。

在并行执行模式下,系统将创建一个名称与 "文件名 "属性中指定名称相同的文件夹,该文件夹下的文件将按以下格式创建: part-r-00000, part-r-00001, 其中文件名以 开头 part ,以节点编号结尾。