Gravação de dados particionados em conectores de armazenamento de arquivos DataStage
Os conectores para armazenamento de arquivos suportam determinados formatos de arquivo e têm um comportamento diferente no modo de execução para gravar dados particionados.
Os formatos de arquivo suportados e o comportamento do modo de execução funcionam da seguinte forma para esses conectores de armazenamento de arquivos:
- Amazon S3 (sem a opção Use DataStage properties selecionada)
- Box
- Dropbox
- Google Cloud Storage
- IBM Cloud® Object Storage
- Microsoft Azure Blob Storage
- Microsoft Azure File Storage
- Formatos de arquivos
- A propriedade Partitioned é compatível apenas com arquivos CSV e delimitados.
- Comportamento do modo de execução
- Quando você seleciona a propriedade Partitioned, o conector sempre gravará no modo de execução paralela em vez do modo sequencial padrão.
No modo de execução paralela, é criada uma pasta com o nome especificado na propriedade Nome do arquivo e os arquivos nela contidos são criados neste formato:
part-r-00000,part-r-00001, em que o nome do arquivo começa comparte termina com o número do nó.