Iniciação rápida: transformando dados

É possível integrar, purificar e analisar dados facilmente por meio de origens de dados diferentes usando um fluxo do DataStage. Leia sobre a ferramenta DataStage, em seguida, assista a um vídeo e faça um tutorial que seja adequado para usuários com algum conhecimento de transformação de dados, mas que não requer codificação.

Serviços necessários
watsonx.ai Studio
DataStage

O fluxo de trabalho básico inclui estas tarefas:

  1. Crie um projeto. Projetos nos quais seja possível colaborar com outras pessoas para trabalhar com dados.
  2. Inclua seus dados no projeto. É possível incluir dados ou arquivos CSV de uma origem de dados remota por meio de uma conexão.
  3. Crie um fluxo do DataStage.
  4. Execute as etapas usando operações para refinar os dados.
  5. Crie e execute uma tarefa para transformar os dados.

Leia sobre o DataStage

O DataStage é uma ferramenta de extrair, transformar e carregar (ETL) que pode ser usada para transformar e integrar dados em projetos.

DataStage foi projetado para ser fácil de usar e está totalmente integrado à plataforma. É possível importar tarefas paralelas anteriores existentes no DataStage por meio do uso de arquivos ISX, usar a tela do DataStage para criar, editar e testar fluxos e executar tarefas geradas por meio de fluxos.

Leia mais sobre o DataStage

Assista a um vídeo sobre como transformar dados usando um fluxo do DataStage

Assistir vídeo Assista a este vídeo para ver como criar um fluxo de DataStage simples.

Este vídeo fornece um método visual para aprender os conceitos e tarefas nesta documentação.


Experimente um tutorial para transformar dados

Neste tutorial, você concluirá estas tarefas:

Este tutorial levará aproximadamente 20 minutos para ser concluído.




Dicas para concluir este tutorial
Aqui estão algumas dicas para concluir com sucesso este tutorial.

Use a imagem em vídeo

Dica: inicie o vídeo e, em seguida, conforme você rolar pelo tutorial, o vídeo será movido para o modo de imagem. Feche o índice de vídeo para a melhor experiência com imagem em imagem. É possível usar o modo picture-in-picture para que você possa seguir o vídeo ao concluir as tarefas neste tutorial. Clique nos registros de data e hora para cada tarefa a seguir.

A imagem animada a seguir mostra como usar os recursos de imagem em vídeo e de índice:

Como usar picture-in-picture e capítulos

Configure as janelas do navegador

Para uma experiência ideal ao concluir este tutorial, abra sua conta em uma janela do navegador e mantenha esta página do tutorial aberta em outra janela do navegador para alternar facilmente entre as duas janelas. Considere organizar as duas janelas do navegador lado a lado para facilitar o acompanhamento.

Tutorial e IU lado a lado

Dica: se você encontrar um tour guiado ao concluir este tutorial na interface com o usuário, clique em Talvez posterior.

Tarefa 1: Abrir um Projeto

É necessário um projeto para armazenar o conjunto de dados e o fluxo do DataStage e é necessário fornecer o serviço DataStage . Siga estas etapas para abrir um projeto existente ou criar um novo projeto e provisionar o serviço:

  1. No Menu de Menu de NavegaçãoNavegação, selecione Projetos > Exibir todos os projetos.

  2. Se você tiver um projeto existente, abra-o.

  3. Se você não tiver um projeto existente, clique em Novo projeto.

  4. Selecione Criar um projeto vazio.

  5. Insira um nome e uma descrição opcional para o projeto

  6. Clique em Criar.

  7. No Menu de Menu de NavegaçãoNavegação, clique em Serviços > Instâncias de serviço.

  8. Clique em Incluir serviço e selecione Datastage.

  9. Clique em Criar. Você verá o serviço provisionado em sua página Instâncias de serviço.

Para obter mais informações ou assistir ao vídeo, consulte Criando um projeto.

ícone de ponto de verificação Verifique seu progresso

A imagem a seguir mostra os serviços fornecidos.

A imagem a seguir mostra os serviços provisionados

Tarefa 2: incluir o conjunto de dados em seu projeto

O conjunto de dados usado neste Tutorial está disponível no hub de Recursos Siga estas etapas para localizar o conjunto de dados no hub de recursos e incluí-lo em seu projeto:

  1. Acesse o conjunto de dados Customers no hub de recursos.

  2. Clique em Incluir no projeto.

  3. Selecione o projeto na lista e clique em Incluir.

  4. Após a inclusão do conjunto de dados, clique em Visualizar projeto.

Para obter mais informações sobre a inclusão de ativos de dados do hub de Recursos para seu projeto, consulte Carregando e acessando dados em um bloco de notas

ícone de ponto de verificação Verifique seu progresso

A imagem a seguir mostra a guia Ativos no projeto.

A imagem a seguir mostra a guia Ativos no projeto

Tarefa 3: criar um fluxo do DataStage

vídeo do tutorial de visualização Para visualizar esta tarefa, assista ao vídeo a partir do minuto 00:26.

O fluxo do DataStage conterá quatro nós: o ativo de dados original, um nó de filtro, um nó de classificação e o ativo de dados transformado. Siga estas etapas para criar o fluxo do DataStage :

  1. Clique Novo ativo > Transformar e integrar dados .

  2. Forneça um nome e uma descrição e, em seguida, clique em Criar.

  3. Clique em Conectores, em seguida, arraste e solte o nó Navegador de ativos na tela.

  4. Selecione Ativo de dados > customers.csv e clique em Incluir.

  5. Na Paleta de nós, expanda a seção Estágios e, em seguida, arraste o nó Filtro para a tela.

  6. Para vincular os nós juntos, clique na seta azul no nó Customers.csv e arraste-o para o nó Filtro

  7. Na seção Estágios, arraste o nó Classificação para a tela.

  8. Conecte o nó Filtro ao nó Classificação.

  9. Expanda a seção Conectores e, em seguida, arraste o nó Navegador de ativos para a tela.

  10. Selecione Ativo de dados > customers.csv e clique em Incluir. Você mudará o nome do arquivo depois, portanto, não sobrescreva o arquivo customer.csv.

  11. Conecte o nó Classificar a este último nó do Customers.csv

ícone de ponto de verificação Verifique seu progresso

A imagem a seguir mostra o fluxo inicial.
'

A imagem a seguir mostra o fluxo inicial.

Tarefa 4: Editar os nós

vídeo do tutorial de visualização Para visualizar esta tarefa, assista ao vídeo a partir do minuto 03:27.

Siga estas etapas para editar as propriedades para cada nó na tela:

Nó 1: Editar o primeiro nó do navegador do Ativo

  1. Clique duas vezes no primeiro nó Customer.csv .

  2. No painel Propriedades à direita, renomeie o nó para CustomerTable para renomear o nó ativo.

  3. Clique na guia Saída.

  4. Expanda a seção Colunas e clique em Editar.

  5. Para a coluna YTD_SALES, selecione Tipo de dados e selecione DECIMAL para alterar o tipo de dados da coluna YTD_SALES.

  6. Clique em Aplicar e retornar para retornar ao painel Propriedades.

  7. Clique em Salvar para salvar as mudanças no nó Tabela do cliente.

Nó 2: Editar o nó Filtro

  1. Dê um clique duplo no nó Filtro.

  2. No painel Propriedades, renomeie o texto Filter_1 para FilterYTDSales para renomear o nó do filtro.

  3. Expanda a seção Propriedades. Sob Predicados, clique em Editar.

    1. Na coluna Cláusula Where , digite YTD_SALES > 1000.

    2. Clique em Aplicar e retornar.

  4. Clique na guia Saída.

  5. Expanda a seção Colunas e clique em Editar.

    1. Selecione todas as colunas e desmarque as seguintes colunas listadas abaixo que serão mantidas para este tutorial.

      • CUST_ID
      • CUSTNAME
      • COUNTRY_CODE
      • EMAIL_ADDRESS
      • PHONE_NUMBER
      • YTD_SALES
      • SALESREP_ID

    2. Clique no ícone Excluir Excluir Linhas Selecionadas linhas selecionadas para excluir as colunas selecionadas restantes.

    3. Para a coluna CUSTNAME, renomeie-a para CUSTOMERNAME. Essa mudança se propagará para os nós que seguem o nó Filtro.

    4. Clique em Aplicar e retornar para retornar ao painel Propriedades.

  6. Clique em Salvar para salvar as mudanças no nó Filtro.

Nó 3: Editar o nó Classificação

  1. Dê um clique duplo no nó Classificação.

  2. No painel Propriedades, renomeie o texto Sort_1 para SortYTDSales para renomear o nó de classificação.

  3. Expanda a seção Propriedades.

  4. Em Sorting Keys (Chaves de classificação), clique em Add key (Adicionar chave).

    1. Clique em Incluir chave.

    2. No menu suspenso Chave, selecione YTD_SALES.

    3. Para a Ordem de classificação, selecione Decrescente.

    4. Clique em Aplicar para retornar à lista de chaves de classificação.

    5. Clique em Aplicar e retornar para retornar ao painel Propriedades.

  5. Clique na guia Entrada e expanda a seção Colunas para verificar se a mudança de nome de coluna CUSTOMERNAME é propagada do nó Filtro.

  6. Clique na guia Saída e expanda a seção Colunas para verificar se a mudança de nome de coluna CUSTOMERNAME é propagada do nó Filtro.

  7. Clique em Salvar para salvar as mudanças no nó Classificação.

Nó 4: Editar o último nó do navegador do Ativo

  1. Clique duas vezes no último nó Customers.csv .

  2. No painel Propriedades , renomeie o nó para CustomerFilteredTable para renomear o nó do ativo

  3. Expanda a seção Propriedades e selecione a caixa de seleção Criar ativo de dados.

  4. No campo Nome do ativo de dados, digite " Customers filtered.

  5. Clique na guia Entrada e expanda a seção Colunas para verificar se a mudança de nome de coluna CUSTOMERNAME é propagada do nó Filtro.

  6. Clique em Salvar para salvar as mudanças no nó Tabela filtrada por clientes .

ícone de ponto de verificação Verifique seu progresso

A imagem a seguir mostra o fluxo final.
'

A imagem a seguir mostra o fluxo final.

Tarefa 5: executar seu fluxo do DataStage e visualizar seu ativo

vídeo do tutorial de visualização Para visualizar esta tarefa, assista ao vídeo a partir do minuto 06:36.

Agora você está pronto para executar o fluxo.. Siga estas etapas para executar o fluxo e visualizar o ativo transformado no projeto:

  1. Clique em Salvar.

  2. Clique em Compilar.

  3. Clique em Executar .

  4. (Opcional) Clique no link Log para visualizar os detalhes da execução.

  5. Clique duas vezes no último nó da Tabela filtrada de Clientes

  6. Expanda a seção Propriedades.

  7. Role a tela para baixo, e clique em Visualizar dados. É possível ver que os dados foram filtrados e classificados corretamente.

    1. Clique no painel Gráfico ..

    2. Para Colunas para visualizar, selecione YTD_SALES.

    3. Para o Tipo de Gráfico, clique em Gráfico Q-Q..

    4. Clique em Fechar.

  8. Como você configura o fluxo para criar um ativo de dados no projeto, clique no nome do projeto na trilha de navegação para retornar ao projeto.

  9. Na guia Ativos , abra o ativo Clientes filtrados .

ícone de ponto de verificação Verifique seu progresso

A imagem a seguir mostra o ativo de dados filtrados pelos clientes

A imagem a seguir mostra o ativo de dados filtrados pelos clientes

Próximas etapas

Agora os dados estão prontos para serem usados. Por exemplo, você ou outros usuários podem executar qualquer uma destas tarefas:

Recursos adicionais