Conectando dados ao IBM Master Data Management

Use a conexão IBM Master Data Management para conectar seus dados de entidades, registros e relações a ativos de dados, catálogos e fluxos do DataStage.

Ao utilizar dados conectados, você pode transformar, refinar ou analisar os dados antes de importá-los para o serviço IBM Master Data Management, ou pode exportar dados mestres de IBM Master Data Management para outros serviços para fins de refinamento, análise, visualização e governança.

Para obter mais informações sobre como criar uma conexão IBM Master Data Management, consulte IBM Master Data Management connection.

Assista ao vídeo a seguir para ver como carregar e exportar dados mestre entre o IBM, o Master Data Management e bancos de dados conectados.

Este vídeo fornece um método visual para aprender os conceitos e tarefas nesta documentação.

Usando a conexão IBM Master Data Management

Você pode usar os dados conectados do IBM Master Data Management nas seguintes áreas de trabalho e ferramentas:

Projetos

Catálogos

  • Platform assets catalog
  • Outros catálogos ( IBM watsonx.data intelligence )

Se você estiver trabalhando com um catálogo controlado, só poderá visualizar ou incluir ativos do catálogo dos quais você é o proprietário do ativo de dados.

Nota: a visualização, o perfil e o mascaramento não funcionam para essa conexão de catálogo..

Exemplo: IBM Cenários de dados conectados do Master Data Management

As seções a seguir fornecem detalhes sobre como atingir alguns cenários comuns para conectar dados principais.

Importação de dados para IBM Master Data Management usando DataStage e uma conexão com banco de dados

Para concluir esta tarefa, deve-se ter:

  • Um banco de dados de origem ativa e suas credenciais de conexão
  • Uma instância do serviço IBM Master Data Management em funcionamento e totalmente configurada
  • DataStage

Para importar dados para IBM Master Data Management usando DataStage e uma conexão com o banco de dados:

  1. Crie seus ativos de conexão:

    • Conexão do banco de dados de origem: uma conexão com o banco de dados de origem usando qualquer conexão suportada pelo Cloud Pak for Data
    • Conexão de destino: Uma conexão IBM Master Data Management
    • Modo de gravação: Defina se os dados devem ser carregados em massa (Carregar) ou em pequenas partes em uma base contínua (Sincronização contínua). A opção de sincronização em andamento é útil para cenários de carregamento Delta

    Para obter detalhes sobre como criar essas conexões, consulte Conectores e seus subtópicos..

  2. Configure um fluxo do DataStage para transferir dados para o IBM Master Data Management. Por exemplo: nó [Conexão com o banco de dados de origem] -> etapa COPY -> nó [Conexão com o IBM Master Data Management ].

  3. Vincule todos os três nós juntos

  4. Configure propriedades de origem, como conexão, nome do esquema e nome da tabela.

  5. Selecione as colunas de dados que você deseja mover

    a. No painel de detalhes do nó do banco de dados de origem, clique em Editar > Importar dados e selecione as colunas que deseja mover para o IBM Master Data Management. É possível selecionar opcionalmente um subconjunto das colunas.

    b. Para quaisquer tipos de dados LONGVARCHAR, altere-os para o tipo de dado VARCHAR e altere o comprimento para 200

    c. Dê um clique em Aplicar.

  6. Mapeie as colunas para os tipos de dados do IBM Master Data Management.

    a. Selecione o estágio COPY..

    b. Acesse a guia Entrada e confirme se ela lista as colunas selecionadas na etapa anterior.

    c. Acesse a guia Saída, em seguida, clique em Editar.

    d. Mapeie os nomes das colunas de dados atuais para os tipos de dados do IBM Master Data Management.

    • Selecionar e excluir todas as colunas de saída. Clique em “Importar dados ” e, em seguida, localize as colunas de dados correspondentes na conexão do IBM Master Data Management.
    • Clique em Importar para salvar as mudanças
    • De volta à guia Saída, clique em Editar novamente e, em seguida, use a Map from input column coluna para mapear os nomes das colunas de IBM Master Data Management aos nomes das colunas de origem.
    • Clique em Aplicar e retornar.
  7. Configure as propriedades de destino

    a. Clique na guia “ IBM ” (Conexão com o Master Data Management ).

    b. Selecione a conexão IBM Master Data Management e, em seguida, defina a categoria de dados, o tipo de dados (tipo de registro) e o tipo de entidade, como record, person, e person_record. Use nomes que correspondam exatamente aos tipos de dados do seu IBM Master Data Management.

    c. Clique em Salvar.

  8. Salve, compile e execute o fluxo DataStage . Depois de ver uma notificação de sucesso, os dados são carregados em IBM Master Data Management e já estão prontos para a correspondência.

Exportação de dados mestre usando o DataStage e a conexão Master Data Management do IBM

Para concluir esta tarefa, deve-se ter:

  • Um banco de dados de origem ativa e suas credenciais de conexão
  • Uma instância do serviço IBM Master Data Management em funcionamento e totalmente configurada
  • DataStage

Para exportar dados mestre usando o DataStage e a conexão IBM Master Data Management :

  1. Crie seus ativos de conexão:

    • Conexão de fonte : Uma conexão IBM Master Data Management
    • Conexão do banco de dados de destino: uma conexão com o banco de dados de origem usando qualquer conexão suportada pelo Cloud Pak for Data
    • ID da tarefa de exportação (opcional) : O ID da tarefa de exportação concluída do IBM Master Data Management da qual você deseja extrair dados. Se um valor for fornecido para este campo, os outros campos de entrada serão ignorados e o serviço exportará os dados associados ao ID de exportação fornecido.
    • Regra de filtro (opcional): critérios de procura formatados por JSON que definem quais dados de registro ou entidade são incluídos na exportação. Se nenhuma regra de filtragem for fornecida, todos os dados serão exportados Regras de filtro podem conter uma combinação aninhada de expressões. Cada expressão contém uma propriedade, uma condição e um valor.. Por exemplo, use a carga útil JSON a seguir para definir um filtro que exporta dados de registro ou de entidade que inclui um valor para email pessoal e o Nome dado legal inicia com um S ou o Sobrenome jurídico inicia com um M. Além disso, conforme definido pela sinalização includeDeletes , essa exportação de exemplo inclui informações sobre quaisquer dados de entidade que foram excluídos após a data da última atualização definida (entity_last_updated):
    {
    "query": {
      "expressions": [
        {
          "operation": "or",
          "expressions": [
            {
              "property": "legal_name.given_name",
              "condition": "starts_with",
              "value": "S"
            },
            {
              "property": "legal_name.last_name",
              "condition": "starts_with",
              "value": "M"
            }
          ]
        },
        {
          "property": "personal_email.email_id",
          "condition": "has_value",
          "value": null
        },
        {
          "property": "entity_last_updated",
          "condition": "greater_than_equal",
          "value": "0",
          "expressions": []
        }
      ],
      "operation": "and"
    },
    "includeDeletes": true
    }
    

    Para obter mais informações sobre como criar essas conexões, consulte Conectores e seus subtópicos..

  2. Configure um fluxo DataStage, como por exemplo, o nó [Conexão com IBM Master Data Management ] -> o nó [Conexão com o banco de dados de destino]. Diferente de um fluxo de importação, você não precisa de um estágio COPY porque não é necessário mapear colunas de dados.

  3. Configure as suas propriedades de origem

    a. Selecione o nó de conexão “ IBM ” Master Data Management.

    b. Na guia “Stage”, configure as propriedades do banco de dados IBM Master Data Management, defina a categoria de dados, o tipo de dados (tipo de registro) e o tipo de entidade para os dados que você deseja exportar, como record, person, e person_record, utilizando nomes que correspondam exatamente aos seus tipos de dados IBM Master Data Management.

    c. Clique em Salvar. Na guia Saída , procure e selecione as colunas que deseja mover. Selecione a conexão IBM Master Data Management e, em seguida, selecione os dados necessários entre os tipos de dados disponíveis.

  4. Configure as suas propriedades de destino

    a. No nó do banco de dados de destino, defina como você deseja que os dados sejam aplicados ao banco de dados, como inserir, atualizar ou mesclar. Em seguida, defina o nome do esquema e o nome da tabela

    b. Clique em Salvar.

  5. Salve, compile e execute o fluxo DataStage . Depois de ver uma notificação de sucesso, os dados são carregados no banco de dados de destino..

Exportando ativos de dados principais conectados para serem usados em ativos e catálogos de Cloud Pak for Data

Para concluir esta tarefa, deve-se ter:

  • Uma instância do serviço IBM Master Data Management em funcionamento e totalmente configurada.

Para exportar ativos de dados principais a serem usados em ativos e catálogos do Cloud Pak for Data :

  1. Crie uma conexão IBM Master Data Management.

    a. Na barra de ação Projeto > Ativos , clique em Novo ativo> Conectar a uma origem de dados.

    b. Selecione a conexão IBM Master Data Management.

    c. Insira um nome e uma descrição para esta conexão e, em seguida, forneça os demais detalhes de conexão da instância do serviço IBM Master Data Management à qual você deseja se conectar. Para obter mais informações sobre como criar uma conexão, consulte IBM Master Data Management connection.

  2. Crie um ativo de dados conectado ao IBM Master Data Management.

    a. Na barra de ação Projeto > Ativos , clique em Importar ativo> Dados conectados.

    c. Clique em Selecionar origeme, em seguida, escolha uma origem de conexão nos bancos de dados disponíveis.

    d. Escolha sua conexão IBM Master Data Management e, em seguida, selecione os tipos de dados que deseja incluir neste ativo de dados conectado.

    e. Forneça um nome e uma descrição para seu ativo de dados conectado, em seguida, clique em Criar. Agora é possível ver o novo ativo de dados conectado na guia Ativos de seu projeto

  3. Publicar o ativo de dados em um catálogo.

    a. Na guia Ativos do projeto, localize seu ativo de dados, em seguida, selecione Publicar no catálogo no menu overflow do ativo.

    b. Escolha o catálogo no qual deseja publicar, forneça à tarefa uma descrição e configure o comportamento e a privacidade da ação duplicada.

    c. Opcionalmente: inclua tags para ajudar a organizar e localizar seus dados e, em seguida, clique em Publicar. Os dados agora estão disponíveis no Catálogo Para obter mais informações sobre como trabalhar com ativos de catálogo, consulte Conjuntos de catálogos.

Saiba Mais