Configure um consumidor de ETL (Extract Transform Load, carga de transformação de extração)

Importe e processe dados do seu ambiente Kafka usando as configurações existentes do Mecanismo de transformação robusta (RTE).

Antes de Iniciar

• Função necessária: Integration_hub_admin
• Este consumidor requer um Stream Connect assinatura. Para obter mais informações, consulte https://www.servicenow.com/now-platform/workflow-data-fabric.html.
• . ServiceNow O plug-in do Stream Connect Installer [com.glide.hub.stream_connect.installer] é necessário.
• Este consumidor requer um transformador robusto do conjunto de importação .

Por Que e Quando Desempenhar Esta Tarefa

Para configurar um consumidor, você precisa criar dois registros.

1. O registro do consumidor, que especifica como importar e processar dados.
2. Um registro para o fluxo Kafka, que define o fluxo de dados para seu consumidor.

Esta tarefa cobre a criação do consumidor. Para obter instruções sobre como criar um fluxo Kafka, consulte Crie um fluxo Kafka.

Procedimento

1. Navegar até Tudo > IntegrationHub > Consumidores > Consumidor de ETL.
2. Selecione Novo.
3. No formulário, preencha os campos.

   Tabela 1. Consumidor de ETL do Kafka

   Campo	Descrição
   Nome	Nome do consumidor de ETL.
   Transformador robusto do conjunto de importação	Nome do transformador robusto do conjunto de importação a ser usado para processar dados.
   Garantia de entrega	Se houver uma falha de nó, opção para especificar a garantia de entrega para mensagens de entrada. Selecione uma das seguintes opções. Não perdidos, mas duplicados : Todas as mensagens são entregues pelo menos uma vez. Algumas mensagens podem ser entregues mais de uma vez. Uma vez ou não : Uma mensagem não é entregue mais de uma vez. Algumas mensagens podem não ser entregues.
   Formato de serialização	O formato de serialização da mensagem. Selecione uma das seguintes opções. Texto sem formatação : Selecione esta opção para qualquer mensagem de texto sem formatação. Este é o formato padrão. Codificado : Selecione esta opção para mensagens em um Apache Formato Avro. Converter mensagens de texto sem formatação para um formato Avro requer um esquema. Selecione o registro de esquema no Registro de esquema campo. Para obter mais informações sobre esquemas, consulte Gestão de esquemas em Stream Connect.
   Dados em uma única coluna	Opção para que a tabela do conjunto de importação armazene dados em uma única coluna.
   Mapeamento de coluna	Opção para especificar se a chave JSON da mensagem mapeia os dados para o nome ou rótulo da coluna na tabela do conjunto de importação. Selecione uma das seguintes opções. Rótulo Nome da coluna Este campo aparece somente quando Dados em uma única coluna a caixa de seleção está desmarcada.
   Aplicação	Escopo da aplicação para o consumidor de ETL.
   Registro de esquema	Registro do esquema selecionado. Selecione uma das seguintes opções. Registro de esquema autônomo Registro de esquema confluent Este campo aparece somente quando Formato de serialização está definido como Codificado . Para o Registro de esquema confluent, se o ID de esquema da mensagem recebida não estiver na tabela de esquema, o sistema importará o esquema dinamicamente, usando a conexão REST configurada.

4. Selecione Save (Salvar).

O que Fazer Depois

Crie um fluxo Kafka para este consumidor. Depois que o fluxo é ativado, você pode começar a receber mensagens do seu ambiente Kafka.