Configure um consumidor de carga de transformação de extração (ETL)

Importe e processe dados do seu ambiente Kafka usando as configurações existentes do Mecanismo de transformação robusta (RTE).

Antes de Iniciar

• Função necessária: Integration_hub_admin
• Este consumidor requer um Stream Connectassinatura. Para obter mais informações, consulte https://www.servicenow.com/now-platform/workflow-data-fabric.html.
• . ServiceNowO instalador do Stream Connect [com.glide.hub.stream_connect.installer] plug-in é necessário.
• Este consumidor requer um transformador de conjunto de importação robusto .

Por Que e Quando Desempenhar Esta Tarefa

Para configurar um consumidor, você precisa criar dois registros.

1. O registro do consumidor, que especifica como importar e processar dados.
2. Um registro para o fluxo Kafka, que define o fluxo de dados para o seu consumidor.

Esta tarefa abrange a criação do consumidor. Para obter instruções sobre como criar um fluxo Kafka, consulte Crie um fluxo Kafka.

Procedimento

1. Navegar até Tudo > IntegrationHub > clientees > Consumidor de ETL.
2. Selecione Novo.
3. No formulário, preencha os campos.

   Tabela 1. Consumidor de ETL do Kafka

   Campo	Descrição
   Nome	Nome do consumidor de ETL.
   Transformador robusto do conjunto de importação	Nome do transformador do conjunto de importação robusto a ser usado para processar dados.
   Garantia de entrega	Se houver uma falha de nó, opção para especificar a garantia de entrega para mensagens recebidas. Selecione uma das seguintes opções. Não há perda, mas duplicatas : Todas as mensagens são entregues pelo menos uma vez. Algumas mensagens podem ser entregues mais de uma vez. Uma vez ou não : Uma mensagem não é entregue mais de uma vez. Algumas mensagens podem não ser entregues.
   Formato de serialização	O formato de serialização da mensagem. Selecione uma das seguintes opções. Texto sem formatação : Selecione esta opção para qualquer mensagem de texto sem formatação. Este é o formato padrão. Codificado : Selecione esta opção para mensagens em um ApacheFormato Avro. A conversão de mensagens de texto sem formatação para um formato Avro requer um esquema. Selecione o registro de esquema no Registro de esquema campo. Para obter mais informações sobre esquemas, consulte Gestão de esquemas no Stream Connect.
   Dados em uma única coluna	Opção para que a tabela do conjunto de importação armazene dados em uma única coluna.
   Mapeamento de coluna	Opção para especificar se a chave JSON da mensagem mapeia os dados para o nome ou rótulo da coluna na tabela do conjunto de importação. Selecione uma das seguintes opções. Rótulo Nome da coluna Este campo aparece somente quando Dados em uma única coluna a caixa de seleção está desmarcada.
   Aplicação	Escopo da aplicação para o consumidor de ETL.
   Registro de esquema	Registro do esquema selecionado. Selecione uma das seguintes opções. Registro de esquema autônomo Registro de esquema confluent Este campo aparece somente quando Formato de serialização está definido como Codificado . Para o Registro de esquema confluent, se o ID do esquema da mensagem recebida não estiver na tabela de esquema, o sistema importará o esquema dinamicamente, usando a conexão REST configurada.

4. Selecione Salvar.

O que Fazer Depois

Crie um fluxo Kafka para este consumidor. Depois que o fluxo for ativado, você poderá começar a receber mensagens do seu ambiente Kafka.