Apache Kafka campos de configuração de entrada de dados

  • Versão de lançamento: Xanadu
  • Atualizado 1 de ago. de 2024
  • 4 min. de leitura
  • Descrição dos campos no formulário de configuração de entrada de dados Apache Kafka.

    Configuração básica

    Campo Descrição
    Nome Nome da nova entrada de dados. Este campo é obrigatório.
    Descrição Descrição da entrada de dados.
    Executar nos(as) Opção para determinar se deve ser usado um cluster específico MID Server ou MID Server.

    Este recurso é compatível com a aplicação Análise de logs de integridade, versão 26.0.17 - fevereiro de 2023 e posterior, disponível na ServiceNow Store.

    MID

    (Somente quando o campo Executar em estiver definido como MID Server específico)

    MID Server para o qual os dados de log de Apache Kafka são extraídos.
    Nota:
    • Você pode selecionar somente MID Servers que oferecem suporte à autenticação básica. MID Servers que oferecem suporte a mTLS não estão listados.
    • O número máximo padrão de registros de fluxo de entradas de dados para um único MID Server é 10. Você pode modificar este número nas propriedades do MID Server.
    • Se a ingestão de log não estiver habilitada para o MID Serverselecionado, Análise de logs de integridade a habilitará automaticamente.
    Este campo é obrigatório.
    Cluster do MID Server

    (Somente quando o campo Executar em estiver definido como Cluster específico MID Server )

    O cluster MID Server para o qual os dados de log são extraídos.

    A entrada de dados é executada em um único MID Server no cluster até que MID Server falhe. O sistema move todas as tarefas de entrada de dados para o próximo MID Server disponível no cluster de acordo com a ordem configurada.

    Este recurso é compatível com a aplicação Análise de logs de integridade, versão 26.0.17 - fevereiro de 2023 e posterior, disponível na ServiceNow Store.

    Nota:
    • Análise de logs de integridade oferece suporte somente a clusters de failover MID Server. Nesses clusters, vários MID Servers são agrupados para proteção de failover. Ao selecionar um cluster no formulário de entrada de dados, a lista MID Server Clusters exibe somente clusters de failover.
    • O cluster MID Server deve incluir somente MID Servers que oferecem suporte à autenticação básica. O mTLS não é compatível com a ingestão de log.
    • A ingestão de log deve ser habilitada para cada MID Server no cluster. Se a ingestão de log não estiver habilitada para o MID Serverativo, Análise de logs de integridade a habilitará automaticamente.
    • O número máximo padrão de registros de fluxo de entradas de dados para um único MID Server é 10. Um cluster será aprovado na validação de capacidade se contiver pelo menos um MID Server com menos de 10 entradas de dados em execução, mesmo quando esse MID Server estiver inativo.
    Para obter mais informações sobre MID Server clusters, consulte Configuração de um cluster do MID Server.

    Este campo é obrigatório.

    Serviço de aplicações O serviço de aplicativos ao qual os dados de log serão vinculados.
    Nota:
    Se não existir nenhum serviço de aplicações relevante, Criar um Serviço de aplicações e adicione ICs a ele. Defina o status do novo serviço de aplicativos como Operacional.
    Este campo é obrigatório.
    Os seguintes campos mostram informações somente leitura:
    Campo Descrição
    Status Status da entrada de dados.
    Transporte Protocolo usado para transmitir os dados de log.

    Esta entrada de dados usa Apache Kafka para transmitir dados de log para sua instância.

    Contagem de fontes o número de origens de log que esta entrada de dados criou.
    Desativado desde A hora em que a entrada de dados parou ou falhou.
    Hora do último log A hora em que o último log foi transmitido na entrada de dados.
    Mensagem de erro O erro de fluxo.

    Este campo é preenchido automaticamente. Ele é exibido somente quando ocorre um erro de fluxo.

    Tabela 1. Guia Configurações de consulta
    Campo Descrição Exemplo
    De Data e hora de início da leitura dos dados. Dados anteriores a esta data e hora não são lidos.
    Nota:
    Definir este valor como uma data passada pode exigir que o sistema leia grandes quantidades de dados, causando congestão.

    Este campo é obrigatório.

    Agora - 1 semana
    Tabela 2. Guia Transporte
    Campo Descrição Exemplo
    Nomes de nó do Kafka Uma lista separada por vírgulas no formato HOST:PORTA,HOST:PORTA. A lista não precisa incluir todos os Apache Kafka servidores de cluster. 123.4.5.6:9092,123.3.4.5:9093
    Tópicos Uma lista separada por vírgulas de tópicos que a entrada de dados deve assinar.

    Este campo é obrigatório.

    PrimeiroTópico,SegundoTópico,TerceiroTópico
    Credenciais do Kafka Referência às Apache Kafka credenciais.

    Você pode exibir o formulário de credenciais SSL do Kafka selecionando o ícone de informações (ícone de informações) e selecionando Abrir registro. O formulário permite que você escolha o protocolo de segurança usado para autenticação com Apache Kafka entre as seguintes opções:

    • SSL — Canal de SSL.
    • SASL_SSL — SASL autenticado, canal SSL.
    • SASL_PLAINTEXT — Canal não criptografado autenticado por SASL.

    Para obter uma descrição dos campos no formulário de credenciais SSL do Kafka, consulte Campos de credenciais SSL do Kafka.

    Nenhum
    ID do grupo O nome do Apache Kafka Grupo de consumidores. logs

    Configuração avançada

    Tabela 3. Formulário de configuração avançada
    Campo Descrição Valor-padrão
    Tempo limite O tempo, em milissegundos, gasto aguardando na pesquisa se os dados não estiverem disponíveis nos tópicos. 500
    Tempo limite de descoberta do nó O tempo, em milissegundos, antes que a descoberta de nó expire. 30
    Fuso horário padrão O fuso horário padrão se o log não incluir informações de fuso horário. GMT
    Proporção de soltura de subamostra O número de eventos a serem agrupados em lote, dos quais um será descartado. Esta configuração é usada para reduzir o número de eventos obtidos. -1
    Taxa de recebimento de subamostra O número de eventos a serem agrupados em lote, dos quais todos, exceto um, serão descartados. Esta configuração é usada para diminuir o número de eventos recebidos. -1
    Tamanho máximo em bytes O tamanho máximo, em bytes, de eventos. 32766
    Codificação de caracteres A codificação de caracteres para esta entrada de dados. UTF-8
    Descartar se a fila estiver cheia Opção para selecionar o descarte de logs se houver uma carga no MID Server. Falso