Configurer un consommateur de carte de transformation

  • Rversion finale: Xanadu
  • Mis à jour 1 août 2024
  • 2 minutes de lecture
  • Importez et traitez les données de votre environnement Kafka à l’aide de vos configurations de carte de transformation existantes.

    Avant de commencer

    Pourquoi et quand exécuter cette tâche

    Pour configurer un consommateur, vous devez créer deux enregistrements.
    1. Enregistrement consommateur, qui spécifie la manière d’importer et de traiter les données.
    2. Un enregistrement pour le flux Kafka, qui définit le flux de données vers votre consommateur.
    Cette tâche couvre la création du consommateur. Pour obtenir des instructions sur la création d’un flux Kafka, consultez Créer un flux Kafka.

    Procédure

    1. Accédez à la Tout > Centre d'intégration > Consommateurs > Consommateur de carte de transformation.
    2. Sélectionnez Nouveau.
    3. Renseignez les champs du formulaire.
      Tableau 1. Consommateur de carte de transformation Kafka
      Champ Description
      Nom Nom du consommateur de carte de transformation.
      Carte de transformation Nom de la carte de transformation à utiliser pour traiter les données.
      Garantie de livraison En cas de défaillance d’un nœud, option permettant de spécifier la garantie de remise pour les messages entrants. Sélectionnez l'une des options suivantes :
      • Pas de pertes, mais des doublons : tous les messages sont remis au moins une fois. Certains messages peuvent être remis plus d’une fois.
      • Une fois ou pas du tout : un message n’est pas délivré plus d’une fois. Certains messages peuvent ne pas être livrés du tout.
      Format de sérialisation Le format de sérialisation du message. Sélectionnez l'une des options suivantes :
      • Texte brut : sélectionnez cette option pour tous les messages en texte brut. Il s’agit du format par défaut.
      • Codé : sélectionnez cette option pour les messages au Apache format Avro. La conversion de messages en texte brut au format Avro nécessite un schéma. Sélectionnez le registre de schémas dans le champ Registre de schémas . Pour en savoir plus sur les schémas, reportez-vous à la section Gestion des schémas dans Connexion au flux.
      Mappage de colonnes Option permettant de spécifier si la clé JSON du message mappe les données au nom ou à l’étiquette de la colonne dans la table de jeux d’importation. Sélectionnez l'une des options suivantes :
      • Étiquette
      • Nom de colonne
      Synchroniser les insertions Option permettant de garantir qu’il n’existe qu’un seul enregistrement avec des valeurs de champ de fusion uniques en synchronisant les insertions d’enregistrement.
      Application Périmètre de l’application pour le consommateur de carte de transformation.
      Registre de schémas
      Registre pour le schéma sélectionné. Sélectionnez l'une des options suivantes :
      • Registre de schémas autonome
      • Registre de schémas Confluent

      Ce champ s’affiche uniquement lorsque le format de sérialisation est défini sur Codé.

      Pour le registre de schémas Confluent, si l’ID de schéma du message reçu ne figure pas dans la table de schéma, le système importe le schéma dynamiquement, à l’aide de la connexion REST configurée.

    4. Sélectionnez Enregistrer.

    Que faire ensuite

    Créer un flux Kafka pour ce consommateur. Une fois le flux activé, vous pouvez commencer à recevoir des messages de votre environnement Kafka.