Réplication des messages de Connexion au flux
Répliquer les données entre votre environnement et ServiceNow.Apache Kafka
Avec Réplication de messages de Stream Connect, vous pouvez configurer et gérer les réplications de messages directement à partir de votre ServiceNow instance.
Stream Connect Message Replication utilise un Serveur MID pour exécuter les réplications de données, de sorte que vous n’avez pas besoin de configurer ou d’héberger des services de réplication supplémentaires. Elle simplifie également la configuration de la réplication de messages en générant automatiquement les certificats requis.
Activation d’un Serveur MID réplication de données
Stream Connect Message Replication utilise une Serveur MID extension avec un réplicateur pour répliquer des données vers et depuis votre Kafka local. Pour obtenir des instructions sur la configuration de , Serveur MIDreportez-vous à la section Configuring MID Servers.
- Producteur : 4000–4050
- Consommateur 1 : 4100 à 4150
- Consommateur 2 : 4 200 à 4 250
Configuration des connexions et des informations d’identification pour Kafka
- Créer des informations d’identification Kafka SSL avec les données d’authentification requises pour la connexion.
- Configurer une connexion Kafka pour vous connecter à votre environnement Kafka.
- Create a Connection & Credential aliaspour associer les informations de connexion et les données d’identification. L’alias de connexion et d’informations d’identification doit avoir un type de connexionKafka et doit être accessible à partir du Serveur MID.
Ces étapes concernent la configuration d’un alias de connexion et d’informations d’identification pour la connexion à Kafka. Vous n’avez pas besoin de configurer de connexions ou d’informations d’identification pour vous connecter à Hermes, car le Serveur MID gère automatiquement la création du magasin de clés, du magasin de confiance et des certificats requis.
Création de réplications de messages et de rubriques
La réplication de messages nécessite des enregistrements de réplication de messages et des enregistrements de réplication de rubriques Kafka.
Un enregistrement de réplication de message représente une seule grappe Kafka. Par exemple, si vous avez deux clusters Kafka, vous devez créer deux enregistrements Message Replication différents, un pour chaque cluster. Un enregistrement de réplication de message est l’enregistrement parent de toutes les rubriques répliquées vers ou à partir de cette grappe. Les enregistrements de réplication de messages sont stockés dans la table Réplications de messages [sys_sc_message_replication].
Un enregistrement de réplication de rubrique Kafka spécifie la réplication à partir d’une rubrique source unique vers une rubrique de destination unique. Vous ne pouvez pas répliquer une seule rubrique source vers plusieurs destinations. Vous ne pouvez répliquer qu’une seule fois vers chaque destination. Les enregistrements de réplication de rubrique Kafka sont stockés dans la table Réplications de rubriques Kafka [sys_kafka_topic_replication].
Pour obtenir un guide détaillé sur la création d’enregistrements de réplication de messages et de rubriques, reportez-vous à la section Créer des réplications de messages et de rubriques Kafka dans Stream Connect.
Affichage des statistiques de réplication des messages
Une fois les réplications en cours d’exécution, le système crée un enregistrement de mesures pour chaque réplication de rubrique active toutes les 60 secondes. Les enregistrements de mesures fournissent des informations sur les réplications de rubriques, notamment le nombre de messages, qui indique le nombre de messages répliqués dans chaque intervalle de collecte.
Vous pouvez afficher les enregistrements de mesures dans la table Statistiques de réplication de message [sys_sc_channel_replication_metric]. Vous pouvez également afficher les enregistrements de mesures pour une rubrique particulière en vérifiant les statistiques de réplication de message sur son enregistrement de réplication de rubrique Kafka.
Pour obtenir la liste des mesures de réplication de messages et de leurs descriptions, reportez-vous à la section Affichage des statistiques de réplication des messages de Connexion au flux.
Module d'extension requis
La réplication de messages Stream Connect nécessite le module d’extension Réplication de connexion de ServiceNow flux - Kafka [com.glide.hub.stream_connect.replication.kafka].
Rôles
Le rôle message_replication_admin peut créer, modifier et supprimer des enregistrements dans toutes les tables de réplication de messages, y compris les tables de connexion et d’informations d’identification, ainsi que les tables de réplication de messages et de rubriques.
Le rôle message_replication_user peut afficher les enregistrements dans les tables de réplication de message.
Connexion
La plupart des problèmes sont consignés dans le Serveur MID journal. Une journalisation de débogage supplémentaire peut être activée en définissant la glide.stream_connect.message_replication.debug Serveur MID propriété sur vrai.