Stream Connect für Apache Kafka Um Echtzeit-Transparenz über den Zustand ihres Geschäftsbetriebs zu erhalten, nutzen und verarbeiten Unternehmen große Datenmengen aus zentralen Geschäftssystemen. Aus diesem Grund haben viele Unternehmen auf Apache Kafka umgestellt – eine quelloffene Event-Plattform für hochperformante Datenpipelines, Streaming-Analytics, Datenintegration und missionskritische Anwendungen. Für Kunden, die mit ServiceNow ihr digitales Business unterstützen, ist es äußerst wichtig, Kafka-Umgebungen mit ServiceNow-Instanzen zu verbinden. So entstehen verknüpfte End-to-End-Workflows, die Systeme und Daten umspannen. An genau diesem Punkt setzt Stream Connect für Apache Kafka an. Kafka Event-Streaming vereinfachen und skalieren Stream Connect für Apache Kafka verknüpft Ihre Kafka-Umgebung mit Ihrer ServiceNow-Instanz. Durch diese Verbindung wird es möglich, Daten zwischen Ihrer Instanz und externen Systemen zu streamen. Stream Connect nutzt den Messagingdienst Hermes, um große Event Streaming-Datenmengen (Nachrichten und Themen) aus Apache Kafka zu synchronisieren und in ServiceNow einzuspeisen. Stream Connect ist Teil der Automation Engine – einer nativen Low Code-Lösung für die Verbindung beliebiger Elemente mit ServiceNow, deren Automatisierung und Orchestrierung. Wichtigste Funktionen: • Entwicklung von Dateneinspeisungsverfahren mit Apache Kafka in einer vertrauten, nativen Umgebung innerhalb von Flow Designer • Nachrichten konsumieren und verarbeiten; Daten umwandeln und mit dem Flow-Auslöser für Kafka-Nachrichten in ServiceNow-Tabellen einfügen • Nachrichten mit Drag-and-Drop-Datenpillen pushen und Daten zu einem Thema mit dem Low Code Flow Action Kafka Producer-Schritt erstellen Das bekommen Sie: • Kafka Producer-Schritt in Flow Designer • Kafka Message-Auslöser in Flow Designer • ProducerV2 API • ETL-Consumer • Consumer für Transformationszuordnung • Skript-Consumer Ihr Mehrwert: • Skalierbares Veröffentlichen und Verarbeiten von Kafka- Events mit niedriger Latenz • Einrichten von Flows, die Kafka-Events produzieren und nutzen • Import von Daten aus der Kafka-Umgebung und Verarbeitung mit der bestehenden Robust Transform Engine (RTE) oder konfigurierten Transformationszuordnungen • Konfigurieren eines Consumers, der mit Ihren Skripten Daten aus einem Kafka-Thema verarbeitet • Überwachung der Consumer-Leistung mit ausführlicher Berichterstellung zu Statistiken und Leistungsmetriken Mehr erfahren: Dokumentation DATENBLATT © 2023 ServiceNow, Inc. Alle Rechte vorbehalten. ServiceNow, das ServiceNow-Logo, Now, Now Platform und andere ServiceNow-Marken sind Marken und/oder eingetragene Marken von ServiceNow, Inc. in den USA und/oder anderen Ländern. Bei anderen Firmen- und Produktnamen sowie Logos kann es sich um Marken der entsprechenden Unternehmen handeln, mit denen sie verbunden sind. SN-DataSheet-Name-01012023 servicenow.com/de Verbinden Sie Ihre Kafka-Umgebung mit den Workflows von ServiceNow Flow-Auslöser für Kafka-Nachrichten Mit Flow Designer können Kafka-Nachrichten in einer Low Code-Umgebung genutzt werden. Der Flow wird von einem Flow-Auslöser eingeleitet, sobald Nachrichten zum Thema vorhanden sind. Mit dem Flow-Auslöser verarbeiten Sie Kafka-Nachrichten, fügen die Daten in ServiceNow-Tabellen ein oder nutzen Spokes für die Kommunikation mit externen Umgebungen. Themen sind mit einem Themen-Namespace verbunden, das genutzt werden kann, um Themen logisch zu organisieren. Gruppieren Sie beispielsweise Themen anhand des Ursprungsclusters in Kafka. Mit Namespaces konfigurieren Sie, welche Domänen auf welche Themen auf einer domänenseparierten Instanz zugreifen. Kafka-Abonnementstatistiken Rufen Sie die wichtigsten Metriken auf, um Aufschluss über die Leistung des Consumers zu erhalten, der ein Thema liest. Erfahren Sie beispielsweise, wie viele Nachrichten an das Thema geschrieben werden, wie viele Datensätze noch zu verarbeiten sind und wie viele Nachrichten in unterschiedlichen Zeiträumen konsumiert wurden. Produzieren und konsumieren Sie Kafka-Events mit Stream Connect für Apache Kafka schnell, skalierbar und nativ auf der ServiceNow-Plattform. Kafka-Producer Veröffentlichen Sie Ereignisse aus ServiceNow in einer Kafka-Umgebung. Stream Connect nutzt zwei Producer: den Schritt „Kafka Producer“ in Flow Designer und die API „ProducerV2“. Namespace- und Themenmanagement DATENBLATT