Beginnend mit Tokyo Release ist ein neuer, optimierter Datenerfasser verfügbar. Die Protokolldetails für diesen Datensammler unterscheiden sich von den Protokolldetails des klassischen Datensammlers.
Sammlungsübersicht
Die Datenerfassungsaufgabe umfasst das Ausführen einer SQL-Abfrage für jede Indikatorquelle, die den Datensammler verwendet. Die Abfrage wird für jede Sammlungszeit vom Startdatum bis zum Enddatum wiederholt. Anschließend werden Abfragen für die nächste Indikatorquelle ausgeführt. Jeder Schritt zum Ausführen der Abfrage ist im Datensammlungsprotokoll dokumentiert. Abbildung : 1. Allgemeine Ansicht des Datensammlungsauftrags
Sammlungsauftrag starten und schließen
Befolgen Sie den Datenerfassungsprozess, wie in Protokollnachrichten angezeigt. Die Protokollnachrichten in jedem Subprozess wurden in ihre eigenen Tabellen getrennt.
Hinweis:
Dieses Protokoll gilt für den optimierten HSQL-Datensammler, wie unter beschrieben Datenerfassung wird optimiert. Wenn com.snc.pa.dc.hsqlIst „falsch“, verwenden Sie den klassischen Datenerfasser. Andernfalls verwenden Sie den optimierten Datenerfasser. Weitere Informationen zu diesem Protokoll finden Sie unter Protokolldetails für klassischen Datenerfasser.
Schritt des Sammlungsauftrags
Beispiel für den resultierenden Protokolleintrag
Zeigt die Domäne des Sammlungsauftrags „Als Benutzer ausführen“ an.
Benutzer <Administrator> gehört zu Domäne „Global“
Sammlung wird gestartet. Der Auftragsstart gibt an, ob Punktzahlen, Textverzeichnis oder beides erfasst werden soll. Nachrichten geben auch an, dass der optimierte HSQL-Datensammler verwendet wird und ob Debug-Protokolle aktiviert sind. Nur Kundenservice und Support Kann Debug-Protokolle aktivieren.
Sammlung von Punktzahlen und Textindex wird gestartet. Wert von Eigenschaften im System –
HSQL-Datensammler wird verwendet: Wahr
Debug-Protokolle aktiviert: Wahr
Knotenname: Vsr007
Zeigt die Domänen an, für die Punktzahlen gesammelt werden. Zeigt auch andere relevante Details zu den Domänen an.
Erfassung für 20191103 für Indikatorquellen-Incidents.Offen
Rufen Sie die folgenden Felder ab:
Die eindeutigen Felder der Aufgliederungsquellen (normalerweise sys_ID)
Die Indikatorfelder, die in Aufgliederungszuordnungen verwendet werden
Die Tabellenfelder, die in geskripteten Aufgliederungszuordnungen verwendet werden
Die in Text Analytics verwendeten Indikatorquellenfelder, wenn der Textindex erfasst wird (enthält normalerweise „short_description“)
„short_description,sys_id, opened_at, assignment_group, description, priority, category" wird von "incident“ abgerufen
Generieren von SQL basierend auf den Bedingungen, die in der Indikatorquelle angegeben sind.
Hinweis:
Wenn die Indikatorquelle „Heute“ in einer der Bedingungen angibt, wird „Heute“ relativ zu dem Zeitraum betrachtet, für den die Datenerfassungsaufgabe ausgeführt wird. Beispielsweise enthält die Indikatorquelle Incidents.New die Bedingung [Geöffnet][am][Heute]. Wenn die Tage so definiert sind, dass sie um 07:00:00 beginnen, und Daten für 2019-10-28 gesammelt werden, erzeugt der Auftrag das SQL-Skript auf der rechten Seite.
SELECT task0.`sys_id` FROM task task0 WHERE task0.`sys_class_name` = 'incident' AND (task0.`opened_at` >= '2019-10-28 07:00:00' AND task0.`opened_at` <= '2019-10-29 06:59:59')
Zeigen Sie die Anzahl der von SQL abgerufenen Datensätze an.
150 Zeilen aus Indikatorquelle „Incidents.Offen“ abgerufen (Faktentabelle: Incident)
Löscht vorherige Ergebnisse.
Vorherige Ergebnisse 1 für Indikator gelöscht: Identitätswechsel
Zuordnungs-/Reduzierungsfunktion ausführen, um Indikatorpunktzahlen zu berechnen.
Wenn die Textindizierung aktiv ist und für die Indikatorquelle konfiguriert wurde, speichert der Datensammler den resultierenden Textindex.
Textindex für Indikatorquelle Incidents.Open wird gespeichert
Von Textindex verwendete Bytes: 41,984 für: Incidents.Open
Objekte werden in die HSQL-Datenbank entladen, wenn einer der folgenden Schwellenwerte überschritten wird:
Anzahl der Punktzahlen
Anzahl der Snapshots
Gesamtanzahl der eindeutigen Werte
Protokollieren, wie oft das Entlastungslimit für jede Objektkategorie überschritten wurde. Jedes Mal, wenn das Entlastungslimit in einer Kategorie überschritten wird, werden alle Objekte in den temporären HSQL-Datenbankspeicher verschoben. Am Ende der Zuordnungs-/Reduzierungsfunktion werden alle verbleibenden Datensätze entladen. Die Anzahl der verbleibenden Datensätze ist normalerweise kleiner als der Schwellenwert, und diese Entladung wird ebenfalls protokolliert.
Anzahl der Überschreitungen des Entlastungsgrenzwerts für Punktzahlen: 275
Anzahl der Überschreitungen des Entlastungsgrenzwerts für Snapshots: 0
Anzahl der Überschreitungen des Entlastungsgrenzwerts für eindeutige Werte: 0
Batch von Datensätzen entladen, die den Schwellenwert nicht überschritten haben: 1
Beginnen Sie mit dem Speichern neu gesammelter Ergebnisse für die Indikatorquelle.
Gesammelte Ergebnisse für Indikatorquelle „Incidents.gelöst“ werden gespeichert
Jeder Indikator mit einem NULL-Wert wird protokolliert.
„Wert, wenn null“ gespeichert: 0,0 als Punktzahl für Indikator: Anzahl der durch Wissen vermiedenen Incidents
Speichern der Ergebnisse abschließen.
Gespeicherte gesammelte Ergebnisse
Festlegen für welche Indikatoren der Datensammler keine Punktzahlen sammelt.
Nicht sammeln für Indikator: Summe des Alters der offenen Incidents mit ausgeschlossener Aufgliederung: Zuweisungsgruppe
Beenden der Datensammlung für diese Indikatorquelle für diesen Zeitraum.
Sammlung für 20200519 für Indikatorquellen-Incidents.Offen abgeschlossen
Zeigen Sie die durchschnittliche Zeit an, die für einen Datensatz aufgewendet wurde, um zusätzliche Bedingungen zu verarbeiten, die für Indikatoren festgelegt wurden.
Durchschnittliche Zeit, die für die Verarbeitung zusätzlicher Indikatorbedingungen für jeden Datensatz benötigt wird: 138 ms
Schritte der Zuordnungs-/Reduzierungsfunktion
Schritt des Sammlungsauftrags
Beispiel für den resultierenden Protokolleintrag
Die Zuordnungs-/Reduzierungsfunktion wird ausgeführt.
Zuordnungs-/Reduzierungsfunktion wird für Indikatorquelle Incidents.Open angewendet ...
Warnung, wenn die Textindizierung für den Auftrag aktiv ist, aber aufgrund einer fehlenden oder ungültigen Textindikatorkonfiguration nicht ausgeführt werden kann.
Textindexsammlung wird übersprungen, da eine Textindexkonfiguration fehl oder ungültig ist
Verarbeiten Sie jeden Datensatz in der Indikatorquelle, um Punktzahlen zu berechnen. Protokollnachrichten verfolgen die laufende Gesamtzahl der verarbeiteten Datensätze.
Jedes Mal, wenn die Anzahl der resultierenden Punktzahlen oder Snapshots einen Grenzwert überschreitet, werden alle Objekte in die HSQL-Datenbank entladen. Das Entladen wird protokolliert, nachdem die Zuordnungs-/Reduzierungsfunktion abgeschlossen ist.
Die Verarbeitung für jeden Datensatz umfasst:
Führen Sie Skripts aus, oder bewerten Sie sie.
Indikatorbedingungen validieren
Indikatorwert berechnen
Für jede Aufgliederung:
Berechnen der Aufgliederungs-Punktzahl oder Ausführen des Aufgliederungs-Skripts.
Ermitteln aller eindeutigen Aufgliederungswerte.
Erstellen oder aktualisieren des Array für Punktzahlen oder Snapshots. Das Array ist: Indikator, Aufgliederung 1, Artefakt 1, Aufgliederung 2, Artefakt 2, Domäne, Wert, Array von [sys_ID]
15,8% (3) Datensätze verarbeitet
31,6% (6) Datensätze verarbeitet
47,4% (9) Datensätze verarbeitet
63,2% (12) Datensätze verarbeitet
78,9% (15) Datensätze verarbeitet
94,7% (18) Datensätze verarbeitet
Verarbeitet 100% (4) Datensätze, Größe des Ergebnisobjekts: 20 MB
Die Zuordnungs-/Reduzierungsfunktion wird abgeschlossen.
