Protokolldetails für optimierten Datenerfasser

  • Freigeben Version: Yokohama
  • Aktualisiert 30. Januar 2025
  • 5 Minuten Lesedauer
  • Beginnend mit TokyoRelease ist ein neuer, optimierter Datenerfasser verfügbar. Die Protokolldetails für diesen Datensammler unterscheiden sich von den Protokolldetails des klassischen Datensammlers.

    Sammlungsübersicht

    Der Datensammlungsauftrag umfasst die Ausführung einer SQL-Abfrage für jede Indikatorquelle, die den Datenerfasser verwendet. Die Abfrage wird für jede Sammlungszeit vom Startdatum bis zum Enddatum wiederholt. Dann werden Abfragen für die nächste Indikatorquelle ausgeführt. Jeder Schritt der Ausführung einer Abfrage ist im Datensammlungsauftragsprotokoll dokumentiert.
    Abbildung : 1. Allgemeine Ansicht des Datensammlungsauftrags
    Flow-Diagramm, das die Beziehung zwischen den verschiedenen Ebenen von Prozessen in einem Datensammlungsauftrag zeigt

    Erfassungsauftrag wird gestartet und abgeschlossen

    Befolgen Sie den Datenerfassungsprozess, wie in Protokollnachrichten angezeigt. Die Protokollnachrichten in jedem Subprozess wurden in ihre eigenen Tabellen unterteilt.

    Hinweis:
    Dieses Protokoll gilt für den optimierten HSQL-Datensammler, wie in beschrieben Datensammlung wird optimiert. Wenn com.snc.pa.dc.hsqlIst „falsch“, verwenden Sie den klassischen Datenerfasser. Andernfalls verwenden Sie den optimierten Datenerfasser. Weitere Informationen zu diesem Protokoll finden Sie unter Protokolldetails für klassischen Datenerfasser.
    Erfassungsauftragsschritt Beispiel für den resultierenden Protokolleintrag
    Zeigt die Domäne des Erfassungsauftrags an, der als Anwender ausgeführt wird. Anwender-<admin> gehört zur globalen Domäne
    Sammlung startet. Auftragsstart gibt an, ob Punktzahlen, Textindex oder beides erfasst werden. Nachrichten geben auch an, dass der optimierte HSQL-Datensammler verwendet wird und ob Debug-Protokolle aktiviert sind. Nur Kundenservice und SupportKann Debug-Protokolle aktivieren. Sammlung von Punktzahlen und Textindex wird gestartet. Wert von Eigenschaften im System –

    Verwendung des HSQL-Datensammlers: Wahr

    Debug-Protokolle aktiviert: Wahr

    Knotenname: Vsr007

    Zeigt die Domänen an, für die Punktzahlen gesammelt werden. Zeigt auch andere relevante Details zu den Domänen an. DomainConfig: Domänenkonfigurationssammlungsprotokolle testen – 3d359877b7700010686e664de11a97c, Typ: Bedingungen, RollUpType: Roll_up_Children, collectAggregate? Ja, collectChildren?: Ja, AggregateDomain: Name: 3d359877b7000106886e664de11a97c – SysID: D1659c77b70001068664de11a91e, Domänen: Standard,MSP,ACME,Cisco,Initech,Oceanic Airlines
    Listet Indikatorquellen auf, für die der Auftrag Daten sammelt, einschließlich ihrer eindeutigen IDs. Zu erfassende Indikatorquellen: Incidents.Neu: B54f2c23d7030100b96d45a3ce61032f, Incidents.Offen: B5cf2c23d7030100b96d45a3ce6103cc, Incidents.Geschlossen: 2ac8dd31ff2302001e68ffffffffffffffffffffffffffff3d, Incidents.gelöst: 4c2070b207c23d7c23d701001001088
    Listet jeden Indikator auf, der dem Auftrag zugeordnet ist, und die Indikatoreigenschaften, die sich auf die Datensammlung beziehen:
    • Werden Datensätze in erfasst Snapshot?
    • Sind Aufgliederungen ausgeschlossen?
    • Werden die Sammlungszeiträume in der Indikatorquelle überschrieben?
    • Wird die Aufgliederungsmatrix erfasst?
    • Werden Aufgliederungskombinationen ausgeschlossen, wenn die Aufgliederungsmatrix erfasst wird?
    Jobindikator: Anzahl der offenen Incidents – de537dc3d7131100b96d45a3ce610305 Auftragsindikatoreigenschaften: CollectIndicator?: Ja, BreakdownCollectionType: WITH_exclude Excluded Aufgliederungen: Zuweisungsgruppe, Statusindikatoreigenschaften => CollectRecords: Ja, überschriebene Sammlungszeiträume: Nein, Scripted?: Nein, Aufgliederungskombinationen?: Ja, Ausgeschlossene Aufgliederungskombinationen?: Ja, keine Kombination ist ausgeschlossen.
    Iterieren Sie Schritte für jede Indikatorquelle Siehe Tabelle Schritte, die für jede Indikatorquelle iteriert werden .
    Zeigen Sie Statistiken für den Datensammlungsauftrag an Statistiken: Fügt 184 ein, aktualisiert 0, löscht 92, Fehler 0, Warnungen 0
    Auftrag abschließen Datensammlung beendet

    Schritte, die für jede Indikatorquelle iteriert werden

    Erfassungsauftragsschritt Beispiel für den resultierenden Protokolleintrag
    Rufen Sie die Indikatorquelle ab. Incidents der Indikatorquelle.Offen
    Wiederholen Sie, dass der optimierte HSQL-Datensammler verwendet wird.
    Listet Indikatoren auf, die zusätzliche Bedingungen haben, die über die von der Indikatorquelle geerbten Bedingungen hinausgehen. Indikator: Administratoranmeldungen – [sys_ID des Indikators], zusätzliche Bedingungen: ref_isc_login_event.login_type=login_admin, ist „Datensätze erfassen“: „Wahr“
    Iterieren Sie Schritte für jeden Sammlungszeitraum. Siehe Tabelle Schritte, die für jeden Sammlungszeitraum iteriert werden
    Nächste Indikatorquelle abrufen. Incidents der Indikatorquelle.Neu

    Schritte, die für jeden Sammlungszeitraum iteriert werden

    Erfassungsauftragsschritt Beispiel für den resultierenden Protokolleintrag
    Startdatum des Sammlungsauftrags. Erfassung für 20191103 für Indikatorquellen-Incidents.Offen
    Rufen Sie die folgenden Felder ab:
    • Die eindeutigen Felder der Aufgliederungsquellen (normalerweise sys_ID)
    • Die Indikatorfelder, die in Aufgliederungszuordnungen verwendet werden
    • Die Tabellenfelder, die in geskripteten Aufgliederungszuordnungen verwendet werden
    • Die Indikatorquellfelder, die in Text Analytics verwendet werden, wenn der Textindex erfasst wird (enthält normalerweise „short_description“)
    „Short_description,sys_ID, opened_at, Assignation_Group, description, Priority“ wird abgerufen Kategorie“ aus „Incident“
    Generieren Sie SQL basierend auf den Bedingungen, die in der Indikatorquelle angegeben sind.
    Hinweis:
    Wenn die Indikatorquelle „heute“ in einer der Bedingungen angibt, wird „heute“ relativ zum Zeitraum berücksichtigt, für den der Datensammlungsauftrag ausgeführt wird. Beispielsweise enthält die Indikatorquelle „Incidents.Neu“ die Bedingung [Geöffnet][am][heute] . Mit Tagen, die definiert sind, um 07:00 Uhr zu beginnen, und wenn Daten für den Zeitraum 2019-10-28 erfasst werden, erstellt der Auftrag das SQL-Skript auf der rechten Seite.
    WÄHLEN SIE Aufgabe 0.„sys_ID“ AUS Aufgabe 0 AUS, WOBEI Aufgabe 0.„sys_class_Name“ = „Incident“ UND (Aufgabe 0.„opened_at“ >= „2019-10-28 07:00:00“ UND Aufgabe 0.„opened_at“ <= „2019-10-29 06:59:59“)
    Zeigen Sie die Anzahl der von der SQL abgerufenen Datensätze an. 150 Zeilen aus Indikatorquelle „Incidents.Offen“ abgerufen (Faktentabelle: Incident)
    Löscht vorherige Ergebnisse. Vorherige Ergebnisse 1 für Indikator gelöscht: Identitätswechsel
    Führen Sie die Funktion „Zuordnen/Reduzieren“ aus, um Indikatorpunktzahlen zu berechnen. Siehe Tabelle Schritte der Zuordnungs-/Reduzierungsfunktion
    Wenn die Textindizierung aktiv ist und für die Indikatorquelle konfiguriert wurde, speichert der Datenerfasser den resultierenden Textindex. Textindex für Indikatorquelle „Incidents.Offen“ wird gespeichert
    Vom Textindex verwendete Byte: 41.984 für: Incidents.Offen
    Objekte werden in die HSQL-Datenbank entladen, wenn einer der folgenden Schwellenwerte überschritten wird:
    • Anzahl der Punktzahlen
    • Anzahl der Snapshots
    • Gesamtzahl der eindeutigen Werte

    Protokollieren, wie oft das Entlastungslimit für jede Objektkategorie überschritten wurde. Jedes Mal, wenn das Entlastungslimit in einer Kategorie überschritten wird, werden alle Objekte in den temporären HSQL-Datenbankspeicher verschoben. Am Ende der Zuordnungs-/Reduzierungsfunktion werden alle verbleibenden Datensätze entladen. Die Anzahl der verbleibenden Datensätze ist normalerweise kleiner als der Schwellenwert, und diese Entladung wird ebenfalls protokolliert.

    Anzahl der Überschreitungen des Entlastungsgrenzwerts für Punktzahlen: 275

    Anzahl der Überschreitungen des Entlastungsgrenzwerts für Snapshots: 0

    Anzahl der Überschreitungen des Entlastungsgrenzwerts für eindeutige Werte: 0

    Batch von Datensätzen entladen, die den Schwellenwert nicht überschritten haben: 1

    Beginnen Sie mit dem Speichern neu erfasster Ergebnisse für die Indikatorquelle. Gesammelte Ergebnisse für Indikatorquelle „Incidents.gelöst“ werden gespeichert
    Jeder Indikator mit einem Nullwert wird protokolliert. Gespeicherter Wert, wenn null: 0,0 als Punktzahl für Indikator: Anzahl der Incidents, die durch Wissen abgewendet wurden
    Speichern der Ergebnisse abschließen. Gespeicherte gesammelte Ergebnisse
    Geben Sie an, für welche Indikatoren der Datenerfasser keine Punktzahlen erfasst. Nicht erfasst für Indikator: Summiertes Alter der offenen Incidents mit ausgeschlossener Aufgliederung: Zuweisungsgruppe
    Schließen Sie die Erfassung der Daten für diese Indikatorquelle für diesen Zeitraum ab. Sammlung für 20200519 für Indikatorquellen-Incidents.Offen abgeschlossen
    Zeigen Sie die durchschnittliche Zeit an, die für einen Datensatz aufgewendet wurde, um zusätzliche Bedingungen zu verarbeiten, die für Indikatoren festgelegt wurden. Durchschnittliche Zeit für die Verarbeitung zusätzlicher Indikatorbedingungen für jeden Datensatz: 138 ms

    Schritte der Zuordnungs-/Reduzierungsfunktion

    Erfassungsauftragsschritt Beispiel für den resultierenden Protokolleintrag
    Die Zuordnungs-/Reduzierungsfunktion wird ausgeführt. Zuordnungs-/Reduzierungsfunktion für Indikatorquelle „Incidents.Offen“ wird angewendet
    Warnung, wenn die Textindizierung für den Auftrag aktiv ist, aber aufgrund einer fehlenden oder ungültigen Textindexkonfiguration nicht ausgeführt werden kann. Textindexsammlung wird übersprungen, da eine Textindexkonfiguration fehl oder ungültig ist
    Verarbeiten Sie jeden Datensatz in der Indikatorquelle, um Punktzahlen zu berechnen. Protokollnachrichten verfolgen die laufende Gesamtzahl der verarbeiteten Datensätze.

    Jedes Mal, wenn die Anzahl der resultierenden Punktzahlen oder Snapshots einen Grenzwert überschreitet, werden alle Objekte in die HSQL-Datenbank entladen. Das Entladen wird protokolliert, nachdem die Zuordnungs-/Reduzierungsfunktion abgeschlossen ist.

    Die Verarbeitung für jeden Datensatz umfasst:

    • Führen Sie Skripts aus, oder bewerten Sie sie.
    • Validieren Sie Indikatorbedingungen.
    • Indikatorpunktzahl berechnen.
    • Für jede Aufgliederung:
      1. Berechnen Sie die Aufgliederungspunktzahl, oder führen Sie das Aufgliederungsskript aus.
      2. Ruft alle eindeutigen Aufgliederungswerte ab.
      3. Erstellen oder aktualisieren Sie das Array für Punktzahlen oder Snapshots. Das Array ist: Indikator, Aufgliederung 1, Artefakt 1, Aufgliederung 2, Artefakt 2, Domäne, Wert, Array von [sys_ID]
    15,8% (3) Datensätze verarbeitet
    31,6% (6) Datensätze verarbeitet
    47,4% (9) Datensätze verarbeitet
    63,2% (12) Datensätze verarbeitet
    78,9% (15) Datensätze verarbeitet
    94,7% (18) Datensätze verarbeitet
    Verarbeitete 100 %-Datensätze (4), Ergebnisobjektgröße: 20 MB
    Die Zuordnungs-/Reduzierungsfunktion ist abgeschlossen. Angewendete Zuordnungs-/Reduzierungsfunktion