Anomaliemodelltests

  • Freigeben Version: Washingtondc
  • Aktualisiert 1. Februar 2024
  • 4 Minuten Lesedauer

    • Verwenden Sie Anomaliemodelltests zum Anwenden und Auswerten der Anomalie-Erkennung für einen kleinen Satz von CIs und Metriken unter Verwendung tatsächlicher Metrikdaten. Vergleichen Sie die Testergebnisse mit den erwarteten Ergebnissen, und optimieren Sie dann das Anomalie-Erkennungsmodell, bevor Sie die Anomalie-Erkennung für die getesteten CIs und Metriken in der Produktionsumgebung aktivieren.

    Beispiel: Bevor Sie die Anomalie-Erkennung für Linux-Server aktivieren, können Sie Anomaliemodelltests mit tatsächlichen Metrikdaten verwenden, die für diese Linux-Server gesammelt wurden. Vorhandene Warnungen weisen möglicherweise auf eine Anomalie für eine bestimmte Metrik und ein bestimmtes CI hin. Sie können eine Anomalietestregel erstellen, um die Anomalie-Erkennung für diese CIs und Metriken zu testen und dann zu überprüfen, ob die erwartete Anomalie erkannt wird. Sie können auch die durch das Anomaliemodell berechneten Grenzen überprüfen, um festzustellen, ob sie den erwarteten Grenzen entsprechen. Nach der Feinabstimmung des Testmodells können Sie die Anomalie-Erkennung für Linux-Server aktivieren.

    Anomaliemodelltests unterstützen bis zu 20 Zeitreihen, die 20 Metriktypen für dasselbe CI, denselben Metriktyp für 20 verschiedene CIs oder eine beliebige Kombination dieser Optionen enthalten können.

    Testergebnisse im Explorer für Einblicke anzeigen

    Nach Abschluss einer Testausführung wird eine URL für einen Explorer für Einblicke verfügbar. Die Testergebnisse des Anomaliemodells werden in dieser eingeschränkten Version des Explorers für Einblicke angezeigt. In diesem Explorer für Einblicke werden die Diagramme und Punktzahlen der in der Anomalietestregel angegebenen Metrikserien im Voraus geladen. Sie können diesem Explorer für Einblicke keine CMDB-Gruppen und Anwendungsservices hinzufügen.

    Alle Diagramme im Explorer für Einblicke enthalten in den Diagrammeinstellungen den Abschnitt „Anomalieteststatistiken“. Dieser Abschnitt bezieht sich speziell auf Anomaliemodelltests und bietet die folgenden Optionen:
    • Grenzen anzeigen: Zeigt die berechnete obere und untere Grenze für die Metrik in einem Anomaliemodelltest an, die auf dem Lernen vergangener Metrikwerte basiert. Die obere und die untere Grenze werden immer zusammen angezeigt.
    • Abweichende Punktzahlen anzeigen: Zeigt abweichende Punktzahlen auf einer virtuellen Achse von 0–10 für einen Anomaliemodelltest an. Dabei basiert der Farbcode auf den Punktzahlschwellenwerten, die in der Tabelle der Zuordnung der Anomaliepunktzahl zum Event-Schweregrad [sa_metric_anomaly_score_to_event_severity_map] definiert sind.

    Testergebnisse zum Optimieren der Anomalie-Erkennung verwenden

    Beim Anomaliemodelltest werden die obere und die untere Grenze verwendet, die für die ausgewählte Serie in der Anomalietestregel konfiguriert sind. Die Ergebnisse des Anomaliemodelltests zeigen, wie viele Anomaliewarnungen basierend auf den angegebenen Einstellungen generiert worden wären, wenn die Anomalie-Erkennung für die getesteten CIs und Metriken aktiviert wäre. Anschließend können Sie entscheiden, ob dieses Ergebnis akzeptabel ist. Optimieren Sie die Grenzen so, dass die Anzahl der generierten Anomaliewarnungen nicht übermäßig, aber ausreichend ist, um eine Punktzahl außerhalb der Grenzen genau anzugeben.

    Anomalietestregel erstellen

    Zur Verwendung von Anomaliemodelltests erstellen Sie eine Anomalietestregel, in der Sie bis zu 20 Metrikserien angeben, für die die Anomalie-Erkennung getestet werden soll. Führen Sie den Anomalietest aus, und verwenden Sie nach Abschluss die bereitgestellte URL, um den Explorer für Einblicke mit den Modelltestergebnissen zu laden.

    Vorbereitungen

    Erforderliche Rolle: evt_mgmt_user

    Prozedur

    1. Navigieren zu Alle > Ereignismanagement > Anomalie-Erkennung > Anomaliemodelltests.
    2. Wählen Sie eine vorhandene Anomalietestregel aus, die Sie bearbeiten und erneut ausführen möchten, oder klicken Sie auf Neu, und füllen Sie das Formular „Anomalietestregeln“ aus.
      Feld Beschreibung
      Name Name für die Modelltestregel
      Betrifft Die Tabelle, aus der CI/Metrik-Paare für die Modelltestregel ausgewählt werden. Hierfür wird die Tabelle „Metrik-Zuordnung an CI“ [sa_metric_map] verwendet.
      Regel Filterbedingungen, um CI/Metrik-Paare für Anomaliemodelltests anzugeben. Ergibt die Regel mehr als 20 CI/Metrik-Paare, wird die Liste auf 20 Einträge beschränkt.
      Startdatum/Enddaten Der Zeitraum, für den die Anomalie-Erkennungstests angewendet werden sollen. Der Zeitraum muss innerhalb der letzten 7 Tage liegen.
      Status Der Status des Tests. Wird während der Ausführung von Testläufen automatisch vom System aktualisiert. Der Status lautet anfänglich „Geplant“ und wird schließlich in „Abgeschlossen“ geändert.
      URL URL zum Explorer für Einblicke, in dem die Ergebnisse des Anomaliemodelltests vorab geladen werden
      Hinweise Protokollierungszusammenfassung, die automatisch vom System mit Details zu jeder Testausführung der Anomalietestregel aktualisiert wird.
    3. Klicken Sie auf Anomalietest ausführen.
      Während der Testausführung werden die Felder Status, URL und Hinweise automatisch aktualisiert, um den Fortschritt des Auftrags widerzuspiegeln.
    4. Nachdem Status zu „Abgeschlossen“ geändert wurde, klicken Sie auf den URL-Link, um den Explorer für Einblicke mit den Testergebnissen zu öffnen.

    Ergebnisse

    Die Grenzen und das Diagramm für den Anomaliemodelltest werden im Explorer für Einblicke in blassen Farben angezeigt. Außerdem wird für die obere und die untere Grenze, die durch den Test berechnet werden, ein Linienmuster verwendet, das sich von dem Linienmuster unterscheidet, das für tatsächliche Anomalie-Erkennungsergebnisse verwendet wird. Anhand dieser Unterschiede können Sie zwischen den Ergebnissen der tatsächlichen Anomalie-Erkennung und von Anomaliemodelltests unterscheiden, wenn beide in den Diagrammeinstellungen ausgewählt sind. Ergebnisse von Anomaliemodelltests, die im Vergleich zu den Ergebnissen der tatsächlichen Anomalie-Erkennung in blassen Farben angezeigt werden

    Nächste Maßnahme

    • Ändern Sie den Datumsbereich für den Test, oder wählen Sie eine andere Zeitreihe aus, und klicken Sie erneut auf Anomalietest ausführen, um fortzufahren und das Modell zu optimieren.
    • Klicken Sie auf das Symbol Diagrammeinstellungen für ein Diagramm, um zwischen der Anzeige von Statistiken und Zusammenfassungen im Diagramm umzuschalten. Wählen Sie in den Abschnitten mit den Anomalieteststatistiken und den Anomaliestatistiken die Optionen Grenzen anzeigen und Abweichende Punktzahlen anzeigen aus, um Testergebnisse neben den Ergebnissen der tatsächlichen Anomalie-Erkennung anzuzeigen.
      Hinweis:
      Die Ergebnisse von Anomaliemodelltests können den Ergebnissen der tatsächlichen Anomalie-Erkennung sehr ähnlich sein. Wenn Sie das Diagramm so konfigurieren, dass beide gleichzeitig angezeigt werden, ist es möglicherweise schwierig, Unterschiede zu erkennen, wenn Sie mit der Maus über das Diagramm fahren.
    • Wenn Sie mit den Anomalietestergebnissen zufrieden sind, aktivieren Sie die Anomalie-Erkennung in der Produktionsumgebung für die im Test angegebenen Metriken und CIs. Unter Zu überwachende Metriken auswählen und konfigurieren finden Sie weitere Details.