Ihr Modell testen und veröffentlichen

  • Freigeben Version: Yokohama
  • Aktualisiert 30. Januar 2025
  • 2 Minuten Lesedauer
  • Bewerten Sie die Leistung Ihres Modells NLU, um Bereiche mit Verbesserungspotenzial zu identifizieren. Veröffentlichen Sie dann Ihr Modell, um es für andere Anwendungen wie Virtual Agentverfügbar zu machen.

    Zusammenfassungsnutzung

    Testen Sie Ihr Modell Virtual Agent oder KI-Suche mit seinem Standardtestsatz, um zu sehen, wie das Modell reagiert. Testergebnisse enthalten Informationen, mit denen Sie Ihr Modell verbessern können.

    Hinweis:
    Zum Testen Ihres Modells benötigen Sie die Funktion Batch-Tests für mehrfache Modelle, die mit der Anwendung NLU-Workbench - Erweiterte Funktionen von ServiceNow® Storeverfügbar ist. Weitere Informationen finden Sie unter NLU-Workbench installieren – erweiterte Funktionen.

    Um Ihr Modell zu testen, navigieren Sie zu NLU-Workbench > Modelle. Wählen Sie die Registerkarte für die Anwendung Ihres Modells und dann den Namen des Modells aus. Wählen Sie auf der Karte Testen und veröffentlichen Sie Ihr Modelldie Option Ansichtsphase aus. Testen und veröffentlichen Sie Ihre Modellphasenkarte

    Übersicht über das Testen und Veröffentlichen Ihres Modells

    Die Phase Modell testen und veröffentlichen wird standardmäßig auf der Seite Übersicht geöffnet. Hier befinden sich die Schaltflächen „Neuen Test ausführen“ und „Modell veröffentlichen“.

    Testen und veröffentlichen Sie Ihre Modellübersichtsseite

    Die Übersicht liefert Informationen zu einem vorherigen Testlauf und enthält Balkendiagramme, die die Testergebnisse zusammenfassen.

    Wenn Sie über frühere Testläufe verfügen, können Sie diese anzeigen, indem Sie in der Liste Testlaufdatum auswählen.

    Pulldown-Menü für Testausführungsdatum

    Um in der Testergebnistabelle einen Drilldown durchzuführen, wählen Sie die Registerkarte Detaillierte Ergebnisse. Jede Testäußerung wird mit ihrer Vorhersage unter Detaillierte Ergebnisseaufgelistet.

    Testergebnisse verstehen

    Die Testergebnisse zeigen, wie Ihr Modell auf die Äußerungen im Testsatz reagiert hat.

    Testergebnisse für einen Modelltest in der NLU-Workbench.

    Das Balkendiagramm zeigt die Prozentsätze der Vorhersagen für „Richtig“, „Richtig unter mehreren“, „Nicht eingehalten“ und „Falsch“ an:
    Prozentsatz Beschreibung
    Richtig Der Prozentsatz der Äußerungen, für die Ihr Modell die Absicht richtig vorhergesagt hat.

    Wenn das Modell für als Nicht relevantmarkierte Äußerungen keine Absicht vorhersagt, wird dieses Ergebnis als Richtig gewertet.

    Richtig unter mehreren

    Für Äußerungen, bei denen mehr als eine Absicht vorhergesagt wurde.

    Der Prozentsatz der Äußerungen, für die das Modell die Absicht(en) richtig vorhergesagt hat, aber auch Absichten vorhergesagt hat, die nicht zu der Äußerung gehörten.

    Verfehlt Der Prozentsatz der Äußerungen, für die Ihr Modell keine Absicht vorhergesagt hat, obwohl eine erwartete Absicht vorhanden war.
    Falsch Der Prozentsatz der Äußerungen, für die Ihr Modell eine Absicht vorhergesagt hat, die nicht korrekt war.

    Tests können sich auf den Konfidenzschwellenwert des Modells auswirken. Der Konfidenzschwellenwert bestimmt, wie sicher ein Modell sein muss, um eine Absicht für eine Äußerung vorherzusagen. Weitere Informationen zu Konfidenzschwellenwerten finden Sie unter NLU-Modelleinstellungen.

    Informationen zu Äußerungen, bei denen keine Absicht vorhergesagt werden darf, finden Sie unter Erkennung von Irrelevanz in NLU.

    Modell veröffentlichen.

    Über die Schaltfläche Modell veröffentlichen wird die aktuelle Version des Modells für andere Anwendungen wie Virtual Agentverfügbar.
    Hinweis:
    Wenn das Modell nicht trainiert wurde, ist die Schaltfläche Modell veröffentlichen nicht verfügbar. Kehren Sie zur Phase Modell erstellen und trainieren zurück, um das Modell vor der Veröffentlichung zu trainieren.

    Weitere Informationen zum Veröffentlichen von Modellen finden Sie unter Veröffentlichen Sie Ihr Modell NLU ..

    Batch-Tests für mehrfache Modelle

    In der Phase Modell testen und veröffentlichen testen Sie Ihr Modell anhand des Standardtestsatzes. Mit Batch-Tests für mehrere Modelle können Sie Tests mit anderen Testsätzen durchführen, mehrere Modelle gleichzeitig testen und Ihre Testergebnisse anzeigen. Um Batch-Tests für mehrfache Modelle zu verwenden, navigieren Sie zu NLU-Workbench > NLU – erweiterte Funktionen > Batch-Tests für mehrfache Modelle.

    Weitere Informationen finden Sie unter Batch-Tests für mehrfache Modelle.

    Weitere Informationen zu Testsätzen finden Sie unter:

    Informationen zum Testprozess finden Sie unter Ihr Modell testen.