Ihr Modell testen

  • Freigeben Version: Yokohama
  • Aktualisiert 30. Januar 2025
  • 2 Minuten Lesedauer
  • Testen Sie Ihr Modell Natural Language Understanding (NLU) mit seinem Standardtestsatz. Durch Tests können Sie feststellen, wie Ihr Modell mit dem aktuellen Inhalt funktioniert.

    Vorbereitungen

    • Stellen Sie sicher, dass das Plugin „NLU Model Builder - Core“, das Plugin „NLU Model Builder“, das Plugin NLU-Workbench – Erweiterte Funktionen und das Plugin Predictive Intelligence installiert und aktiviert sind.
    • Sie verfügen über ein trainiertes Modell für Virtual Agent oder die KI-Suche. Weitere Informationen finden Sie unter Modell erstellen und trainieren.
    • Sie verfügen über einen Testsatz zum Testen von Modellen. Weitere Informationen finden Sie unter Erstellung und Verwaltung von Testsätzen.
    • Erforderliche Rolle: nlu_editor, nlu_admin oder admin. Der Editor muss dem Modell zugewiesen sein.

    Warum und wann dieser Vorgang ausgeführt wird

    Führen Sie einen Test Ihres Modells mit dem Standardtestsatz durch, der Testäußerungen und die erwarteten Absichten enthält.
    • Wenn eine erwartete Absicht in Ihrem Testsatz keiner Absicht im Modell entspricht, werden die Äußerungen mit diesen Absichten nicht zum Testen verwendet. Sie sind nicht in den Testergebnissen enthalten.
    • Die Antworten von Dialoghandlungen während der Konversation können in NLU-Workbenchnicht getestet werden.
    • Wenn das Modell keine Vorhersage für Äußerungen zurückgibt, die als Nicht relevantmarkiert sind, wird dieses Ergebnis als Richtiggewertet.
    • Wenn Ihr Testsatz nicht mindestens 60 % der Absichten im Modell abdeckt, empfiehlt das System keinen Konfidenzschwellenwert. Sie können den Test jedoch weiterhin ausführen.

    In diesem Beispielszenario haben Sie Ihr Modell trainiert und möchten die Leistung bewerten.

    Prozedur

    1. Navigieren zu Alle > NLU-Workbench > Modelle.
      Die Registerkarte Virtual Agent wird standardmäßig geöffnet.
    2. Wählen Sie die Registerkarte für die Anwendung Ihres Modells und dann den Namen des Modells aus, das Sie testen möchten.
    3. Suchen Sie auf der Registerkarte Modelldetails der Modellübersicht nach der Karte für die Phase Testen und veröffentlichen Sie Ihr Modell, und klicken Sie dann auf Phase anzeigen.
    4. Wählen Sie Neuen Test ausführenaus.
      Hinweis:
      Andere Phasen sind während eines Tests nicht verfügbar.
      Führen Sie einen neuen Test in der Phase „Testen und veröffentlichen Sie Ihr Modell“ aus.
    5. Das Dialogfeld „Neuen Test ausführen“ wird geöffnet. Wählen Sie OK.
      Das Dialogfeld zum Bestätigen von Neuen Test ausführen.
      Der Test beginnt, und die Seite „Test läuft... “ wird geladen.

    Ergebnisse

    Wenn der Test abgeschlossen ist, wird die Seite Modell testen und veröffentlichen neu geladen. Das Feld Datum der Testausführung gibt das Datum und die Uhrzeit dieses Tests an.

    Auf der Registerkarte Übersicht wird ein Diagramm der Testergebnisse angezeigt. Außerdem wird eine Liste der 5 häufigsten falschen Absichten und der 5 häufigsten verfehlten Absichten angezeigt.

    Auf der Registerkarte Detaillierte Ergebnisse werden alle Testäußerungen und ihre Vorhersageergebnisse aufgelistet.

    Sie können frühere Testergebnisse anzeigen, indem Sie auf Testverlauf anzeigen unter Modell testen und veröffentlichenklicken oder zu navigieren Batch-Tests > Testergebnisse.

    Nächste Maßnahme

    Verwenden Sie die Ergebnisse, um den Inhalt Ihres Modells zu bearbeiten und zu verbessern. Wenn Sie mit den Ergebnissen zufrieden sind, veröffentlichen Sie Ihr Modell, um es für nutzende Anwendungen wie Virtual Agentverfügbar zu machen.