Überprüfen Sie die in Agenten-Evaluierungen erkannten Probleme

Identifizieren und priorisieren Sie bestimmte Qualitätsfehler, die während einer Evaluierungsausführung erkannt wurden, organisiert nach Schweregrad. Verwenden Sie Problemschweregrad und Metrikrelevanz, um zu entscheiden, welche Fehler vor der Bereitstellung behoben werden sollen.

Vorbereitungen

Erforderliche Rolle: sn_aia.admin

Prozedur

1. Navigieren zu Alle > Now Assist-Kompetenzkit > Agentenbasierte Evaluierungenan.
2. Wählen Sie aus der Liste die automatisierte Bewertung aus, die Sie überprüfen möchten.
   Die Seite mit den Auswertungsdetails wird geöffnet und zeigt die Gesamtergebnisse und Leistungsmetriken an.
3. Wenn Probleme identifiziert werden, wählen Sie aus Überprüfen und optimieren Zum Anzeigen von Details.

   Das geführte Setup für die Optimierung wird für dieses Agenten-KI-Asset geöffnet.

   Jedes Problem ist einem bestimmten Tool oder Agenten-KI-Asset zugeordnet.

4. Wählen Sie in der Liste Probleme ein Problem aus, das Sie überprüfen möchten.

   Jedes Problem verfügt über eine Beschreibung des Problems, eine Ursachenanalyse, zugehörigen Ablaufverfolgungen und einen Platz zum Hinzufügen von Notizen zur Analyse.

   Abschnitt	Beschreibung
   Problempunktzahl und Kurzbeschreibung	Kurzer Überblick über das identifizierte Problem und seine Auswirkungen auf das agentenbasierte KI-Asset
   Beschreibung	Detailliertere Informationen zum identifizierten Problem als die Kurzbeschreibung
   Ursachenanalyse	Einblicke in die Ursache der im Agenten-KI-Asset aufgetretenen Symptome. Gibt bestimmte Komponenten des Problems an und welche Metrik es erkannt hat.
   Ablaufverfolgungen mit diesem Problem	Bestimmte Ausführungsprotokolle, in denen das Problem auftritt. Sie können Analysieren Sie Ablaufverfolgungen Um zu verstehen, wie das Problem auftritt.
   Analysehinweise	Platz für Sie, um Details zur Analyse und zu dem hinzuzufügen, was Sie anderen über das Problem mitteilen möchten. Diese Notizen werden beim Anwenden von Optimierungen nicht berücksichtigt. Siehe Optimierungen anwenden Für weitere Informationen.

5. Wahlweise: Analysieren Sie die Nachverfolgungen des Problems .
6. Wählen Sie nach der Überprüfung der identifizierten Probleme aus Optimierung starten Zum Anzeigen der empfohlenen LLM-Korrekturen.

Ergebnisse

Probleme, die den Metriken für verschiedene Komponenten des agentenbasierten KI-Assets zugeordnet sind, werden überprüft, analysiert und dokumentiert.

Nächste Maßnahme

Fahren Sie mit dem nächsten Schritt bis fort Optimierungen anwenden Um identifizierte Probleme zu beheben.