Appliquer des optimisations aux actifs d’IA agentique et les réévaluer

Examinez et acceptez les recommandations générées par le système afin d’améliorer la qualité de l’agent en fonction des problèmes détectés. Appliquez des optimisations avant de déclencher une nouvelle évaluation pour confirmer que les changements ont résolu les échecs.

Avant de commencer

Vous devez avoir une évaluation agentique complète avec des problèmes identifiés.

Rôle requis : admin

Pourquoi et quand exécuter cette tâche

Si des problèmes sont identifiés par les juges LLM, ils peuvent générer des suggestions de solutions possibles pour résoudre les problèmes. Après avoir examiné le problème, vous pouvez sélectionner Démarrer l’optimisation pour vérifier les recommandations avant de les appliquer et de commencer une réévaluation.

Si vous êtes déjà dans le flux pour l’identification des problèmes, passez à l’étape 6.

Procédure

1. Accédez à la Tous > Kit de compétences Now Assist > Évaluations agentiques.
2. Sélectionnez l’évaluation automatisée dont vous souhaitez examiner les résultats.
   La page des détails de l’évaluation s’ouvre et affiche les résultats globaux et les mesures de performances.
3. Si des problèmes sont identifiés, sélectionnez Examiner et optimiser pour afficher les détails.

   La configuration guidée de l’optimisation s’ouvre pour cet actif IA agentique.

   Chaque problème est associé à un outil ou à un actif d’IA agentique spécifique.

4. Sélectionnez un problème à examiner.
5. Passez en revue le problème, y compris en analysant les traces du problème.
6. Sélectionnez les problèmes à optimiser, puis sélectionnez Démarrer l’optimisation.

   Vous pouvez choisir d’optimiser pour autant de problèmes que vous le souhaitez. Il est possible de générer des changements spécifiques à un actif IA agentique qui répondent à plusieurs problèmes à la fois.

7. Sélectionnez Oui pour générer les suggestions d’optimisation.
8. Passez en revue les optimisations suggérées.

   Les optimisations se produisent au niveau de l’invite pour les descriptions d’actifs IA outillés ou agentiques et les listes d’étapes.

   Si une optimisation concerne une description ou une liste d’étapes, vous pouvez basculer pour voir les instructions actuelles seules à côté de la suggestion pour la version optimisée. Vous pouvez également activer/désactiver cette option pour afficher les différences entre la version actuelle et la version suggérée ou pour afficher uniquement la version optimisée seule.

   Si vous souhaitez apporter des modifications aux textes suggérés, vous pouvez basculer le mode d’édition pour saisir votre propre texte ou modifier les contenus du texte généré.

   Pour ouvrir l’outil ou l’actif IA agentique dans Studio d'agents IA, sélectionnez l’icône du lien ouvert. L’actif IA agentique associé s’ouvre dans un nouvel onglet de navigateur.

   Vous pouvez voir les problèmes que l’optimisation essaie de résoudre en sélectionnant Problèmes de contribution. Vous pouvez sélectionner un problème pour examiner tous les détails, y compris l’analyse de la cause première.

9. Sélectionnez Continuer pour réévaluer si vous souhaitez réévaluer sans appliquer l’optimisation ou Examiner et appliquer si vous souhaitez apporter les changements suggérés.
10. Passez en revue les détails pour la réévaluation.

    Le résumé de l’optimisation comprend la liste des problèmes que l’optimisation essaie de résoudre.

    Vous pouvez nommer votre évaluation et sélectionner la version de l’actif IA agentique. Étant donné qu’il s’agit d’une réévaluation, les mesures d’évaluation et l’ensemble de données sont identiques à ceux de l’exécution d’origine et ne peuvent pas être modifiés.

11. Sélectionnez Démarrer la réévaluation pour commencer la nouvelle exécution de l’évaluation agentique.

    Vous pouvez revenir à une étape précédente du flux d’optimisation des problèmes en sélectionnant Retour à la configuration de l’évaluation.

Résultats

Une nouvelle exécution d’évaluation commence par les changements que vous avez appliqués à l’actif IA agentique.

Que faire ensuite

Vous pouvez suivre et surveiller votre évaluation agentique pendant que la réévaluation est en cours. Une fois l’évaluation terminée, vous pouvez examiner et comparer les résultats à l’évaluation initiale et apporter d’autres optimisations si nécessaire.