평가 활성화
지속적인 모니터링을 활성화하여 무작위 대화를 평가합니다.
평가를 활성화하고 매일 수행할 평가 수를 설정합니다.
- 다음으로 이동 을 클릭하고 플로우를 선택합니다.
- 평가 실행 플로우를 선택합니다.
- 플로우 편집을 선택합니다.
- 활성화를 선택합니다.
- 다음으로 이동 .
- sn_na_conv_eval.maxEvaluateCount 속성을 검색하여 선택합니다.
- 값 필드를 업데이트하여 매일 평가할 대화의 최대 수를 설정합니다.
- 저장을 선택합니다.
주:
- 요구 사항에 따라 평가 매개변수 중 일부를 구성하려면 다음 문서를 참조하십시오 평가 구성.
- 평가할 이력 데이터를 임포트하려면 배치 평가 실행 플로우를 활성화하여 배치 평가를 실행해야 합니다. 배치 평가 워크플로우에 대한 자세한 내용은 을 참조하십시오 배치 평가를 위한 평가 플로우.
평가 대시보드와 대화 인사이트
평가 대시보드와 CI(대화 인사이트) 애플리케이션을 함께 사용하면 시스템 성능에서 최종 사용자 만족도에 이르기까지 가상 에이전트 효과성에 대한 전체적인 그림을 그릴 수 있습니다.
대화 인사이트에 대한 자세한 내용은 다음 문서를 참조하십시오 대화 인사이트.
| 평가 대시보드에서 캡처한 메트릭 | 대화 인사이트에서 캡처한 메트릭 |
|---|---|
|
평가 대시보드는 가상 에이전트 설계, 대화 상자 플로우 및 모델 정확도를 개선하는 데 도움이 되는 세분화된 진단 설명을 제공합니다. 작업 성공과 신뢰성에 중요한 차원에 따라 성과를 평가합니다. 예를 들어 "시스템이 제대로 작동하고 예상한 작업을 수행하고 있습니까?"
|
대화 인사이트는 고객 만족도와 노력 측정에 중점을 둡니다. CSAT(유추된 고객 만족도) 및 지원 신호를 사용하여 최종 사용자가 가상 에이전트와의 상호작용을 어떻게 인식하는지 보여줍니다. 예: "최종 사용자가 가상 에이전트의 성능에 만족합니까?"
|
평가 대시보드와 대화 인사이트는 함께 가상 에이전트 구현을 위한 보완적인 가치를 제공합니다.
- Conversation Insights는 모든 대화에서 고객 경험에 대한 간단하고 비용 없는 보기를 제공합니다.
- 평가 대시보드는 세부적인 작업 중심 진단을 제공하여 가상 에이전트 설계 및 성능의 목표 개선을 가능하게 합니다.
- AI 에이전트 분석 및 AI 컨트롤 타워 대시보드에 통합된 이러한 메트릭은 사용자에게 가상 에이전트 시스템 상태 및 최종 사용자 만족도에 대한 보완 뷰를 제공합니다.