레거시 - 자연어 이해 응답의 가상 에이전트

가상 에이전트 (VA)는 자연어 이해 (NLU) 서비스를 사용하여 사용자 입력을 이해합니다. NLU 예측 탭을 사용하여 NLU가 의도를 얼마나 잘 예측하는지 확인하고 의도를 개선하여 NLU가 더 나은 예측을 할 수 있도록 합니다.

중요사항:

대화형 분석 대시보드는 향후 사용 중단 예정입니다. 사용 중단 시까지 지원되지만 더 이상 설치할 수 없습니다. GCC(Government Community Cloud)의 규정 준수 요구 사항을 충족하므로 FedRAMP 승인을 받은 새로운 대화형 분석 대시보드 플랫폼 분석 를 사용할 수 있습니다. 경험의 플랫폼 분석 대화형 분석 대시보드 문서를 참조하십시오.

사용 중단 프로세스에 대한 자세한 내용은 지식베이스의 Now Support사용 중단 프로세스 [KB0867184] 문서를 참조하십시오.

이 대시보드의 기존 사용자이고 분석 데이터를 새 대시보드로 마이그레이션하려는 경우 다음을 참조하십시오. 의 대화형 분석 대시보드로 데이터 마이그레이션 플랫폼 분석 경험 [KB1651556].

대화형 분석 대시보드의 NLU 예측 탭은 NLU가 채팅 대화에서 사용자 입력을 얼마나 잘 이해하는지 보여줍니다. 가상 에이전트 는 NLU 모델과 함께 제공되지만 활성화 NLU 워크벤치 새 모델을 수정하거나 생성하려면

NLU 예측 탭을 사용하려면 채팅 분석 뷰어(chat_analytics_viewer) 역할이 있어야 합니다.

NLU 예측 그래프

그래프는 NLU 예측의 일일 성과를 보여줍니다. 그래프는 다음을 나타내는 최대 3개의 선을 표시할 수 있습니다.

• 올바른 예측 - NLU가 여러 의도를 예측하여 사용자에게 보여주었습니다. 그들은 하나를 선택했습니다.
• 잘못된 예측 - NLU가 여러 의도를 예측하여 사용자에게 보여주었습니다. 그들은 그들 중 어느 것도 그들이 찾고 있던 것이 아니라고 표시했습니다.
• 자동 선택된 예측 - NLU가 사용자의 채팅 입력을 기반으로 단일 의도를 예측했습니다. 경우에 따라 NLU는 각각 별도의 의도에서 여러 주제를 반환하고 사용자는 하나를 선택합니다.

예제 그래프에서는 자동 선택된 예측만 표시합니다. 2021-01-27에는 의도 하나가 자동으로 선택되었고, 2021-01-31에는 의도 2개가 자동으로 선택되었습니다.

주:

축에 10개의 증분이 있으므로 세로 축에 중복 값이 있을 수 있습니다. 의도 수가 10 미만이면 세로 축의 일부 값이 두 번 이상 나타납니다. 예를 들어 이전 이미지에서 날짜 범위의 모든 날짜의 최대 의도 수는 5입니다. 따라서 수직 축에는 두 개의 1, 두 개의 2, 두 개의 3 등이 있습니다.

이 값은 어떻게 결정됩니까? 대시보드는 다음 데이터를 수집합니다.

1. NLU 예측 모델이 의도를 결정했습니까?
2. 예측 의도가 모델에 바인딩된 주제와 의도 일치했습니까?
3. 예측 점수는 얼마이며 대시보드에 최종 사용자에게 올바른 의도를 지정하기 위한 여러 옵션이 표시되었습니까, 아니면 하나의 의도와 관련된 주제만 대시보드에 표시되었습니까?
4. 사용자에게 여러 의도를 보여준 후 사용자가 하나를 선택했습니까?

대화형 대시보드는 데이터에 대해 다음 알고리즘을 사용하여 의도 목록을 채웁니다.

• 올바른 예측 - 1, 2, 3, 4는 참입니다.
• 잘못된 예측—4는 거짓이었습니다.
• 자동 선택된 예측 - 3이 자동 선택되었고 4는 없습니다.

의도가 여러 범주에 나타날 수 있습니다. 예를 들어 계정 활성화( Ben) 의도가 올바른 예측 과 자동 선택된 예측 열에 나타나는 것은 NLU가 의도를 올바르게 예측하고 사용자에게 단일 응답만 표시했기 때문입니다.

NLU 예측 개선

그래프의 아무 곳이나 클릭하면 모델 성능 페이지가 열립니다. 그래프에 지정된 날짜 범위에 대해 예측되거나 예측되지 않은 의도에 대한 요약을 표시합니다.

참조 활성화 NLU 워크벤치 NLU 워크벤치를 사용하여 NLU 예측을 개선하는 방법을 알아보십시오.

• 레거시 - 모델 수정
  사용자 의도를 보다 정확하게 예측할 수 있도록 모델을 테스트하고 수정 가상 에이전트 합니다.