자연어 이해응답 수 가상 에이전트

NLU 예측 탭을 사용하여 NLU가 의도를 얼마나 잘 예측하는지 확인하고 NLU가 더 나은 예측을 하도록 의도를 개선합니다.

가상 에이전트 (VA)는 자연어 이해 (NLU) 서비스를 사용하여 사용자 입력을 이해합니다. 대화형 분석 대시보드의 NLU 예측 탭은 NLU가 VA 대화에서 사용자 입력을 얼마나 잘 이해하고 있는지 보여줍니다. 가상 에이전트 는 NLU 모델과 함께 제공되지만 활성화 NLU 워크벤치 을 클릭하여 새 모델을 수정하거나 생성합니다.

NLU 예측 탭을 사용하려면 채팅 분석 뷰어(chat_analytics_viewer) 역할이 있어야 합니다.

NLU 예측 표시기

NLU 예측 표시기는 사용자 의도에 대해 매핑된 NLU 예측의 일일 성과를 보여줍니다.

• Intent Unsupported—NLU가 사용자 의도를 인식하지 못했습니다.
• 의도 자동 선택됨 - NLU가 단일 의도를 예측하고 사용자가 동일한 의도를 선택했습니다. 경우에 따라 NLU는 각각 별도의 의도에서 여러 주제를 반환하고 사용자는 그 중 하나를 선택합니다.
• 의도가 올바르게 예측됨—NLU가 여러 의도를 예측하고 사용자가 그 중 하나를 선택했습니다.
• 의도가 잘못 예측됨—NLU가 여러 의도를 예측했는데 사용자가 그 중 어느 것도 찾고 있던 것이 아니라고 표시했습니다.

주:

세로 축에는 10개의 증분이 있으므로 값이 중복될 수 있습니다. 의도 수가 10보다 작으면 세로 축의 일부 값이 두 번 이상 나타납니다.

대시보드는 다음 데이터 요소를 수집하여 표시기에 도달합니다.

1. NLU 예측 모델이 의도를 결정했습니까?
2. 예측된 의도가 모델에 바인딩된 주제와 의도와 일치했습니까?
3. 예측 점수는 무엇이며 대시보드에 최종 사용자에게 올바른 의도를 지정하기 위한 여러 옵션이 표시되었습니까, 아니면 대시보드에 하나의 의도와 관련된 주제만 표시되었습니까?
4. 사용자에게 여러 의도를 표시한 후 사용자가 하나를 선택했습니까?

의도는 여러 범주에 표시될 수 있습니다. 예를 들어 의도가 올바르게 탐지 됨 및 의도 자동 선택 됨으로 나타날 수 있는데, 이는 NLU가 의도를 정확하게 예측하고 사용자가 수락한 단일 응답만 표시했기 때문입니다.

NLU 예측 개선

NLU 예측 표시기의 아무 곳이나 클릭하면 모델 성능 페이지가 열립니다. 그래프에 지정된 날짜 범위 동안 예측되거나 예측되지 않은 의도의 요약을 보여줍니다.

참조 활성화 NLU 워크벤치 NLU 워크벤치를 사용하여 NLU 예측을 개선하는 방법에 대한 자세한 내용

• 모델 수정
  사용자 의도를 가상 에이전트 보다 정확하게 예측할 수 있도록 모델을 테스트하고 수정합니다.