다중 모델 배치 테스트 실행
테스트 세트에 대해 여러 자연어 이해 (NLU) 모델을 테스트합니다. 모델의 품질을 평가하고 구체화하여 의도 예측을 개선합니다.
시작하기 전에
- - Core 플러그인, 플러그인, NLU 워크벤치 - Advanced Features 플러그인과 예측 인텔리전스 플러그인이 모두 설치되고 활성화되었는지 확인합니다 NLU 워크벤치 . NLU 워크벤치
- 또는 AI 검색에 대해 가상 에이전트 학습된 모델이 하나 이상 있습니다.
- 예상 의도가 있는 테스트 발언이 포함된 테스트 세트가 있어야 합니다. 테스트 세트 생성 또는 테스트 세트 생성 및 관리 문서를 참조하십시오.
- 필요한 역할: nlu_admin 또는 admin 모델에 할당되면 nlu_editor 역할은 테스트를 실행하고 해당 모델에 대한 테스트 발언을 수정할 수 있습니다.
이 태스크 정보
다중 모델 배치 테스트에서는 모델의 기본 테스트 세트가 아닌 테스트 세트를 사용할 수 있습니다.
또한 다중 모델 배치 테스트를 사용하여 한 번에 최대 10개의 모델을 테스트할 수 있습니다. 그러나 모델 수가 적은 테스트는 더 빠르게 실행됩니다.
여러 모델을 테스트할 때 테스트 세트는 모든 모델의 총 의도 중 최소 25%를 포함해야 합니다. 모델이 또는 에서 접할 가상 에이전트AI 검색가능성이 있는 발화를 포함하는 테스트 세트를 사용합니다.
주:
테스트 세트의 예상 의도가 모델의 의도와 일치하지 않으면 해당 예상 의도와 해당 테스트 발언을 건너뜁니다. 테스트 결과에 계산되거나 표시되지 않습니다.
기본 테스트 세트에 대해 단일 모델을 테스트하려면 모델의 개요 페이지에서 모델 테스트 및 게시 단계를 사용합니다. 자세한 내용은 모델 테스트 및 게시 문서를 참조하십시오.
프로시저
-
새 배치 테스트 실행 창의 목록에서 모델을 선택합니다.
-
실행을 클릭합니다.
새 테스트가 테스트 결과 목록에 테스트 중... 상태
다음에 수행할 작업
배치 테스트가 완료되면 상태가 완료로 변경됩니다. 테스트 세트의 이름을 클릭하여 테스트 결과를 볼 수 있습니다.
결과를 사용하여 모델을 조정하고 개선합니다. 그런 다음 테스트를 다시 실행하여 성능을 평가합니다.
배치 테스트는 신뢰도 임계치 권장 사항에 영향을 줄 수 있습니다. 자세한 내용은 NLU 모델 설정 문서를 참조하십시오.