테스트 세트 생성
테스트 세트를 생성하거나 테스트 세트에 추가하려면 NLU 올바른 의도와 일치하는 테스트 발언 파일을 업로드할 수 있습니다. 테스트 세트를 사용하여 모델의 성능을 평가합니다.
시작하기 전에
- - Core 플러그인, 플러그인, NLU 워크벤치 - Advanced Features 플러그인과 예측 인텔리전스 플러그인이 모두 설치되고 활성화되어 있는지 NLU 워크벤치 확인합니다 NLU 워크벤치
- AI 검색에 대한 가상 에이전트 모델과 함께 NLU 테스트 세트를 사용할 수 있습니다.
- 필요한 역할: nlu_editor, nlu_admin 또는 admin 모델에 편집기를 할당해야 합니다.
이 태스크 정보
CSV 또는 XLSX(Excel 통합 문서) 파일에는 테스트 발언을 예상하는 의도와 쌍을 이루는 테이블이 포함되어야 합니다. 파일에는 최대 10,000개의 발언이 포함될 수 있습니다. 파일에 "발언" 및 "예상 의도"라는 열이 있는지 확인합니다.
주:
영어 이외의 언어로 된 테스트 세트의 경우 값이 UTF-8인 glide.import.csv.charset 시스템 속성을 추가해야 합니다. Import Sets 속성을 참조하십시오.
가장 정확한 테스트 결과를 얻으려면 모델이 사용자로부터 접할 수 있는 발화를 포함하십시오. 모델의 모든 의도를 포함하는 테스트 발언이 있는지 확인하십시오.
예상 의도가 없는 테스트 발언의 약 10%를 포함하는 것을 목표로 합니다. 예상 의도가 없는 발화를 포함하면 의도가 예측되어서는 안 되는 관련 없는 발화를 탐지하는 모델의 기능을 평가하는 데 도움이 됩니다.
주:
파일의 테스트 발언에 예상 의도가 없음을 나타내려면 "예상 의도" 값을 비워 두어야 합니다.
| 발언 | 예상 의도 |
|---|---|
| 햄버거 먹게 해주세요 | 순서 |
| 지불하고 싶습니다. | 지불 |
| 달콤한 걸 가져다줘 | 순서 |
| 레스토랑 영업 여부 | |
| 내 지불에 문제가 있음 | 주문, 지불 |
| 총 비용 | 지불 |
프로시저
-
테스트 세트 만들기를 클릭합니다.
다음에 수행할 작업
테스트 세트를 사용하여 모델에 대한 테스트를 실행합니다. 방법을 배우려면 또는 다중 모델 배치 테스트 실행를 참조하십시오내 모델 테스트.
테스트 세트를 생성한 후 발화를 더 추가할 수 있습니다. 테스트 세트를 볼 때 발화 임포트를 클릭합니다.그림 1. 임포트 발언 버튼이 있는 테스트 세트 페이지
임포트할 추가 발언이 있는 CSV 또는 XLSX(Excel 통합 문서) 파일을 선택합니다. 그림 2. 발언 임포트 창
임포트를 클릭합니다. 시스템이 테스트 세트에 발화를 추가합니다. 임포트한 후 테스트 세트를 사용하는 모든 테스트를 다시 실행합니다.