외부 콘텐츠 커넥터의 Amazon S3 크롤링 설정 구성
포함 및 제외 필터를 정의하여 콘텐츠 크롤링을 실행할 때 외부 콘텐츠 커넥터에서 검색할 버킷 및 파일 형식을 Amazon S3 지정합니다.
시작하기 전에
관리자는 크롤링 설정을 구성하려는 외부 콘텐츠 커넥터를 이미 만들어 Amazon S3 두어야 합니다. 이 절차에 대한 자세한 내용은 다음 문서를 참조하십시오 Amazon S3 외부 콘텐츠 커넥터 생성.
필요한 역할: ais_admin
이 태스크 정보
- 콘텐츠 크롤링을 실행할 때 고려해야 할 버킷에 대한 포함 또는 제외 필터
- 콘텐츠 크롤링을 실행할 때 검색할 파일 확장명에 대한 포함 또는 제외 필터
기본적으로 외부 콘텐츠 커넥터는 소스 시스템의 문서까지 백만 (1,000,000) 인덱싱할 수 있습니다. 커넥터가 이 제한을 초과하면 원본 시스템을 계속 크롤링하지만 새 문서를 무시하고 인덱싱을 위해 문서 삭제 및 업데이트 AI 검색 만 보냅니다. 커넥터는 인덱싱 제한을 초과하여 크롤링하는 문서 10,000개마다 오류 메시지를 기록합니다.
커넥터의 인덱싱된 문서 수가 초과 80만 명하면 커넥터의 UI에 인덱싱 제한에 도달했음을 나타내는 경고 메시지가 표시됩니다. 커넥터가 인덱싱 제한에 도달하면 UI에 오류 메시지가 나타납니다.
커넥터 중 하나가 인덱싱 제한에 도달하면 크롤링 설정 및 파일 포함/제외 필터를 업데이트하여 검색되는 문서 수를 줄일 수 있습니다. 또는 문서 이상을 1,000,000 인덱싱해야 하는 경우 케이스 https://support.servicenow.com/now 를 고객 서비스 및 지원 생성하여 커넥터의 제한 증가를 요청할 수 있습니다.
프로시저
- 커넥터 목록에서 설정을 수정할 외부 콘텐츠 커넥터의 Amazon S3 기록을 선택합니다.
- 커넥터 편집기의 설정 탭에서 선택합니다.
-
콘텐츠 크롤링을 실행할 때 크롤링되는 버킷 집합을 지정하려면 다음 콘텐츠 필터링 옵션 중 하나를 선택합니다.
- 소스 시스템에서 모든 버킷을 크롤링하려면 모든 콘텐츠 크롤링을 선택합니다.
-
원본 시스템에서 지정된 버킷 집합만 크롤링하려면 이 버킷만 포함을 선택한 다음 포함할 S3 버킷 URL 추가 필드 및 추가 버튼을 사용하여 크롤링 시 커넥터가 포함할 버킷의 URL을 입력합니다.
예를 들어, https://s3.amazonaws.com/published 입력하여 이름이 게시된 버킷의 검색 가능한 콘텐츠만 포함할 수 있습니다.
-
원본 시스템에서 지정된 버킷 집합을 제외한 모든 버킷을 크롤링하려면 이 사용자 상자만 제외를 선택한 다음 제외할 S3 버킷 URL 추가 필드 및 추가 단추를 사용하여 크롤링 시 커넥터가 제외할 버킷의 URL을 입력합니다.
예를 들어, https://s3.amazonaws.com/legacy_bucket 입력하여 이름이 legacy_bucket 버킷에서 검색 가능한 콘텐츠를 제외할 수 있습니다.
결과
Amazon S3 외부 콘텐츠 커넥터는 수정된 크롤링 설정으로 업데이트됩니다.
다음에 수행할 작업
수정된 크롤링 설정을 사용하여 소스 시스템에서 콘텐츠를 Amazon S3 검색하려면 외부 콘텐츠 커넥터에 대한 Amazon S3 일회성 콘텐츠 크롤링을 만들고 실행합니다. 일회성 컨텐츠 크롤링을 만들고 실행하는 방법에 대한 자세한 내용은 을 참조하십시오 외부 콘텐츠 커넥터용 콘텐츠 크롤링 생성.