검색엔진에서 자동으로 사이트를 수집 및 등록하기 위해서는 사용하는 크롤러(Crawler)로부터 사이트를 제어하기 위해서 사용하는 파일은?

1. 1

   crawler.txt

   오답 이유오답 보기입니다. ‘crawler.txt’은(는) 이 문항의 판단 기준인 ‘robots.txt’과 구별해야 합니다. 취약점이 발생하는 위치·입력 처리·세션 흐름 또는 대응 기법이 정답 조건과 다릅니다.
2. 2

   access.conf

   오답 이유오답 보기입니다. ‘access.conf’은(는) 이 문항의 판단 기준인 ‘robots.txt’과 구별해야 합니다. 취약점이 발생하는 위치·입력 처리·세션 흐름 또는 대응 기법이 정답 조건과 다릅니다.
3. 3

   httpd.conf

   오답 이유오답 보기입니다. ‘httpd.conf’은(는) 이 문항의 판단 기준인 ‘robots.txt’과 구별해야 합니다. 취약점이 발생하는 위치·입력 처리·세션 흐름 또는 대응 기법이 정답 조건과 다릅니다.
4. 4

   robots.txt

   정답 근거정답 보기입니다. robots.txt는 웹사이트 관리자가 검색 엔진의 크롤러(Crawler)에게 웹 페이지의 접근 허용 범위와 규칙을 지정하기 위해 루트 디렉토리에 배치하는 텍스트 파일입니다.