검색엔진에서 자동으로 사이트를 수집 및 등록하기 위해서는 사용하는 크롤러(Crawler)로부터 사이트를 제어하기 위해서 사용하는 파일은?
정답 4번
robots.txt는 웹사이트 관리자가 검색 엔진의 크롤러(Crawler)에게 웹 페이지의 접근 허용 범위와 규칙을 지정하기 위해 루트 디렉토리에 배치하는 텍스트 파일입니다.
콘텐츠 정보
- 자료 유형
- 편집복원
- 검수 상태
- 내용 검수 완료
- 해설 작성·검수
- 정처LAB 편집 기준
- 최종 검수
- 2026-08-24