컨텐츠 바로가기


현재 위치

  1. 게시판
  2. 자료실

robots.txt 파일
제목 robots.txt 파일
작성자 H-idea (ip:)
  • 작성일 2016-02-11
  • 추천 8 추천 하기
  • 조회수 432
  • 평점 0점



robots.txt 파일


robots.txt 파일이란?
robots.txt 파일은 사이트를 각종 검색엔진의 검색로봇에서 제외하는 표준규약 입니다.
특정 검색엔진의 검색로봇을 막으시거나 사이트내 특정페이지의 접근을 막기 위해서는

 표준 문법에 따라 robots.txt 파일을 작성하여 사이트에 배치하여 보안을 강화할 수 있습니다.


특히 admin 디렉토리와 계정정보들이 포함되어 있는 디렉토리는 보호하는 것을 권장합니다.


작성 방법
다음 예시를 참고하여 robots.txt를 작성해 보세요.


1) 모든 로봇에게 사이트 전체 접근 허용
User-agent: *
 Allow: /


2) 모든 로봇에게 사이트 전체 접근 차단
User-agent: *
Disallow: /


3) BadBot이라는 이름을 가진 로봇에게 admin, tmp 디렉토리 접근을 차단
User-agent: Badbot
 Disallow: /admin/
 Disallow : /tmp/


4) BadBot 이라는 이름의 로봇에게 특정 파일 형식 (예: .gif)을 차단
User-agent: BadBot
 Disallow: /*.gif$


5) GoodBot이라는 이름의 로봇을 제외한 모든 로봇에게 사이트의 전체를 차단
User-agent: GoodBot
Allow: /
User-agent: *
Disallow: /



로봇의 종류와 이름
로봇은 종류마다 다른 역할이 있으며, 대표적인 검색엔진의 로봇명칭은 다음과 같습니다.


1) 구글로봇 : Googlebot
2) 구글이미지 : Googlebot-image
3) 구글모바일 : Googlebot-mobile
4) 야후로봇 : Slurp, yahoo-slurp
5) 네이버: naverbot
6) 다음 : daumos


첨부파일
비밀번호 삭제하려면 비밀번호를 입력하세요.

목록

삭제 수정 답변

댓글 수정

비밀번호

수정 취소

/ byte

댓글 입력

이름 비밀번호 관리자답변보기

확인

/ byte


* 왼쪽의 문자를 공백없이 입력하세요.(대소문자구분)

에게만 댓글 작성 권한이 있습니다.


  • 공지사항
  • 쇼핑몰교육신청
  • 교육후기
  • 교육생쇼핑몰
  • 쇼핑몰제작
  • 블로그교육신청
  • 블로그교육후기
  • 질문게시판
  • 자료실
  • 갤러리

캘린더 게시판