|
   홈페이지 |
20년 전 |
archive.org의 WayBack Machine이라고 웹사이트의 예전 모습을 보여주는 서비스가 있는데요.
별로 서비스받고 싶지 않으신 분들이 계실 겁니다.
그럴 때 로봇의 접근을 차단할려면 서버의 최상단 디렉토리에
(Index파일이 있는 곳, http://www.dajuji.com/robots.txt )
robots.txt라는 이름으로 아래 내용의 파일을 만들어 주세요.
(반드시 최상단이어야 합니다.)
--------
WayBack Machine 로봇만 차단할 경우 :
--------
User-agent: ia_archiver
Disallow: /
--------
다른 검색엔진 로봇도 차단할 경우 :
--------
User-agent: *
Disallow: /
--------
퍼미션은 Read 권한만 있으면 됩니다. (644 쯤?)
만약 도메인의 소유주가 바뀌었다거나-_- 현재 그 계정을 이용할 수 없다면
wayback2@archive.org 라는 주소로 Removal Request 라는 제목을 달아서 메일을 보내주시면 됩니다. |
|
 추천 : 382 |
추천
목록
|
|
