기타 robots.txt 사용방법 - 이것만 알면 됩니다.

페이지 정보

작성자 관리자 (49.♡.11.159) 조회 2,480회 작성일 21-09-09 02:01(마지막 글 수정: 2022년 06월 19일)

본문

robots.txt 사용방법 - 이것만 알면 됩니다.

복잡하게 생각하지 말고 아래 내용만 알면 기본 적용 가능 합니다.


모든 검색로봇 접근 허용

[code]

User-agent: *

Allow: /

[/code]


모든 검색로봇 접근 차단

[code]

User-agent: *

Disallow: /

[/code]


특정 검색로봇만 허용하고 나머지 차단하기

[code]

User-agent: *

Disallow: /

User-agent: *

Allow: Googlebot

[/code]


특정 폴더만 접근 금지

[code]

User-agent: *

Disallow: /폴더명/

[/code]




robots 관련된 게시글 보기

댓글목록

등록된 댓글이 없습니다.