트래픽과부하 구글봇 차단 - 애드센스봇제외하기

트래픽과부하 구글봇 차단 - 애드센스봇제외하기

트래픽과부하의 주범 구글봇을 차단하되, 애드센스 봇은 제외시키는 방법입니다.
robot.txt파일에 아래 코드를 집어넣어주세요.

User-agent: Mediapartners-Google
Allow: /
User-agent: Googlebot
Disallow: /
User-agent: googlebot-image
Disallow: /

구글봇이 차단된만큼 크롤링이 없지만 한달 주기로 사이트맵 업데이트를 해주면서,
robot.txtx 제한둔거 4일간격 풀어주시면됩니다.

댓글

이 블로그의 인기 게시물

사이트 상위노출 웹문서 글쓰기방법 1

사이트 커뮤니티 활성화 방안

국내ip와 프록시 서버를 활용한 웹문서 상위노출 전략