묻고답하기
page_full_width" class="col-xs-12" |cond="$__Context->page_full_width">
특정봇만 긁어가게 하고 싶어요 robot.txt
2016.10.25 05:45
안녕 하세요~
수고 많으십니다
네이버 봇
다음봇
구글봇
위의 3개 외에는 모두 차단
이렇게
robot.txt
작성좀 해주실래요
수고 미리 감사의 말씀 올립니다
오늘도 좋은날 되세요~
댓글 2
글쓴이 | 제목 | 최종 글 |
---|---|---|
XE | 공지 글 쓰기,삭제 운영방식 변경 공지 [16] | 2019.03.05 by 남기남 |
네모세상 | 특정봇만 긁어가게 하고 싶어요 robot.txt [2] | 2016.10.26 by 네모세상 |
은빛만월 | robots.txt 관련하여 질문있습니다... [3] | 2016.07.10 by mAKEkr |
theaud**** | 폴더안 txt 문서를 php explode 하여 mysql 에 넣는 과정이 안됩니다ㅠㅠ |
User-agent: *
Disallow: /
User-agent: Yeti
Allow: /
User-agent: Googlebot
Allow: /
User-agent: Daumoa
Allow: /
* 네이버봇은 Yeti 입니다.