포럼
page_full_width" class="col-xs-12" |cond="$__Context->page_full_width">
바이두의 습격....
2013.08.12 23:00
원래 제 홈페이지가 워낙에 마이너해서 하루 방문자가 100명을 넘은 적이 거의 없습니다.
그런데 며칠 전부터 갑자기 홈페이지에 카운터가 하루에 600을 넘기더군요.
왜 그럴까 하고 조사해 봤더니 바이두 검색엔진이 습격을 하고 있습니다.
문제는 User Agent가 MSIE 8.0으로 세팅되어 있어서 UA로 필터링이 안 되는군요.
IP가 202.46. 으로 시작하는 곳에서 오는 MSIE 8.0의 방문은 전부 바이두 로봇으로 봐도 될 것 같습니다.
그냥 황당해서 주절주절 적어봤습니다. ^^a
댓글 5
-
참치.k
2013.08.13 06:44
-
PHPno1
2013.08.13 09:49
검색엔진이 확실해요? 그럼 robots.txt 파일은요?
-
큰돌♡
2013.08.13 11:30
robots.txt도 무시하네요.
참... robots.txt 말이 나왔으니 말인데, 제 홈페이지에서는 이상하게 robots.txt가 동작을 안 하는 것 같습니다.
http://www.kndol.net/robots.txt
이리저리 수정해보다가 도저히 안 돼서 이렇게 해놨는데도 모든 봇이 계속 크롤링하는 것 같네요.
-
S야옹이
2013.08.13 14:05
바이두 봇..ㅋㅋ
-
짤막한글
2013.08.13 16:04
구글 같은경우는 robots.txt에서 확실히 허용하거나 아예 404 페이지 뜨지 않는이상 아예 크롤링하지 않더군요.
글쓴이 | 제목 | 최종 글 |
---|---|---|
미누7 | xe와 네이버 검색 [3] | 2013.08.15 by 몽실아빠 |
라르게덴 | XE의 향후, 내 생각 [8] | 2013.08.15 by Garon |
berics | XE 파일서버 만들기... [6] | 2013.08.15 by 큰성565 |
똑디 | 예상했지만... [8] | 2013.08.14 by 청의필구 |
이온디 | XE개발팀은 분해된 건가요? [27] | 2013.08.14 by 이온디 |
sejin7940 | 그냥 기다리면 안 될까요? 지금도 큰 문제 없는데... [10] | 2013.08.13 by S야옹이 |
큰돌♡ | 바이두의 습격.... [5] | 2013.08.13 by 짤막한글 |
misol | 서명 모듈 같은걸 만들어보려고 해요. [3] | 2013.08.12 by 휘즈 |
휘즈 | 똥똥님이 묻고 답하기 게시판에 [3] | 2013.08.11 by 휘즈 |
푸시아 | 비전문가가 진단하는 XE와 제로보드의 차이점 [18] | 2013.08.11 by pentopen |
쿨럭이 | 미니샵 출력 위젯 간단하게 만들어주실분 없으세요? [3] | 2013.08.11 by 쿨럭이 |
푸시아 | 지난번에 쇼핑몰 만들어 공개하겠다고 했었습니다. [23] | 2013.08.11 by Arisae |
정도의길을걷기싫다 | 게시판에서 자료를 다운받을시 자료받은회원의 내역이 나오도록 하는..? | |
정도의길을걷기싫다 | 포인트를 이용한 툐툐모듈?이 있으면 좋겠어요^-^ [17] | 2013.08.09 by 정도의길을걷기싫다 |
푸시아 | 제가 지금 소셜xe를 개조하고 있는데 [8] | 2013.08.09 by 큰성565 |
socialskyo | XE 담벼락 모듈을 사용중에 있습니다. [1] | 2013.08.09 by socialskyo |
컴퓨터매니아 | 닉네임 변경 금지 성공. | |
스박 | YouTube 링크가 안되던 문제 해결 [1] | 2013.08.09 by 리크스 |
조인잡 | 첨부파일이 다운로드 되지 않고, 클릭을 하면, "잘못된 요청입니다" 에러만 뜹니다 [4] | 2013.08.09 by 스박 |
theand | 이메일 주소 정규식 관련 [2] | 2014.03.20 by stretch fabric |
바이두 봇의 방문자수 테러도 그렇고 구글봇도 만만치 않습니다 ㄷㄷ..