묻고답하기

  2. Support
  3. 묻고답하기

IIS에서의 봇 차단 문의

2019.09.25 01:41

eznz****

안녕하세요?

요즘 사이트가 페이지 이동하다 보면 랜덤하게 500에러가 나는경우가 있어 로그를 봤더니 AhrefsBot 봇으로 들어오는 사례가 많아 robot.txt에

User-agent: AhrefsBot

Disallow: /

User-agent: *

Allow:/

Disallow: /admin/

를 추가해 놓은 상태입니다.

서버를 내렸다 올려서 그런지 현재는 문제가 없으나 IIS 로그를 보면 여전히 status는 200인 상태로 로그는 계속 찍히고 있는데요..

서버를 내렸다 올리면 하루정도는 괜찮은데 몇시간 지나면 여전히 랜덤하게 500에러를 내거든요..

robot.txt가 제대로 작동하고 있는건가해서요..

감사합니다.

이 게시물을
Profile
좋아요
목록
글쓴이 제목 최종 글
XE 공지 글 쓰기,삭제 운영방식 변경 공지 [16] 2019.03.05 by 남기남
jamjam 서버 호스팅 추천 받습니다. [3] 2019.12.10 by 호리미
railman 웹마스터도구(SEO 검색노출) 수정 및 보완... 사례하겠습니다. file  
자바컴 누리고 장바구니 모듈 결제폼 추가시 에러 file  
Alces 스케치북5, XEDITION 사용중입니다. 아이피 질문  
용감한늑대 관리자 페이지 들어가는 방법좀 .. ㅠㅠ [2] 2019.12.07 by 용감한늑대
sot 배경 부분 컬러 변경을 하고 싶은데 초보라서 어디에 있는지 찾기가 힘드네요 [2] file 2019.12.06 by sot
하늘보리 모바일에서 댓글이 옆으로 쏠리는 현상 file  
판다렌 인증메일 발송 문제 질문합니다 [2] 2019.12.05 by 판다렌
eznz**** 설치 문의 [3] file 2019.12.05 by YJSoft
규블라 게시판에 게시글을 눌렀는데 [1] file 2019.12.05 by sejin7940
소수의힘 게시글 목록에 댓글 내용을 표시하는 방법  
일과여행 보안을 강화할 수 있는 방법이 뭐가 있을까요?  
eznz**** 1.11.5를 설치해도 마찬가지네요 file  
kew1o XpressEngine ver. 1.11.6 업데이트문의 [2] 2019.12.04 by kew1o
hcy**** 모듈게시판 다운로드 [1] file 2019.12.03 by sejin7940
나답게 Planner123 위젯에서 특정 카테고리만 출력 가능할까요? [3] 2019.12.03 by 늘푸른나무2
벨라여왕 제발문제해결좀도와주세요 [2] 2019.12.04 by hcy****
railman SEO 최적화에서 게시물 제목과 게시판 제목 위치 변경  
railman SSL(https) 항상 사용 시 하단에 메세지가 노출되고 있습니다 [2] file 2019.12.02 by railman
정글범 vultr 가상서버 xe 구축  
railman https 에서 SSL 사용에 관한 문의입니다. [2] file 2019.12.01 by railman
피닉스 xe2 다운로드 [1] 2019.11.30 by sejin7940
eznz**** xe 1.11.6 + mssql2008 + php 7.2.11 사이트 생성 이슈 [2] 2019.11.29 by eznz****
KIMPARKLEE 관리자 로그인 문제 도와주세요 [1] file 2019.11.28 by sejin7940
drjester XE를 1개를 가지고 여러 사용자가 독립된 사이트를 구성할 수 있나요? [1] 2019.11.28 by sejin7940
바람과함께시원하게 첫페이지설정 문의 드립니다!!! [2] file 2019.11.28 by 바람과함께시원하게
바람과함께시원하게 사이트 접속시 첫페이 설정문의 드려요  
손주사랑 관리페이지에 유입 경로를 알고싶습니다 file  
하나둘셋 로그인 가능 횟수를 초과했습니다. 5분 간 로그인할 수 없습니다. [2] file 2019.11.27 by 하나둘셋
모얼더 썸네일 품질 옵션을 바꿀 순 없나요? [2] 2019.11.27 by 모얼더
태그 쓰기