묻고답하기

안녕하세요?

요즘 사이트가 페이지 이동하다 보면 랜덤하게 500에러가 나는경우가 있어 로그를 봤더니 AhrefsBot 봇으로 들어오는 사례가 많아 robot.txt에

User-agent: AhrefsBot

Disallow: /

User-agent: *

Allow:/

Disallow: /admin/

를 추가해 놓은 상태입니다.

서버를 내렸다 올려서 그런지 현재는 문제가 없으나 IIS 로그를 보면 여전히 status는 200인 상태로 로그는 계속 찍히고 있는데요..

서버를 내렸다 올리면 하루정도는 괜찮은데 몇시간 지나면 여전히 랜덤하게 500에러를 내거든요..

robot.txt가 제대로 작동하고 있는건가해서요..

감사합니다.

글쓴이 제목 최종 글
XE 공지 글 쓰기,삭제 운영방식 변경 공지 [16] 2019.03.05 by 남기남
가입명 contact 스킨에서 아래 버튼 삭제하는 방법이 있을까요? [1] file 2019.10.07 by sejin7940
mgl**** 질문합니다 [1] file 2019.10.06 by DoorWeb
JamesRhee 최신버젼을 설치하기가 어렵네요.. [2] 2019.10.03 by JamesRhee
MC조몽 확장변수 여부 체크 isExtraVarsExists() 오류? [1] 2019.10.02 by sejin7940
railman 검색시 이전에(제로 보드) 작성한 게시물이 노출되지 않는 현상  
railman 사이트명 한글이 깨어져서 노출되고 있습니다. [2] file 2019.10.02 by railman
wormhole7 썸네일 간격 문의 [1] file 2019.10.02 by DoorWeb
딥리버 xe보드 이미지 업로드 가 안됩니다 도움이 필요합니다  
비유 xe 입문하였습니다. 어떤걸 공부해야하나요? [1] 2019.10.01 by DoorWeb
안느 원페이지에서 #아이디 값에 따른 메뉴컬러를 변경하려면 어떻게 해야 하나요? [1] 2019.10.01 by DoorWeb
eznz**** IIS에서의 봇 차단 문의 [2] 2019.10.01 by eznz****
sillyrose 주요일정(일정이 나온는 순서 변경하는법)질문입니다. file  
thanksto html 미디어 쿼리 오류 어떻게 해결할 수 있나요? file  
ITNJOB 회원 가입시 "잘못된 요청 입니다." 에러 문의드립니다. file  
nb00040 리스트(테이블) 중 최신 항목을 홈화면에 불러오기 [3] 2019.09.27 by sejin7940
바키라 크롬모바일에서 글쓰고 등록누르면 이사이트에서 나가겠습니까 멘트나옵니다 [1] 2019.09.27 by sejin7940
TJM 게시판 하단에 비밀번호 지정하는 설정은 어디서 하나요? [5] 2019.09.27 by sejin7940
eznz**** 벌써 일주일째 해결이 안되고 있습니다.ㅜㅜ  
프리뷰 서버이전 이후 구글색인요청거부 문의입니다 file  
최지혜 홈페이지에 있는 지도 변경방법 [1] 2019.09.25 by DoorWeb
sunshine 제발 좀 가르쳐 주세요 ㅜㅜ [5] file 2019.09.24 by 오팀장
원주나야 Intermission 레이아웃 검색창 에러 문의드립니다. [2] file 2019.09.24 by 원주나야
안느 참고사이트처럼 스크롤시 ID값으로 정확히 이동하는 방법 아실까요? [1] 2019.09.24 by DoorWeb
조감도프리랜서 페이지에 게시판 들어가는 영역 가로폭 문의드립니다. [3] file 2019.09.24 by 조감도프리랜서
연필 외부페이지에 삽입된 하이퍼링크 주소가 바뀝니다. [2] 2019.09.23 by 연필
orangehome 게시판에 .jfif 이미지를 보이게 하려면 어떻게하죠  
sillyrose 홈페이지 서버(코어?)다운로드 받는방법에 관한 문의 입니다. [1] 2019.09.23 by DoorWeb
blue 질문드립니다 [1] 2019.09.20 by sejin7940
이주연743 사용자 정의 입력칸에 데이터 저절로 넣기  
eznz**** 다음과 같은 에러 메세지가 나와 몇일째 헤매고 있습니다.ㅜㅜㅜ [2] 2019.09.20 by eznz****