묻고답하기

XE는 없는 모듈일때 메인페이지로 가버리죠.

원래 있었는데 없애버려도 메인페이지로 가버립니다.


근데 간혹 메인페이지로 가지않고 404 Not Found를 띄우고 싶을 때가있습니다.


진정한 검색엔진 구글 때문인데요.
오래 전에 검색로봇이 읽어가서 검색결과가 나오는데 그 결과를 없애기위해서 모듈을 없애고 웹마스터툴에서 URL 삭제요청을 하는데 거부되어 안지워지는 녀석들이 있습니다.


URL 삭제 요청의 조건

 1. 페이지에서 404/410을 반환하거나
 2. robots.txt로 
페이지를 차단함
 3.
또는 noindex 메타태그가 페이지를 차단함


정도인데..

noindex 는 뭔지 모르겠고.

robots.txt는


rewrite 되어 document_slr이 직접 찍힌 http://domain.kr/1234 같은 URL은 개별적으로 차단할 수가없습니다.
이걸 크롤링차단하기위해서는 사이트 자체의 크롤링을 모두 막아버려야하죠.


그래서 모듈숨기기 애드온을 살짝 고쳐서 외부페이지 모듈을 이용해 404 Not Found 페이지를 임의로 만들어 그쪽으로 돌려봤습니다.

http://sanghoon.kr/trash
위 주소처럼 나오도록 한건데요.


이게 404 Not Found 페이지의 요건을 충족한건지 의심스럽습니다.

이런식으로 404를 띄워도 구글봇은 404로 인식하지 않는것으로 생각되거든요.


크롤링로봇이 이 404 Not Found 페이지의 어느부분을 읽어서 "없어졌군"하고 인식하는건지 원리를 몰라서그런데 그게 궁금합니다.



글쓴이 제목 최종 글
XE 공지 글 쓰기,삭제 운영방식 변경 공지 [16] 2019.03.05 by 남기남
주하니 [재질문] 글작성->관리자 승인 후->게시판과 위젯에서 나타나게 [1] 2010.04.27 by 앙띠2
misty353 썸네일이 안떠요 [2] 2010.04.27 by 앙띠2
레망 해외에서 사용시에 표준시간 [2] 2010.04.27 by eznet
아이스큣걸 검색해서 드러가면 header부분을 홈페이지와 같게ㅜㅜ [1] 2010.04.27 by reon
안광희515 게시판에서 글쓰기가 안됩니다.  
짱구56 게시판 업로드 용량의 다운문제...........  
MOONBEAM 제어판 > 사이트설정 >메뉴 에서 메뉴 관리가 동작을 안하네요. [1] file 2010.04.27 by 술도짱
kissuri 플래닛에서 닉네임출력시 레벨아이콘과 이미지마크 안나오게 하는 방법 좀 가르쳐주세요  
서브아트 다음 에디터에 확장 컨퍼넌트를 부치는게 가능할까요?  
kissuri 플래닛에서 닉네임명이 길 경우 리플달면 닉네임과 리플이 겹쳐집니다. file  
misty353 준회원을 관리자로 어떻게 ? [1] 2010.04.27 by 하야미소
misty353 레이아웃 메인 페이지를 다른 페이지와 다르게 할려면 [1] 2010.04.27 by 하야미소
999 현재 xe 에서 지원하는 외국어 종류는? [1] 2010.04.26 by 백성찬
아름다운 폐인 setting 에서 port 잘못입력시 오류같네요 [1] 2010.04.26 by 드들나루
kissuri xe폴더 루트로 옮긴후, 기존 게시판주소와 신규 게시판 주소 둘다로 접속이 됩니다. ?? [1] 2010.04.26 by Gekkou
luv07 게시판 가로 너비를 수정하고싶은데..  
전주넷 쉬운설치에서 setup ftp를 잘못적었는데요. 수정은 어디에 하면 되나요? [1] 2010.04.26 by 러키군
아이서핑 크롬에서 xe공식홈 이 부분이 깨지는건가요? [1] file 2010.04.26 by guny
Ragnar Lodbrod xe 쉬운설치시 ftp 에러  
헨지 게시글 구분선 폭 정렬 문제(사진첨부)rr file  
루빈카잔 게시판사용시에406에러...  
Xera 회원가입시 닉네임을 빼고 싶은데요  
주하니 글 대기->관리자 승인 후 게시판에 나타나게 [1] 2010.04.26 by khongchi
카시오페아 엘지전자의 우측메뉴처럼 만들려면 어떻게 해야 하나요?  
denniskim 글입력시 메일발송할때 확장 변수값도 같이 전송  
포토올/wow XE Core 업데이트 후 Guimul님의 링크 게시판 에러..ㅠㅠ.(도와주세요) [1] 2010.04.26 by kissuri
성장연구소 통합검색  
사과장수 게시판 설치가 않돼요 [1] 2010.04.26 by kissuri
아이스큣걸 통합검색기능이요ㅜㅜ [1] 2010.04.26 by SMaker
무비클립 레이아웃 이름이 공백으로 나오는 이유는 왜 그런가요? [2] 2010.04.26 by 앙띠2