묻고답하기

XE는 없는 모듈일때 메인페이지로 가버리죠.

원래 있었는데 없애버려도 메인페이지로 가버립니다.


근데 간혹 메인페이지로 가지않고 404 Not Found를 띄우고 싶을 때가있습니다.


진정한 검색엔진 구글 때문인데요.
오래 전에 검색로봇이 읽어가서 검색결과가 나오는데 그 결과를 없애기위해서 모듈을 없애고 웹마스터툴에서 URL 삭제요청을 하는데 거부되어 안지워지는 녀석들이 있습니다.


URL 삭제 요청의 조건

 1. 페이지에서 404/410을 반환하거나
 2. robots.txt로 
페이지를 차단함
 3.
또는 noindex 메타태그가 페이지를 차단함


정도인데..

noindex 는 뭔지 모르겠고.

robots.txt는


rewrite 되어 document_slr이 직접 찍힌 http://domain.kr/1234 같은 URL은 개별적으로 차단할 수가없습니다.
이걸 크롤링차단하기위해서는 사이트 자체의 크롤링을 모두 막아버려야하죠.


그래서 모듈숨기기 애드온을 살짝 고쳐서 외부페이지 모듈을 이용해 404 Not Found 페이지를 임의로 만들어 그쪽으로 돌려봤습니다.

http://sanghoon.kr/trash
위 주소처럼 나오도록 한건데요.


이게 404 Not Found 페이지의 요건을 충족한건지 의심스럽습니다.

이런식으로 404를 띄워도 구글봇은 404로 인식하지 않는것으로 생각되거든요.


크롤링로봇이 이 404 Not Found 페이지의 어느부분을 읽어서 "없어졌군"하고 인식하는건지 원리를 몰라서그런데 그게 궁금합니다.



글쓴이 제목 최종 글
XE 공지 글 쓰기,삭제 운영방식 변경 공지 [16] 2019.03.05 by 남기남
아름다운 폐인 setting 에서 port 잘못입력시 오류같네요 [1] 2010.04.26 by 드들나루
kissuri xe폴더 루트로 옮긴후, 기존 게시판주소와 신규 게시판 주소 둘다로 접속이 됩니다. ?? [1] 2010.04.26 by Gekkou
luv07 게시판 가로 너비를 수정하고싶은데..  
전주넷 쉬운설치에서 setup ftp를 잘못적었는데요. 수정은 어디에 하면 되나요? [1] 2010.04.26 by 러키군
아이서핑 크롬에서 xe공식홈 이 부분이 깨지는건가요? [1] file 2010.04.26 by guny
Ragnar Lodbrod xe 쉬운설치시 ftp 에러  
헨지 게시글 구분선 폭 정렬 문제(사진첨부)rr file  
루빈카잔 게시판사용시에406에러...  
Xera 회원가입시 닉네임을 빼고 싶은데요  
주하니 글 대기->관리자 승인 후 게시판에 나타나게 [1] 2010.04.26 by khongchi
카시오페아 엘지전자의 우측메뉴처럼 만들려면 어떻게 해야 하나요?  
denniskim 글입력시 메일발송할때 확장 변수값도 같이 전송  
포토올/wow XE Core 업데이트 후 Guimul님의 링크 게시판 에러..ㅠㅠ.(도와주세요) [1] 2010.04.26 by kissuri
성장연구소 통합검색  
사과장수 게시판 설치가 않돼요 [1] 2010.04.26 by kissuri
아이스큣걸 통합검색기능이요ㅜㅜ [1] 2010.04.26 by SMaker
무비클립 레이아웃 이름이 공백으로 나오는 이유는 왜 그런가요? [2] 2010.04.26 by 앙띠2
히읗 제로보드 스킨 스타일시트가 먹히지 않습니다 [1] 2010.04.26 by 현원
이종춘408 관리자 아이디, 비밀번호가 되지않습니다,, [1] 2010.04.26 by 현원
김성걸310 게시물 유효기간 설정하기  
멀티한 로그인을 한후 이동할 페이지도 적지않았는데 특정게시판으로 이동을 할까요? [1] 2010.04.26 by kissuri
루빈카잔 페이지생성시프레임이나눠지는현상 file  
실버히든 느닷없이 아무것도 안뜹니다. [2] 2010.04.26 by SMaker
김광일 XE 설정이 잘못된거 같은데 어떻게 수정해야 할지 막막하네요 도와주세요 [2] 2010.04.26 by SMaker
가오나싀 게시글이 없어집니다. file  
Indo 회원관리의 최고관리자가 잠겨있어서 삭제가 안됩니다. [2] file 2010.04.26 by SMaker
장우136 지식인에서 다른 게시판처럼 관리자 메일 이용 방법  
주택바가지 최근게시물 출력 관련 질문입니다. 가로출력이 아니라 세로출력으로 나와요  
김광일 cafe24.com에서 제로보드 사용시 문제점이 발생합니다  
laikblue 프로필 이미지를 링크하려고 합니다. [1] 2010.04.25 by 러키군