User-agent: *

Disallow: /rb/_core/

Disallow: /rb/_var/

Disallow: /rb/_tmp/

Disallow: /rb/layouts/

Disallow: /rb/modules/

Disallow: /rb/pages/

Disallow: /rb/files/

Disallow: /rb/switchs/

Disallow: /rb/widgets/

Disallow: /*system=edit

Disallow: /*_themeConfig

Disallow: /rb/admin

Disallow: /*m=admin

Disallow: /rb/p/login

Disallow: /*mod=login

Disallow: /rb/p/join

Disallow: /*mod=join

Disallow: /*mod=write

Disallow: /*iframe=Y

Disallow: /*keyword=

Disallow: /*mod=delete

Disallow: /*&a=

Disallow: /*?a=

Disallow: /*action/

Disallow: /*type=modify 

 

 

저희 홈피 로봇 제한명령인데요,  / 명령이 로봇 크롤링 제한 명령으로 알고 있는데 카테고리별로

왜이렇게 많을까요?

개발자한테 얘길해서 없애라고 할까요?

어치피 관리자 메뉴는 비밀번호 로그인 걸려있으니 알아서 로봇이 크롤링이 안될텐데

제생각엔  

User-agent: *

​Disallow: 

만 입력되도 되지않을지요?

조언좀 부탁드립니다.​