포럼

  2. Support
  3. 포럼

XE를 사용하면서 서버1대면 충분한걸 3대를 써야하는 상황

2012.04.22 22:40

해커다

하나의 게시판에 게시물 10만개 올려두면 mysql의 cpu사용양이 클릭때 마다 40%가까이 가네요,

cpu는 q8400입니다, 최고라고 할순 없지만 상위입니다.

 

이 문제를 지금까지 1년 6개월간 해결법을 찾고 있는중입니다,

 

일단 apache+mysql+php로 돌리는데 mysql에 초짜라 원인 및 해결법을 찾는데 많이 힘들었습니다,

초당 8회정도의 페이지뷰가 생기는데 게시판당 10만개 게시물을 넣을시 방문이 불가능하더군요,

cpu는 100%

 

조금씩 게시물을 쭐여보니 게시물이 14000개 정도 까지 남기면 홈페이지가 정상으로 열리더군요,

 

그래서 mysql에서 show processlist;를 사용해 연결상태를 확인해본결과

조회수를 올려주는 명령과  select count(*)  명령이 가득 있더군요,

 

그래서 일단 XE소스에 조회수를 조회때마다 올려주는 소스부분을 삭제했습니다,

 

그러고 보니 남은건 select count(*) 명령인데,

 

IdUserHostdbCommandTimeStateInfo
291638rootlocalhost:3704phoneQuery1Sending data

select count(*) as "count" FROM `xe_documents` as ...

이런 Sending data상태의 똑같은 검색명령이 수십개 가득 있네요,

 

이쪽으로 잘아시는분 찾아서 부탁하니 MYSQL문제가 아닌 xe자체의 검색명령이 너무 db에 부담을 준다네요.

 

해당 검색명령이 XE소스 어디쯤에 있는지 찾아보니 \classes\db\DBMysql.class.php 바로 여기에 있더군요?

 

그래서 이부분도 주석처리를 해봤죠,  게시판에 10만개 게시물을 등록시 먹통되게 만드는 주 원인이니까요?

 

 

그런데 그 결과 참 재미 있더군요, 홈페이지 바로 열리네요,

 

10만게시물이 한 게시판에 있고 초당 페이지뷰가 대략 7-10회 입니다,

 

속도가 엄청 빠르더군요,  깜짝 놀랐습니다,

 

 

 

그런데 기쁨도 잠시,

 

게시판 하단을 보니 페이지가 1/1

 

10만개의 게시물이라면 1/5000페이지정도 되야하는게 아닌가요?

 

그리고 다시 해당 소스 아래로 쭉 훓어보니 알겠더군요,

 

 

문제를 일으킨 소스는 바로 게시판 첫 페이지 게시물 리스트를 가져오는 소스가 아닌,

 

게시판 페이지수를 가져오는 소스 비슷한듯 하네요(확신 하긴 힘들지만요, 초짜라),

 

 

원인을 찾았으니 어떻게든 해결을 해볼려고 했으나  초짜로서 마구잡이로 수정해서는 해결하기가 힘들더군요,

 

 

 

다른 xe로 만든 대형 사이트를 찾아보면 게시판당 게시물이 5만개이상인 사이트 몇 곧 잘 되는데

 

어떻게 해결한건지 도저히 공개를 않해주시니 저로서는 어쩔수 없는 상황,

 

mysql최적화하는 글을 다 찾아봐서 최적화 시도를 해봤지만 이건 분명 최적화로 해결할수 있는 문제가 아닌거 같더근요,

 

 

 

mssql로 바꿔보자니 엄두가 나질 않고,

 

 

 

이 문제로 현재 1년넘게 홈페이지 확장도 못하고 홍보도 이 문제때문에 두려워 이대로 유지하고 있는 상황이네요.

 

 

 

 

 

function queryPageLimit($queryObject, $result, $connection){
            $limit = $queryObject->getLimit();
            // Total count
            $temp_where = $queryObject->getWhereString(true, false);
            $count_query = sprintf('select count(*) as "count" %s %s', 'FROM ' . $queryObject->getFromString(), ($temp_where === '' ? '' : ' WHERE '. $temp_where));
            if ($queryObject->getGroupByString() != '') {
                    $count_query = sprintf('select count(*) as "count" from (%s) xet', $count_query);
            }

            $count_query .= (__DEBUG_QUERY__&1 && $queryObject->query_id)?sprintf (' '.$this->comment_syntax, $this->query_id):'';
            $result_count = $this->_query($count_query, $connection);
            $count_output = $this->_fetch($result_count);
            $total_count = (int)$count_output->count;

            $list_count = $limit->list_count->getValue();
            if (!$list_count) $list_count = 20;
            $page_count = $limit->page_count->getValue();
            if (!$page_count) $page_count = 10;
            $page = $limit->page->getValue();
            if (!$page) $page = 1;

            // total pages
            if ($total_count)
                    $total_page = (int) (($total_count - 1) / $list_count) + 1;
            else
                    $total_page = 1;

            // check the page variables
            if ($page > $total_page) $page = $total_page;
            $start_count = ($page - 1) * $list_count;

            $query = $this->getSelectPageSql($queryObject, true, $start_count, $list_count);

            $query .= (__DEBUG_QUERY__&1 && $queryObject->query_id)?sprintf (' '.$this->comment_syntax, $this->query_id):'';
            $result = $this->_query ($query, $connection);
            if ($this->isError ())
                return $this->queryError($queryObject);

            $virtual_no = $total_count - ($page - 1) * $list_count;
            $data = $this->_fetch($result, $virtual_no);

            $buff = new Object ();
            $buff->total_count = $total_count;
            $buff->total_page = $total_page;
            $buff->page = $page;
            $buff->data = $data;
            $buff->page_navigation = new PageHandler($total_count, $total_page, $page, $page_count);
이 게시물을
Profile
심플한 시작페이지 http://www.simplehan.com
좋아요(+1)
목록
글쓴이 제목 최종 글
XE러버 왜인지는 모르겠으나 아래 내용의 글을 XE 1.7.3에서 등록하려고 하면 등록이 안 되거나 등록된 후 에러를 내뿜습니다. [3] 2013.03.18 by XE러버
hhgyu 회원가입 확장 모듈 1.7.X 및 모바일에서 사용가능하도록 수정한 파일 팁게시판에 올립니다.  
이온디 구글 xe 코어에 이슈가 한 가득이란 걸 개발자님은 아실까요.. T^T [4] 2013.03.18 by 똥똥
고양이멍멍 1.7.3.0 설치하고 보니 위젯,이미지 등등 밑에 아주 작은 줄이 생겼네요 file  
imgXE™ 신디케이션 상태 체크해봅시다 ㅎㅎ [18] file 2013.03.18 by imgXE™
강철성모 업그레이드 후 사이트 메뉴 편집과 파일첨부가 안됩니다. [1] file 2013.03.18 by 강철성모
YJSoft XE 1.7 관리자바... [2] 2013.03.19 by OEZ
블랙비 1.7.3 좋킨좋네요  
또별 CMS의 다이나믹한 메뉴기능 구현방법에 대해서 [1] 2013.03.19 by 또별
해커다 XE를 사용하면서 서버1대면 충분한걸 3대를 써야하는 상황 [44] 2013.03.19 by 또별
Inasis XE 코어 1.7.3.0에서 통합검색 모듈 정상동작하나요?  
또별 Core1.7.0 버전에서 1.5x보다 후퇴한 기능에 대해서 [22] 2013.03.19 by Garon
10110 텍스트?로 인하여 페이지 일부분이 깨지는 현상 [3] file 2013.03.19 by SCAC
한마음^^ 1.7.3과 V3 사이트가드의 충돌 문제 [2] 2013.03.19 by 독도2005
이온디 1.7.3 좋아요~!! [14] 2013.03.20 by 라미아스튜디오
이온디 유투브 모듈도 있나요?? [2] 2013.03.20 by 라미아스튜디오
쓰리공주 XE 1.7.3 관리자 메뉴 초기화시 메뉴가 나타나지 않는 현상? [3] file 2013.03.20 by 쓰리공주
이온디 1.7 사이트맵에 관해 이야기 나눠 봅시다 [5] 2013.03.20 by 윈컴이
Gunmania 알림센터 Lite + 회원가입 확장 모듈 조합 쓰시는분? [1] 2013.03.21 by 2donggalbi
또별 메뉴연결구조 혁명적 혁신 방법 [15] 2013.03.21 by 컴토피아
태그 쓰기