Background Image

FORUM

  1. Home
  2. FORUM
  3. Q&A
2016.02.16 19:23

큐브리드 사용한 데이터 구축 후 db 다운 현상 발생

lhb
조회 수 8267 추천 수 0 댓글 5
?

단축키

Prev이전 문서

Next다음 문서

가 크게 작게 위로 아래로 댓글로 가기 인쇄

* 질문 등록 시 다음의 내용을 꼭 기입하여 주세요.
OS
 Windows Server 2012 R2 Standard(DB), Windows 7 pro(client)
CUBRID Ver.
 CUBRID 9.2 (9.2.24.0002) (64bit release build for Windows_NT) (Jan 81 2016 06:36:18)
CUBRID TOOL Ver.
 CUBRID Manager 9.3.1.704  (64bit)
응용 환경(API)
 java

* CUBRID 응용 오류, SQL 오류 또는 SQL 튜닝 관련된 문의는 반드시 다음의 내용을 추가해 주세요. 비밀글이나 비밀 댓글도 가능합니다.
* 저희가 상황을 이해하고, 재현이 가능해야 알 수 있는 문제들이 많습니다. 가능한 정보/정황들을 부탁합니다.
에러 내용 및 재현 방법 재현 가능한 Source와 SQL
관련 테이블(인덱스, 키정보 포함) 정보 CUBRID 홈 디렉토리 아래 log 디렉토리 압축


-------------- 아래에 질문 사항을 기입해 주세요. ------------------------------------------------------------------------
안녕하세요. 고생이 많으십니다.


QA게시판에 "큐브리드 사용한 데이터 구축 시 시간이 너무 오래 걸립니다." 라고 글을 남겼는데요. 


답변이 없으시네요. ㅜㅡ


이어서 질문 드리겠습니다.

단순 txt 파일을 읽어서 디비에 인서트하고 있는데 총 건수가 996,261건입니다.

오류는 입력시 계속 발생하였고

[2016-02-15 14:04:46.232] [ERROR] [xxx.APooledDataSource returnConnection:?] [Access : Pool - returnConnection]
cubrid.jdbc.driver.CUBRIDException: Cannot communicate with the broker or received invalid packet[CAS INFO - ip:33000,3,17740],[SESSION-2098],[URL-jdbc:cubrid:ip:33000:db:id:********:].
 at cubrid.jdbc.jci.UConnection.createJciException(UConnection.java:2055)
 at cubrid.jdbc.jci.UInputBuffer.<init>(UInputBuffer.java:74)
 at cubrid.jdbc.jci.UConnection.send_recv_msg(UConnection.java:1667)
 at cubrid.jdbc.jci.UConnection.send_recv_msg(UConnection.java:1676)
 at cubrid.jdbc.jci.UConnection.setIsolationLevel(UConnection.java:1107)
 at cubrid.jdbc.driver.CUBRIDConnection.setTransactionIsolation(CUBRIDConnection.java:355)
 at com.zaxxer.hikari.proxy.ConnectionProxy.resetConnectionState(ConnectionProxy.java:155)
 at com.zaxxer.hikari.proxy.ConnectionProxy.close(ConnectionProxy.java:192)
 at xxx.APooledDataSource.returnConnection(Unknown Source)


가끔 PrepareStatement 관련 오류도 발생했습니다.


문제는 데이터를 다 입력 한 후에 프로그램에서 select count(*) from FA001 이렇게 쿼리를 수행하는데요.

디비가 내려갔습니다.

큐브리드 매니저에서 확인해보니 g3test가 중지 중이라고 나오네요.

insert, select만 했는데 DB 다운이라면 매우 심각한 문제라서 DB 선정을 다시 해야하는지 지금 심각하게 고민을 하고 있습니다.


혹 설정을 잘못했는가 하여 어제 글에 conf도 남겼었는데요.

프로그램 속성 상 lob 데이터를 많이 쓰고 있습니다.


이게 구성이 문제가 되는지 어떻게 처리를 해야하는지 궁금합니다.



위로 아래로 댓글로 가기 인쇄
에디터 선택하기
?
Comments '5'
  • ?
    엄기호 2016.02.17 03:39

    안녕하세요.


    데이터 입력 시 "cubrid broker status -f"를 Client Version이 동일하게 나오는지 확인 부탁 드립니다.


    감사합니다.

    댓글
  • ?
    lhb 2016.02.17 19:49 Files첨부 (1)

    CUBRID-JDBC-9.2.24.0002버전입니다.

    정확한 버전 확인을 위해 cubrid_jdbc.jar 압축 해제 해서 확인 결과 메타파일에는 버전 정보가 없고 CUBRID-JDBC-9.2.24.0002 빈 파일이 있습니다.


    혹시 분석가능하신가 하여 cubrid 설치 경로의 log 폴더를 압축하여 첨부하여 드립니다.

    감사합니다.

    댓글
  • ?
    엄기호 2016.02.18 05:15
    log.zip을 확인 해봤습니다. 로그정보에는 DB서버가 Down되어 있고, 접속 시 DB서버를 찾을 수 없다라는 메시지만 있습니다.


    죄송하지만, 현재 준 정보는 분석하기가 어렵습니다. 그래서 자료을 요청 드립니다.

    - cubrid_broker.conf 파일 내에 SQL_LOG=OFF를 SQL_LOG=ON로 해주고, MIN_NUM_APPL_SERVER =100를 MIN_NUM_APPL_SERVER =30 변경하여 수행 한 다음   log폴더에는 정보를 다시 zip으로 묶어서 첨부 해주시면 감사하겠습니다.

    - DB서버 구동 후 이 명령어(cubrid spacedb db명)를 DOS창에서 수행하여 출력 결과 와 AP 프로그램을 수행 후 이 명령어(cubrid spacedb -S db명) 출력 결과도 zip으로 묶어서 첨부 해주시면 감사하겠습니다.

    - PC 메모리 용량은 어떻게 되는지요.

    댓글
  • ?
    lhb 2016.02.19 03:48 Files첨부 (5)

    MIN_NUM_APPL_SERVER =30 변경하여 수행하였습니다.


    FA001 텍스트 파일을 이름만 바꾸어  FA003 파일을 디비에 올렸습니다.

    서버는 16코어 32gb 메모리입니다. 서버정보 캡쳐하여 첨부하였습니다.


    다행히 죽지는 않았습니다만 비슷한 처리 시간을 보이며 다른 문제가 발생했습니다.

    로그 파일은 압축하였지만 60mb가 넘어서 일부만 압축하여 보내드립니다.


    아래의 쿼리를 실행할 경우 cub_server.exe가 cpu를 많이 사용하면서 결과를 주지 않습니다.

    두세번 동시에 실행하면 cpu 100% 사용을 하며 서버가 먹통이 되고 있습니다.

    MIN_NUM_APPL_SERVER =30로 조정한 이후로는 서버가 죽지는 않지만 cpu 점유율이 쿼리를 수행할 수록 높아지고 있습니다.


    튜닝문서를 발견하여 using index 힌트를 주면 붉은색 문구를 제외하면 정상 동작하며 (1번째 질의[ 0.747 초 , 검색 건수 : 3958 ]로 결과를 줌)

    붉은 색 문구를 포함하면 cpu100% 현상이 발견하고 있습니다.


    SELECT

               fa001.G2_ID,

               fa001.G2_DATASETID,

               fa001.G2_SPATIALTYPE,

               fa001.G2_XMIN,

               fa001.G2_YMIN,

               fa001.G2_XMAX,

               fa001.G2_YMAX,

               fa001.G2_INDEX,

               fa001.G2_SPATIAL,

               fa001.JIBUN

    FROM

               g3test.FA001 fa001  ,

               (

                         SELECT DISTINCT

                                    FA001_IDX.G2_ID

                         FROM

                                    g3test.FA001_IDX

                         WHERE

                                    FA001_IDX.G2_GX2 BETWEEN 32 AND 33

                                    AND FA001_IDX.G2_GY2 BETWEEN 73 AND 73

                                    AND FA001_IDX.G2_GX1 BETWEEN 816 AND 825

                                    AND FA001_IDX.G2_GY1 BETWEEN 1839 AND 1843

                                    AND FA001_IDX.G2_XMIN <= 195981395

                                    AND FA001_IDX.G2_YMIN <= 441525594

                                    AND FA001_IDX.G2_XMAX >= 193985029

                                    AND FA001_IDX.G2_YMAX >= 440522874

                                    USING INDEX fa001_idx_idx /*정상*/

               ) IDX

        where

    FA001.G2_ID = IDX.G2_ID

    AND ((JIBUN LIKE '____4%')) /*추가되면 응답없음*/

    USING INDEX pk_fa001_g2_id /*정상*/


    2월 이내로 db 서버 를 확정하여야 하는데 단순 설정 문제가 아니라면 큰 어려움이 있을 것 같습니다.

    ㅡㅠ

    댓글
  • ?
    엄기호 2016.02.24 23:48

    jibun컬럼이 인덱스가 없어서 cpu가 100% 현상이 나오는 것 같습니다.

    jibun컬럼을 인덱스 생성하고, 쿼리문에서 INNER JOIN하여 수행


    SELECT
               fa001.G2_ID,
               fa001.G2_DATASETID,
               fa001.G2_SPATIALTYPE,
               fa001.G2_XMIN,
               fa001.G2_YMIN,
               fa001.G2_XMAX,
               fa001.G2_YMAX,
               fa001.G2_INDEX,
               fa001.G2_SPATIAL,
               fa001.JIBUN
    FROM
               g3test.FA001 fa001
                INNER JOIN
                        (
                         SELECT DISTINCT
                                    FA001_IDX.G2_ID
                         FROM
                                    g3test.FA001_IDX
                         WHERE
                                    FA001_IDX.G2_GX2 BETWEEN 32 AND 33
                                    AND FA001_IDX.G2_GY2 BETWEEN 73 AND 73
                                    AND FA001_IDX.G2_GX1 BETWEEN 816 AND 825
                                    AND FA001_IDX.G2_GY1 BETWEEN 1839 AND 1843
                                    AND FA001_IDX.G2_XMIN <= 195981395
                                    AND FA001_IDX.G2_YMIN <= 441525594
                                    AND FA001_IDX.G2_XMAX >= 193985029
                                    AND FA001_IDX.G2_YMAX >= 440522874
                                    USING INDEX fa001_idx_idx /*정상*/
                       ) IDX ON FA001.G2_ID = IDX.G2_ID
        where JIBUN LIKE '____4%'


    인덱스 생성전 쿼리문 수행 하시고, JIBUN 컬럼을 인덱스 생성 후 쿼리문 수행 해주시면 좋겠습니다.

    댓글
List of Articles
번호 제목 글쓴이 날짜 조회 수
공지 CUBRID 사용자를 위한 DBeaver 도구 출시 안내 admin 2024.04.23 48
공지 SQLGate for CUBRID 영구 무료 라이선스 제공 file admin 2020.04.09 4458
1234 안녕하세요. cubrid 셋팅값 질문입니다. 1 우유악마 2022.09.21 93
1233 안녕하세요. 레코드 접근시 accessor is invalid 라는 에러가 뜹니다. 도와주세요ㅠ 1 file TopCoder 2018.04.09 217
1232 안녕하세요. 큐브리드 DBA권한계정을 잊어버렸을때 찾는방법이 있을까요? 5 겸둥이k 2021.08.10 330
1231 안녕하세요. 큐브리드 백업DB 복구시 문제점에 관해 질문드립니다. 1 성준영 2015.10.01 6584
1230 안녕하세요.. 초보적인 질문입니다, 1 Mi 2018.05.15 180
1229 안녕하세요? loaddb 간에 질의가 있습니다. 2 secret 서기97 2009.06.16 11
1228 안녕하세요? loaddb 에 대해 질문이 있습니다. 1 secret 서기97 2009.06.25 13
1227 안녕하세요~ insert시 자동 증가값을 알고 싶어서 이렇게 글을 올립니다. 2 yongsu9 2011.05.21 13972
1226 안드로이드 [Android] JDBC 직접연결 1 무냉채 2017.03.22 7321
1225 안드로이드 개발 중, 큐브리드 접속 시 VerifyError가 출력되며 에뮬레이터가 종료되어버립니다. 2 롤롤 2021.04.19 120
1224 안전한 암호화 알고리즘 사용 문의드립니다. 1 보안진단 2023.01.27 112
1223 안정성 관련 질문 드립니다. 2 kkckc 2009.05.12 15582
1222 알려주신 쿼리가 원하는 결과가 아닙니다. 재질의 합니다. 3 secret 초보 2010.04.28 23
1221 암복호화 관련, with절 날짜 함수 문의 드립니다. 2 나라라라 2014.08.08 9498
1220 암호/복호화 함수 2 서영신 2011.11.22 16943
1219 암호화 함수 MDB_ENC 질문입니다 1 BE-DEV 2023.04.17 82
1218 암호화관련 문의 드립니다. 1 file 초코초코초 2022.12.29 102
1217 어느 방식이 빠를까요? 1 봉봉나무 2010.12.03 6966
1216 어떠한 쿼리문을 써야햐는지... 정확이 모르겠습니다. 1 프라우닐 2014.01.13 9534
1215 어떤 오류로그 인지 답변 좀 부탁드립니다. file 김상윤 2013.03.20 6173
Board Pagination Prev 1 ... 134 135 136 137 138 139 140 141 142 143 ... 200 Next
/ 200

Contact Cubrid

대표전화 070-4077-2110 / 기술문의 070-4077-2113 / 영업문의 070-4077-2112 / Email. contact_at_cubrid.com
Contact Sales

Site Map