cubrid session timeout 문의 드립니다.

by 한담 posted Mar 23, 2020

* 질문 등록 시 다음의 내용을 꼭 기입하여 주세요.
OS
CENTOS7
CUBRID Ver.
CUBRID 10.1 (10.1.27694-63632b2) 64bit
CUBRID TOOL Ver.
CUBRID Manager 10.1.0.000
응용 환경(API)
java(jdk 1.8.0_212)

* CUBRID 응용 오류, SQL 오류 또는 SQL 튜닝 관련된 문의는 반드시 다음의 내용을 추가해 주세요. 비밀글이나 비밀 댓글도 가능합니다.
* 저희가 상황을 이해하고, 재현이 가능해야 알 수 있는 문제들이 많습니다. 가능한 정보/정황들을 부탁합니다.
에러 내용 및 재현 방법 재현 가능한 Source와 SQL
관련 테이블(인덱스, 키정보 포함) 정보 CUBRID 홈 디렉토리 아래 log 디렉토리 압축


-------------- 아래에 질문 사항을 기입해 주세요. ------------------------------------------------------------------------


안녕하세요.

현재 컨트롤러 단에서 dba 권한으로 큐브리드 데이터베이스에 접속 후, 

새로운 데이터베이스를 생성, 계정을 만들고 

새로 생성한 계정으로 Connection하여 특정 경로에 있는 xml문서의 데이터를 파싱, 테이블을 만들고 데이터를 insert 하는 과정을 처리중입니다. 

create table 과 insert data 를 반복하며, 잘 진행되다가 insert data 양이 약 10,000건 이상인 테이블을 생성할 경우,

Cannot communicate with the broker 에러가 발생합니다. 


찾아보니 cubrid_broker.conf 설정에서 session_timeout 을 바꿔주면 된다는 글을 확인하여

--------------------------------------------------------------------------------------------------------------------------------

[broker]

MASTER_SHM_ID           =30001

ADMIN_LOG_FILE          =log/broker/cubrid_broker.log


[%query_editor]

SERVICE                 =ON

BROKER_PORT             =30000

MIN_NUM_APPL_SERVER     =5

MAX_NUM_APPL_SERVER     =200

APPL_SERVER_SHM_ID      =30000

LOG_DIR                 =log/broker/sql_log

ERROR_LOG_DIR           =log/broker/error_log

SQL_LOG                 =ON

TIME_TO_KILL            =120

SESSION_TIMEOUT         =1h

KEEP_CONNECTION         =AUTO

CCI_DEFAULT_AUTOCOMMIT  =ON



[%BROKER1]

SERVICE                 =ON

BROKER_PORT             =33000

MIN_NUM_APPL_SERVER     =5

MAX_NUM_APPL_SERVER     =200

APPL_SERVER_SHM_ID      =33000

LOG_DIR                 =log/broker/sql_log

ERROR_LOG_DIR           =log/broker/error_log

SQL_LOG                 =ON

TIME_TO_KILL            =120

SESSION_TIMEOUT         =1h

KEEP_CONNECTION         =ON

--------------------------------------------------------------------------------------------------------------------------------

위와 같이 설정을 바꿔주었습니다. 
변경 후에는 만건 이상 데이터는 처리가 됩니다.
그런데 한 테이블에 데이터가 870만건인 테이블이 존재하여 설정한 session_timeout 의 1h 으로 부족할 것 같은데 
혹시 무한대로 설정할 수 있는 방법은 없나요? 아니면 최대 설정 시간을 알고싶습니다. 
-1  으로 설정하였더니 broker start fail 이 뜹니다. 

아니면 추가적으로 이렇게 많은 데이터의 마이그레이션 처리 시 활용할 수 있는 방법이 있을까요? 
현재 insert 는 배치를 사용 중입니다. 

stmt.addBatch(insertSql);       
if( count % 1000 == 0 ){
stmt.executeBatch(); // Batch execute
        stmt.clearBatch(); // Clear
        conn.commit();
}
        
if(count != 1){
    stmt.executeBatch();
    conn.commit();
}



Articles