Background Image

FORUM

lhb
조회 수 7580 추천 수 0 댓글 2
?

단축키

Prev이전 문서

Next다음 문서

크게 작게 위로 아래로 댓글로 가기 인쇄 첨부

* 질문 등록 시 다음의 내용을 꼭 기입하여 주세요.
OS
Windows Server 2012 R2 Standard(DB), Windows 7 pro(client)
CUBRID Ver.
CUBRID 9.2 (9.2.24.0002) (64bit release build for Windows_NT) (Jan 81 2016 06:36:18)
CUBRID TOOL Ver.
CUBRID Manager 9.3.1.704  (64bit)
응용 환경(API)
java

* CUBRID 응용 오류, SQL 오류 또는 SQL 튜닝 관련된 문의는 반드시 다음의 내용을 추가해 주세요. 비밀글이나 비밀 댓글도 가능합니다.
* 저희가 상황을 이해하고, 재현이 가능해야 알 수 있는 문제들이 많습니다. 가능한 정보/정황들을 부탁합니다.
에러 내용 및 재현 방법 재현 가능한 Source와 SQL
관련 테이블(인덱스, 키정보 포함) 정보 CUBRID 홈 디렉토리 아래 log 디렉토리 압축


-------------- 아래에 질문 사항을 기입해 주세요. ------------------------------------------------------------------------

안녕하세요. 고생이 많으십니다.


현재 자사 솔루션으로 큐브리드를 이용해서 데이터 구축을 하고 있습니다.

단순 txt 파일을 읽어서 디비에 인서트하고 있는데 총 건수가 996,261건입니다.

현재 680,000건이 입력되었습니다.

작업 시작시간은 2016-02-15 11:54:56.933 부터입니다. 약 2시간이 경과되었는데 너무 오래 걸리고 있습니다.


오라클과 mysql로도 해보았습니다. 작업시간은 10분이내에 모두 정상종료되었습니다.


솔루션에서 사용하는 hikari DB 커넥션 풀의 min, max=240개입니다.


또 가끔 아래와 같은 오류가 발생하기도 합니다.

[2016-02-15 14:04:46.232] [ERROR] [xxx.APooledDataSource returnConnection:?] [Access : Pool - returnConnection]
cubrid.jdbc.driver.CUBRIDException: Cannot communicate with the broker or received invalid packet[CAS INFO - ip:33000,3,17740],[SESSION-2098],[URL-jdbc:cubrid:ip:33000:db:id:********:].
 at cubrid.jdbc.jci.UConnection.createJciException(UConnection.java:2055)
 at cubrid.jdbc.jci.UInputBuffer.<init>(UInputBuffer.java:74)
 at cubrid.jdbc.jci.UConnection.send_recv_msg(UConnection.java:1667)
 at cubrid.jdbc.jci.UConnection.send_recv_msg(UConnection.java:1676)
 at cubrid.jdbc.jci.UConnection.setIsolationLevel(UConnection.java:1107)
 at cubrid.jdbc.driver.CUBRIDConnection.setTransactionIsolation(CUBRIDConnection.java:355)
 at com.zaxxer.hikari.proxy.ConnectionProxy.resetConnectionState(ConnectionProxy.java:155)
 at com.zaxxer.hikari.proxy.ConnectionProxy.close(ConnectionProxy.java:192)
 at xxx.APooledDataSource.returnConnection(Unknown Source)


구성은 java 1.7, hikari db pool, spring 입니다.


cub_js.access.log에는

2016/02/15 14:07:11 - - - user_token_info is null.

이게 종종 기록되고 있습니다.


혹시 몰라서 소스 일부 및 설정 파일도 같이 보내드립니다.


public synchronized void returnConnection(Connection conn) throws aException
 {
  try
  {
   if (conn != null)
    conn.close();
   conn = null;
  }
  catch (Exception e2)
  {
   logger.error("Access : Pool - returnConnection", e2);
  }
 }


@Override
 public boolean beginTransaction(String datahouse, ISOLATION_LEVEL level) throws aException
 {
  if (_transactionConn != null)
   return true;

  try
  {
   _transactionConn = _pool.getConnection();
   logger.debug("Access.Cubrid : transaction begin - " + _transactionConn.toString());

   _transactionConn.setAutoCommit(false);
   if (level == ISOLATION_LEVEL.SERIALIZABLE)
    _transactionConn.setTransactionIsolation(level.toInt());
   else
    _transactionConn.setTransactionIsolation(ISOLATION_LEVEL.READCOMMITTED.toInt());
  }
  catch (Exception e)
  {
   if (_transactionConn != null)
   {
    try
    {
     _pool.returnConnection(_transactionConn);
    }
    catch (Exception e1)
    {
     logger.error("Access.Cubrid : transaction begin error", e1);
    }
    _transactionConn = null;
   }

   logger.error("Access.Cubrid : transaction begin error", e);

   return false;
  }

  _level = level;
  return true;
 }


public boolean commit(String datahouse) throws aException
 {
  if (_transactionConn == null)
   return false;

  try
  {
   logger.debug("Access : commit - " + _transactionConn.toString());

   _transactionConn.commit();
   _transactionConn.setAutoCommit(true);
   _pool.returnConnection(_transactionConn);
   _transactionConn = null;
  }
  catch (Exception e)
  {
   logger.error("Access : transaction commit error", e);

   _transactionConn = null;
   _level = ISOLATION_LEVEL.NONE;
   return false;
  }

  _level = ISOLATION_LEVEL.NONE;
  return true;
 }


감사합니다.

  • ?
    엄기호 2016.02.17 02:39

    큐브리드를 사용해주셔서 감사합니다.


    위 내용으로는 정확하게 판단하기가 어렵습니다.


    1) 위 내용을 보면 txt 파일을 읽어서 DB에 Insert하신다고 하였는데 한건당 읽어서 DB에 Insert하시나요.

         아니면, txt파일을 모두 읽어서 한번에 Insert를 하시나요.

    2) 위 소스를 보면 ISOLATION_LEVEL를 변경하면서 작업이 수행되는 것 같습니다.

        트랜잭션 격리 수준(isolation_level)에 대한 내용은 아래 URL 정보를 참조 하셔서 개발 해주시면 감사하겠습니다.

        http://www.cubrid.org/manual/93/ko/sql/transaction.html#transaction-isolation-level

    3) CUBRID버전 과 cubrid jdbc 드라이버 버전이 동일하지 다시 한번 확인 부탁드립니다.

        그리고, 에러코드가 어떻게 되는지요.


  • ?
    lhb 2016.02.17 19:38

    1) txt 파일을 line 별로 읽어서 인서트 하며 5000건 단위로 commit을 수행합니다.

    2) ISOLATION_LEVEL 변경은 최초 DB Pool에서 설정한 ISOLATION_LEVEL에서 transaction 사용을 위해 ISOLATION_LEVEL 레벨을 변경하고 autocomit을 false로 변경한 내용이 전부 입니다.

    타사 디비 (oracle, mysql, mssql, db2, altibase, tibero, postgresql, 등등등) 모두 이상없는 코드입니다.

    3) CUBRID-JDBC-9.2.24.0002버전입니다. 정확한 버전 확인을 위해 cubrid_jdbc.jar 압축 해제 해서 확인 결과 메타파일에는 버전 정보가 없고 CUBRID-JDBC-9.2.24.0002 빈 파일이 있습니다.



List of Articles
번호 제목 글쓴이 날짜 조회 수
공지 SQLGate for CUBRID 영구 무료 라이선스 제공 file admin 2020.04.09 4438
1224 안녕하세요~ insert시 자동 증가값을 알고 싶어서 이렇게 글을 올립니다. 2 yongsu9 2011.05.21 13971
1223 안드로이드 [Android] JDBC 직접연결 1 무냉채 2017.03.22 7321
1222 안드로이드 개발 중, 큐브리드 접속 시 VerifyError가 출력되며 에뮬레이터가 종료되어버립니다. 2 롤롤 2021.04.19 120
1221 안전한 암호화 알고리즘 사용 문의드립니다. 1 보안진단 2023.01.27 109
1220 안정성 관련 질문 드립니다. 2 kkckc 2009.05.12 15582
1219 알려주신 쿼리가 원하는 결과가 아닙니다. 재질의 합니다. 3 secret 초보 2010.04.28 23
1218 암복호화 관련, with절 날짜 함수 문의 드립니다. 2 나라라라 2014.08.08 9498
1217 암호/복호화 함수 2 서영신 2011.11.22 16939
1216 암호화 함수 MDB_ENC 질문입니다 1 BE-DEV 2023.04.17 82
1215 암호화관련 문의 드립니다. 1 file 초코초코초 2022.12.29 101
1214 어느 방식이 빠를까요? 1 봉봉나무 2010.12.03 6966
1213 어떠한 쿼리문을 써야햐는지... 정확이 모르겠습니다. 1 프라우닐 2014.01.13 9534
1212 어떤 오류로그 인지 답변 좀 부탁드립니다. file 김상윤 2013.03.20 6173
1211 어떻게 해야하는건가요? 2 SoMa 2011.05.21 8231
1210 어찌해서 설치는됫는데.. 1 가루구 2009.02.16 14529
1209 어찌해서 설치는됫는데... 1 가루구 2009.02.17 14695
1208 언더바 문의 "_" 2 joke7 2014.07.17 8835
1207 언로드 후, 로드 시 데이터 정렬 순서가 역방향으로 바뀌는 것 관련해서... 1 file 차오이 2012.09.24 7123
1206 언로드 후, 로드가 안되는데 어떤 사항을 체크해 봐야 할까요? 2 secret 차오이 2011.08.23 18
1205 언어별 대표적인 orm 플러그인 개발 계획은 없으신지요? 1 서치 2014.05.05 9165
Board Pagination Prev 1 ... 134 135 136 137 138 139 140 141 142 143 ... 200 Next
/ 200

Contact Cubrid

대표전화 070-4077-2110 / 기술문의 070-4077-2113 / 영업문의 070-4077-2112 / Email. contact_at_cubrid.com
Contact Sales