Background Image

FORUM

lhb
조회 수 7580 추천 수 0 댓글 2
?

단축키

Prev이전 문서

Next다음 문서

크게 작게 위로 아래로 댓글로 가기 인쇄 첨부

* 질문 등록 시 다음의 내용을 꼭 기입하여 주세요.
OS
Windows Server 2012 R2 Standard(DB), Windows 7 pro(client)
CUBRID Ver.
CUBRID 9.2 (9.2.24.0002) (64bit release build for Windows_NT) (Jan 81 2016 06:36:18)
CUBRID TOOL Ver.
CUBRID Manager 9.3.1.704  (64bit)
응용 환경(API)
java

* CUBRID 응용 오류, SQL 오류 또는 SQL 튜닝 관련된 문의는 반드시 다음의 내용을 추가해 주세요. 비밀글이나 비밀 댓글도 가능합니다.
* 저희가 상황을 이해하고, 재현이 가능해야 알 수 있는 문제들이 많습니다. 가능한 정보/정황들을 부탁합니다.
에러 내용 및 재현 방법 재현 가능한 Source와 SQL
관련 테이블(인덱스, 키정보 포함) 정보 CUBRID 홈 디렉토리 아래 log 디렉토리 압축


-------------- 아래에 질문 사항을 기입해 주세요. ------------------------------------------------------------------------

안녕하세요. 고생이 많으십니다.


현재 자사 솔루션으로 큐브리드를 이용해서 데이터 구축을 하고 있습니다.

단순 txt 파일을 읽어서 디비에 인서트하고 있는데 총 건수가 996,261건입니다.

현재 680,000건이 입력되었습니다.

작업 시작시간은 2016-02-15 11:54:56.933 부터입니다. 약 2시간이 경과되었는데 너무 오래 걸리고 있습니다.


오라클과 mysql로도 해보았습니다. 작업시간은 10분이내에 모두 정상종료되었습니다.


솔루션에서 사용하는 hikari DB 커넥션 풀의 min, max=240개입니다.


또 가끔 아래와 같은 오류가 발생하기도 합니다.

[2016-02-15 14:04:46.232] [ERROR] [xxx.APooledDataSource returnConnection:?] [Access : Pool - returnConnection]
cubrid.jdbc.driver.CUBRIDException: Cannot communicate with the broker or received invalid packet[CAS INFO - ip:33000,3,17740],[SESSION-2098],[URL-jdbc:cubrid:ip:33000:db:id:********:].
 at cubrid.jdbc.jci.UConnection.createJciException(UConnection.java:2055)
 at cubrid.jdbc.jci.UInputBuffer.<init>(UInputBuffer.java:74)
 at cubrid.jdbc.jci.UConnection.send_recv_msg(UConnection.java:1667)
 at cubrid.jdbc.jci.UConnection.send_recv_msg(UConnection.java:1676)
 at cubrid.jdbc.jci.UConnection.setIsolationLevel(UConnection.java:1107)
 at cubrid.jdbc.driver.CUBRIDConnection.setTransactionIsolation(CUBRIDConnection.java:355)
 at com.zaxxer.hikari.proxy.ConnectionProxy.resetConnectionState(ConnectionProxy.java:155)
 at com.zaxxer.hikari.proxy.ConnectionProxy.close(ConnectionProxy.java:192)
 at xxx.APooledDataSource.returnConnection(Unknown Source)


구성은 java 1.7, hikari db pool, spring 입니다.


cub_js.access.log에는

2016/02/15 14:07:11 - - - user_token_info is null.

이게 종종 기록되고 있습니다.


혹시 몰라서 소스 일부 및 설정 파일도 같이 보내드립니다.


public synchronized void returnConnection(Connection conn) throws aException
 {
  try
  {
   if (conn != null)
    conn.close();
   conn = null;
  }
  catch (Exception e2)
  {
   logger.error("Access : Pool - returnConnection", e2);
  }
 }


@Override
 public boolean beginTransaction(String datahouse, ISOLATION_LEVEL level) throws aException
 {
  if (_transactionConn != null)
   return true;

  try
  {
   _transactionConn = _pool.getConnection();
   logger.debug("Access.Cubrid : transaction begin - " + _transactionConn.toString());

   _transactionConn.setAutoCommit(false);
   if (level == ISOLATION_LEVEL.SERIALIZABLE)
    _transactionConn.setTransactionIsolation(level.toInt());
   else
    _transactionConn.setTransactionIsolation(ISOLATION_LEVEL.READCOMMITTED.toInt());
  }
  catch (Exception e)
  {
   if (_transactionConn != null)
   {
    try
    {
     _pool.returnConnection(_transactionConn);
    }
    catch (Exception e1)
    {
     logger.error("Access.Cubrid : transaction begin error", e1);
    }
    _transactionConn = null;
   }

   logger.error("Access.Cubrid : transaction begin error", e);

   return false;
  }

  _level = level;
  return true;
 }


public boolean commit(String datahouse) throws aException
 {
  if (_transactionConn == null)
   return false;

  try
  {
   logger.debug("Access : commit - " + _transactionConn.toString());

   _transactionConn.commit();
   _transactionConn.setAutoCommit(true);
   _pool.returnConnection(_transactionConn);
   _transactionConn = null;
  }
  catch (Exception e)
  {
   logger.error("Access : transaction commit error", e);

   _transactionConn = null;
   _level = ISOLATION_LEVEL.NONE;
   return false;
  }

  _level = ISOLATION_LEVEL.NONE;
  return true;
 }


감사합니다.

  • ?
    엄기호 2016.02.17 02:39

    큐브리드를 사용해주셔서 감사합니다.


    위 내용으로는 정확하게 판단하기가 어렵습니다.


    1) 위 내용을 보면 txt 파일을 읽어서 DB에 Insert하신다고 하였는데 한건당 읽어서 DB에 Insert하시나요.

         아니면, txt파일을 모두 읽어서 한번에 Insert를 하시나요.

    2) 위 소스를 보면 ISOLATION_LEVEL를 변경하면서 작업이 수행되는 것 같습니다.

        트랜잭션 격리 수준(isolation_level)에 대한 내용은 아래 URL 정보를 참조 하셔서 개발 해주시면 감사하겠습니다.

        http://www.cubrid.org/manual/93/ko/sql/transaction.html#transaction-isolation-level

    3) CUBRID버전 과 cubrid jdbc 드라이버 버전이 동일하지 다시 한번 확인 부탁드립니다.

        그리고, 에러코드가 어떻게 되는지요.


  • ?
    lhb 2016.02.17 19:38

    1) txt 파일을 line 별로 읽어서 인서트 하며 5000건 단위로 commit을 수행합니다.

    2) ISOLATION_LEVEL 변경은 최초 DB Pool에서 설정한 ISOLATION_LEVEL에서 transaction 사용을 위해 ISOLATION_LEVEL 레벨을 변경하고 autocomit을 false로 변경한 내용이 전부 입니다.

    타사 디비 (oracle, mysql, mssql, db2, altibase, tibero, postgresql, 등등등) 모두 이상없는 코드입니다.

    3) CUBRID-JDBC-9.2.24.0002버전입니다. 정확한 버전 확인을 위해 cubrid_jdbc.jar 압축 해제 해서 확인 결과 메타파일에는 버전 정보가 없고 CUBRID-JDBC-9.2.24.0002 빈 파일이 있습니다.



List of Articles
번호 제목 글쓴이 날짜 조회 수
공지 CUBRID 사용자를 위한 DBeaver 도구 출시 안내 admin 2024.04.23 51
공지 SQLGate for CUBRID 영구 무료 라이선스 제공 file admin 2020.04.09 4458
2294 Cubrid 9.3 버전 문의 3 secret 일산 2016.03.07 9
2293 세그먼트 3 file 큐브리드사랑 2016.03.07 6290
2292 연계 시 에러 문의 1 joke7 2016.03.04 8047
2291 Context requires compatible collations 오류 1 소소 2016.02.25 9922
2290 HA 사용시 to bo active 상태는 정확히 뭐죠? 2 라면 2016.02.25 8185
2289 마이그레이션 시 데드락 발생 문의 1 joke7 2016.02.25 8348
2288 윈도우에 관리모드 localhost 접속 안 됩니다. 2 file 나무친구 2016.02.24 9463
2287 테이블 생성시 reuse_oid 옵션 관련 문의 1 종이 2016.02.22 8844
2286 Cubrid 사용중 문의사항이 있습니다. 1 secret 도린아빠 2016.02.18 15
2285 Auto Increment에 대한 질문입니다. 3 너랑이마녀 2016.02.18 8070
2284 테이블 생성 시 디폴드 값 상이 함 문의 1 joke7 2016.02.17 8087
2283 큐브리드 사용한 데이터 구축 후 db 다운 현상 발생 5 lhb 2016.02.16 8267
2282 error code = -1150 관련 문의 드립니다. 1 큐브 2016.02.16 7544
2281 restart에러 2 life 2016.02.16 6092
2280 리눅스에서 cubrid 명령어 찾을수 없는현상 3 라면 2016.02.16 8705
» 큐브리드 사용한 데이터 구축 시 시간이 너무 오래 걸립니다. 2 file lhb 2016.02.15 7580
2278 큐브리드 에러 관련 문의 입니다. 1 file 그러게 2016.02.15 5994
2277 특정값으로 문자열을 분리하려고 합니다 1 secret 이호영 2016.02.15 8
2276 oracle 마이그레이션 툴 이용 중 문제점에 대해 문의드립니다. 1 file 태진 2016.02.15 6670
2275 HA구성에서 파티션 적용가능? 1 라면 2016.02.12 6362
Board Pagination Prev 1 ... 81 82 83 84 85 86 87 88 89 90 ... 200 Next
/ 200

Contact Cubrid

대표전화 070-4077-2110 / 기술문의 070-4077-2113 / 영업문의 070-4077-2112 / Email. contact_at_cubrid.com
Contact Sales