Background Image
제품 여행
2023.04.26 11:24

Index의 capacity에 관한 정보 열람

조회 수 324 추천 수 1 댓글 0
?

단축키

Prev이전 문서

Next다음 문서

크게 작게 위로 아래로 댓글로 가기 인쇄

Index Capacity 정보

 

들어가며

DBMS의 여러 기능 기능이나 구성 요소들 중에서 가장 중요한 것은 무엇일까요?
Index는 '가장' 중요한은 아니더라도 적어도 '아주 아주' 중요한 요소가 아닐까 생각 합니다.

Index가 없다면 데이터를 쌓아 두기만 할 수 있을 뿐 사실상 관리는 못하는 그런 시스템이 될 테니까요.

자료가 많으면 많을 수록 Index는 더 중요해 집니다.

이렇게 중요한 Index를 분석할 때에도 목적에 부합하는 여러가지 도구와 방법들이 있을 수 있습니다.

이 페이지에서는 그 중에서 Index의 Capaicty에 대한 정보를 리뷰해 보고자 합니다.

기본적인 사용 방법이나 설명은 매뉴얼을 통해 얻을 수 있으므로 여기서 설명은 생략합니다.

 

INDEX CAPACITY 정보 얻기

우선 CUBRID에서는 Index의 Capacity 정보를 다음과 같은 두 가지 방법으로 쉽게(?) 알아 볼 수 있습니다.

1. diagdb tool

-------------------------------------------------------------
BTID: {{0, 5952}, 5953}, idx0 ON dba.tbl, CAPACITY INFORMATION:
Distinct Key Count: 0
Total Value Count: 0
Average Value Count Per Key: 0
Total Page Count: 2
Leaf Page Count: 1
NonLeaf Page Count: 1
Height: 2
Average Key Length: 0
Average Record Length: 0
Total Index Space: 32688 bytes
Used Index Space: 200 bytes
Free Index Space: 32488 bytes
Average Page Free Space: 16244 bytes
Average Page Key Count: 0
-------------------------------------------------------------

 

 2. SHOW INDEX CAPACITY 명령 

Table_name           : 'dba.tbl'        
Index_name           : 'idx0'        
Btid                 : '(0|5952|5953)'        
Num_distinct_key     : 0        
Total_value          : 0        
Avg_num_value_per_key: 0        
Num_leaf_page        : 1        
Num_non_leaf_page    : 1        
Num_total_page       : 2        
Height               : 2        
Avg_key_len          : 0        
Avg_rec_len          : 0        
Total_space          : '31.9K'        
Total_used_space     : '200.0B'        
Total_free_space     : '31.7K'        
Avg_num_page_key     : 0        
Avg_page_free_space  : '15.9K'


위 두가지 수행 결과는 표현되는 키워드와 형식만 약간 다를 뿐 사실 동일한 내용입니다.
 

INDEX CAPACITY 세부 항목

각 항목에 대한 설명을 "SHOW INDEX CAPACITY" 명령의 결과 기준으로 설명하면 아래 표와 같습니다.

 

SHOW INDEX CAPACITY

diagdb 

의 미

비고

Table_name

 

테이블 이름

 

Index_name

 

인덱스 이름

 

Btid

 

BTID 정보 (vol ID, file ID, root_page ID)

 

Num_distinct_key

Distinct Key Count

전체 leaf 페이지에 존재하는 Distinct key 개수

 

Total_value

Total Value Count

인덱스에 저장된 OID 개수

 

Avg_num_value_per_key

Average Value Count Per Key

키 당 OID 값의 평균 개수

((Num_distinct_key > 0) ? (Total_value / Num_distinct_key) : 0)

Num_leaf_page

Leaf Page Count

Non-Leaf 페이지 개수

 

Num_non_leaf_page

NonLeaf Page Count

leaf 페이지 개수

 

Num_total_page

Total Page Count

전체 페이지 개수

 

Height

Height

트리의 높이

 

Avg_key_len

Average Key Length

평균 키 길이

((Num_distinct_key > 0) ? (sum_of_each_key_len / Num_distinct_key) : 0)

Avg_rec_len

Average Record Length

평균 페이지 레코드 길이

((Num_distinct_key > 0) ? (sum_of_each_record_len / Num_distinct_key) : 0)

Total_space

Total Index Space

인덱스에 의해 점유되는 전체 공간

 

Total_used_space

Used Index Space

인덱스의 전체 사용 공간

Total_space - Total_free_space

Total_free_space

Free Index Space

인덱스의 전체 여유 공간

 

Avg_num_page_key

Average Page Key Count

Leaf 페이지 당 평균 키 개수

((Num_leaf_page > 0) ? (Num_distinct_key / Num_leaf_page) : 0)

Avg_page_free_space

Average Page Free Space

전체 페이지 당 평균 여유 공간

((Num_total_page > 0) ? (Total_free_space / Num_total_page) : 0)

 

주1)  v11.2.3 기준입니다.

주2)  각각의 항목은 Overflow Page에 대한 정보를 포함하지 않은 상태로 보여 집니다. 

       다만, Total_value 항목은 Overflow Page의 정보를 포함합니다.

주3)  Overflow Page영역의 정보는 이후 버전에서 포함 될 예정입니다.

 

사용해 보기1

 

우선 자료가 많지 않은 작은 테이블을 가지고 검토를 해 봅시다.

아래와 같이 동일한 구성의 두 테이블읋 준비해서 각각 50건과 500건을 입력합니다.

drop table if exists t1, t2;
create table t1(id int primary key, v1 int, v2 int);
create index idx1 on t1(v1);
create index idx2 on t1(v2);
create table t2 like t1;  

insert into t1 select rownum, rownum % 10, 1 from db_class a, db_class b, db_class c limit 50;
insert into t2 select rownum, rownum % 10, 1 from db_class a, db_class b, db_class c limit 500;

 

아래 명령으로 Capacity 정보를 얻어 봅니다.

;line on
show all indexes capacity  of t1;
show all indexes capacity  of t2;

 

아래에서 왼쪽은 t1 테이블 오른쪽은 t2 테이블에 대한 결과입니다.

=== <Result of SELECT Command in Line 1> ===

<00001> Table_name           : 'dba.t1'
        Index_name           : 'idx1'
        Btid                 : '(0|5696|5697)'
        Num_distinct_key     : 10
        Total_value          : 50
        Avg_num_value_per_key: 5
        Num_leaf_page        : 1
        Num_non_leaf_page    : 0
        Num_total_page       : 1
        Height               : 1
        Avg_key_len          : 4
        Avg_rec_len          : 84
        Total_space          : '16.0K'
        Total_used_space     : '1000.0B'
        Total_free_space     : '15.0K'
        Avg_num_page_key     : 10
        Avg_page_free_space  : '15.0K'
<00002> Table_name           : 'dba.t1'
        Index_name           : 'idx2'
        Btid                 : '(0|5760|5761)'
        Num_distinct_key     : 1
        Total_value          : 50
        Avg_num_value_per_key: 50
        Num_leaf_page        : 1
        Num_non_leaf_page    : 0
        Num_total_page       : 1
        Height               : 1
        Avg_key_len          : 4
        Avg_rec_len          : 804
        Total_space          : '16.0K'
        Total_used_space     : '928.0B'
        Total_free_space     : '15.1K'
        Avg_num_page_key     : 1
        Avg_page_free_space  : '15.1K'
<00003> Table_name           : 'dba.t1'
        Index_name           : 'pk_t1_id'
        Btid                 : '(0|5568|5569)'
        Num_distinct_key     : 50
        Total_value          : 50
        Avg_num_value_per_key: 1
        Num_leaf_page        : 1
        Num_non_leaf_page    : 0
        Num_total_page       : 1
        Height               : 1
        Avg_key_len          : 4
        Avg_rec_len          : 20
        Total_space          : '16.0K'
        Total_used_space     : '1.3K'
        Total_free_space     : '14.7K'
        Avg_num_page_key     : 50
        Avg_page_free_space  : '14.7K'

3 rows selected. (0.004562 sec) Committed. (0.000016 sec)

1 command(s) successfully processed.
 

=== <Result of SELECT Command in Line 1> ===

<00001> Table_name           : 'dba.t2'
        Index_name           : 'idx1'
        Btid                 : '(0|5952|5953)'
        Num_distinct_key     : 10
        Total_value          : 500
        Avg_num_value_per_key: 50
        Num_leaf_page        : 1
        Num_non_leaf_page    : 0
        Num_total_page       : 1
        Height               : 1
        Avg_key_len          : 4
        Avg_rec_len          : 804
        Total_space          : '16.0K'
        Total_used_space     : '8.0K'
        Total_free_space     : '8.0K'
        Avg_num_page_key     : 10
        Avg_page_free_space  : '8.0K'
<00002> Table_name           : 'dba.t2'
        Index_name           : 'idx2'
        Btid                 : '(0|6016|6017)'
        Num_distinct_key     : 1
        Total_value          : 500
        Avg_num_value_per_key: 500
        Num_leaf_page        : 1
        Num_non_leaf_page    : 0
        Num_total_page       : 1
        Height               : 1
        Avg_key_len          : 4
        Avg_rec_len          : 1380
        Total_space          : '16.0K'
        Total_used_space     : '1.5K'
        Total_free_space     : '14.5K'
        Avg_num_page_key     : 1
        Avg_page_free_space  : '14.5K'
<00003> Table_name           : 'dba.t2'
        Index_name           : 'pk_t2_id'
        Btid                 : '(0|5824|5825)'
        Num_distinct_key     : 500
        Total_value          : 500
        Avg_num_value_per_key: 1
        Num_leaf_page        : 1
        Num_non_leaf_page    : 0
        Num_total_page       : 1
        Height               : 1
        Avg_key_len          : 4
        Avg_rec_len          : 20
        Total_space          : '16.0K'
        Total_used_space     : '11.8K'
        Total_free_space     : '4.1K'
        Avg_num_page_key     : 500
        Avg_page_free_space  : '4.1K'

3 rows selected. (0.005187 sec) Committed. (0.000019 sec)

1 command(s) successfully processed.
 

 

    Num_distinct_key와 Total_value를 비교해서 보면 pk_t1_id는 unique 하므로 입력된 레코드 건수와 키의 개수, Total_value의 개수가 동일함을 볼 수 있고,

   idx2는 레코드가 모두 동일한 값을 갖으므로 Total_value의 개수는 레코드 개수와 동일하지만 Num_distinct_key는 항상 1임을 볼 수 있다.

   idx1은 키가 중복되어 Num_distinct_key는 값이 일정 개수 이상으로 늘지 않고 있음을 볼 수 있다.

 

사용해 보기2

이제 데이터의 양을 늘려서 다른 부분들에 대해 검토 해 보겠습니다.

우선 아래와 같은 구문을 이용해서 테이블을 생성하고 데이터를 입력합니다.

drop table if exists tbl;
create table tbl(id int primary key, v1 int, v2 int, v3 int, s char(120));
create index idx1 on tbl(v1, s);
create index idx2 on tbl(v2, s);
create index idx3 on tbl(v3, s);

insert into tbl select rownum, rownum % 5000, rownum % 500, 1, 'cubrid string test' from db_class a, db_class b, db_class c, db_class d limit 100000;
;line on
show all indexes capacity  of tbl;


이 상태에서 아래 명령으로 100건의 레코드를 삭제한 후의 상태와 전체를 모두 삭제한 후의 상태를 확인해 봅니다.

delete from tbl where id%1000 = 1;
show all indexes capacity  of tbl;

delete from tbl;
show all indexes capacity  of tbl;


아래의 표에서 비교해서 볼 수 있습니다.

100000건 입력 후

100건 삭제 후

전체 삭제 후

=== <Result of SELECT Command in Line 1> ===

<00001> Table_name           : 'dba.tbl'
        Index_name           : 'idx1'
        Btid                 : '(0|6208|6209)'
        Num_distinct_key     : 5688
        Total_value          : 100688
        Avg_num_value_per_key: 17
        Num_leaf_page        : 345
        Num_non_leaf_page    : 1
        Num_total_page       : 346
        Height               : 2
        Avg_key_len          : 426
        Avg_rec_len          : 571
        Total_space          : '5.4M'
        Total_used_space     : '3.1M'
        Total_free_space     : '2.2M'
        Avg_num_page_key     : 16
        Avg_page_free_space  : '6.6K'
<00002> Table_name           : 'dba.tbl'
        Index_name           : 'idx2'
        Btid                 : '(0|6272|6273)'
        Num_distinct_key     : 650
        Total_value          : 100150
        Avg_num_value_per_key: 154
        Num_leaf_page        : 76
        Num_non_leaf_page    : 1
        Num_total_page       : 77
        Height               : 2
        Avg_key_len          : 374
        Avg_rec_len          : 920
        Total_space          : '1.2M'
        Total_used_space     : '593.3K'
        Total_free_space     : '635.7K'
        Avg_num_page_key     : 8
        Avg_page_free_space  : '8.3K'
<00003> Table_name           : 'dba.tbl'
        Index_name           : 'idx3'
        Btid                 : '(0|6336|6337)'
        Num_distinct_key     : 1
        Total_value          : 100000
        Avg_num_value_per_key: 100000
        Num_leaf_page        : 1
        Num_non_leaf_page    : 0
        Num_total_page       : 1
        Height               : 1
        Avg_key_len          : 485
        Avg_rec_len          : 1192
        Total_space          : '16.0K'
        Total_used_space     : '1.3K'
        Total_free_space     : '14.7K'
        Avg_num_page_key     : 1
        Avg_page_free_space  : '14.7K'
<00004> Table_name           : 'dba.tbl'
        Index_name           : 'pk_tbl_id'
        Btid                 : '(0|6080|6081)'
        Num_distinct_key     : 100310
        Total_value          : 100310
        Avg_num_value_per_key: 1
        Num_leaf_page        : 156
        Num_non_leaf_page    : 1
        Num_total_page       : 157
        Height               : 2
        Avg_key_len          : 4
        Avg_rec_len          : 12
        Total_space          : '2.4M'
        Total_used_space     : '1.5M'
        Total_free_space     : '926.2K'
        Avg_num_page_key     : 643
        Avg_page_free_space  : '5.9K'

4 rows selected. (6.017251 sec) Committed. (0.000028 sec)

1 command(s) successfully processed.

=== <Result of SELECT Command in Line 1> ===

<00001> Table_name           : 'dba.tbl'
        Index_name           : 'idx1'
        Btid                 : '(0|6208|6209)'
        Num_distinct_key     : 5688
        Total_value          : 100688
        Avg_num_value_per_key: 17
        Num_leaf_page        : 345
        Num_non_leaf_page    : 1
        Num_total_page       : 346
        Height               : 2
        Avg_key_len          : 426
        Avg_rec_len          : 571
        Total_space          : '5.4M'
        Total_used_space     : '3.2M'
        Total_free_space     : '2.2M'
        Avg_num_page_key     : 16
        Avg_page_free_space  : '6.6K'
<00002> Table_name           : 'dba.tbl'
        Index_name           : 'idx2'
        Btid                 : '(0|6272|6273)'
        Num_distinct_key     : 650
        Total_value          : 100150
        Avg_num_value_per_key: 154
        Num_leaf_page        : 76
        Num_non_leaf_page    : 1
        Num_total_page       : 77
        Height               : 2
        Avg_key_len          : 374
        Avg_rec_len          : 921
        Total_space          : '1.2M'
        Total_used_space     : '593.6K'
        Total_free_space     : '635.4K'
        Avg_num_page_key     : 8
        Avg_page_free_space  : '8.3K'
<00003> Table_name           : 'dba.tbl'
        Index_name           : 'idx3'
        Btid                 : '(0|6336|6337)'
        Num_distinct_key     : 1
        Total_value          : 100000
        Avg_num_value_per_key: 100000
        Num_leaf_page        : 1
        Num_non_leaf_page    : 0
        Num_total_page       : 1
        Height               : 1
        Avg_key_len          : 485
        Avg_rec_len          : 1192
        Total_space          : '16.0K'
        Total_used_space     : '1.3K'
        Total_free_space     : '14.7K'
        Avg_num_page_key     : 1
        Avg_page_free_space  : '14.7K'
<00004> Table_name           : 'dba.tbl'
        Index_name           : 'pk_tbl_id'
        Btid                 : '(0|6080|6081)'
        Num_distinct_key     : 100310
        Total_value          : 100310
        Avg_num_value_per_key: 1
        Num_leaf_page        : 156
        Num_non_leaf_page    : 1
        Num_total_page       : 157
        Height               : 2
        Avg_key_len          : 4
        Avg_rec_len          : 12
        Total_space          : '2.4M'
        Total_used_space     : '1.5M'
        Total_free_space     : '925.4K'
        Avg_num_page_key     : 643
        Avg_page_free_space  : '5.9K'

4 rows selected. (0.016022 sec) Committed. (0.000017 sec)

1 command(s) successfully processed.
 

=== <Result of SELECT Command in Line 1> ===

<00001> Table_name           : 'dba.tbl'
        Index_name           : 'idx1'
        Btid                 : '(0|6208|6209)'
        Num_distinct_key     : 489
        Total_value          : 489
        Avg_num_value_per_key: 1
        Num_leaf_page        : 30
        Num_non_leaf_page    : 1
        Num_total_page       : 31
        Height               : 2
        Avg_key_len          : 428
        Avg_rec_len          : 446
        Total_space          : '494.8K'
        Total_used_space     : '217.5K'
        Total_free_space     : '277.2K'
        Avg_num_page_key     : 16
        Avg_page_free_space  : '8.9K'
<00002> Table_name           : 'dba.tbl'
        Index_name           : 'idx2'
        Btid                 : '(0|6272|6273)'
        Num_distinct_key     : 495
        Total_value          : 495
        Avg_num_value_per_key: 1
        Num_leaf_page        : 33
        Num_non_leaf_page    : 1
        Num_total_page       : 34
        Height               : 2
        Avg_key_len          : 422
        Avg_rec_len          : 447
        Total_space          : '542.7K'
        Total_used_space     : '221.3K'
        Total_free_space     : '321.4K'
        Avg_num_page_key     : 15
        Avg_page_free_space  : '9.5K'
<00003> Table_name           : 'dba.tbl'
        Index_name           : 'idx3'
        Btid                 : '(0|6336|6337)'
        Num_distinct_key     : 1
        Total_value          : 431
        Avg_num_value_per_key: 431
        Num_leaf_page        : 1
        Num_non_leaf_page    : 0
        Num_total_page       : 1
        Height               : 1
        Avg_key_len          : 485
        Avg_rec_len          : 520
        Total_space          : '16.0K'
        Total_used_space     : '656.0B'
        Total_free_space     : '15.3K'
        Avg_num_page_key     : 1
        Avg_page_free_space  : '15.3K'
<00004> Table_name           : 'dba.tbl'
        Index_name           : 'pk_tbl_id'
        Btid                 : '(0|6080|6081)'
        Num_distinct_key     : 437
        Total_value          : 437
        Avg_num_value_per_key: 1
        Num_leaf_page        : 4
        Num_non_leaf_page    : 1
        Num_total_page       : 5
        Height               : 2
        Avg_key_len          : 4
        Avg_rec_len          : 19
        Total_space          : '79.8K'
        Total_used_space     : '10.6K'
        Total_free_space     : '69.2K'
        Avg_num_page_key     : 109
        Avg_page_free_space  : '13.8K'

4 rows selected. (0.006074 sec) Committed. (0.000018 sec)

1 command(s) successfully processed.
 

 

 

이 비교 테이블 중에서 PK인 pk_tbl_id에 대해서 우선 살펴 보겠습니다.

우선 Num_distinct_key값이 각각 100000, 99900, 0 으로 표시 되지 않았음을 볼 수 있습니다. 이상하다고 생각되겠지만 이 값들은 사용자가 입력한 정보가 아니라 현재 Index의 상태를 보여주는 용도이기 때문입니다.

우선 처음 100000개를 입력한 상태에서 100310으로 입력건수보다 많은 키가 존재하는 이유는 내부 처리 과정에서 FENCE_KEY와 같은 관리용 키가 생성되었기 때문입니다.

100건을 삭제한 후에도 값이 줄지 않고 있는 이유는 삭제되었다고 해도 Index에 정보가 남아 있는 상태이기 때문입니다. 이런 정보는 VACUUM을 통해서 정리가 됩니다.

전체 삭제 후에도 437개가 있는 것으로 표시되는 것은 VACUUM이 현재 수행 중이어서 정리를 하고 있는 중이기 때문입니다. 아직 전체 정리가 덜 된 상태라고 볼 수 있습니다.

 

이제 idx3 인덱스를 살펴 보겠습니다.

Num_total_page와 같은 페이지 수 정보를 보면 1로 변함이 없습니다. 다른 인덱스들이 데이터 양에 따라 페이지수의 변화가 있는데 비해 idx3는 항상 1개의 페이지만 가지고 있는 것처럼 보입니다.  그 이유는 현재 보여지는 정보에서는  OID Overflow-pages에 대한 정보를 포함하고 있지 않기 때문에 그런 착각을 불러 일으키는 것입니다.

 

마무리

인덱스의 Capacity 정보를 볼 때  혼동 할 만한 부분들에 대해서 간단하게 살펴 보았습니다.

현재 버전에서 아쉬운 점은 OID Overflow pages에 대한 정보가 없다는 것인데 이 부분은 차후 버전에서 개선 될 것입니다.

새 버전에서 정보가 추가되면 다시 변경 사항에 대해 설명 드리겠습니다.

 

 


  1. 이노베이션 아카데미와 CUBRID의 산학협력

    이노베이션 아카데미 (42서울) 42SEOUL(42서울)은 아키텍트급 소프트웨어 인재를 양성하는 것을 목적으로 하는 교육 과정이며, 프랑스에서 시작된 에꼴42의 교육 방식 및 인프라를 수입하여 운영하는 형태를 띈다. 에꼴42(Ecole 42)는 프랑스의 대형 통신사 CEO이기도 한 자비에 니엘(Xavier Niel)이라는 억만장자가 프랑스에서 2013년에 설립했다. 설립 당시에도 자기주도 학습 및 동료 평가를 내세운 무료 소프트웨어 교육 기관이라는 점으로 주목받았다. 현재는 브라질, 미국, 일본 등 세계 여러 곳에도 42 캠퍼스가 있다. 2019년에 대한민국 서울에도 42 서울 캠퍼스가 들어왔다. 42의 특징 중 하나로, 자기주도적 학습을 지향하기에 교재나 교수가 따로 없고 모든 것은 스스로 인터넷 또는 각종 도서 등을 통하거나 동료들과의 협업 및 교류를 통해 학습을 하게끔 유도한다. 교육생들 스스로 방법을 찾아 나아가라는 의도이며, 정해진 교재 및 교수가 없기 때문에 필연적으로 많은 삽질과 불분명한 요구사항을 맞닥뜨리게 된다. 심지어 문제를 풀어야 하는데, 뭘 배우고 공부해야 하는지 조차도 제대로 알려주지 않는다. 이는 소프트웨어 현장을 그대로 모방하여 실전 경...
    Date2022.02.22 Category알려요~ By민준 Views291 Votes0
    Read More
  2. Scouter를 통한 CUBRID 모니터링

    Scouter를 통한 CUBRID 모니터링 Scouter 확장을 통해 CUBRID에 항목을 모니터링할 수 있습니다. CUBRID 11.0 버전을 기준으로 개발되었으며, CUBRID 10.2.1 버전부터는 전체 기능을 사용할 수 있습니다. Scouter(Server, Client)는 2.15.0 버전부터 기능 사용이 가능하며, 추후에도 Scouter Github에 참여하여 버그 수정 및 기능이 추가됩니다. 현재(2022-01-10) 2.15.0 버전이 최신 버전이며, Multi Agent 지원 및 버그 수정 내용이 PR 되어 있는 상태입니다. 1. Scouter 란? Scouter는 Open Source APM(Application Performance Management) 이며, 어플리케이션 및 OS 자원등에 대한 모니터링 기능을 제공합니다. Scouter 기본 구성 Scouter 제공 정보 ​- WAS 기본 정보 각 요청의 응답속도 / 프로파일링 정보, 서버 요청 수 / 응답 수, 처리 중인 요청 수, 응답속도의 평균, JVM 메모리 사용량 / GC 시간 , CPU 사용량 - 프로파일링 정보 서버 간 요청의 흐름, 각 SQL 쿼리의 수행 시간 / 통계, API 호출 수행 시간, request header 정보, 메소드 호출 시 수행 시간 대표적인 Agent 목록 - Tomcat Agent (Java Agent) : JVM 과 Tomcat WAS 성능 수집 - Host Agent (OS Agen...
    Date2022.01.10 Category제품 여행 Byhwanyseo Views1774 Votes0
    Read More
  3. [CUBRID] QUERY CACHE에 대해

    QUERY CACHE에 대해 큐브리드 11.0 버전이 출시되면서 QUERY CACHE 힌트를 지원하게 되었습니다. 이 글에서는 QUERY CACHE에 대해 알아보는 시간을 가져보겠습니다. 1. QUERY CACHE란? Query Cache는 SELECT 쿼리문을 이용하여 조회한 값을 저장하고 있다가, 같은 쿼리 문을 요청하였을 때 미리 캐싱된 값을 반환하는 DBMS 기능입니다. 자주 변경되지 않는 테이블이 있고 동일한 쿼리를 많이 받는 환경에서 매우 유용하게 사용될 수 있습니다. QUERY_CACHE 힌트를 사용한 쿼리는 전용 메모리 영역에 캐시되고 그 결과도 별도의 디스크 공간에 캐시됩니다. 쿼리 캐시 특징 1. QUERY_CACHE 힌트는 SELECT 쿼리에만 적용됩니다. 2. 테이블에 변화(INSERT,UPDATE,DELETE)가 일어나게 되면 해당테이블과 관련된 Query Cache내의 정보들은 초기화 됩니다. 3. DB를 내리면 Query Cache는 초기화 됩니다. 4. max_query_cache_entries와 query_cache_size_in_pages 설정 값을 통해 캐시될 크기를 조절할 수 있습니다. (default 값은 모두 0 입니다.) max_query_cache_entries는 최대 캐시할 수 있는 질의 개수에 대한 설정 값으로 1이상으로 설정되면 설정된 수 만큼의 질의가 캐시됩니...
    Date2021.10.29 Category제품 여행 By김민종 Views1594 Votes1
    Read More
  4. [CUBRID inside] HASH SCAN Method

    - HASH SCAN Hash Scan은 hash join을 하기 위한 스캔 방법입니다. view 혹은 계층형 질의에서 Hash Scan이 적용되고 있습니다. view와 같은 부질의가 inner로써 조인될 경우 인덱스 스캔을 사용할 수 없는데, 이 경우 많은 데이터를 반복 조회 하게 되면서 성능 저하가 발생됩니다. 이때 Hash Scan이 사용됩니다. 위 그림은 인덱스가 없는 상황에서의 Nested Loop join과 Hash Scan의 차이를 보여줍니다. NL join의 경우 OUTER의 Row수만큼 INNER의 전체 데이터를 스캔합니다. 이에 반해 Hash Scan은 해시 자료구조 빌드 시 INNER 데이터를 한번 스캔하고, 조회시 OUTER를 한번 스캔합니다. 그렇기 때문에 상대적으로 매우 빠르게 원하는 데이터를 조회할 수 있습니다. 여기서는 Hash Scan의 내부 구조를 프로그램 개발 진행 과정의 흐름으로 작성하였습니다. - IN-MEMORY HASH SCAN CUBRID의 Hash Scan은 데이터양에 따라서 in-memory, hybrid, file hash의 자료 구조를 사용하고 있습니다. 먼저 in-memory 구조부터 살펴보겠습니다. memory의 장점은 random access시 성능 저하가 없다는 점입니다. 하지만 단점은 메모리 크기가 한정되어 있다는 것입니다. 단점 때문에 모든...
    Date2021.10.25 Category제품 여행 By박세훈 Views548 Votes2
    Read More
  5. CUBRID TDE(Transparent Data Encryption)

    CUBRID 11버전에 "TDE(Transparent Data Encryption)"가 추가되었습니다! 2021년 1월 출시된 CUBRID11에 TDE가 생김으로써 보안이 한층 강화되었는데요, TDE란 무엇일까요?! Transparent Data Encryption(이하: TDE) 의 약자로 사용자의 관점에서 투명하게 데이터를 암호화하는 것을 의미합니다. 이를 통해 사용자는 애플리케이션의 변경을 거의 하지 않고 디스크에 저장되는 데이터를 암호화할 수 있습니다. 어떤 해커가 한 조직을 해킹했을 때, 훔쳐가고 싶은 것 1위는 당연히 데이터베이스 내에 있는 중요한 데이터일 것입니다. 또는 회사 내부의 악의적인 의도를 가진 직원이 데이터베이스에 로그인하고 USB와 같은 저장매체에 모든 데이터를 옮겨가는 상황이 있을 수도 있습니다. 이러한 상황들에서 데이터를 보호할 수 있는 가장 쉬운 방법은 데이터베이스를 암호화하는 것인데요, 암호화 기술 중 데이터베이스 파일 자체를 암호화하는 기술인 TDE가 좋은 선택이 되겠죠?! 암호화된 데이터베이스는 키가 없으면 접근할 수 없기 때문에, 이 키 파일을 함께 가지고 있지 않다면 도난당한 파일은 쓸모없는 더미 파일이 될테니까요. TDE 암호화 기능은 대칭키 알고리즘을 사...
    Date2021.05.20 Category제품 여행 By김지원 Views1431 Votes1
    Read More
  6. CUBRID의 개발 문화: CUBRID DBMS는 어떻게 개발되고 있을까?

    시작하며 안녕하세요, 유형규 선임연구원입니다. 이번 포스트에서는 먼저 큐브리드 프로젝트의 개발 프로세스를 소개하고, 프로세스를 개선하기 위한 노력과 개발 문화를 소개하려고 합니다. 큐브리드에 입사한 지 벌써 거의 2년 반이 흘렀습니다. 처음 입사했을 때 하나의 팀이었던 개발 조직도 어느새 대단한 동료 개발자분들이 많이 입사하면서 세 개발팀과 QA팀까지 규모가 제법 커지면서 새로 합류한 신입 동료 개발자분들도 많아졌습니다. 입사 후 첫 메이저 버전 릴리즈를 경험하면서 릴리즈 과정을 돌아보며 동료 개발자들과 큐브리드의 개발 프로세스를 조금 더 개선하게 되었습니다. 오픈소스 데이터베이스 프로젝트, CUBRID의 개발 프로세스 큐브리드는 오픈소스 프로젝트 입니다. 큐브리드는 참여, 개방, 공유의 가치를 지향하며 이를 실현하기 위해 정보의 공유와 프로세스의 투명성은 큐브리드의 개발 프로세스와 문화에 녹아있습니다. 큐브리드에 기여하는 모든 개발자는 오픈소스 프로젝트 개발 프로세스를 기반으로 개발을 진행합니다. 이 의미는 큐브리드 사내의 개발자든 큐브리드에 외부 기여자 (컨트리뷰터) 모두 동일한 과정으로 개발을 진행한다는 것입...
    Date2021.04.29 Category오픈소스 이야기 By유형규 Views1481 Votes1
    Read More
  7. CUBRID를 이용한 스니핑 방지 - 패킷암호화

    보안의 필요성 현대인들은 일상생활에 깊숙이 파고든 PC와 스마트폰으로 웹 서핑을 즐깁니다. 그러다 보니 인터넷상에 전송 중인 데이터를 악의적인 의도로 데이터를 엿볼 수도 있습니다. 즉, 누군가가 전송 중인 데이터를 엿볼 수 있는 것을 스니핑(sniffing)이라고 합니다. 대표적으로 계정의 id, pw를 가로채 타인의 개인 정보를 이용하여 물리적인 손해 입히는 사례가 있습니다. 이에 대해 CUBRID는 사용자 데이터를 보호하기 위해서 패킷 암호화를 제공합니다. 패킷 암호화를 적용하면 전송할 데이터에 대해 패킷이 암호화되어 전송됨으로써 누군가 스니핑(sniffing) 하더라도 데이터를 해석할 수 없게 구현할 수 있습니다. CUBRID 패킷암호화 CUBRID는 클라이언트와 서버 간에 전송되는 데이터를 암호화하기 위해 SSL/TLS 프로토콜을 사용합니다. SSL은 대칭형(symmetric)키를 이용하여 송수신 데이터를 암호화합니다. (클라이언트와 서버가 같은 세션키를 공유하여 암복호함). 클라이언트가 서버에 연결할 때마다 새롭게 생성되는 세션키 생성에 필요한 정보를 암호화한 형태로 교환하기 위해서 비 대칭 (asymmetric) 암호화 알고리즘을 사용하며, 이를 위해서 서버의 ...
    Date2021.04.28 Category제품 여행 By황영진 Views2437 Votes1
    Read More
  8. ANTLR, StringTemplate를 사용해서 PL/SQL을 CUBRID Java SP로 변환하기

    ANTLR, StringTemplate를 사용해서 PL/SQL을 CUBRID Java SP로 변환하기 CUBRID DBMS(이하 'CUBRID')는 PL/SQL을 지원하지 않습니다. PL/SQL 문법으로 함수나 서브 프로그램을 만들어서 해왔던 작업들을 CUBRID에서 하려면 Java Stored Function/Procedure(이하 'Java SP')으로 변환해야 합니다. 데이터베이스 개발자나 관리자, 엔지니어는 PL/SQL 문법에는 친숙하지만 프로그래밍 언어에는 친숙하지 않은 경우가 대부분입니다. 또한 어플리케이션 개발은 사용하는 DBMS에 따라 달라지는 부분이 거의 없지만 PL/SQL을 Java SP로 변환하는 것은 새로운 시스템을 개발하는 느낌을 받아서 어려움을 느끼는 것 같습니다. 그래서 PL/SQL 을 Java SP 쉽게 변환하는 방법에 대해서 찾아보던 중 ANTLR에 대해서 알게 되었습니다. ANTLR는 파서를 만드는 도구입니다. 전세계에 있는 컨트리뷰터들로부터 도움을 받아서 다양한 프로그래밍 언어들의 파싱할 수 있도록 문법 파일들을 지원하고 있습니다. 공식 홈페이지에서는 ANTLR에 대해서 아래와 같이 소개하고 있습니다. "ANTLR (ANother Tool for Language Recognition)은 구조화 된 텍스트 또는 이진 파일을 읽고, 처...
    Date2020.12.31 Category오픈소스 이야기 By주영진 Views2868 Votes2
    Read More
  9. [CUBRID inside] Query Process란?

    CUBRID는 open source DBMS입니다. 소스 코드가 공개되어 있어 언제든지 확인하고 기여할 수 있습니다. 많은 사람이 CUBRID의 contributor가 되길 바라봅니다. Query Process란? Query Process는 DBMS의 입력값인 SQL을 낮은 수준의 명령으로 변환하고 그것을 실행하는 전체 작업을 말합니다. SQL에서 가장 먼저 진행되어야 하는 것은 TEXT로 작성된 SQL을 parse tree 구조로 만드는 것입니다. 이 작업은 PARSER에서 진행되는데, CUBRID는 PT_NODE 구조체를 반복적으로 사용하여 SQL을 parse tree로 변환합니다. 이 단계에서 syntax check가 진행되고 오타나 잘못된 예약어 등을 체크합니다. 그리고 SEMANTIC CHECK를 진행하는데, 여기서 작성된 테이블명이나 칼럼명 등이 존재하는 것인지 체크합니다. 다음으로 OPTIMIZER가 parse tree를 최적화하고 PLAN을 생성합니다. parse tree를 최적화하는 것을 QUERY REWRITE 혹은 TRANSFORMATION이라고 합니다. 좋은 성능을 위해 SQL을 다시 작성한다고 생각하면 됩니다. 동일한 데이터를 조회하는 SQL은 다양한 형태로 작성될 수 있습니다. 그렇기 때문에 가장 효과적인 방안으로 변환을 하는 것입니다. 여러 재작성 방법이 있는데 ...
    Date2020.12.24 Category제품 여행 By박세훈 Views1148 Votes1
    Read More
  10. 파일이 정상인가 ?

    기술 지원 시 파일 변조 또는 손상 되어 골치 아픈 경우가 간혹 발생 합니다. - 고객사 지원을 위해 파일을 반입하는 경우 CD 손상으로 인한 파일 손상 - 보안 프로그램(DRM,EFS)에 의한 파일 변조 - 네트워크를 통한 파일 전송 시 파일 손상 파일 변조 또는 손상이 발생하면, 파일 크기가 크게 변하지 않으며 정합성 여부를 명확하게 확인 할 수 없습니다. 이로 인해 기술 지원 시 뭐가 문제인지 당황스러울 때가 있는데요. 이와 같은 상황에서 불필요한 시간 발생을 최소화 할 수 있는 방법에 대해 기술 하였습니다. 무결성 검사 파일이 변조 되어 있지 않다는 검사를 하기 위해 여러가지 방법들이 있습니다만, 가장 효율적이고 쉬운 방법을 소개하겠습니다. md5 (MD5 128비트 해쉬 암호화 함수)툴은 Windows, Linux, OS X 등 많은 시스템에서 기본적으로 설치 되어 있습니다. 참고 자료 MD5-위키백과 : https://ko.wikipedia.org/wiki/MD5 암호화 해쉬 함수-위키백과 : https://ko.wikipedia.org/wiki/%EC%95%94%ED%98%B8%ED%99%94_%ED%95%B4%EC%8B%9C_%ED%95%A8%EC%88%98 사용 방법 Windows * 실행 > cmd certutil -hashfile <filename> <hash functuin> * ex cmd> certut...
    Date2020.08.29 Category제품 여행 By윤준수 Views2415 Votes1
    Read More
Board Pagination Prev 1 2 3 4 5 6 7 8 9 10 ... 16 Next
/ 16

Contact Cubrid

대표전화 070-4077-2110 / 기술문의 070-4077-2113 / 영업문의 070-4077-2112 / Email. contact_at_cubrid.com
Contact Sales