제품 여행

CUBRID Flashback

by 김주호 posted Oct 25, 2022

Introduction

  큐브리드 11.2 버전이 릴리즈되면서 Flashback 기능도 함께 소개되었습니다. 아래에서는 큐브리드에서 제공하는 Flashback 에 대한 기능을 이해하기 위한 Background와 흐름, 그리고 사용방법에 대해 소개해드리겠습니다.


Background

Supplemental logging

  사용자가 트랜잭션을 수행하면 트랜잭션 로그가 기록됩니다. 트랜잭션 로그에는 사용자가 변경하기 전의 데이터 (UNDO)와 사용자가 변경한 후의 데이터 (REDO)가 저장됩니다. Flashback에서는 별도의 전용 데이터 공간을 만들기 보다는 이미 로그 볼륨에 저장된 트랜잭션 로그를 사용합니다. 트랜잭션 로그의 UNDO와 REDO를 이용해 사용자가 수행한 SQL구문을 추측합니다. 하지만 트랜잭션 로그에는 데이터베이스의 물리적인 변경에 대한 데이터만을 가지고 있기 때문에, 논리적인 단위 (SQL 구문)으로 반환해야하는 Flashback을 위해서는 추가적인 데이터가 필요합니다. 추가적인 데이터에는 트랜잭션을 수행한 사용자 정보 등이 있으며, 해당 정보는 Supplemental log를 통해 저장됩니다. 따라서, Flashback을 수행하기 위해서는 ‘supplemental_log’ 시스템 파라미터를 1 또는 2로 설정해줘야 합니다.

supplemental_log.png

 

 


CUBRID Flashback

Overview

flashback_flow.png

 

  사용자가 실수로 테이블내의 모든 데이터를 삭제하고 commit을 했다고 가정해봅시다. 사용자는 우선 백업된 데이터가 있는지 찾아볼 것이고, 없다면 기억을 더듬어서 하나씩 데이터를 삽입할 것입니다. 이런 경우를 대비해서 큐브리드는 Flashback 기능을 제공하게 되었습니다. Flashback 기능은 아래 5단계를 거쳐 제공되며, 각 단계에 대한 설명은 다음과 같습니다.

 

1. 요청

  - 특정 테이블(user.tbl)에 대하여 flashback을 요청합니다.

2. 정보 생성

  - CUB_SERVER는 요청받은 테이블에 가해진 변경사항을 알기 위해 트랜잭션 로그들을 순회합니다.

  - 트랜잭션 로그를 순회하며, 테이블에 수행된 트랜잭션들을 찾고 각 트랜잭션 내에서 몇개의 행이 삽입/갱신/삭제 되었는지 정보를 수집합니다.

3. 요약 정보 반환

  - 테이블에 수행된 트랜잭션 요약 정보를 사용자에게 보여줍니다.

  - 요약 정보에는 트랜잭션을 수행한 사용자, 트랜잭션 시작 시간, 트랜잭션 종료 시간, 트랜잭션 내에서 삽입/갱신/삭제 된 행의 수 등이 표시됩니다.

4. 트랜잭션 식별자 전달

   - 사용자는 요약 정보를 보고 되돌리고 싶은 트랜잭션을 선택하여 CUB_SERVER에 전달합니다.

5. SQL 구문 반환

  - CUB_SERVER에서는 트랜잭션 로그와 supplemental log를 이용해, 선택된 트랜잭션을 되돌릴 수 있도록 SQL구문을 작성합니다.

  - 작성된 SQL 구문을 사용자에게 시간 역순으로 반환합니다.

  - 역순으로 반환된 SQL구문을 수행하면, 해당 트랜잭션을 수행하기 이전으로 데이터를 되돌릴 수 있습니다.

 

How to use

1. Supplemental log 설정

  - $CUBRID/conf/cubrid.conf에 아래와 같이 supplemental_log 시스템 파라미터를 설정합니다.

  - supplemental_log 설정 이후에 수행된 트랜잭션에 대해서만 flashback을 수행할 수 있습니다.

  - supplemental_log 의 값은 1 또는 2로 설정하면 되며, 설정 값의 차이 (1 또는 2)는 flashback 기능에는 영향을 끼치지 않습니다.

cubrid.conf

...

supplemental_log=1 또는 supplemental_log=2

...

2. flashback 수행

2.1 기본 수행

데이터베이스 명과 테이블 명을 입력하면 최근 10분동안 해당 테이블에 수행된 트랜잭션에 대한 정보를 보여줍니다. 명령어는 아래와 같이 수행하면 됩니다.
요약 정보에서 출력되는 컬럼 정보는 메뉴얼을 참고하면 됩니다.

 

$ echo "supplemental_log=1" >> $CUBRID/conf/cubrid.conf
$ cubrid server start demodb
$ csql -u dba demodb -c "create table tbl (a int)"
$ csql -u dba demodb -c "insert into tbl values (10);"

$ cubrid flashback demodb dba.tbl
Flashback Summary
Number of Transaction: 1
Start date - End date: 25-10-2022:14:17:24 - 25-10-2022:14:18:03
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
            14  DBA                               25-10-2022:14:17:49   25-10-2022:14:17:50            1           0           0  dba.tbl
Enter transaction id (press -1 to quit): 14

 

delete from [dba.tbl] where [a] = 10 limit 1;

 

2.2 필터링 적용

 

2.2.1 시간 범위
  트랜잭션 시작 시간 (start-date), 트랜잭션 종료 시간 (end-date) 옵션으로 시간 범위를 정할 수 있습니다. 사용자가 되돌리고 싶은 트랜잭션이 어느 시간대에 수행되었는지 특정할 수 있는 경우 사용합니다. 
시간설정.png
  시간 범위 사이에서 commit된 트랜잭션에 대해서만 Flashback 기능을 제공합니다. 위 그림에서는 Transaction 1과 Transaction 2가 Flashback 대상이 될 수 있습니다. 하지만 Transaction 1의 경우에는 start-date 이전에 수행된 DML에 대해서는 트랜잭션 로그를 지우지 않을 것이라고 보장하지 않기 때문에, Flashback이 불가능할 수도 있습니다.

 

2.2.1.1. 옵션 설정

  ​- 트랜잭션 시작 시간 및 종료 시간 설정하지 않은 경우 : (현재 - 10분) ~ 현재 사이에 커밋된 트랜잭션들에 대해서 정보를 추출합니다.

  - 트랜잭션 시작 시간만 설정 : (start-date) ~ (start-date + 10분) 사이에 커밋된 트랜잭션들에 대해서 정보를 추출합니다.

  - 트랜잭션 종료 시간만 설정 : (end-date - 10분) ~ (end-date) 사이에 커밋된 트랜잭션들에 대해서 정보를 추출합니다.  

  - 트랜잭션 시작 시간 및 종료 시간 설정 : (start-date) ~ (end-date) 사이에 커밋된 트랜잭션들에 대해서 정보를 추출합니다.

 

2.2.1.2. 사용 예시

 

  - 트랜잭션 시작 시간 설정 (start-date)

$ cubrid flashback demodb dba.tbl
Flashback Summary
Number of Transaction: 2
Start date - End date: 25-10-2022:14:36:01 - 25-10-2022:14:46:01
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
            17  DBA                               25-10-2022:14:45:01   25-10-2022:14:45:19            2           0           2  dba.tbl
            18  DBA                               25-10-2022:14:45:36   25-10-2022:14:45:50            0           1           1  dba.tbl
Enter transaction id (press -1 to quit): -1

 

// start-date를 트랜잭션 18의 Start time으로 설정
$ cubrid flashback demodb dba.tbl --start-date 25-10-2022:14:45:36
Flashback Summary
Number of Transaction: 1
Start date - End date: 25-10-2022:14:45:36 - 25-10-2022:14:46:22
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
            18  DBA                               25-10-2022:14:45:36   25-10-2022:14:45:50            0           1           1  dba.tbl
Enter transaction id (press -1 to quit): -1

 

  - 트랜잭션 종료 시간 설정 (end-date)

$ cubrid flashback demodb dba.tbl
Flashback Summary
Number of Transaction: 2
Start date - End date: 25-10-2022:14:36:01 - 25-10-2022:14:46:01
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
            17  DBA                               25-10-2022:14:45:01   25-10-2022:14:45:19            2           0           2  dba.tbl
            18  DBA                               25-10-2022:14:45:36   25-10-2022:14:45:50            0           1           1  dba.tbl
Enter transaction id (press -1 to quit): -1

 

// end-date를 트랜잭션 17의 End time으로 설정
$ cubrid flashback demodb dba.tbl --end-date 25-10-2022:14:45:20
Flashback Summary
Number of Transaction: 1
Start date - End date: 25-10-2022:14:35:20 - 25-10-2022:14:45:20
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
            17  DBA                               25-10-2022:14:45:01   25-10-2022:14:45:19            2           0           2  dba.tbl
Enter transaction id (press -1 to quit): -1

 

  - 트랜잭션 시작 시간 및 종료 시간 설정 (start-date, end-date)

$ cubrid flashback demodb dba.tbl
Flashback Summary
Number of Transaction: 2
Start date - End date: 25-10-2022:14:36:01 - 25-10-2022:14:46:01
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
            17  DBA                               25-10-2022:14:45:01   25-10-2022:14:45:19            2           0           2  dba.tbl
            18  DBA                               25-10-2022:14:45:36   25-10-2022:14:45:50            0           1           1  dba.tbl
Enter transaction id (press -1 to quit): -1

 

// start-date를 트랜잭션 17의 Start time으로 설정하고, end-date를 트랜잭션 18의 End time으로 설정
$ cubrid flashback demodb dba.tbl --start-date 25-10-2022:14:45:01 --end-date 25-10-2022:14:45:50
Flashback Summary
Number of Transaction: 2
Start date - End date: 25-10-2022:14:45:01 - 25-10-2022:14:45:50
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
            17  DBA                               25-10-2022:14:45:01   25-10-2022:14:45:19            2           0           2  dba.tbl
            18  DBA                               25-10-2022:14:45:36   25-10-2022:14:45:50            0           1           1  dba.tbl
Enter transaction id (press -1 to quit): -1

 

2.2.2 트랜잭션 사용자 (user)
  테이블에 변경을 가한 트랜잭션을 누가 수행했는지 특정하고 싶을 경우 사용합니다. 
 

$ cubrid flashback demodb public.tbl
Flashback Summary
Number of Transaction: 2
Start date - End date: 25-10-2022:14:45:55 - 25-10-2022:14:55:55
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
            28  PUBLIC                            25-10-2022:14:55:18   25-10-2022:14:55:19            1           0           0  public.tbl
            31  DBA                                25-10-2022:14:55:46   25-10-2022:14:55:47            0           1           0  public.tbl
Enter transaction id (press -1 to quit): -1

 

// dba 사용자가 수행한 트랜잭션만 추출

$ cubrid flashback demodb public.tbl --user dba
Flashback Summary
Number of Transaction: 1
Start date - End date: 25-10-2022:14:46:08 - 25-10-2022:14:56:08
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
            31  DBA                                25-10-2022:14:55:46   25-10-2022:14:55:47            0           1           0  public.tbl
Enter transaction id (press -1 to quit): -1

 

// public 사용자가 수행한 트랜잭션만 추출

$ cubrid flashback demodb public.tbl --user public
Flashback Summary
Number of Transaction: 1
Start date - End date: 25-10-2022:14:46:12 - 25-10-2022:14:56:12
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
             28  PUBLIC                            25-10-2022:14:55:18   25-10-2022:14:55:19            1           0           0  public.tbl
Enter transaction id (press -1 to quit): -1

 

2.3 자세한 내용 확인 (detail)

$ cubrid flashback demodb public.tbl
Flashback Summary
Number of Transaction: 2
Start date - End date: 25-10-2022:14:49:30 - 25-10-2022:14:59:30
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
            28  PUBLIC                            25-10-2022:14:55:18   25-10-2022:14:55:19            1           0           0  public.tbl
            31  DBA                                25-10-2022:14:55:46   25-10-2022:14:55:47            0           1           0  public.tbl
Enter transaction id (press -1 to quit): 31

 

update [public.tbl] set [a] = 10 where [a] = 10 limit 1;

 

// detail 정보 출력

$ cubrid flashback demodb public.tbl --detail
Flashback Summary
Number of Transaction: 2
Start date - End date: 25-10-2022:14:49:38 - 25-10-2022:14:59:38
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
             28  PUBLIC                           25-10-2022:14:55:18   25-10-2022:14:55:19            1           0           0  public.tbl
             31  DBA                               25-10-2022:14:55:46   25-10-2022:14:55:47            0           1           0  public.tbl
Enter transaction id (press -1 to quit): 31

 

[TRANSACTION ID] 31
[USER]                DBA
[ORIGINAL]          update [public.tbl] set [a] = 10 where [a] = 10 limit 1;
[FLASHBACK]       update [public.tbl] set [a] = 10 where [a] = 10 limit 1;

 

2.4 출력 순서 변경 (oldest)
  사용자가 해당 SQL구문들을 받아와 바로 적용할 수 있도록, 기본적으로 트랜잭션 내에서 수행된 구문들을 시간 역순으로 출력해줍니다. 하지만, 시간 순으로 수행된 구문들이 궁금할 경우 oldest 옵션을 사용하면 아래와 같이 시간 순으로 출력됩니다. 

$ cubrid flashback demodb dba.tbl
Flashback Summary
Number of Transaction: 1
Start date - End date: 25-10-2022:14:53:04 - 25-10-2022:15:03:04
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
            40  DBA                               25-10-2022:15:02:42   25-10-2022:15:03:01            3           0           3  dba.tbl
Enter transaction id (press -1 to quit): 40

 

insert into [dba.tbl] values (100000000);
insert into [dba.tbl] values (100000);
insert into [dba.tbl] values (1000);
delete from [dba.tbl] where [a] = 100000000 limit 1;
delete from [dba.tbl] where [a] = 100000 limit 1;
delete from [dba.tbl] where [a] = 1000 limit 1;

 

// 역순으로 출력

$ cubrid flashback demodb dba.tbl --oldest
Flashback Summary
Number of Transaction: 1
Start date - End date: 25-10-2022:14:53:10 - 25-10-2022:15:03:10
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
            40  DBA                               25-10-2022:15:02:42   25-10-2022:15:03:01            3           0           3  dba.tbl
Enter transaction id (press -1 to quit): 40

 

delete from [dba.tbl] where [a] = 1000 limit 1;
delete from [dba.tbl] where [a] = 100000 limit 1;
delete from [dba.tbl] where [a] = 100000000 limit 1;
insert into [dba.tbl] values (1000);
insert into [dba.tbl] values (100000);
insert into [dba.tbl] values (100000000);

 

3. 예외 상황

3.1 요약 정보를 받고, 트랜잭션 식별자를 선택할 때 일정 시간을 초과한 경우에는 에러를 반환합니다. 

   cubrid.conf 에서 flashback_timeout 값을 통해 설정할 수 있습니다. 0초 부터 3600초 사이로 설정 가능합니다. 기본값은 300초입니다.

$ cubrid flashback demodb dba.tbl -s 25-10-2022:15:02:42
Flashback Summary
Number of Transaction: 1
Start date - End date: 25-10-2022:15:02:42 - 25-10-2022:15:12:42
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
            40  DBA                               25-10-2022:15:02:42   25-10-2022:15:03:01            3           0           3  dba.tbl
Enter transaction id (press -1 to quit): Transaction ID should be entered in 300 seconds. The timeout can be adjusted through the 'flashback_timeout' setting in 'cubrid.conf'

 

3.2 시스템 클래스에 대해서는 추출할 수 없습니다.

$ cubrid flashback demodb _db_class
The system catalog class (_db_class) is not supported in flashback.

 

3.3 owner_name.class_name 형식을 지켜서, Flashback 대상 테이블 명을 입력해야합니다.

$ cubrid flashback demodb tbl
Invalid format for owner_name.class_name ('tbl').

 

3.4 현재 DB에 존재하지 않는 테이블에 대해서는 추출할 수 없습니다. (Drop된 테이블)

$ csql -u dba demodb -c "drop table tbl2"

 

// 테이블 DROP 후 flashback 수행

$ cubrid flashback demodb dba.tbl2
Table (dba.tbl2) does not exist in database

 

3.5 로그가 기록된 시점 (과거)의 스키마와 Flashback을 수행하는 시점의 스키마가 다를 경우, 해당 테이블에 대해 flashback할 수 없습니다.

$ csql -u dba demodb -c "alter tbl add column col2 char"

 

// 스키마 변경 후 Flashback 수행

$ cubrid flashback demodb dba.tbl -s 25-10-2022:15:02:42
Flashback Summary
Number of Transaction: 1
Start date - End date: 25-10-2022:15:02:42 - 25-10-2022:15:12:42
Transaction id  User name                         Start time            End time              Num_insert  Num_update  Num_delete  Table
            40  DBA                               25-10-2022:15:02:42   25-10-2022:15:03:01            3           0           3  dba.tbl
Enter transaction id (press -1 to quit): 40

 

Unable to get flashback because schema (dba.tbl) has been changed.

Restriction

1. CS 모드만 지원합니다.

2. 동일한 데이터베이스에 대해 동시에 두 개 이상의 Flashback을 수행할 수 없습니다.

3. DDL은 지원하지 않습니다.