Background Image
기타
2009.04.01 08:29

python 에서 broker_log_top 사용

조회 수 17830 추천 수 0 댓글 1
?

단축키

Prev이전 문서

Next다음 문서

크게 작게 위로 아래로 댓글로 가기 인쇄

 

Use broker_log_top by python(SampleCode)

소개: broker_log_top python프로그램을 이용하여 편리하게 사용할 수 있도록 간단한 sample code 작성

2009-03-31 기술컨설팅부 김범준, CUBRID

적용 대상: CUBRID 2008

Python을 이용한 간단한 sample code(1)

CUBRID python이 정상적으로 연결되어 사용되려면, python 2.4버전 이상이 필요하다. 사용환경을 위한 설정 확인 방법은 아래와 같다.

1.     $cubrid_rel à CUBRID버전을 확인한다(CUBRID2008이상의 버전을 사용할 것을 권장함)

2.     $python -v à python버전을 확인한다(python 2.4버전 이상에서 CUBRID에 연결 사용을 권장함)

3.     아래의 경로에서 cubrid-python을 다운로드 받아 설치한다(위키 참조)

http://dev.naver.com/projects/cubrid-python/download/shownote?release_id=110

broker_log_top이란?

Broker를 통하여 수행된 쿼리들의 집합인 <broker_name>_<number>.sql.log파일의 로그를 분석하여, 쿼리유형으로 분류하고, 빈도를 산출하게 하는 CUBRID2008에서 제공하는 utility. broker_log_top의 수행 결과는 아래와 같이 두 가지 파일이 보여지게 된다. (CUBRID7.3 이하 버전은 ‘cas_log_top’이다.)

log_top.q

아래와 같이 쿼리를 유형별로 분류하여 보여준다.

[Q1]-------------------------------------------

broker1_1.sql.log:1492986

03/27 16:12:02.346 (1) execute srv_h_id 1 <-- SQL 쿼리 -->

03/27 16:12:02.346 (1) bind 1 : VARCHAR 6

03/27 16:12:02.346 (1) bind 2 : VARCHAR 1254779

03/27 16:12:02.346 (1) bind 3 : VARCHAR 8

03/27 16:12:02.346 (1) bind 4 : VARCHAR 8

03/27 16:12:02.346 (1) bind 5 : VARCHAR 1254779

03/27 16:12:03.244 (1) execute 0 tuple 1 time 0.898

[Q2]-------------------------------------------

broker1_1.sql.log:402116

03/26 18:46:50.607 (7848) execute srv_h_id 1 <-- SQL 쿼리 -->

03/26 18:46:50.607 (7848) bind 1 : VARCHAR 3

03/26 18:46:50.607 (7848) bind 2 : VARCHAR 1147879

03/26 18:46:50.607 (7848) bind 3 : VARCHAR 3

03/26 18:46:50.607 (7848) bind 4 : VARCHAR 1

03/26 18:46:50.607 (7848) bind 5 : VARCHAR 1147879

03/26 18:46:50.955 (7848) execute 0 tuple 1 time 0.348

log_top.res

위의 유형별로 해당 쿼리의 빈도와 수행시간의 최대, 최소 값을 보여준다. 이를 참조하여 위의 각 유형을 확인하여 해당 쿼리를 튜닝하는데 활용한다. [Q1], [Q2]... 각각은 log_top.q에 있는 각각의 유형을 표시하며 max, min값은 수행 시간의 최대, 최소값. avg는 해당 유형의 평균값이며 cnt는 수행 수의 합이며, (err)은 총 에러 발생 수이다.

               max       min       avg   cnt(err)

-----------------------------------------------------

[Q1]         0.898     0.000     0.003 30100 (0)

[Q2]         0.348     0.000     0.003 9237 (0)

[Q3]         0.294     0.000     0.003 9139 (0)

[Q4]         0.287     0.000     0.003 9138 (0)

...

 

python스크립트 사용이유

여러 가지 함수들이 미리 정의되어 있어 사용이 간단하고 linux기반의 OS에 대부분 기본적으로 설치가 되어 있다. 현재 CUBRID2008과 연동 가능한 모듈이 제공되고 있으며 간단하고 사용하기 쉬한 python을 이용한 간단한 sample code를 순차적으로 제공하려 한다.

 

broker_log_top을 스크립트 수행하는 이유

현재 broker_log_top의 경우 결과값을 하나의 log_top.q log_top.res로 나타내어 주게 되어 있다. broker log가 다량일 경우 그 작업의 시간이 오래 걸리고 한번 수행에 하나의 파일만 산출되기 때문에 효율적인 관리와 검색을 위해 각 log로 분리하여 저장하는 것이 유용하다.

python코드로 생성한 스크립트

import os,sys,commands

a=1

b=raw_input('Broker Name: ')

c=("ls "+"%s"%b+"*"+" | wc -l")

num=int(commands.getoutput(c))

name=raw_input('Directory name: ')

mk=("rm -rf "+"%s"%name+";"+"mkdir"+" "+"%s"%name)

og=os.system(mk)

while a <=num:

        e=("broker_log_top broker1_"+"%d"%a+".sql.log*")

        f=("mv"+" "+"log_top.q"+" "+"./log_top_result/"+"log_top.q_"+"broker1"+"_"+"%d"%a)

        g=("mv"+" "+"log_top.res"+" "+"./log_top_result/"+"log_top.res_"+"broker1"+"_"+"%d"%a)

        cmd=os.system(e); cmd1=os.system(f); cmd2=os.system(g)

        a=a+1

 

print 'n!!!BROKER_LOG_TOP COMPLETE!!!'

 

스크립트 사용방법

$ python log_top.py

Broker Name: broker1  à broker_log_top으로 확인하길 원하는 broker의 이름

Directory name: log_top_result  à broker_log_top 수행 결과 파일이 저장될 위치

broker1_1.sql.log

print results...

broker1_2.sql.log

print results...

broker1_3.sql.log

print results...

broker1_4.sql.log

print results...

broker1_5.sql.log

print results...

 

!!!BROKER_LOG_TOP COMPLETE!!!  à 수행완료

해당 스크립트는 오류처리부분이 적용되지 않았다. 사이트 지원 시 사용 편의를 위해서 만들었으며 broker_log_top의 모든 기능을 사용하지는 못한다.

  • ?
    cubebridge 2009.06.19 00:11
    스크립트를 수정합니다. 수정 내용은 아래와 같습니다.
    import os,sys,commands
    a=1
    b=raw_input('Broker Name: ')
    c=("ls "+"%s"%b+"*"+" | wc -l")
    num=int(commands.getoutput(c))
    name=raw_input('Directory name: ')
    mk=("rm -rf "+"%s"%name+";"+"mkdir"+" "+"%s"%name)
    os.system(mk)
    while a <=num:
            e=("broker_log_top "+"%s"%b+"_"+"%d"%a+".sql.log*")
            f=("mv"+" "+"log_top.q"+" "+"./"+"%s"%name+"/"+"log_top.q_"+"%s"%b+"_"+"%d"%a)
            g=("mv"+" "+"log_top.res"+" "+"./"+"%s"%name+"/"+"log_top.res_"+"%s"%b+"_"+"%d"%a)
            os.system(e); os.system(f); os.system(g)
            a=a+1

    print 'n!!!BROKER_LOG_TOP COMPLETE!!!'


List of Articles
번호 분류 제목 글쓴이 날짜 조회 수
46 CCI/DB API CCI-API 에서 OID 사용 예제 file 남재우 2009.07.01 24861
45 CCI/DB API CCI-API 사용 예제 file 남재우 2009.07.01 25103
44 PHP CUBRID_기술문서_CUBRID PHP 함수 unisql_ 계열 cubrid_로 변환하기 file 남재우 2009.06.23 22355
43 PHP cubrid_fetch_all 함수 추가하기 2 남재우 2009.06.16 20828
42 기타 Oracle의 SYS_CONNECT_BY_PATH 함수 흉내내기 CUBRID_DEV 2009.06.15 26526
41 Java CUBRID에서 log4sql을 사용하자 정병주 2009.06.12 44302
40 기타 오래 걸리는 질의 및 동일 시간에 수행 중인 질의 추출하기 손승일 2009.05.26 20058
39 Java jsp용 jdbc 샘플입니다. file 시난 2009.05.25 47606
38 Java iBATIS framework with CUBRID file 웁쓰 2009.05.19 54546
37 기타 CUBRID와 타DBMS의 python 사용방법 비교 cubebridge 2009.05.19 29520
36 Java SQuirreL SQL Client에서 CUBRID 사용하기 3 Prototype 2009.04.18 34533
35 Java Power*Architect 에서 CUBRID 사용하기 Prototype 2009.04.18 23879
34 Java AquaDataStudio 에서 CUBRID 사용하기 Prototype 2009.04.18 23666
33 Install CUBRID Manager 사용시 로그인에 대하여 1 file admin 2009.04.01 42038
32 Java Spring framework 사용 예제 admin 2009.04.01 53119
31 기타 connect by 구현 방법 admin 2009.04.01 52371
» 기타 python 에서 broker_log_top 사용 1 admin 2009.04.01 17830
29 기타 오라클 개발자를 위한 CUBRID 개발 안내 1 admin 2009.04.01 49817
28 Linux HP-UX에서 CUBRID 사용을 위한 kernel 설정값 조정 1 admin 2009.04.01 54135
27 Linux cron을 이용한 백업 자동화 admin 2009.04.01 33118
Board Pagination Prev 1 2 3 4 5 6 7 8 9 Next
/ 9

Contact Cubrid

대표전화 070-4077-2110 / 기술문의 070-4077-2113 / 영업문의 070-4077-2112 / Email. contact_at_cubrid.com
Contact Sales