ORACLE的日志挖掘 logminer

日志挖掘 log miner


6.1 log miner的作用：


数据库恢复中有时会需要对Redo log进行分析， 要会使用log miner，以便确定要恢复的时间点或SCN


6.2 有两种日志挖掘方法 针对DML和DDL，整理如下 ：


6.2.1 对语句DML进行日志挖掘：


1）添加database补充日志
SQL>ALTER DATABASE ADD SUPPLEMENTAL LOG DATA 


//注意：通过PL/SQL包的DML的日志挖掘，这步要先执行，在此之后的DML操作才能从日志里挖到。
                  
2）确定要分析的日志范围，添加日志，分析
SQL>execute dbms_logmnr.add_logfile(logfilename=>'日志',options=>dbms_logmnr.new);   //第一个要加载的日志文件


SQL>execute dbms_logmnr.add_logfile(logfilename=>'补充日志',options=>dbms_logmnr.addfile);  //可以反复添加补充多个日志文件


3）执行logmnr 分析
SQL>execute dbms_logmnr.start_logmnr(options=>dbms_logmnr.dict_from_online_catalog);


4）查询分析结果，可以设置时间格式，也可以在显示方式里再确定格式.
                                                                          
SQL>select username,scn,timestamp,sql_redo from v$logmnr_contents where seg_name='表名';


5）关闭日志分析
SQL>execute dbms_logmnr.end_logmnr;


例
session1 sys:
11:33:20 SQL> ALTER DATABASE ADD SUPPLEMENTAL LOG DATA;


session2 scott:
09:44:08 SQL> create table a (id int);
09:44:20 SQL> insert into a values(1);
09:44:29 SQL> update a set id=5;
09:44:45 SQL> commit;
09:44:47 SQL> delete a; //delete这条没有commit，我们要证明uncommit的DML操作也写入了日志。


这个session2留着，换session1进入sys


session1 sys:
11:32:12 SQL> select * from v$log;
 
    GROUP#    THREAD#  SEQUENCE#      BYTES    MEMBERS ARCHIVED STATUS           FIRST_CHANGE# FIRST_TIME
---------- ---------- ---------- ---------- ---------- -------- ---------------- ------------- -----------
         1           1         26   52428800          2 NO       CURRENT               2257870 2012-7-23 9
         2           1         25   52428800          2 YES       INACTIVE               2257866 2012-7-23 9
         3         1         23   52428800          2 YES       INACTIVE               2257862 2012-7-23 9
         4           1         24   52428800          2 YES       INACTIVE               2257864 2012-7-23 9
 
//上面a 表的DML操作都写进了current组里，记住sequence#是26号。然后手工切换当前日志到archive里。


11:32:18 SQL> alter system switch logfile; 
11:33:00 SQL> / 
11:33:02 SQL> /
11:33:02 SQL> /
 
11:33:09 SQL> select name from v$archived_log;
 
/u01/disk1/timran/arch_1_789252862_21.log
/u01/disk1/timran/arch_1_789252862_22.log
/u01/disk1/timran/arch_1_789252862_23.log
/u01/disk1/timran/arch_1_789252862_24.log
/u01/disk1/timran/arch_1_789252862_25.log
/u01/disk1/timran/arch_1_789252862_26.log
/u01/disk1/timran/arch_1_789252862_27.log
/u01/disk1/timran/arch_1_789252862_28.log
/u01/disk1/timran/arch_1_789252862_29.log
 
62 rows selected


//切换后，sequence#26的日志的应该对应的是/u01/disk1/timran/arch_1_789252862_26.log


11:33:48 SQL> execute dbms_logmnr.add_logfile(logfilename=>'/u01/disk1/timran/arch_1_868709905_5.log',options=>dbms_logmnr.new);
 
11:34:13 SQL> execute dbms_logmnr.start_logmnr(options=>dbms_logmnr.dict_from_online_catalog);
 
11:34:49 SQL>select scn,to_char(timestamp,'yyyy-mm-dd hh24:mi:ss') timestamp,sql_redo,sql_undo from v$logmnr_contents where seg_name='A';
 
       SCN TIMESTAMP           SQL_REDO
---------- ------------------- --------------------------------------------------------------------------------
   2258232 2012-07-23 09:43:16 drop table a purge;
   2258334 2012-07-23 09:44:20 create table a (id int);
   2258341 2012-07-23 09:44:28 insert into "SCOTT"."A"("ID") values ('1');
   2258349 2012-07-23 09:44:46 update "SCOTT"."A" set "ID" = '5' where "ID" = '1' and ROWID = 'AAANBAAAEAAAAGEA
   2258353 2012-07-23 09:44:52 delete from "SCOTT"."A" where "ID" = '5' and ROWID = 'AAANBAAAEAAAAGEAAA';
 
6.2.2 对DDL的操作的log miner：


1）如果是第一次做，先要建好logmnr目录，


设置logmnr 参数，存放数据字典文件dict.ora
$ mkdir /home/oracle/logmnr


SQL> alter system set utl_file_dir='/home/oracle/logmnr' scope=spfile;                                                        


2）建立数据字典文件dict.ora
SQL> execute dbms_logmnr_d.build('dict.ora','/home/oracle/logmnr',dbms_logmnr_d.store_in_flat_file);                          


3）添加日志分析
SQL> execute dbms_logmnr.add_logfile(logfilename=>'日志文件',options=>dbms_logmnr.new);          
SQL> execute dbms_logmnr.add_logfile(logfilename=>'追加日志',options=>dbms_logmnr.addfile);      


4）执行分析
SQL> execute dbms_logmnr.start_logmnr(dictfilename=>'/home/oracle/logmnr/dict.ora',options=>dbms_logmnr.ddl_dict_tracking);     
5）查看分析结果
                                                                
SQL> select username,scn,to_char(timestamp,'yyyy-mm-dd hh24:mi:ss'),sql_redo from v$logmnr_contents WHERE USERNAME ='SCOTT' and lower(sql_redo) like '%table%'; 
                                                              
6）关闭日志分析
SQL> execute dbms_logmnr.end_logmnr;


例子将在053的不完全恢复一节中演示。


在oracle11g 的EM里已加入了有关log miner的功能，可根据时间段由oracle自动选择需要的日志，比较方便，但只有提交的事务信息，看来是从transaction的角度设计的。


EM-->Availability-->Manage-->View and Manage Transctions