使用logminer进行日志分析

 LogMiner工具的主要用途有：

（1）跟踪数据库的变化：能够离线的跟踪数据库的变化，而不会影响在线系统的性能。
（2）回退数据库的变化：回退特定的变化数据，减小point-in-time recovery的执行。
（3）优化和扩容计划：可经过分析日志文件中的数据以分析数据增加模式。
 

安装LogMiner工具，这两个脚本必须均以SYS用户身份运行
@$ORACLE_HOME/rdbms/admin/dbmslmd.sql 

用来建立DBMS_LOGMNR_D包建立数据字典文件，用于提取数据字典信息到外部平面文件或者是联机日志中
@$ORACLE_HOME/rdbms/admin/dbmslm.sql

用来建立DBMS_LOGMNR包   
grant execute on dbms_logmnr to public;   
在10G以前，logmnr使用的临时表v$logmnr_contents使用的是system表空间，在10g后使用的是sysaux表空间，能够修改表空间：
exec sys.dbms_logmnr_d.set_tablespace('USERS');

 

有三种方法能获得数据字典的方法：
1、字典提取到一个平面数据字典文件(DBMS_LOGMNR_D.STORE_IN_FLAT_FILE)，9i之后不提倡使用

二、 据字典提取到重作日志文件(DBMS_LOGMNR_D.STORE_IN_REDO_LOGS)
3、当前的数据库的联机数据字典(DBMS_LOGMNR.DICT_FROM_ONLINE_CATALOG)，只能分析当前数据库的重作日志文件

 

使用补充日志，将数据字典提取到重作日志文件要用到：

Enable Supplemental Logging
  Database-Level Supplemental Logging
    Minimal Supplemental Logging
           ALTER DATABASE ADD SUPPLEMENTAL LOG DATA;
    Database-Level Identification Key Logging
           ALTER DATABASE ADD SUPPLEMENTAL LOG DATA (ALL) COLUMNS;
           ALTER DATABASE ADD SUPPLEMENTAL LOG DATA (PRIMARY KEY) COLUMNS;
           ALTER DATABASE ADD SUPPLEMENTAL LOG DATA (UNIQUE) COLUMNS;
           ALTER DATABASE ADD SUPPLEMENTAL LOG DATA (FOREIGN KEY) COLUMNS;
    Disabling Database-Level Supplemental Logging
           disable database-level supplemental logging:
             ALTER DATABASE ADD SUPPLEMENTAL LOG DATA (PRIMARY KEY) COLUMNS;
             ALTER DATABASE ADD SUPPLEMENTAL LOG DATA (UNIQUE) COLUMNS;
             ALTER DATABASE DROP SUPPLEMENTAL LOG DATA (PRIMARY KEY) COLUMNS;
             ALTER DATABASE DROP SUPPLEMENTAL LOG DATA;
           disable all database supplemental logging:
             ALTER DATABASE ADD SUPPLEMENTAL LOG DATA (PRIMARY KEY) COLUMNS;
             ALTER DATABASE ADD SUPPLEMENTAL LOG DATA (UNIQUE) COLUMNS;
             ALTER DATABASE DROP SUPPLEMENTAL LOG DATA (PRIMARY KEY) COLUMNS;
             ALTER DATABASE DROP SUPPLEMENTAL LOG DATA (UNIQUE) COLUMNS;
             ALTER DATABASE DROP SUPPLEMENTAL LOG DATA;
  Table-Level Supplemental Logging          
    Table-Level Identification Key Logging
           ALTER DATABASE ADD SUPPLEMENTAL LOG DATA (ALL) COLUMNS;
           ALTER TABLE HR.EMPLOYEES ADD SUPPLEMENTAL LOG DATA (ALL) COLUMNS;
           ALTER TABLE HR.EMPLOYEES ADD SUPPLEMENTAL LOG DATA (PRIMARY KEY) COLUMNS;
           ALTER TABLE HR.EMPLOYEES ADD SUPPLEMENTAL LOG DATA (UNIQUE) COLUMNS;
    Table-Level User-Defined Supplemental Log Groups
           ALTER TABLE HR.EMPLOYEES ADD SUPPLEMENTAL LOG GROUP emp_parttime(EMPLOYEE_ID, LAST_NAME,DEPARTMENT_ID) ALWAYS;
           ALTER TABLE HR.EMPLOYEES ADD SUPPLEMENTAL LOG GROUP emp_fulltime(EMPLOYEE_ID, LAST_NAME,DEPARTMENT_ID);
           ALTER TABLE HR.EMPLOYEES ADD SUPPLEMENTAL LOG GROUP emp_parttime(DEPARTMENT_ID NO LOG, EMPLOYEE_ID);

 

1、在初始化参数文件中设置参数utl_file_dir,使用平面数据字典文件方法须要用到这个参数

 

2、提取数据字典

1)提取数据字典到平面数据文件

Execute dbms_logmnr_d.build('平面数据文件名','路径名’，options=>dbms_logmnr_d.store_in_flat_file);

2)提取数据字典到重作日志文件

Alter database add dupplemental log data;

Execute dbms_logmnr_d.build(options=>dbms_logmnr_d.store_in_redo_logs);

3)使用当前数据库的联机数据字典

Execute dbms_logmnr_d.build(options=>dbms_logmnr_d.dict_from_online_catalog);

 

3、 添加须要监视的日志文件

1) 建立logminer要分析的日志文件列表

Execute dbms_logmnr.add_logfile(logfilename=>'******',options=>dbms_logmnr.new);

2） 添加其余日志文件到列表

Execute dbms_logmnr.add_logfile(logfilename=>'******',options=>dbms_logmnr.addfile);

3) 从要分析的日志列表中删除日志

Execute dbms_logmnr.add_logfile(logfilename=>'*****',options=>dbms_logmnr.removefile);

 

4、 启动logminer会话，进行日志分析

1） 无限制条件分析

Execute dbms_logmnr.start_logmnr(dictfilename=>'******');

------指定平面文件名

Execute dbms_logmnr.start_logmnr(optioons=>dbms_logmnr.dict_from_online_catalog+

dbms_logmnr.committed_data_only);

----- committed_data_only 标识咱们只提取已提交的事务

Execute dbms_logmnr.start_logmnr(options=>dbms_logmnr.dict_from_online_catalog);

------Logminer将使用联机数据字典

Execute dbms_logmnr.start_logmnr(options=>dbms_logmnr.dict_from_redo_logs);

------Logminer将在重作日志文件中查找字典数据

Execute dbms_logmnr.start_logmnr(options=>dbms_logmnr.skip_curruption);

------忽略redo日志中的全部错误

Execute dbms_logmnr.start_logmnr(options=>dbms_logmnr.ddl_dict_tracking);

------用来跟踪ddl语句，默认是关闭的！当使用online catalog时，不能使用！

2） 有限制条件分析

① 使用平面数据字典文件

Execute dbms_logmnr.start_logmnr(dictfilename=>'*******',starttime=>'*****',

Endtime=>'*******');

Execute dbms_logmnr.start_logmnr(dictfilename=>'*******',starttime=>'*****',

Endtime=>'*******',options=>dbms_logmnr.continuous_mine);

Execute dbms_logmnr.start_logmnr(dictfilename=>'*******',startscn=>*****,

endscn=>*****);

② 使用重作日志

Execute dbms_logmnr.start_logmnr(startscn=>******,endscn=*******,options=>

dbms_logmnr.dict_form_redo_logs);

③ 使用联机数据字典

Execute dbms_logmnr.start_logmnr(startscn=>******,endscn=>******,options=>

dbms_logmnr.dict_from_online_catalog+dbms_logmnr.continuous_mine);

 

5、 查询v$logmnr_contents

 

6、 结束logminer会话,释放全部资源和清除PGA   
    EXECUTE DBMS_LOGMNR.END_LOGMNR;  

 

7、 相关的数据字典
v$logmnr_contents
v$logmnr_logs
v$logmnr_dictionary
v$logmnr_parameters
v$lolist

  8、 其余注意事项
1)LogMiner生成行级sql,并非实际的语句
2)全部信息都在PGA中，会话结束，信息丢失，能够用create table as select * from v$logmnr_contents保存信息。
3)不支持下面的数据结构
简单的和嵌套的抽象数据结构
嵌套表和varry
索引组织表
一个带有族建的create table as select
4）LogMiner必须使用被分析数据库实例产生的字典文件，而不是安装LogMiner的数据库产生的字典文件，另外必须保证安装LogMiner数据库的字符集和被分析数据库的字符集相同。5）被分析数据库平台必须和当前LogMiner所在数据库平台同样。
6）LogMiner日志分析工具仅可以分析Oracle 8之后的产品。