体系结构之日志挖掘

1. 主要作用途：数据库恢复中有时会需要对Redo log进行分析，使用log miner，以便确定要恢复的时间点或SCN，跟踪数据库的变化，回退数据库的变化等。
2. 要求:
1. 源数据库和分析数据库必须运行在相同硬件平台上；
2. 分析数据库可以是独立数据库或源数据库；
3. 分析数据库的版本不能低于源数据库的版本；
4. 分析数据库与源数据库必须具有相同的字符集；
5. 使用LogMiner进行分析必须在日志生成前开启Minimal Supplemental logging
3. 四个基本对象
1. The Source Database：源数据库，产生日志的数据库。
2. The Mining Database：分析数据库，运行LogMiner的数据库，不仅可以分析本身的日志，也可以分析其它数据库文件。
3. The LogMiner Dictionary：日志挖掘字典，没有字典，日志内容无法解析，默认是系统内部16进制内容。
4. The Redo Log Files：重做日志文件，可以是在线的，也可以是归档的。
4. 操作流程
1. 安装LogMiner
1. 首先安装两个安装包：DBMS_LOGMNR 和 DBMS_LOGMNR_D，脚本如下：
1. $ORACLE_HOME/rdbms/admin/dbmslm.sql
2. $ORACLE_HOME/rdbms/admin/dbmslmd.sql
2. 开启补充日志

SQL> select SUPPLEMENTAL_LOG_DATA_MIN from v$database;

SQL> ALTER DATABASE ADD SUPPLEMENTAL LOG DATA;----通过PL/SQL包的DML的日志挖掘，这步要先执行，在此之后的DML操作才能从日志里挖到。

 

3. 创建数据字典
1. DBMS_LOGMNR_D.BUILD创建数据字典，三种创建方式
1. dict_from_online_catalog在线字典
2. store_in_flat_file平面文件字典
3. store_in_redo_logs
2. 如果使用在线字典方式，这个步骤可以省略
4. 添加日志文件
1. 添加第一个文件

SQL> execute dbms_logmnr.add_logfile(logfilename=>'日志',options=>dbms_logmnr.new);----第一个文件 后缀官方建议是 .new

　　　　　　　  2. 添加第二个及后续文件

SQL> execute dbms_logmnr.add_logfile(logfilename=>'日志',options=>dbms_logmnr.addfile);----- 后续添加的就不是 new了

5. 执行分析

SQL> execute dbms_logmnr.start_logmnr(options=>dbms_logmnr.dict_from_online_catalog);

6. 查询分析结果
1. 查询的分析结果是存放在动态试图v$logmnr_contents 里的，建议不要直接查看，通过创建临时表的方式来查看
2. 创建临时表

SQL> create table tbs_test nologging as select * from v$logmnr_contents;

　　　　　　     3. 查看临时表结果

SQL> select username,scn, to_char(timestamp, 'yyyy-mm-dd hh24:mi:ss') timestamp, sql_redo, sql_undo from tbs_test where seg_name = 'TEST';

7. 关闭日志分析

SQL> execute dbms_logmnr.end_logmnr;

 

 

实验：通过在线数据字典方式挖掘归档日志

实验步骤：

　　1. 开启数据库补充日志

　　2. 创建一张表 TESTLOG（此实验使用CTAS创建）

　　3. 对该表做相应的DML操作（update/delete）最后都提交

　　4. 查看当前正在使用的日志组及日志序列号

　　5. 将该日志组归档出去

　　6. 添加日志文件

　　7. 执行分析

　　8. 使用CTAS创建另外一张表 LOG_TEST，将分析结果存入该表

　　9. 关闭日志分析

　　10. 查看分析结果（见截图）

实验代码：

第一步：
SQL> alter database add supplemental log data;

Database altered.

SQL> select supplemental_log_data_min from v$database;

SUPPLEMENTAL_LOG
----------------
YES
第二步：
SQL> create table testlog as select * from scott.emp;

Table created.
第三步：
SQL> update testlog set sal=10000 where ename='KING';

1 row updated.

SQL> commit;

Commit complete.

SQL> delete from testlog;

14 rows deleted.

SQL> commit;

Commit complete.
第四步：
SQL> select a.group#,a.sequence#,a.status,b.member,a.archived from v$log a,v$logfile b where a.group#=b.group#;

    GROUP#  SEQUENCE# STATUS          MEMBER                         ARCHIV
---------- ---------- --------------- -------------------------------------------------- ------
     1       63 INACTIVE          /u01/app/oracle/oradata/OCP12C/redo01a.log     YES
     1       63 INACTIVE          /u01/app/oracle/oradata/OCP12C/redo01b.log     YES
     2       64 CURRENT          /u01/app/oracle/oradata/OCP12C/redo02a.log     NO
     2       64 CURRENT          /u01/app/oracle/oradata/OCP12C/redo02b.log     NO
     3       62 INACTIVE          /u01/app/oracle/oradata/OCP12C/redo03a.log     YES
     3       62 INACTIVE          /u01/app/oracle/oradata/OCP12C/redo03b.log     YES

6 rows selected.
第五步：
SQL> alter system archive log current;

System altered.
SQL> select a.group#,a.sequence#,a.status,b.member,a.archived from v$log a,v$logfile b where a.group#=b.group#;

    GROUP#  SEQUENCE# STATUS          MEMBER                         ARCHIV
---------- ---------- --------------- -------------------------------------------------- ------
     1       63 INACTIVE          /u01/app/oracle/oradata/OCP12C/redo01a.log     YES
     1       63 INACTIVE          /u01/app/oracle/oradata/OCP12C/redo01b.log     YES
     2       64 ACTIVE          /u01/app/oracle/oradata/OCP12C/redo02a.log     YES
     2       64 ACTIVE          /u01/app/oracle/oradata/OCP12C/redo02b.log     YES
     3       65 CURRENT          /u01/app/oracle/oradata/OCP12C/redo03a.log     NO
     3       65 CURRENT          /u01/app/oracle/oradata/OCP12C/redo03b.log     NO

6 rows selected.
第六步：
SQL> execute dbms_logmnr.add_logfile(logfilename=>'/u01/app/oracle/arch/1_64_1056413938.dbf',options=>dbms_logmnr.new);

PL/SQL procedure successfully completed.
第七步：
SQL> execute dbms_logmnr.start_logmnr(options=>dbms_logmnr.dict_from_online_catalog);

PL/SQL procedure successfully completed.
第八步：
SQL> create table log_test as select * from v$logmnr_contents;

Table created.
第九步：
SQL> execute dbms_logmnr.end_logmnr;

PL/SQL procedure successfully completed.
第十步：
SQL>select username,
       scn,
       to_char(timestamp, 'yyyy-mm-dd hh24:mi:ss') timestamp,
       sql_redo,
       sql_undo
  from log_test
 where seg_name = 'TESTLOG';