10.2.0.5环境dg测试logminer挖掘日志分析
起因:客户需求,数据库正常每天总的日志切换是20以内,有一天日志切换总数,达到30,客户建议使用Logminer进行日志挖掘分析,到底什么应用导致的问题。
说明:使用logminer进行日志挖掘,只能挖掘出什么对象表,dml操作多少次,而无法明确得到什么应用占用的日志最多。只能提供很单项的东西,某个表dml操作次数,非常多。需要客户结合实际应用,去判断,到底什么应用导致的问题。
环境说明:数据库版本10.2.0.5 双节点rac, 有一套dg 10.2.0.5,单实例。
测试说明:
1.dg 切换快照模式
2.使用logminer进行挖掘
3.dg切换还原为standby 备库模式
一、dg切换快照模式
alter database recover managed standby database cancel;
ALTER SYSTEM SET db_recovery_file_dest_size=1024G SCOPE=BOTH;
ALTER SYSTEM SET db_recovery_file_dest='/xxxx/实际情况选择路径' SCOPE=BOTH;
alter system set db_flashback_retention_target= scope=both;
alter database flashback on;
create restore point flashback_dzswrac GUARANTEE flashback database; #确认grant point已创建完毕之后,在进行dg角色更换
SQL> select * from v$restore_point; #如下操作,切换备库角色为主库角色
alter database activate standby database;
alter database open;
alter system set job_queue_processes=;
exit
二、使用logminer进行挖掘
1)选择抓取,日志切换频率最高的时间节点,明确所需要挖掘的日志时间节点
SQL>select to_char(completion_time,'YYYYMMDD HH24'),dest_id,thread#,name
from v$archived_Log
where dest_id= and completion_time between to_date('20190104 14','yyyymmdd hh24') and to_date('20190104 19','yyyymmdd hh24')
TO_CHAR(COM DEST_ID THREAD# NAME
----------- ---------- ---------- -------------------- rows selected.
上述查询,得到04日,一个小时,日志切换了6次
COMPLETION_TIME 归档完成的时间
2)查询日志挖掘的文件名称
select to_char(completion_time,'YYYYMMDD HH24:mi'),dest_id,thread#,name,deleted,status
from v$archived_Log
where dest_id=1 and completion_time between to_date('20190104 14','yyyymmdd hh24') and to_date('20190104 22','yyyymmdd hh24')
order by 1;
TO_CHAR(COMPLE DEST_ID THREAD# NAME DEL S
-------------- ---------- ---------- -------------------------------------------------- --- -
20190104 14:03 1 1 xxxx NO A
20190104 14:03 1 2 xxxx NO A
20190104 14:30 1 2 xxxx NO A
20190104 14:45 1 2 xxxx NO A
20190104 14:49 1 1 xxxx NO A
20190104 14:49 1 2 xxxx NO A
20190104 14:50 1 2 xxxx NO A
--如下忽略
20190104 15:03 1 2 xxxx NO A
3)logminer前提准备
添加存储过程
@?/rdbms/admin/dbmslmd.sql
@?/rdbms/admin/dbmslm.sql
@?/rdbms/admin/dbmslms.sql
@?/rdbms/admin/prvtlm.plb
开启最小补充日志
select SUPPLEMENTAL_LOG_DATA_MIN,SUPPLEMENTAL_LOG_DATA_PK,SUPPLEMENTAL_LOG_DATA_UI from v$database;
SQL> alter database add supplemental log data;
Database altered.
SQL> select SUPPLEMENTAL_LOG_DATA_MIN,SUPPLEMENTAL_LOG_DATA_PK,SUPPLEMENTAL_LOG_DATA_UI from v$database;
SUPPLEME SUP SUP
-------- --- ---
YES NO NO
LOGMNR 分析日志,需要创建一个数据字典,这个数据字典可以存储在外部文件(external file) 或者redo log 中。 如果要存储在外部文件中,数据库参数utl_file_dir 需要配置,并重启数据库。
SQL> alter system set utl_file_dir='*' scope=spfile;
SQL> shutdown immediate;
SQL> startup
SQL> show parameter utl_file
NAME TYPE VALUE
------------------------------------ ----------- ------------------------------
utl_file_dir string *
SQL> execute dbms_logmnr_d.build(dictionary_filename=>'dict.ora',dictionary_location=>'/data/newdg/logminer_ctr_directory/');
PL/SQL procedure successfully completed.
#或者使用redo log 存储数据字典
#使用redo log 存储数据字典不需要重启数据库,也不需要配置任何参数,这种方式比较灵活.直接可以创建数据字典到redo文件。
#dbms_logmnr_d.build(options => dbms_logmnr_d.STORE_IN_REDO_LOGS);
4)使用logminer 挖掘日志
第一个
exec dbms_logmnr.add_logfile('/xxx.xxxdbf',dbms_logmnr.new);
第二个
exec dbms_logmnr.add_logfile('xxx.xxxxdbf',dbms_logmnr.addfile);
exec dbms_logmnr.add_logfile('/xxx.xxxdbf',dbms_logmnr.addfile);
exec dbms_logmnr.add_logfile('/dxxx14.dbf',dbms_logmnr.addfile);
exec dbms_logmnr.add_logfile('/xxx.dxxxbf',dbms_logmnr.addfile);
exec dbms_logmnr.add_logfile('xxx814x.dbf',dbms_logmnr.addfile);
exec dbms_logmnr.add_logfile('/xxxxxx.dbf',dbms_logmnr.addfile);
注册到日志文件中
execute dbms_logmnr.start_logmnr(options=>dbms_logmnr.dict_from_online_catalog);
由于记录处于不稳定状态,可以创建一个临时表,存储挖掘记录
create table logmnr_04_14_one_date as select * from v$logmnr_contents;
结束
EXECUTE dbms_logmnr.end_logmnr;
5)SQL查询结果
set line 200
set term off verify off feedback off pagesize 999
set markup html on entmap on spool on preformat off
spool log_20190104_14_15.xls
select username,SEG_OWNER,SEG_NAME,seg_type_name,OPERATION_CODE,count(*)
from logmnr_04_14_one_date group by username,SEG_OWNER,SEG_NAME,seg_type_name,
OPERATION_CODE order by 6 asc;
spool off
三、DG恢复shutdown immediate;
startup mount;
flashback database to restore point flashback_dzswrac;
alter database convert to physical standby;
shutdown immediate;
startup mount;
alter database recover managed standby database disconnect from session;
--根据日志等信息,mgr确认已使用,且已恢复之后,在删除闪回日志,一定要确认完毕
DROP RESTORE POINT flashback_dzswrac;
alter database flashback off;
ALTER SYSTEM SET db_recovery_file_dest='' SCOPE=BOTH;
exit
10.2.0.5环境dg测试logminer挖掘日志分析的更多相关文章
- 使用logminer挖掘日志,分析历史操作 系列一
===============STARTED==================================== 事件起因: 业务的人mail过来说是有张表记录的10K+的优惠码记录没了,要我们确 ...
- logminer使用测试库进行挖掘分析,10.2.0.5
上一篇测试是在dg环境进行测试挖掘,但是如果客户存在一个测试库,那样使用日志挖掘的影响性更小.本篇进行测试分析. 测试环境介绍: oracle linux 5.6,vmware虚拟机,安装两套单实例 ...
- 【Oracle】10.2.0.1升级到10.2.0.5
升级数据库到10.2.0.5 因是测试环境,不需要备份:如是生产系统,建议进行全备份后再进行升级操作,预防数据丢失造成不必要的影响. 步骤: 上传并解压补丁,安装前准备,安装补丁,预升级检查, ...
- oralce 10g(10.2.0.1) 冷备份从64位恢复到32位
环境描述:windows 2003 企业版 64位 oracle版本:oracle 10g 10.2.0.1 64位 冷备恢复到 windows XP oracle 10g 10.2.0.1 32位( ...
- oracle实现通过logminer实现日志抓取分析
场景:现场库到前置库. 思考:使用触发器? 1.侵入性解决方案 2.需要时各种配置,不需要时又是各种配置 Change Data Capture:捕捉变化的数据,通过日志监测并捕获数据库的变动(包括数 ...
- exp迁移测试库10.2.0.5
目的: 将一套10.2.0.5的UP-UNIX系统的数据,迁移到一台Windows环境下. 迁移方案:由于不同的操作系统,为了方便迁移,只是测试,使用EXP/IMP方式. 迁移流程: 一.源端导出 1 ...
- Rsyslog+ELK日志分析系统搭建总结1.0(测试环境)
因为工作需求,最近在搭建日志分析系统,这里主要搭建的是系统日志分析系统,即rsyslog+elk. 因为目前仍为测试环境,这里说一下搭建的基础架构,后期上生产线再来更新最后的架构图,大佬们如果有什么见 ...
- 单实例dg软件从10.2.0.4版本安装至10.2.0.5.12
DG环境搭建需求,因此安装与主库相同的软件版本 1.主库软件版本10.2.0.5.12 2dg环境提供的是全新的10.2.0.4.0 3.安装步骤,安装10.2.0.5 静默安装 psu安装10.2. ...
- 配置SSD-caffe测试时出现“Check failed: error == cudaSuccess (10 vs. 0) invalid device ordinal”解决方案
这是由于GPU数量不匹配造成的,如果训练自己的数据,那么我们只需要将solver.prototxt文件中的device_id项改为自己的GPU块数,一块就是0,两块就是1,以此类推. 但是SSD配置时 ...
随机推荐
- Node.js + Express中间件详解
使用中间件 Express是一种路由和中间件Web框架,它具有自己的最小功能:Express应用程序本质上是一系列中间件函数调用. 中间件函数是可以访问请求对象 (req),响应对象(res)以及应用 ...
- 解决nginx重启“var/run/nginx/nginx.pid" no such file or directory问题
重启虚拟机后,再次重启nginx会报错“/var/run/nginx/nginx.pid” no such file or directory. 方法一(已试过可行): 到/var/run下看没有ng ...
- 更改pip源至国内镜像
更改pip源至国内镜像 经常在使用Python的时候需要安装各种模块,而pip是很强大的模块安装工具,但是由于国外官方pypi经常被墙,导致不可用,所以我们最好是将自己使用的pip源更换一下,这样 ...
- 放弃Dubbo,选择最流行的Spring Cloud微服务架构实践与经验总结
http://developer.51cto.com/art/201710/554633.htm Spring Cloud 在国内中小型公司能用起来吗?从 2016 年初一直到现在,我们在这条路上已经 ...
- 使用Postman在Chrome下进行rest请求测试
1.首先下载postman,我已经下载好,放在云盘里了. http://pan.baidu.com/s/1c1YoGKS 密码 dgfw 2.打开Chrome,点击更多工具->扩展程序~打开. ...
- SpringBoot与Web开发
web开发1).创建SpringBoot应用,选中我们需要的模块:2).SpringBoot已经默认将这些场景已经配置好了,只需要在配置文件中指定少量配置就可以运行起来3).自己编写业务代码: 自动配 ...
- 外部调用mvc的api方法时,如何解决跨域请求问题?
首先,创建一个mvc项目(包含webapi),我们模拟一个场景 1)在项目的Controller 创建一个WeiXinApiController public class WeiXinApiContr ...
- laravel中db获取某个数据的具体字段值:
$helpfriend = DB::connection('luckyrecord')->table($luckyrecord)->where('id', $luckyrecordid)- ...
- 初学Linux系统最应该做对的4件事情[长文]
“闲来无事,逛逛贴吧”已经是本人无事消磨时间的最佳选择了.五花八门的问题,各式各样的回答,总能给自己带来无限的欢乐.当然也有些问题值得自己去思考或者回答.之前就有人在贴吧里问到“Linux好难啊!该怎 ...
- [POJ3481]Double Queue
Problem 0 结束操作 1 K P 将一个数K以优先级P加入 2 取出优先级最高的那个数 3 取出优先级最低的那个数 Solution Splay模板题 Notice 是输出数而不是输出优先级. ...