【故障处理】-OGG 丢失归档20190717

再次遇到OGG 异常：

归档丢失，OGG 不能找到需要的归档文件.

该表完整expdp 导出评估为 110G，了解到只有插入操作，所以只把归档丢失期间的数据补到目标端就好。

1. 清理目标端 2019/07/11 18:00 之后数据

--目标端
SQL> 
select count(1) from table1 where GEN_TIME>=to_date('20190711 18:00:00','YYYYMMDD HH24:MI:SS');
delete from table1 where GEN_TIME>=to_date('20190711 18:00:00','YYYYMMDD HH24:MI:SS');
COMMIT;

2. 完成2019/07/11 18:00 之后数据的补充

• 查询SCN

  select to_char(current_scn) from v$database; --16253916840

• 导出数据

  DATE=`date +'%Y%m%d'`
  expdp userid=source/pass directory=expdir tables=table1 QUERY=table1:\"where GEN_TIME\>=to_date\(\'20190711 18:00:00\',\'YYYYMMDD HH24:MI:SS\'\)\" filesize=10G dumpfile=initogg$DATE%U.dmp logfile=initogg$DATE.log cluster=n FLASHBACK_SCN=16253916840

• SCP 到目标端

  scp initogg$DATE*.dmp ogg@target:/expdir

• 目标端导入

  DATE=`date +'%Y%m%d'`
  impdp target/pass directory=expdir remap_schema=source:target dumpfile=initogg$DATE%U.dmp logfile=impdp_initogg$DATE.log table_exists_action=append 

• 验证数据

  --source
  select count（1） from table1 as of scn 16253916840;
  --target 
  select count（1） from table1;

  数据一致，该SCN后的数据通过OGG同步即可。

3. Source 端OGG 进程处理

• Extract 进程处理

  GGSCI> ALTER EXTRACT EXT1 ,ETROLLOVER
  GGSCI> info exttrail *
         Extract Trail: /ogg/dirdat/ra
               Extract: DP1
                 Seqno: 2900
                   RBA: 15694
             File Size: 100M
         Extract Trail: ./dirdat/la
               Extract: EXT1
                 Seqno: 2911     #注意这里新的Seqno 和 RBA
                   RBA: 0      #下面Dump进程用到
             File Size: 100M
  #9点到现在归档是连续的，从今天9点的归档开始抽取，前面丢失的不再需要
  GGSCI> ALTER EXTRACT EXT1 ,BEGIN 09:00
  GGSCI> START EXT1
  GGSCI> INFO EXTTRAIL *
         Extract Trail: /ogg/dirdat/ra
               Extract: DP1
                 Seqno: 2900
                   RBA: 15694
             File Size: 100M
         Extract Trail: ./dirdat/la
               Extract: EXT1
                 Seqno: 2911
                   RBA: 19070157   #RBA变更，已有数据被抽取到trail文件
             File Size: 100M

• DB 进程处理

  GGSCI> info DP1
  EXTRACT    DP1  Last Started 2019-07-13 14:57   Status STOPPED
  Checkpoint Lag       00:00:00 (updated 17:00:23 ago)
  Log Read Checkpoint  File ./dirdat/la002910   #使用的旧的trail文件
                       2019-07-11 20:39:24.000000  RBA 31497286
  GGSCI> ALTER EXTRACT DP1, EXTSEQNO 2911, EXTRBA 0 #切换到Extract使用的新文件
  GGSCI> info DP1
  EXTRACT    DP1  Initialized   2019-07-17 11:11   Status STOPPED
  Checkpoint Lag       00:00:00 (updated 00:00:06 ago)
  Log Read Checkpoint  File ./dirdat/la002911
                       First Record  RBA 0
  #启动Dump进程
  GGSCI> START DP1
  GGSCI> INFO DP1
  EXTRACT    DP1  Last Started 2019-07-17 11:12   Status RUNNING
  Checkpoint Lag       00:00:00 (updated 00:00:08 ago)
  Log Read Checkpoint  File ./dirdat/la002911
                       2019-07-17 11:12:50.000000  RBA 19537151 #需等一会儿才有变化
  GGSCI> INFO EXTTRAIL *
         Extract Trail: /ogg/dirdat/ra
               Extract: DP1
                 Seqno: 2901 #Dump进程启动后自动切换了远端trail文件
                   RBA: 19581384
             File Size: 100M
         Extract Trail: ./dirdat/la
               Extract: EXT1
                 Seqno: 2911
                   RBA: 19601526
             File Size: 100M

• 查看Source 端状态都已正常

  GGSCI> INFO ALL #相关进程都处于Running 状态，且无延迟

4. Target 端OGG 进程处理

基于SCN 启动Replicat 进程

GGSCI> info RP1
REPLICAT   RP1  Last Started 2019-07-12 06:00   Status STOPPED
Checkpoint Lag       00:00:00 (updated 17:03:31 ago)
Log Read Checkpoint  File ./dirdat/ra002900 #当前还在使用2900
                     2019-07-11 20:39:24.096454  RBA 15694
#从指定SCN 开始应用
GGSCI> START REPLICAT RP1, ATCSN 16253916840
GGSCI> info RP1
REPLICAT   RP1  Last Started 2019-07-17 11:15   Status RUNNING
Checkpoint Lag       00:00:00 (updated 00:00:01 ago)
Log Read Checkpoint  File ./dirdat/ra002901 #已经自动切换到了2901
                     2019-07-17 11:15:20.967710  RBA 19923873

Replicat 在2900没找到需要的SCN,在2901里才能找到，所以自动完成了切换

5. 数据验证

--source
select count（1） from table1;
--target 
select count（1） from table1;