崩溃后应先分析AWR报告再启动恢复,重点对比崩溃前后DB Time、log file sync等待、enq: TX/US争用及物理读变化,结合ASH和告警日志定位根因。
崩溃后先别急着启动,先看AWR报告对比异常前后负载
oracle实例崩溃后直接startup mount再recover database是常规流程,但如果你跳过awr分析就动手,很可能重复踩坑——比如恢复完发现高cpu或io争用又导致二次崩溃。awr(automatic workload repository)不是“事后复盘工具”,它是定位崩溃诱因的第一手证据。
关键点在于:崩溃前1小时 vs 崩溃后首次快照(如果还能生成)的指标对比,能快速识别是否为资源耗尽、锁争用或隐式递归调用引发的连锁反应。
- 必须检查的三组指标:
DB Time、log file sync等待事件、enq: TX - row lock contention出现频次 - 若
DB Time在崩溃前15分钟陡增3倍以上,且log file sync平均等待时间 > 20ms,大概率是IO子系统已饱和,此时强行恢复可能卡在RECOVER DATABASE阶段 - 对比
Buffer Hit Ratio和Physical Reads:若前者从98%骤降至70%,同时后者翻倍,说明缓冲区失效严重,可能是UNDO段损坏或共享池被污染的前兆
用AWR定位ORA-00600 [4193]类错误的真实诱因
遇到ORA-00600 [4193]这种Undo/Redo序列号不匹配错误,很多人直接上隐藏参数_allow_resetlogs_corruption,结果把数据库拖进更难恢复的状态。其实AWR里早有线索:它往往不是孤立错误,而是崩溃前持续数小时的undo segment extension失败或enq: US - contention等待累积的结果。
查AWR时重点关注两个视图:
-
DBA_HIST_SEG_STAT中UNDO表空间的segment_name列,看是否有某段反复EXTEND失败(physical_reads突增但logical_reads下降) -
DBA_HIST_SYSTEM_EVENT中enq: US - contention等待事件的total_waits值,若崩溃前3个快照内该值增长超500%,说明UNDO空间严重不足或配置不合理 - 注意:AWR默认每小时采样一次,若崩溃发生在两次采样之间,需结合
v$active_session_history(ASH)补全细节,执行SELECT * FROM v$active_session_history WHERE sample_time > SYSDATE - 1/24 ORDER BY sample_time DESC
恢复过程中如何让AWR继续采集数据
很多人以为数据库没OPEN,AWR就停了——这是错觉。STARTUP MOUNT状态下,只要实例进程正常运行,AWR仍会按原间隔生成快照(前提是STATISTICS_LEVEL = TYPICAL或ALL)。这对监控恢复进度至关重要。
- 确认AWR是否可用:
SELECT dbid, snap_id, begin_interval_time FROM dba_hist_snapshot WHERE rownum ,若返回空,说明<code>STATISTICS_LEVEL被设为BASIC,需临时修改:ALTER SYSTEM SET STATISTICS_LEVEL=TYPICAL SCOPE=MEMORY - 恢复期间最实用的监控SQL:
SELECT * FROM v$session_longops WHERE time_remaining > 0 AND opname LIKE 'RMAN%',配合AWR中DB Time曲线,可判断当前是前滚慢(Redo应用瓶颈)还是回滚慢(UNDO段读取压力大) - 风险提示:不要在
MOUNT状态下手动EXEC DBMS_WORKLOAD_REPOSITORY.CREATE_SNAPSHOT,这会干扰SMON进程对恢复状态的判断,可能触发ORA-00600 [kcrf_simulate_log_write_1]
AWR无法生成时的替代诊断路径
如果崩溃太严重,连STARTUP MOUNT都失败,或者AWR表空间本身损坏,就别硬等AWR了。这时候要切换到更底层的信号源。
- 立刻检查告警日志:
tail -n 200 $ORACLE_BASE/diag/rdbms/*/alert/log.xml,重点搜ORA-、corrupt、lost write关键词 - 用ADRCI提取最近trace:
adrci -script /tmp/adrci_cmd.txt,其中/tmp/adrci_cmd.txt内容为:set homepath diag/rdbms/orcl/ORCL; show problem; ips pack problem 1; - 若控制文件损坏,
v$database和v$instance不可查,直接读取二进制控制文件头:strings $ORACLE_HOME/dbs/control01.ctl | head -20,确认SCN和检查点信息是否明显倒退
AWR只是起点,不是终点。真正决定恢复成败的,是你在STARTUP MOUNT前那5分钟里,有没有把崩溃前最后3个快照里的log file sync、enq: US - contention和physical_reads趋势看清楚——这些数字不会说谎,但容易被忽略。


















