AWR报告中最该先看Top 5 Timed Events
打开一份AWR报告,从哪里入手最直接?答案很明确:直奔 Top 5 Timed Events 这一节。它并非事无巨细地罗列所有等待,而是精准地按“消耗数据库时间最多”排序,将前五大瓶颈直接呈现在你面前。
解读时,重点锁定三列数据:%DB time(该事件消耗的数据库时间占比)、total waits(总等待次数)、以及 A vg wait (ms)(平均单次等待时长)。这三者的组合能揭示问题的本质。举个例子,如果 db file sequential read 占比高达35%,但平均等待只有4ms,这通常指向高频的小IO操作;而如果 log file sync 占比8%,平均等待896μs,总次数却超过140万,这就强烈暗示应用存在过于频繁的 COMMIT 操作。
- 当看到
direct path read跻身前三时,别急着去调整磁盘。首先应该怀疑是否有SQL在进行大量排序或哈希连接(Hash Join)。这时,就需要转向SQL ordered by Gets和SQL ordered by Reads章节,寻找对应的语句。 row cache lock等待事件高企,尤其是在RAC环境中,通常指向序列(Sequence)争用。一个快速的验证方法是立刻检查dba_sequences视图,看看相关序列的CACHE值是否为1(即无缓存)。- 一旦出现
enq: TX - row lock contention,就意味着存在行级锁阻塞。此时,结合Segments by Row Lock Waits部分,可以迅速定位到具体的表和索引。
如何定位等待事件发生的对象和SQL
仅仅知道等待事件的名称是远远不够的。关键是要弄清楚“谁在等、等什么、以及为什么等”。虽然AWR报告本身不提供实时的会话堆栈信息,但它为我们准备了两条清晰的下钻路径。
第一层路径,是查看 Foreground Wait Events 下的子章节。例如,Wait Event Histogram 会将等待时长分档显示(如64ms~2s、4s~2min),这有助于判断问题是偶发的抖动还是持续的卡顿。而 Service Statistics 则能揭示是哪个服务名(比如 APPS 或 OLTP)贡献了主要的等待时间。
第二层路径,则是跳转到 SQL ordered by Elapsed Time 或 SQL ordered by CPU Time 部分。找到那些高耗时的SQL,记下它们的 SQL_ID。随后,可以通过查询 dba_hist_sqltext 来获取原始语句文本,再结合 dba_hist_active_sess_history 视图,就能看到该SQL实际触发了哪些具体的等待事件。
- 这里有个细节需要注意:AWR默认只保留8天的历史数据。如果问题发生在9天前,
dba_hist_active_sess_history中的数据可能已被清理。因此,优先使用最近的快照进行对比分析。 - 如果某个
SQL_ID在AWR报告中查不到对应的文本,可能是由于参数optimizer_capture_sql_plan_baselines被设置为FALSE,或者语句被自动重写了。这时,可以查询v$sql实时视图作为补充。
row cache lock为什么总在RAC里爆发
这个等待事件,根源往往不在磁盘或内存,而是RAC节点间争用 SEQ$ 系统表所导致的典型现象。每次调用一个没有缓存的序列(即 CACHE 1)时,Oracle都必须更新数据字典基表 seq$,并施加 row cache lock。在RAC环境中,这个锁需要跨节点协调,延迟便会急剧增加。
验证方法非常简单:执行 SELECT sequence_name, cache_size, order_flag FROM dba_sequences WHERE sequence_name = 'XXX'; 如果发现 cache_size = 1 且业务并发量很高,那么基本可以锁定它就是元凶。
- 修复命令通常是:
ALTER SEQUENCE xxx CACHE 100 NOORDER;—— 这里的NOORDER是关键,它可以避免RAC节点间为序列号排序而产生的同步开销。 - 除非业务确实要求严格的递增顺序(例如发片号码),否则不要轻易设置
ORDER属性,因为它可能带来30%以上的性能损失。 - 缓存值也并非越大越好。在单节点环境中,
CACHE 1000或许没问题,但在RAC里,可能导致某个节点重启后序列号跳变过大。比较稳妥的做法是从100起步,然后观察dba_hist_sysstat中sequences requested的每秒速率,再据此进行调整。
log file sync 等待高,真的是磁盘慢吗
不一定。这个事件的本质是“用户进程在等待LGWR将redo buffer中的内容写入磁盘”。但瓶颈可能出现在三个环节:存储写入速度慢、redo buffer太小导致LGWR被频繁唤醒、或者应用程序的提交(COMMIT)过于零碎。
诊断时,可以先看 Instance Efficiency Percentages 部分的 Redo log space requests 指标。如果它不为零,说明 log_buffer 可能不够用。接着,查看 Load Profile 中的 Logons per sec 和 Executes per sec。如果每秒执行数远高于每秒登录数,那么大概率是应用程序在循环中反复执行 INSERT + COMMIT。
- 紧急缓解措施:可以临时增大
log_buffer(注意这需要重启实例),或者使用COMMIT WRITE BATCH NOWAIT语法来降低提交的同步等待。 - 长期解决方案:推动应用层进行批量提交(例如每100条
INSERT后执行一次COMMIT),这通常比调整存储更有效。 - 需要注意:如果瓶颈确实在存储,那么
log file parallel write的平均等待时长也会同步升高。这时,才需要去检查ASM磁盘组的I/O状况或存储队列深度。
说到底,解读AWR报告的真正挑战,在于将一个个孤立的指标串联成因果链条。一个高的 direct path read,可能源于执行计划的退化;一个高的 gc cr block lost,未必是网络问题,也可能是某个节点CPU满载导致了全局缓存(GC)响应延迟。因此,不要只盯着数字的大小,首先要问的是:“这个值为什么变化,在它变化之前,系统发生了什么?”
