LOG FILE SYNC概述(第三篇)

如何发现问题

曾经有一个网友咨询我,说在自己的系统中看到了log file sync等待事件,问我该如何“消灭”这个等待事件,解决log file sync争用的问题。之所以提出这样的问题,还是对log file sync的产生过程不清楚导致的,log file sync不是争用产生的等待事件,而是事务在提交过程中产生的一个正常等待事件,只能去优化,而不能被消灭。也并不是所有系统的log file sync都需要优化,如果你系统的事务数非常少,而且它没有出现在系统的TOP 5等待事件里,并不建议在生产环境下去优化它,即使出现在了数据库的TOP 5里,是不是需要优化也要看情况,如果在TOP 5等待里,它占DB time%很小,一般也不需要优化它。当然如果读者是在测试环境做测试,那么都可以尝试去优化log file sync,生产环境下,不要去做过度优化,除非是发现log file sync已经使系统产生了瓶颈。读者理解了上节所描述的log file sync包含的环节后,应该可以知道诊断log file sync的思路可以从IO、CPU、系统负载等方面去入手,如果log file parallel write延迟过大,则可以从诊断IO性能去入手,我们可以根据系统日志盘的配置、系统每秒的日志量来判断是否log file parallel write的延迟过大,比如,一个系统每秒产生的日志量有3m,log file parallel write的延迟为3ms,另一个系统每秒产生的日志量有100m,log file parallel write的延迟有15ms,但是并不能说后者IO有问题,因为Lgwr需要做的工作多了,log file parallel write的延迟也就上去了,还有把日志放在PC本地盘上和放在存储上log file parallel write的延迟也是有区别的,一般存储上会更好些,具体问题要具体分析。如果系统中的log file sync过高,而log file parallel write则要小的多,那么可以从系统的负载和CPU使用率去入手,因为系统负载过大和CUP出现瓶颈后,会导致系统调用的延迟,增加log file sync的时间。

我们可以通过如下几个手段来发现log file sync和log file parallel的延迟、等待次数、等待占DB time的权重值,以及系统的负载、CPU使用率。

方式一:从awr里去发现 

阅读awr报告是DBA每天必不可少的工作,我们上面提到的信息都可以从awr报告中去获取,如果你使用了企业管理器等软件,可以很方便的获取到系统的awr报告,当然也可以手工生成AWR报告,这里不过多的进行介绍。

例如我给出的这个系统每秒的事务数有8000多,每秒产生的日志量有85M之多,每个事物产生的日志量有10K,很显然这是一个事务数非常大的系统,在这种系统里,非常可能会遭遇到log file sync的瓶颈。

 

根据操作系统的信息,我们可以得出系统的负载情况,系统的CPU资源尚且充足,使用率只有百分之30多。

 

在这个提交数庞大的系统里,log file sync已经出现在了TOP 5等待的第一名,在%DB time里的权重值也已经达到了61.33,Avg wait时间为5ms。

 

log file parallel write的平均延迟为1ms,这个系统每秒产生的日志量接近80m,因此log file parallel write的延迟时间1ms非常理想,其实这个数据库的日志是存放在PCIe SSD介质上的,因此IO情况非常好。 

通过上面AWR报告的内容,我们大体了解了系统每秒产生的日志量、每个事务的日志量、系统的负载、log file sync和log file parallel write的平均延迟时间。通过AWR报告来观察log file sync等待事件是否有问题,往往是我们第一步需要看的,虽然有些时候不能直接通过AWR报告定位到问题,但是作为发现问题的手段和工具,AWR报告都是首先应该阅读的。在我所给出的AWR报告的片段里,log file sync平均响应时间、log file parallel write的平均响应时间都比较正常,在每秒事务数8000多的系统里,这个响应时间已经非常优秀了,读者如果在自己的系统里发现这两个响应时间异常,那么就要继续通过其他工具做进一步的诊断了。例如如果发现log file parallel write响应时间非常大,那么可以从诊断IO性能入手来解决问题,如果log file sync延迟过大,而log file parallel write延迟却并不高,可以从系统的负载、CPU资源利用率情况来入手,我曾经遭遇过log file sync过高的案例,是由于内存不够导致lgwr进程被swap,进而影响了log file sync延迟过大。因此log file sync是一个复杂的、综合性的问题,需要一步步的排除才能最终定位到原因。

方式二:通过moats工具去辅助诊断

moats是一个数据库的监控工具,这个工具做的非常小巧灵便,安装它后,可以非常容易在SQLPLUS环境下使用,如果你觉得AWR报告太重,可以尝试使用moats来辅助诊断,,通过moats工具,我们可以很方便的知道当前数据库的top wait有哪些、是否有log file sync等待、log file sync占的权重值是多少,这个工具只能作为辅助的诊断工具,因为这个工具展示的数据是实时的,它不能告诉你历史的数据,也不能告诉你log file sync的延迟以及你可能关注的例如log file parallel write的延迟、系统的负载等信息。工具下载地址:http://www.oracle-developer.net/utilities.php。

方式三:通过lewis的snap_events脚本,获得系统级别等待事件的等待次数、平均等待时间。
rem                execute snap_events.start_snap
rem                execute snap_events.end_snap

方式四:通过tanel poder的snap脚本采样lgwr后台进程的等待事件分布以及lgwr进程相关的统计信息。

SQL> @snapper out 1 10 1096
-- Session Snapper v2.01 by Tanel Poder ( http://www.tanelpoder.com )
-------------------------------------------------------------------------------
SID, USERNAME , TYPE, STATISTIC , DELTA, HDELTA/SEC, %TIME, GRAPH
-------------------------------------------------------------------------------
1096, (LGWR) , STAT, messages sent , 12 , 12,
1096, (LGWR) , STAT, messages received , 10 , 10,
1096, (LGWR) , STAT, background timeouts , 1 , 1,
1096, (LGWR) , STAT, physical write total IO requests , 40, 40,
1096, (LGWR) , STAT, physical write total multi block request, 38, 38,
1096, (LGWR) , STAT, physical write total bytes, 2884608 , 2.88M,
1096, (LGWR) , STAT, calls to kcmgcs , 20 , 20,
1096, (LGWR) , STAT, redo wastage , 4548 , 4.55k,
1096, (LGWR) , STAT, redo writes , 10 , 10,
1096, (LGWR) , STAT, redo blocks written , 2817 , 2.82k,
1096, (LGWR) , STAT, redo write time , 25 , 25,
1096, (LGWR) , WAIT, LGWR wait on LNS , 1040575 , 1.04s, 104.1%, |@@@@@@@@@@|
1096, (LGWR) , WAIT, log file parallel write , 273837 , 273.84ms, 27.4%,|@@@ |
1096, (LGWR) , WAIT, events in waitclass Other , 1035172 , 1.04s , 103.5%,|@@@@@@@@@@|
-- End of snap 1, end=2010-03-23 12:46:04, seconds=1

获取log file sync、log file parallel write时间分布
如果我们仅仅观察AWR报告,获取log file sync、log file parallel write某一段时间的平均等待时间,有时候是不够的,我们可能想更精细化的知道,在某段时间内,有多少次等待是在1ms以内,有多少次是在2ms以内,等等。因为平均值有时候是没有意义的,就像一个人一个脚站在冰上,一个脚站在开水里,虽然平均温度可能很舒适,但是真实的情况可能是他已经求生不能了。通过查询V$EVENT_HISTOGRAM可以告诉我们等待事件的直方图信息,对于我们诊断性能问题非常有帮助。V$EVENT_HISTOGRAM视图记录的是自实例启动以来的绝对值,绝对值对我们的帮助意义往往不大,我们经常需要的是一个特定时间段内的相对值。我们可以通过采样两次V$EVENT_HISTOGRAM的信息然后取差值来达到这一目的,这个思想跟AWR思想如出一辙。我们来看一看V$EVENT_HISTOGRAM的输出。

SQL> select event, wait_time_milli,wait_count

2 from v$event_histogram

3 where event = 'log file parallel write';

EVENT                     WAIT_TIME_MILLI WAIT_COUNT

------------------------- --------------- ----------

log file parallel write                 1          22677

log file parallel write                 2        424

log file parallel write                 4        141

log file parallel write                 8        340

log file parallel write                     16          1401

log file parallel write                     32          812

log file parallel write                     64        391

log file parallel write                     128         21

log file parallel write                     256         6

来自 “ ITPUB博客 ” ,链接:http://blog.itpub.net/22034023/viewspace-2153127/,如需转载,请注明出处,否则将追究法律责任。

转载于:http://blog.itpub.net/22034023/viewspace-2153127/

性能优化之高Log file sync等待实战案例分享 log file sync等待事件首先判断当前系统IO是否存在问题,看操作系统日志没有相关的报错,执行IO测试,也显示IO处于正常状态,详细查看AWR报告,AWR显示数据库写IO及读IO都还比较正常。对比昨天跟今天的AWR报告,也可以看出IO读写性能跟昨天相比差别不大,今天采集的这个时间段由于停了大部分业务,IO相比昨天反而更优,但是日志切换的等待时间反而要增加8秒。根据文单的描述,检查系统的负载情况,发现今天业务系统在14点时负载很高,日志切换达136次,之后业务恢复正常。检查当前的系统,发现当前系统。 阅读详情

相关推荐

性能优化之等待事件log file sync的解决方法

> 可以通过减少初始化参数_LOG_IO_SIZE的值,这将增LGWR的后台写入,从而减少log file sync等待时间,但这种方法仍然需要一定的系统开销,更为活跃的LGWR将在redo copy和redo writing锁存器方面添加更多的负载。>> 不要因为回滚段空间不足或死锁的原因而引入附加的提交。>> 较大的processes参数值也可增加log file sync的等待,在每个同步操作期间,LGWR必须扫描所有进程的数据结构查找哪些会话正在这个事件上等待,并将它们的重做写入到硬盘。

力哥讲技术 711

log file sync( 日志文件同步)

log file sync( 日志文件同步) 当一个用户提交或回滚数据时, LGWR 将会话期的重做由 Log Buffer 写入到重做日志中,LGWR 完成任务以后会通知用户进程。 日志文件同步等待( Log File Sync) 就是指进程等待LGWR 写完成这个过程, 对于回滚操作,该事件记录从用户发出 rollback 命令到回滚完成的时间。 如果该等待过多,可能说明 LGWR 的写出...

小楼一夜听春雨,深巷明朝卖杏花 1万+

理解LGWR,Log File Sync Waits以及Commit的性能问题

理解LGWR,Log File Sync Waits以及Commit的性能问题 一.概要: 1.  Commit和log filesync的工作机制 2.  为什么log file wait太久 3.   如何去度量问题出在那里呢? 二.log file sync等待的原因 1.  默认情况下我们commit一个事务是要等待logfile sync,这其中包括: (1)User  c

2459

log file sync( 日志文件同步)等待事件

log file sync等待事件发生 log file sync等待事件发生在redo log从log buffer写入到log file期间。 在一个提交(commit)十分频繁的数据库中,一般会出现log file sync等待事件,当这个等待事件出现在top5中,这个时侯我们需要针对log file sync等待事件进行优化,一定要尽快分析并解决问题,否则当log file sync等待时间从几毫秒直接到20几毫秒可能导致系统性能急剧下降,甚至会导致短暂的挂起。 何时发生日志写入 1.commit或

鲨鱼胃的博客 5966

gc buffer busy/gcs log flush sync与log file sync

这篇博文整理自我的帖子: RAC中的gc current block busy与redo log flush   对于log file sync(本质上是 write redolog慢)引发gc buffer busy acquire /release 集群等待事件的这个命题的真伪,其实Oracle在开发性能调优组件ADDM时一早给了我们答案:   RECOMMENDATI

ORACLE数据库数据恢复、性能优化、故障诊断来问问MACLEAN 3704

Log File Sync等待事件分析

这种LGWR的突发写入特性,再加上系统中其他IO操作的影响,可能导致IO性能并非长期稳定,而是会出现一段高IO负载突发期(峰值),随后紧跟一段低IO负载期。当用户执行DML(如INSERT/UPDATE/DELETE)或 DDL(如CREATE/ALTER) 操作时,redo日志会被实时生成,用于记录“数据修改的细节”(如修改前的值、修改后的值、涉及的数据块位置等),目的是在数据库崩溃时通过redo日志重演操作,恢复数据。但需注意,500毫秒是一个相当高的阈值,因此未出现此类记录并不一定意味着不存在问题。

Sebastien23的博客 279

如何优化LOG FILE SYNC

如何优化LOG FILE SYNC 在一个提交十分频繁的系统中,我们经常会看到LOG FIEL SYNC等待事件排在TO EVENTS中。这种情况下,我们可能就需要针对LOG FILE SYNC等待事件进行优化了。 首先我们会看一下这个等待事件平均的等待时长,正常情况下这个等待事件的平均等待时间不会超过10毫秒,如果等待时间太长,那说明LOG WRITER每次写入的时间过长,如果能够优

MaserattiKaka 1087

Vue3实战:从零构建ElementPlus后台管理系统全流程

本文详细介绍了从零开始使用Vue3和ElementPlus构建后台管理系统的全流程。内容涵盖环境准备、项目初始化、Vite配置、SCSS样式体系搭建、ElementPlus组件库引入与配置,以及封装可复用的SvgIcon组件进行图标管理,旨在帮助开发者快速搭建现代化、可维护的中后台应用。

weixin_29011239的博客 162

如何优化log file sync

http://www.oraclefans.cn/forum/showtopic.jsp?rootid=40023 1.5.10如何优化LOGFILESYNC 在一个提交十分频繁的系统中,我们经常会看到LOGFIELSYNC等待事件排在TOEVENTS中。这种情况下,我们可能就需要针对LOGFILESYNC等待事件进行优化了。 首先我们会看一下这个等待事件平均...

dd334566788566的博客 117

学术规范与论文写作(雨课堂)研究生 全部答案

1:如何造就优秀的学术论文 论文语法判断题 :全部是错的 2:如何撰写学术论文 3: SCI论文写作经验分享 4:论文写作与投稿技巧 5:学术伦理道德 答案仅供参考,研究生生活不易,大家如果有时间的话,还是可以学习学习的,毕竟老师讲的不错。加油,希望读研的每一个人都能顺利毕业! ...

Always-Learning 13万+

以太网测试用例(光模块线缆、网卡类设备、交换类设备)

LeCroy力科网络测试相关的测试用例分享:光模块/DAC/ACC/AEC/AOC测试,网卡类产品测试/GPU/DPU/SmartNIC,交换类产品测试。涉及物理层的FEC,SKEW,Tx/Rx Taps和Layer23层的网络性能测试/吞吐量延迟抖动丢包率背靠背性能,以及RDMA带状况的网络协议分析。同步提供400G高速的以太网的损伤,提供定量,可重复的负面压力测试环境。

专注有线以太网性能测试--丹麦信雅纳网络(Xena Networks) 1999

log file sync 诊断脚本

文档 ID 1064487.1) log file sync 诊断脚本内容如下:-- NAME: LFSDIAG.SQL-- -------------------------------------------------------------------------- AUTHOR: Michael Polaski - Oracle Support Services-- ----------

小伟的博客 1051

KG²RAG框架:知识图谱增强大模型检索生成技术解析

知识图谱(Knowledge Graph)作为结构化知识表示的重要方式,与向量检索技术结合形成了新一代检索增强生成(RAG)框架。其核心原理是通过图神经网络编码器提取子图特征,并与文本向量空间对齐,实现结构化与非结构化知识的协同检索。这种技术显著提升了专业领域问答的事实准确性,在医疗诊断、金融分析等需要高可靠性响应的场景中具有重要价值。KG²RAG框架创新性地采用双通道处理架构,结合Neo4j等图数据库与Milvus向量数据库,通过动态检索调度器智能选择最优检索路径。实测表明该方案能降低40%以上的事实错误

weixin_29306875的博客 107

Log File Sync/Log File Parallel Write (单实例)

当用户执行完事务(insert插入数据)执行commit命令后,Oracle后台LGWR进程需要redo log buffer -> online redo log files,写入后返回Commit complete。这个过程过慢Log File Sync等待事件。 Log File Parallel Write是LGWR进程开始执行到结束这个过程的等待事件。 ...

喝醉酒的小白 3432

面试问题总结——关于YOLO系列(一)

自从刚开始接到的第一个面试开始,到现在为止,陆陆续续也参加了许多场,我像是一个刚从新手村出来的小白,一路的打怪升级刷经验,期间遇到了很多不会的,我都会及时记录总结。 到现在仍然清晰记得,第一次去面试的时候,当时被怼的多惨。。。 说明:本人是非科班出身,本科是机械电子工程专业,硕士期间的研究方向是机器学习和深度学习,因为我的简历上有关于YOLO的项目,所以我着重准备了YOLO系列的面试可能遇到的问题。 决定开启这个面试问题总结的系列,包括YOLO、C++的内容、OpenCV的内容和深度学习方面被提问的问题

boss-dog 1万+

GD32F4xx 移植agile_modbus软件包与电能表通信

GD32F4XX 移植agile modbus软件包实现与DTSU电能表通信调试记录

madao1234的博客 1306

ADAPTIVE LOG FILE SYNC 引起的高Log File Sync警示

原文地址:http://www.eygle.com/archives/2017/03/adaptive_log_file_sync.html作者:eygle |English 【转载时请标明出处和作者信息】|【恩墨学院 OCM培训传DBA成功之道】链接:http://www.eygle.com/archives/2017/03/adaptive_log_file_sync.html关于 Log F...

cuiyan1982的专栏 462

基于Spring Boot 3 + Vue 3 + Vite的现代化社区订餐系统设计与实现

本文将详细阐述系统的整体架构、数据库设计、核心功能模块(用户管理、餐厅管理、菜品浏览、购物车、订单管理)的实现细节,并提供关键代码示例。<el-input v-model="loginForm.password" type="password" placeholder="密码" prefix-icon="Lock" show-password />.requestMatchers("/api/auth/**", "/api/dishes/public/**").permitAll() // 公开接口。

2201_76125393的博客 469

LOG FILE SYNC概述

log file sycn是ORACLE里最普遍的等待事件之一,一般log file sycn的等待时间都非常短 1-5ms,不会有什么问题,但是一旦出问题,往往都比较难解决。什么时候会产生log file sync等待? 常见有以下几种: 1)commit操作 2)rollback操作 3)DDL操作(DDL操作实施前都会首先进行一次commit) 4)DDL操作导致的数据字典修改

rudy gao 4465

【AI应用实战-claude】在飞书上接入claudecode进行远程使用(十三)

本文介绍了三种将ClaudeCode接入飞书的方案,包括官方飞书CLI工具(推荐)、cc-connect中转工具和MCP协议集成。官方飞书CLI适合自动化办公场景,通过简单配置即可实现消息发送和文档管理;cc-connect适用于远程调用Claude功能,通过飞书群聊触发响应;MCP协议则适合开发者构建复杂工作流。文章提供了详细的操作步骤,并针对不同使用场景给出了选择建议。

1019

VB摄像头监控

该VB模块可对摄像头捕获的画面进行录像等,可在创建的窗口进行控制

故障处理:Troubleshooting: ‘Log file sync’ Waits

摘要:本文深入解析Oracle数据库中的"log file sync"等待事件,从生命周期、诊断点到解决方案进行全面探讨。文章首先介绍该事件在事务提交时的关键作用,详细描述了其12个处理步骤的生命周期。针对诊断点,重点分析三个核心问题:LGWR进程优先级不足、I/O性能差导致log并行写入延迟高,以及RAC环境下SCN同步延迟。作者提供了多种诊断方法,包括查看系统视图、分析AWR报告、启用LGWR跟踪等,并给出对应的优化建议。文章强调理解完整处理流程对准确诊断的重要性,适合Oracle

提供数据库技术支持(系统优化,故障处理,安装升级,数据恢复等) 1209

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

LGWR 阻塞 log file sync

os: centos 7.4 db: oracle 11.2.0.4 11gr2 写日志缓冲区到文件方式保留 Post/wait方式 外,增加了 Polling 的方式, 11.2.0.3开始默认是两种方式自动切换。它是通过隐含参数 _use_adaptive_log_file_sync 进行设置。 Post/wait 模式 lgwr进程在将日志写入磁盘后,会立刻通知前台进程,log file s...

一名数据库爱好者的专栏 1357

VC中sqlite的使用

在VC中对sqlite的使用,实现数据库大批数据的快速插入,读取数据库中的数据在ListCtrl中显示

Camera2Demo

在Camera2 的基础上进行封装,使得Camera2一堆初始化逻辑与Activity分离,降低耦合度,完成预览拍照并保存的操作

Adaptive Log File Sync

Adaptive Log File sync was introduced in 11.2. The parameter controlling this feature, _use_adaptive_log_file_sync, is set to false by default in 11.2.0.1 and 11.2.0.2. In 11.2.0.3 the default is no...

Lin's Tech Log 306

log file sync排查方向

log file sync 数据库性能问题分析摘要:1.高频率事务处理(123万次提交,每秒339次);2.I/O瓶颈表现为logfile parallel write等待事件(正常应<20ms),需检查LGWR日志和I/O指标;3.日志缓冲区过大;4.CPU负载过高;5.RAC私有网络延迟导致LMS同步问题;6.控制文件争用(可能因RMAN、ASM磁盘I/O或v$视图频繁访问);7.已知Bug 11203(DocID13074706.8)。建议检查AWR报告中KeyInstanceA

汪灵骅的博客 299

_use_adaptive_log_file_sync设置 降低log_file_sync等待

_use_adaptive_log_file_sync该参数在commit次数较多的系统中,post/wait and polling特性对性能影响明显,主要是在写日志上的等待上影响了事务的提交速度.建议在11g中...

cpc84938的博客 1100
上一篇: LOG FILE SYNC概述(第二篇)
下一篇: LOG FILE SYNC概述(第四篇)
cotchte0421
博客等级 码龄12年 5粉丝 110原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符  | 博主筛选后可见
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值