百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

深入剖析Oracle SCN机制

moboyou 2025-03-20 11:25 5 浏览

1. SCN介绍

SCN即系统改变号(System Change Number),是在某个时间点定义数据库已提交版本的时间戳标记。 Oracle为每个已提交的事务分配一个唯一的SCN。 SCN的值是对数据库进行更改的逻辑时间点。 Oracle使用此编号记录对数据库所做的更改。


SCN是一个6字节(48bit)的数字,其值为281,474,976,710,656(2^48),分为2个部分:SCN_BASE和SCN_WRAP。 SCN_BASE是一个4字节(32bit)的数字,而SCN_WRAP是一个2字节(16bit)的数字。每当SCN_BASE达到其最大值(2^32 = 4294967296)时,SCN_WRAP增加1,SCN_BASE将被重置为0,一直持续到SCN_WRAP达到其最大值,即2^16 = 65536。


SCN =(SCN_WRAP * 4294967296)+ SCN_BASE


SCN随着每个事务的完成而增加。提交不会写入数据文件,也不更新控制文件。

当发生checkpoint时,控制文件更新,SCN被写入到控制文件。


当前的SCN可以通过以下查询获得:

select dbms_flashback.get_system_change_number scn from dual;

select current_scn from v$database;


2. SCN的作用

在数据恢复、Data Guard、Streams复制、RAC节点间的同步等各个功能中都起着非常重要作用。


3. 四种重要的SCN

在理解这几种SCN之前,我们先看下oracle事务中的数据变化是如何写入数据文件的:

1、事务开始;

2、在buffer cache中找到需要的数据块,如果没找到,从数据文件中载入buffer cache中;

3、事务修改buffer cache的数据块,该数据被标识为“脏数据”,并被写入log buffer中;

4、事务提交,LGWR进程将log buffer中的“脏数据”的日志条目写入redo log file中;

5、当发生checkpoint,CKPT进程更新所有数据文件的文件头中的信息,DBWn进程则负责将Buffer Cache中的脏数据写入到数据文件中。


经过上述5个步骤,事务中的数据变化最终被写入到数据文件中。但是,一旦在上述中间环节时,数据库意外宕机了,在重新启动时如何知道哪些数据已经写入数据文件、哪些没有写呢(同样,在DG、streams中也存在类似疑问:redo log中哪些是上一次同步已经复制过的数据、哪些没有)?SCN机制就能比较完善的解决上述问题。 SCN是一个数字,确切的说是一个只会增加、不会减少的数字。正是它这种只会增加的特性确保了 Oracle知道哪些应该被恢复、哪些应该被复制。总共有4中SCN:系统检查点(System Checkpoint)SCN、数据文件检查点(Datafile Checkpoint)SCN、结束SCN(Stop SCN)、开始SCN(Start SCN)。


(1) System Checkpoint SCN

当checkpoint完成后,ORACLE将System Checkpoint SCN号存放在控制文件中。我们可以通过下面SQL语句查询:

select checkpoint_change# from v$database;


(2) Datafile Checkpoint SCN

当checkpoint完成后,ORACLE将Datafile Checkpoint SCN存放在控制文件中。我们可以通过下面SQL语句查询所有数据文件的Datafile Checkpoinnt SCN。

select name,checkpoint_change# from v$datafile;


(3) Start SCN

ORACLE将Start SCN存放在数据文件头中。这个SCN用于检查数据库启动过程是否需要做media recovery。我们可以通过以下SQL语句查询:

select name,checkpoint_change# from v$datafile_header;


(4) Stop SCN

ORACLE将Stop SCN存放在控制文件中。这个SCN号用于检查数据库启动过程是否需要做instance recovery。我们可以通过以下SQL语句查询:

select name,last_change# from v$datafile;

在数据库正常运行的情况下,对可读写的online数据文件,该SCN号为NULL。


过程详解:

1.其中3种SCN存在于控制文件中,Start SCN则存在于数据文件的文件头中。在控制文件中,System Checkpoint SCN是针对整个数据库全局的,因而只存在一个,而DatafileCheckpoint SCN和Stop SCN是针对每个数据文件的,因而一个数据文件就对应在控制文件中存在一份Datafile Checkpoint SCN和Stop SCN。


2.在数据库正常运行期间,Stop SCN是一个无穷大的数字或者说是NULL。


3.在一个事务提交后(上述第四个步骤),会在 redo log 中存在一条 redo 记录,同时,系统为其提供一个最新的 SCN,记录在该条记录中。如果该条记录是在 redo log 被清空(日志满做切换时或发生 checkpoint 时,所有变化日志已经被写入数据文件中),则其 SCN 被记录为 redo log 的 low SCN。以后在日志再次被清空前写入的 redo 记录中 SCN 则成为Next SCN。当日志切换或发生 checkpoint(上述第五个步骤)时,从 Low SCN 到 Next SCN之间的所有 redo 记录的数据就被 DBWn 进程写入数据文件中,而 CKPT 进程则将所有数据文件(无论 redo log 中的数据是否影响到该数据文件)的文件头上记录的 Start SCN(通过视图 v$datafile_header 的字段 checkpoint_change#可以查询)更新为 Next SCN,同时 将 控 制 文 件 中 的 System Checkpoint SCN ( 通 过 视 图 v$database 的 字 段checkpoint_change#可以查询)、每个数据文件对应的 Datafile Checkpoint(通过视图v$datafile 的字段 checkpoint_change#可以查询)也更新为 Next SCN。但是,如果该数据文件所在的表空间被设置为 read-only 时,数据文件的 Start SCN 和控制文件中 Datafile Checkpoint SCN 都不会被更新。


4.那系统是如何产生一个最新的SCN的?实际上,这个数字是由当时的timestamp转换过来的。每当需要产生一个最新的SCN到redo记录时,系统获取当时的timestamp,将其转换为数字作为SCN。


提问1:为什么ORACLE在控制文件中记录System checkpoint SCN 号的同时,还需要为每个数据文件记录Datafile Checkpoint SCN?


SCN与数据库启动:

在数据库启动过程中,当System Checkpoint SCN、Datafile Checkpoint SCN和Start SCN都相同时,数据库可以正常启动,不需要做media recovery.三者当中有一个不同时,则需要做media recovery.如果在启动的过程中,End SCN为NULL,则需要做instance recovery.ORACLE 在启动过程中首先检查是否需要media recovery,然后再检查是否需要instance recovery.


SCN与数据库关闭:

如果数据库的正常关闭的话,将会触发一个checkpoint,同时将数据文件的END SCN设置为相应数据文件的Start SCN。当数据库启动时,发现它们是一致的,则不需要做instance recovery。在数据库正常启动后,ORACLE会将END SCN设置为NULL.如果数据库异常关闭的话,则END SCN将为NULL.


4. 可能遇到的SCN问题

首选我们看几个跟SCN有关的概念:

(1) Reasonable SCN Limit(RSL)

RSL = (当前时间 - 1988年1月1日)*24*3600*SCN每秒最大可能增长速率

也就是从1988年1月1日开始,加入SCN按最大速率增长,当天理论上的最大值。

最大增长速率:在11.2.0.2之前是16384,在11.2.0.2及之后版本是32768

在11.2.0.2版本之后由_max_reasonable_scn_rate参数控制

SQL> select x.ksppinm name, y.ksppstvl value, x.ksppdesc description

2 from sys.x$ksppi x, sys.x$ksppcv y

3 where x.inst_id = userenv('Instance')

4 and y.inst_id = userenv('Instance')

5 and x.indx = y.indx

6 and x.ksppinm = '_max_reasonable_scn_rate';

 

NAME VALUE DESCRIPTION

----------------------------------- -------- ----------------------------------------

_max_reasonable_scn_rate 32768 Max reasonable SCN rate


该参数不建议修改。


(2) SCN Headroom

Headroom(天) = (Reasonable SCN Limit -Current SCN)/ SCN每秒最大可能增长速率/3600/24

也就是如果SCN按最大速率增长,达到当前理论最大值需要的天数。这个值可以用来判断SCN增长速率是否过快。

那么,SCN Headroom如果获取呢?参考MOS: Bug 13498243 - "scnhealthcheck.sql" script (文档 ID 13498243.8),打上该BUG的patch之后,将在$ORACLE_HOME/rdbms/admin中增加scnhealthcheck.sql文件,该文件就是用来检查SCN是否正常。

另外还有一篇MOS文档,专门对该脚本的输出做了解释。即Installing, Executing and Interpreting output from the "scnhealthcheck.sql" script (文档 ID 1393363.1)。


执行该脚本,结果如下:

SQL> @scnhealthcheck.sql

--------------------------------------------------------------

ScnHealthCheck

--------------------------------------------------------------

Current Date: 2017/11/13 14:46:21

Current SCN: 13396148604155

Version: 11.2.0.3.0

--------------------------------------------------------------

Result: A - SCN Headroom is good

Apply the latest recommended patches

based on your maintenance schedule

For further information review MOS document id 1393363.1

--------------------------------------------------------------


这个结果我们仍然无法得到该数据库的具体SCN Headroom,下面这个SQL是从scnhealthcheck.sql中找到的,可以直接查到SCN Headroom的值(indicator字段)。

SQL> select version,

2 date_time,

3 dbms_flashback.get_system_change_number current_scn,

4 indicator

5 from (select version,

6 to_char(SYSDATE, 'YYYY/MM/DD HH24:MI:SS') DATE_TIME,

7 ((((((to_number(to_char(sysdate, 'YYYY')) - 1988) * 12 * 31 * 24 * 60 * 60) +

8 ((to_number(to_char(sysdate, 'MM')) - 1) * 31 * 24 * 60 * 60) +

9 (((to_number(to_char(sysdate, 'DD')) - 1)) * 24 * 60 * 60) +

10 (to_number(to_char(sysdate, 'HH24')) * 60 * 60) +

11 (to_number(to_char(sysdate, 'MI')) * 60) +

12 (to_number(to_char(sysdate, 'SS')))) * (16 * 1024)) -

13 dbms_flashback.get_system_change_number) /

14 (16 * 1024 * 60 * 60 * 24)) indicator

15 from v$instance);

 

VERSION DATE_TIME CURRENT_SCN INDICATOR

----------------- ------------------- ----------- ----------

11.2.0.3.0 2017/11/13 14:46:55 1.3396E+13 1647.23587

 

提问2:

针对上面的查询结果,是不是意味着过1647天之后,SCN就将达到最大值?


(3) SCN headroom过小的问题

如果SCN正常增长,达到最大值大约可以用500年,SCN headroom的值也会随着时间的推移慢慢变大,但是可能由于BUG、用特殊手段人为调整、dblink传播导致SCN增长出现异常。但如果出现SCN headroom过来,alert log会出现警告:Warning: The SCN headroom for this database is only NN days!


原因定位:

1. 通过下面这篇文档里提供的脚本,该脚本类似于创建AWR,可以按snap_id对dba_hist_sysstat里的某个stat_name做统计,我们这里的Stat_name选择calls to kcmgas。

How to Extract the Historical Values of a Statistic from the AWR Repository (文档 ID 948272.1)

2. 通过查询V$ARCHIVED_LOG单位时间内scn变化

3. 通过上面两个方式得出的结果分析,如果是非持续突发增长,认为很可能是通过dblink引起;

4. 同时比较awr报告中calls to kcmgas和“user commits”,如果user commits也是高速增长,很可能是自身引起;

kcmgas是Oracle分配scn的函数,在一个空库上做测试,可以看出每分配一次scn,calls to kcmgas的统计增加1,所以calls to kcmgas的量可以作为scn的增长量来分析。

SQL> select name,value from v$sysstat where name='calls to kcmgas';

NAME VALUE

----------------------------------- ---------

calls to kcmgas 56506

SQL> select current_scn from v$database;

CURRENT_SCN

-----------

 431781

SQL> select name,value from v$sysstat where name='calls to kcmgas';

NAME VALUE

----------------------------------- ---------

calls to kcmgas 56507


(4) ORA-19706: Invalid SCN错误

1376995.1]里的介绍,在2012年1月CPU或PSU里增加
_external_scn_rejection_threshold_hours参数,11.2.0.2及以后的版本,默认为1天即24小时,其他版本默认为31天即744小时,相当于把拒绝外部SCN连接的阈值调大了,因而更加容易引发ORA-19706错误(该错误最常见的就是拒绝dblink连接的时候,如A库跟B库通过dblink连接,A的SCN有通过人为调整增大许多,连接B库的时候,Oracle会判断该SCN传播过来之后,如果会导致SCN headroom小于
_external_scn_rejection_threshold_hours设置的阈值,则拒绝连接)。该参数对数据库自身产生的SCN递增没有影响。Bug 13554409 - Fix for bug 13554409 [ID 13554409.8]的里对该问题也有介绍


Oracle 10.2.0.5

Oracle 11.1.0.7

Oracle 11.2.0.2

Oracle 11.2.0.3

针对上述版本的数据库,oracle建议给数据库安装2012年4月发布的PSU,并在安装该PSU的基础上,安装补丁13916709。如果是集群架构,同时给集群软件最新安装PSU。参数
_external_scn_rejection_threshold_hours在2012年4月(包含2012年4月)以后发布的PSU/CPU中,11.2.0.2及以后的版本,是1天即24小时,其他版本是31天即744小时。

其他版本:先升级到高版本,再按照上面的方法处理。


综上:如果发现SCN有异常,需要及时通过上述方法来打上最新的PSU,同时尽量少用DBLINK,从系统设计角度来讲也是不推荐这种系统间强耦合的设计。


5. 问题解答

提问1:为什么ORACLE在控制文件中记录System checkpoint SCN 号的同时,还需要为每个数据文件记录Datafile Checkpoint SCN?

答:如果有表空间read only,那么该表空间的所有datafile的start SCN和stop SCN将被冻结,这个时候就跟System Checkpoint SCN不一致,但在库open的时候是不需要做media recovery的,如果没有Datafile Checkpoint SCN就无法判断这些datafile是否是最新的。


提问2:针对上面的查询结果,是不是意味着过1647天之后,SCN就将达到最大值?

答:不会,因为1647天之后,Current SCN会变大,Reasonable SCN Limit同样也会变大,正常情况下,SCN Headroon只会变大不会变小。

相关推荐

电子EI会议!投稿进度查

今天为大家推荐一个高性价比的电子类EI会议——IEEE电子与通信工程国际会议(ICECE2024)会议号:IEEE#62199截稿时间:2024年3月25日召开时间与地点:2024年8月15...

最“稳重”的滤波算法-中位值滤波算法的思想原理及C代码实现

在信号处理和图像处理领域,滤波算法是一类用于去除噪声、平滑信号或提取特定特征的关键技术。中位值滤波算法是一种常用的非线性滤波方法,它通过取一组数据的中位值来有效减小噪声,保留信号的有用特征,所以是最稳...

实际工程项目中是怎么用卡尔曼滤波的?

就是直接使用呀!个人认为,卡尔曼滤波有三个个关键点,一个是测量,一个是预测,一个是加权测量:通过传感器,获取传感器数据即可!预测:基于模型来进行数据预测;那么问题来了,如何建模?有难有易。加权:主要就...

我拿导弹公式算桃花,结果把自己炸成了烟花

第一章:学术圈混成“顶流”,全靠学生们把我写成段子最近总有人问我:“老师,您研究导弹飞行轨迹二十年,咋还顺带研究起月老红绳的抛物线了?”我扶了扶眼镜,深沉答道:“同志,导弹和爱情的本质都是动力学问题—...

如何更好地理解神经网络的正向传播?我们需要从「矩阵乘法」入手

图:pixabay原文来源:medium作者:MattRoss「机器人圈」编译:嗯~阿童木呀、多啦A亮介绍我为什么要写这篇文章呢?主要是因为我在构建神经网络的过程中遇到了一个令人沮丧的bug,最终迫...

电力系统EI会议·权威期刊推荐!

高录用率EI会议推荐:ICPSG2025(会议号:CFP25J66-PWR)截稿时间:2025年3月15日召开时间与地点:2025年8月18-20日·新加坡论文集上线:会后3个月内提交至S...

EI论文写作全流程指南

推荐期刊《AppliedEnergy》是新能源领域权威EI/SCI双检索期刊,专注能源创新技术应用。刊号:ISSN0306-2619|CN11-2107/TK影响因子:11.2(最新数...

JMSE投稿遇坑 实验结果被推翻

期刊基础信息刊号:ISSN2077-1312全称:JournalofMarineScienceandEngineering影响因子:3.7(最新JCR数据)分区:中科院3区JCRQ2(...

斩获国际特等奖!兰理工数学建模团队为百年校庆献礼

近日,2019年美国大学生数学建模竞赛(MCM-ICM)成绩正式公布。兰州理工大学数学建模团队再创佳绩,分别获得国际特等奖(OutstandingWinner)1项、一等奖(Meritorious...

省气象台开展人员大培训岗位大练兵学习活动

5月9日,省气象台组织开展首次基于Matlab编程语言的数值模式解释应用培训,为促进研究性业务发展,积极开展“人员大培训、岗位大练兵”学习活动起到了积极作用。此次培训基于实际业务需求,着眼高原天气特色...

嵌入式软件培训

培训效果:通过系统性的培训学习,理论与实践相结合,可以胜任相关方向的开发工作。承诺:七大块专业培训,可以任意选择其中感兴趣的内容进行针对性地学习,每期培训2个月,当期没学会,可免费学习一期。本培训内容...

轧机支承辊用重载中低速圆柱滚子轴承滚子修形探讨

摘 要:探讨了轧机支承辊用重载中低速圆柱滚子轴承滚子修形的理论和方法,确定关键自变量。使用Romax软件在特定载荷工况条件下对轴承进行数值模拟分析,确定关键量的取值范围。关键词:轧机;圆柱滚子轴承;滚...

数学建模EI刊,如何避雷?

---权威EI会议推荐会议名称:国际应用数学与工程建模大会(ICAMEM)截稿时间:2025年4月20日召开时间/地点:2025年8月15日-17日·新加坡论文集上线:会后2个月内由Sp...

制造工艺误差,三维共轭齿面怎样影响,双圆弧驱动的性能?

文/扶苏秘史编辑/扶苏秘史在现代工程领域,高效、精确的传动系统对于机械装置的性能和可靠性至关重要,谐波传动作为一种创新的机械传动方式,以其独特的特性在精密机械领域引起了广泛关注。在谐波传动的进一步优化...

测绘EI会议——超详细解析

【推荐会议】会议名称:国际测绘与地理信息工程大会(ICGGE)会议编号:71035截稿时间:2025年3月20日召开时间/地点:2025年8月15-17日·德国慕尼黑论文集上线:会后2个...