• 首页
        • 更多产品

          客户为中心的产品管理工具

          专业的软件研发项目管理工具

          简单易用的团队知识库管理

          可量化的研发效能度量工具

          测试用例维护与计划执行

          以团队为中心的协作沟通

          研发工作流自动化工具

          账号认证与安全管理工具

          Why PingCode
          为什么选择 PingCode ?

          6000+企业信赖之选,为研发团队降本增效

        • 行业解决方案
          先进制造(即将上线)
        • 解决方案1
        • 解决方案2
  • Jira替代方案
目录

数据库正在操作时突然断电,为什么可以用日志恢复

因为在执行一个操作之前,数据库会首先把这个操作的内容写入日志里记录起来,然后再进行操作。这样一来,突然断电的时候,即使操作并没有执行完,但是日志在操作前已经写好了,仍然可以根据日志的内容来进行恢复。

一、数据库正在操作时突然断电可以用日志恢复

因为在执行一个操作之前,数据库会首先把这个操作的内容写入日志里记录起来,然后再进行操作。这样一来,突然断电的时候,即使操作并没有执行完,但是日志在操作前已经写好了,仍然可以根据日志的内容来进行恢复。

试想一种情况:我们打算执行一个操作,应该按照先写日志,再执行操作的顺序。假设在写日志的时候突然断电,那么这个日志没有写完。这样也不会影响数据库的恢复,因为我们在恢复的时候,把不完整的日志记录忽略就好了,这些不完整日志记录对应的操作都还没有开始执行,自然没有影响。

以ORACLE为例,在数据需要写的时候,例如,你一个update 某个表的某行操作。一个修改实际上是对表所在的数据文件的数据块的某行记录进行修改。这个过程1.会首先生成redo log,这个日志记录你update操作对xxx号数据文件,xxx号数据块,xx行修改啥内容。2.当你update操作提交后,数据库会此时实际上并没有立即把那些数据库修改了,而且会优先把这些日志写入磁盘。当日志确保写完后,数据库才开始根据redlog日志来更新那些数据块。写完后会把数据块打个标记(SCN之类),那些应该更新而需要更新的数据数据库一般会有个队列来定时刷新到数据库(减小数据库io),这个队列里面的数据块叫脏块。3.当数据库在修改是,还回产生undo日志,用于回滚,undo的日志记录对数据块的变更同时也会写入redolog(除了temp外,所有数据文件的变更都会记录redlog),如果一个操作未生效,就会被自动根据und进行回滚。4.因此,发生掉电分三种情况,①如果数据未提交,那么原来的数据块在数据库启动的时候会自动被回滚。如果undo日志掉电没记录完,特可以通过redo来撤销之前的变更,一般叫回滚。②如果掉电在提交后,脏块未写入磁盘,那么数据库同样会根据redo日志,对比数据块的scn和控制文件scn还有数据文件rba之类的一些数据块版本标记和,从重一遍之前的变更操作,这个操作因为是完成之前未完成的操作,一般叫前滚。③掉电时已经写入磁盘,数据库正常启动,无需回滚或者前滚事务。

综上,数据库利用日志来记录将要修改而未修改的数据块,同时把数据块的不通时间的版本进行编号(SCN),当数据未修改后,通过对比SCN来确保数据是否是需要的版本,配合结合REDO来进行回滚和前滚,这个操作在数据库启动的时候叫实例恢复。因此,一般情况下掉电都不影响数据库的。除非数据库的redolog出问题,例如写入的redlog损坏了,这种情况数据库就需要做不完全恢复,可能会丢失一些数据。所以ORACLE一般都是REDOLOG日志组,可以分别放入不同的存储设备,保证存储安全。

延伸阅读:

二、什么是CDC

CDC是(Change Data Capture 变更数据获取)的简称。

核心思想是,监测并捕获数据库的变动(包括数据 或 数据表的插入INSERT、更新UPDATE、删除DELETE等),将这些变更按发生的顺序完整记录下来,写入到消息中间件中以供其他服务进行订阅及消费。

CDC 技术应用场景也非常广泛,包括:

数据分发,将一个数据源分发给多个下游,常用于业务解耦、微服务。

数据集成,将分散异构的数据源集成到数据仓库中,消除数据孤岛,便于后续的分析。

数据迁移,常用于数据库备份、容灾等。

相关文章