数据库系统概论第七章数据库恢复技术.ppt

第七章数据库恢复技术,事务,事务定义事务是用户定义的一个数据库操作序列构成，这些操作要么全做，要么全不做，是一个不可分割的工作单位。事务与应用程序是两个概念，一般来说，一个应用程序可以包含多个事务。事务的开始与结束可以由用户显式控制。如果用户没有显式定义事务，则由DBMS按缺省规定自动划分事务。,SQL中事务的定义,事务以Begin transaction开始，以Commit work或 Rollback work结束。Commit work表示提交，事务正常结束。Rollback work表示事务非正常结束，撤消事务已做的操作，回滚到事务开始时状态。,事务的例子,BEGIN TRANSACTIONREAD 甲账户余额;甲账户余额=1000;IF 甲账户余额 0 THEN;ROLLBACK WORK;ELSEWRITE 甲账户余额;READ 乙账户余额;乙账户余额=1000;WRITE 甲账户余额;COMMIT WORK;,事务的特性（ACID）,原子性(Atomicity)事务是数据库的逻辑工作单位，事务中包括的诸操作要么全做，要么全不做。一致性(Consistency)事务执行的结果应当使数据库从一个一致性状态转变为另一个一致性状态。,事务的特性（ACID）,隔离性(Isolation)一个事务的执行不能被其它事务干扰。即一个事务内部的操作及使用的数据对其它并发事务是隔离的，并发执行的各个事务之间不能相互干扰。,事务的特性（ACID）,持久性(Durability)一个事务一旦提交之后，它对数据库的影响必须是永久的。事务提交后，系统发生故障不能改变事务的持久性。,数据库恢复概述,虽然数据库系统中采用了各种措施来保证系统安全性和完整性，但计算机系统的故障是不可避免的，这些故障轻则造成运行事务的非正常中断，影响数据库中数据的正确性，重则破坏数据库，使数据库中的全部或部分数据丢失，因此数据库管理系统必须具有把数据库从错误状态恢复到某一已知正确状态的功能，这就是数据库的恢复。数据库恢复是通过数据库管理系统的恢复子系统完成的。,数据库恢复概述,数据库恢复子系统的目的包括：保证事务的原子性，即确保一个事务被交付运行后，要么该事务中的所有数据库操作都被成功地完成，而且这些操作的结果被永久地存储到数据库中，要么这个事务对数据库没有任何影响。当系统发生故障以后，数据库能够恢复到正确状态。,故障的种类,事务内部的故障事务内部的故障包括可预期的和不可预期的。可预期的是指可以通过事务程序本身发现和处理的故障。而不可预期的错误是指那些不能由应用程序处理的事务故障，如死锁，运算溢出，违反完整性规则等。,故障的种类,系统故障系统故障是指造成系统停止运行的任何事情，使得系统要重新启动。如硬件错误，操作系统故障，停电等。这类故障影响正在运行的所有事务，所有事务都非正常终止，但不会破坏数据库。恢复子系统必须清除所有未完成的事务对数据库的修改，同时重做所有已完成的事务，保证数据库的一致性。,故障的种类,介质故障介质故障指外存故障，如磁盘损坏，瞬时强磁场干扰等。这类故障将破坏全部或部分数据库，并影响正在存取这部分数据的所有事务。计算机病毒计算机病毒是一种人为的破坏或故障，已成为数据库系统的主要威胁之一。,恢复的实现技术,数据库恢复的原理数据库恢复的基本原理为冗余。如果数据库中任何一部分数据被破坏或处于不正确的状态，则可以通过存储在系统别处的冗余数据来重建。数据库恢复的关键问题如何建立冗余如何利用冗余实施数据库恢复,恢复的实现技术,建立冗余的常用方法数据转储数据转储是数据库恢复中采用的基本技术。所谓转储即DBA定期地将整个数据库复制到磁带或其它存储设备上保存起来的过程。这些备用的数据文本称为后备副本或后援副本。当数据库发生故障时，可以将后备副本重新装入，并重新运行自转储以后的所有更新事务。,恢复的实现技术,T0,T0,T1,T1,T3,T3,正常运行,恢复,重装后备副本,重新运行事务,恢复的实现技术,转储可以分为：静态转储静态转储是在系统中无事务运行时进行的转储操作。即转储开始时数据库处于一致状态，转储过程中，不允许对数据库的任何存取、更新活动。由于转储必须等待正在运行的事务结束才能开始，而新的事务必须等待转储结束才能执行，降低了数据库的可用性。,恢复的实现技术,动态转储动态转储是指转储期间允许对数据库进行存取或修改，即转储和用户事务可以并发执行。动态转储克服了静态转储的缺点，但除了转储数据库的数据以外，还必须把转储期间各事务对数据库的修改记录下来，这样才能保证把数据库恢复到某一时刻的一致状态。,恢复的实现技术,转储的方式海量转储海量转储指每次转储全部数据库。增量转储增量转储指每次只转储上一次转储后更新过的数据。,恢复的实现技术,转储计划的例子,23：00,海量,增量,增量,海量,增量,增量,增量,周日,周一,周二,周三,周四,周五,周六,恢复的实现技术,登录日志文件日志文件是用来记录事务对数据库的更新操作的文件。日志文件主要有两种格式：以记录为单位的日志文件和以数据块为单位的日志文件。以记录为单位的日志文件记录的内容包括：各个事务的开始标记各个事务的结束标记各个事务的所有更新操作,恢复的实现技术,上述内容均作为日志文件中的一个日志记录，每个日志记录的内容包括：事务标识（标明是哪个事务）操作的类型（插入、删除或修改）操作对象（记录的内部标识）更新前数据的旧值（对插入操作，此项为空）更新后数据的新值（对删除操作，此项为空）对于以数据块为单位的日志文件，日志记录的内容包括事务标识以及更新前和更新后的数据块。,日志记录的例子,T0,startsT0,A,1000,950T0,B,2000,2050T0,commit,恢复的实现技术,日志文件的作用日志文件可以用来进行事务故障恢复和系统故障恢复，并协助后备副本进行介质恢复。其具体作用是：事务故障和系统故障恢复必须使用日志文件。在动态转储方式中必须建立日志文件，后备副本和日志文件综合起来才能保证备份的一致性，和有效地恢复数据库。在静态转储方式中，也可以建立日志文件。当数据库发生故障时，用后援副本把数据库恢复到转储结束时的正确状态，然后利用日志文件重做已完成的事务，把数据库恢复到故障前的正确状态。,恢复的实现技术,登记日志文件为保证数据库是可恢复的，登记日志文件时必须遵循两条原则：登记的次序严格按并发事务执行的时间顺序。必须先写日志文件，后写数据库。,恢复策略,事务故障的恢复事务故障是指事务在运行至正常终止点之前被终止。事务故障的恢复是由系统自动完成的，其步骤是：反向扫描文件日志（即从最后向前扫描日志文件），查找该事务的更新操作。对该事务的更新操作执行逆操作，即将日志记录中的“更新前的值”写入数据库。这时，如果记录中是插入操作，则相当于做删除操作；如果记录中是删除操作，则相当于做插入操作；如果记录中是修改操作，则用修改前的值代替修改后的值。继续反向扫描日志文件，查找该事务的更新操作，并做同样处理如此处理下去，直到读到该事务的开始标志。,恢复策略,系统故障的恢复系统故障造成数据库不一致状态的原因有两个，一是未完成的事务对数据库的更新可能已经写入数据库；二是已提交事务对数据库的更新可能还留在缓冲区还没来得及写入数据库。因此恢复操作就是要撤销故障发生时未完成的事务，重做已完成的事务。,恢复策略,其步骤是：正向扫描日志文件，找出故障发生前已经提交的事务，将其事务标识记入重做（REDO）队列。同时找出故障发生时尚未完成的事务，将其事务标识记入撤销（UNDO）队列。对撤销队列中的各个事务进行UNDO处理。即反向扫描日志文件，对每个UNDO事务的更新操作执行逆操作，即将日志文件中的“更新前的值”写入数据库。对重做队列中的各个事务进行REDO处理。即正向扫描日志文件，对每个REDO事务重新执行日志文件登记的操作，即将日志文件中的“更新后的值”写入数据库。,恢复策略,介质故障的恢复介质故障将全部或部分地破坏数据库甚至是日志文件，其恢复的方法是：装入最新的数据库后备副本（离故障发生时刻最近的转储副本），使数据库恢复到最近一次转储时的一致状态。对于动态转储的副本，还需要装入转储开始时刻的日志文件副本，将数据库恢复到一致状态。装入转储以后的日志文件副本，重做已经完成的事务。,推迟更新技术,推迟更新技术在日志中记录对事务T的所有更新操作，并把所有对数据库的更新操作推迟到该事务提交时执行。它遵循以下推迟更新协议：每个事务在到达提交点之前不能更新数据库。一个事务的所有更新操作所对应的日志记录写入永恒存储器之前，该事务不能到达提交点。当一个事务到达提交点时，我们称该事务进入部分提交状态。推迟更新协议保证当一个事务部分提交时，该事务的所有更新操作的信息已经记录在日志中。,推迟更新技术,当T开始执行时，推迟更新技术在日志中写入。如果T执行Write(X)的操作，推迟更新技术在日志中写入，其中V1为X的原始值，V2为Write(X)要写入的X值。当T进入部分提交状态时，推迟更新技术在日志中写入。接着，所有日志记录都写入永恒存储器。然后，对于日志中的每个形如的记录，将数据库中X数据项的值更新为V2。,延迟执行更新,SQL UPDATE,RAM中的数据页,数据文件,InsertDeleteUpdateCommit,日志,5.写日志操作,4.写数据页,1.事务开始,2.执行更新命令,6.确认,7.写commit,8.确认,10.在恰当的时候写入数据文件,推迟更新技术,试考虑如下数据库事务T0和T1，其中A、B和C的初值分别为1000，2000和700，T0和T1按照串行调度执行：,T0:read(A)A=A-50 write(A)read(B)B=B+50 write(B),T1:read(C)C=C-100 write(C),推迟更新技术,推迟更新技术,即时更新技术,即时更新技术允许事务直接更新数据库。处于活动状态的事务直接在数据库实施的更新称为非提交更新。任何即时更新技术都必须遵循如下的即时更新协议：所有型日志记录安全的存储到永恒存储器之前，不允许事务T更新数据库。所有型日志记录安全的存储到永恒存储器之前，不允许事务T提交。即时更新协议保证在系统故障发生时，每个运行事务的更新操作都安全地记录在日志中。,即时更新技术,当T开始执行时，被写入日志。在T运行期间，当T发出一个Write(X)操作时，记录首先被写入日志，然后，直接在数据库上执行Write(X)。当T部分提交时，被写入日志。为满足即时更新协议的要求，在Write(X)直接作用到数据库之前，有关这个操作的日志记录必须安全地写入永恒存储器。,即时更新技术,即时更新技术,具有检查点的恢复技术,利用日志技术进行恢复时，恢复子系统通常需要检查所有日志记录，这样将耗费大量时间，同时也可能REDO了一些已经写到数据库中的更新操作结果，因此也浪费了时间。为此，提出了检查点技术。这种技术在日志文件中增加一类新的记录检查点（checkpoint）记录，增加一个重新开始文件，并让恢复子系统在登录日志文件期间动态地维护日志。,具有检查点的恢复技术,检查点记录的内容包括：建立检查点时刻所有正在执行的事务清单。这些事务最近一个日志记录的地址。重新开始文件用来记录各个检查点记录在日志文件中的地址。,具有检查点的恢复技术,动态维护日志文件的方法是周期性地执行如下操作：将当前日志缓存中的所有日志记录写入磁盘的日志文件上。在日志文件上写入一个检查点记录将当前数据缓存的所有数据记录写入磁盘的数据库中把检查点记录在日志文件中地址写入一个重新开始文件。,具有检查点的恢复技术,使用检查点的方式可以改善效率，当事务T在一个检查点之前提交，T对数据库所做的修改一定已经写入数据库，写入时间是在这个检查点建立之前或建立之时。这样在进行恢复处理时，没有必要对事务T进行REDO操作。,具有检查点的恢复技术,时间,Tc检查点,Tf系统故障,不要REDO,REDO,REDO,UNDO,UNDO,具有检查点的恢复技术,系统用检查点方法进行恢复的步骤是：在重新开始文件中找到最后一个检查点记录在日志文件中的地址，由该地址在日志文件中找到最后一个检查点记录。由该检查点记录得到检查点建立时刻所有正在运行的事务清单ACTIVE-LIST(暂时放入UNDO-LIST)从检查点开始正向扫描日志文件如果有新开始的事务Ti，把Ti暂时放入UNDO-LIST;如果有提交的事务Tj，把Tj从UNDO-LIST队列移入到REDO-LIST队列；直到文件结束对UNDO-LIST中的每一个事务执行UNDO操作，对REDO-LIST中的每个事务执行REDO操作。,数据库镜像,即根据DBA要求，自动把整个数据库或其中的关键数据复制到另一个磁盘上。每当主数据库更新时，DBMS自动把更新后的数据复制过去，即DBMS自动保证镜像数据与主数据的一致性。这样，一旦发生介质故障，不但可以继续由镜像磁盘提供服务，而且可以直接通过镜像磁盘进行数据库恢复。在没有故障时，镜像磁盘还可以提供一定的并行性。,数据库镜像,