InnoDB的ib_logfile写入策略

ib_logfile是InnoDB的事务日志文件。本文简要说明其写入时机、写入策略及如何保证数据安全。

一、基本概念

  1. redo是物理日志,记录的是页的物理修改操作,是幂等的。
  2. ib_logfile文件个数由innodb_log_files_in_group配置决定,若为2,则在datadir目录下有两个文件,命令从0开始,分别为ib_logfile0和ib_logfile.
  3. 文件为顺序写入,当达到最后一个文件末尾时,会从第一个文件开始顺序复用。
  4. lsn: Log Sequence Number,是一个递增的整数。 Ib_logfile中的每次写入操作都包含至少1个log,每个log都带有一个lsn。在内存page修复过程中,只有大于page_lsn的log才会被使用。
  5. lsn的保存在全局内存结构log_sys中。递增数值等于每个log的实际内容长度。即如果新增的一个log长度是len,则log_sys->lsn += len.
  6. ib_logfile每次写入以512(OS_FILE_LOG_BLOCK_SIZE)字节为单位。实际写入函数 log_group_write_buf(log/log0log.c)
  7. 每次写盘后是否flush,由参数innodb_flush_log_at_trx_commit控制。

二、log_sys介绍

log_sys是一个全局内存结构。以下说明几个成员的意义。

未分类

三、相关更新

用一个简单的更新语句来说明log_sys以及ib_logfile的更新内容的过程。假设我们的更新只涉及到非索引的固定长度字段。

  1. 在bufferpool中写入undo log。 对于一个单一的语句,需要先创建一个undolog头。
  2. 在bufferpool中写入undo log的实际内容。
  3. 在log_sys->buf中写入buffer page的更新内容。此处保存了更新的完整信息。
  4. 在log_sys->buf中写入启动事务(trx_prepare)的日志。
  5. 将c、d更新的log内容写入ib_logfile中。
  6. 在log_sys->buf中写入事务结束(trx_commit)的日志。
  7. 将f步骤的log内容写入ib_logfile中。

四、说明

完成上述所有操作时,数据文件还没有更新。

  1. 每次写入log_sys->buf时同时更新lsn和buf_free。 每次写ib_logfile时同时更新written_to_all_lsn和buf_next_to_write;
  2. 每次写ib_logfile时以512字节为对齐,如需写入600字节,则实际写入1k。写到最后一个文件末尾则从第一个文件重复使用。
  3. 从上述流程看到,在a~d过程中若出现异常关闭,由于没有写入到磁盘中,因此整个事务放弃;若在e刚完成时出现异常关闭,虽然事务内容已经写盘,但没有提交。在重启恢复的时候,发现这个事务还没有提交,逻辑上整个事务放弃。 (重启日志中会有Found 1 prepared transaction(s) in InnoDB字样)。在g完成后出现异常关闭,则能够在重启恢复中正常提交。
  4. 在e和f之间会写mysql的bin-log,若bin-log写完前异常关闭,事务无效,bin-log写入成功后,则异常重启后能够根据bin-log恢复事务的修改。
  5. 若涉及到索引更新,在步骤c之后会增加索引更新的log。由于索引可能有merge过程,因此在merge过程中会另外增加写入一个log。但事务完全提交仍在步骤g中。索引的更新由于已经写盘,并不会因此丢失。