PostgreSQL WAL日志名解析

原创

donghy

发布于 2022-09-17 15:47:53

8360

发布于 2022-09-17 15:47:53

文章被收录于专栏：懒人的记录

日志名组成

在PG中日志名是一串数字，刚开始接触PG的朋友对名字都有些疑惑，在PG中日志名是由16进制命名总共24个字符由三部分组成:

0000000100000001000000C4
00000001 //时间线ID
00000001 //LogId
000000C4 //logSeg

如何计算？

我们知道由三部分组成，那么又是如何计算呢？公式如下:

WAL segment file name = timelineId +(uint32)LSN−1 / (16M ∗ 256） + (uint32)(LSN − 1 / 16M) % 256

我们算一个试一试.查看当前LSN位置

postgres=# select pg_current_wal_lsn();
 pg_current_wal_lsn
--------------------
 1/C469AA30
(1 row)

这里的LSN是' 1/C469AA30' 我们转换为十进制数:

postgres=# select x'1C469AA30'::bigint;
    int8
------------
 7590226480
(1 row)

利用公式计算:

logSeg:
postgres=# select ((7590226480 - 1) / (16 * 1024 * 1024 )) % 256 ;
 ?column?
----------
      196
(1 row)
196是十进制数 转换为16 进制为 c4 
postgres=# select to_hex(196);
 to_hex
--------
 c4
(1 row)

LogId:
postgres=# select ((7590226480 - 1) / (16::bigint * 1024::bigint * 1024::bigint * 256::bigint) :: int8);
 ?column?
----------
        1
(1 row)
得出的LogId等于1

时间线ID:

postgres@coredumped  ~  pg_controldata|grep TimeLine
Latest checkpoint's TimeLineID:       1
Latest checkpoint's PrevTimeLineID:   1

算出来的值与通过函数查询的一致:

postgres=# select pg_walfile_name('1/C469AA30');
     pg_walfile_name
--------------------------
 0000000100000001000000C4
(1 row)

通过源码分析

上述的公式也是在网站中看到，特意查看了下PG代码确认下正确性:

// 这里是计算一个logSegNo
#define XLByteToPrevSeg(xlrp, logSegNo) \
      logSegNo = ((xlrp) - 1) / XLogSegSize 

//XLOG_SEG_SIZE 定义
#define XLOG_SEG_SIZE (16 * 1024 * 1024)

//这块是拼文件名地方
#define XLogFilePath(path, tli, logSegNo)   \
      snprintf(path, MAXPGPATH, XLOGDIR "/%08X%08X%08X", tli, 
              ¦(uint32) ((logSegNo) / XLogSegmentsPerXLogId),
              ¦(uint32) ((logSegNo) % XLogSegmentsPerXLogId))

LogId与logSeg 分别是LogSegNo除XLogSegmentsPerXLogId或者是对XLogSegmentsPerXLogId取模，那么XLogSegmentsPerXLogId又是什么呢？


//看到XLogSegmentsPerXLogId的定义我们可以自己计算下
#define XLogSegmentsPerXLogId   (UINT64CONST(0x100000000) / XLOG_SEG_SIZE)

postgres=# select x'100000000'::bigint / (16 * 1024 * 1024);
 ?column?
----------
      256
(1 row)
这个值就是256