lvorySQL 2025生态大会暨PostgreSQL高峰论坛:灾难恢复工具内核细节探究与分析_第1页
lvorySQL 2025生态大会暨PostgreSQL高峰论坛:灾难恢复工具内核细节探究与分析_第2页
lvorySQL 2025生态大会暨PostgreSQL高峰论坛:灾难恢复工具内核细节探究与分析_第3页
lvorySQL 2025生态大会暨PostgreSQL高峰论坛:灾难恢复工具内核细节探究与分析_第4页
lvorySQL 2025生态大会暨PostgreSQL高峰论坛:灾难恢复工具内核细节探究与分析_第5页
已阅读5页,还剩19页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

灾难恢复工具内核细节探究与分析PDU(Postgresql

Data

Unloader)分享人:张晨IvorySQL

2025生态大会暨PostgreSQL高峰论坛

PDU的快速介绍

数据字典的快速初始化

与openGauss

与kingbase目录CONTENTSIvorySQL

2025生态大会暨PostgreSQL高峰论坛PDU的快速介绍IvorySQL

2025生态大会暨PostgreSQL高峰论坛PostgreSQL

Data

Unloader

(PDU)

是专门用于Postgresql系数据库的灾难恢复工具什么是PDU支持单表/整库/自定义数据文件级别的恢复提供事务级/时间区间级数据恢复从wal中恢复delete/update的原数据IvorySQL

2025生态大会暨PostgreSQL高峰论坛数据库无法启动时直接从数据文件中提取数据主要功能gfiledump制化程度

问题束//

p.

.qq.//Yf3QDkG3YraqAEaMOdcA成熟工具DUL

、ODU基础工具pg_filedump完全空白OraclePostgresqlPG系国产数据库国产数据库:-无专业恢复工具-遇到对应场景直接抓瞎填补PG系数据库在灾难恢复工具链的关键空白为什么要做PDUIvorySQL

2025生态大会暨PostgreSQL高峰论坛主流数据库PDU软件的组成:

pdu可执行文件+pdu.iniPDU怎么用IvorySQL

2025生态大会暨PostgreSQL高峰论坛PDU程序崩溃了怎么反馈show

me

the

“core

”IvorySQL

2025生态大会暨PostgreSQL高峰论坛数据字典的快速初始化IvorySQL

2025生态大会暨PostgreSQL高峰论坛

=0x008

140

140/8=

17.5tuple数据读取基本原理IvorySQL

2025生态大会暨PostgreSQL高峰论坛寻找line

pointers,从第8+(2+2)+(2+2)+2+2+4=25个字节开始,每4字节一组获取到单条ItemId之后,在偏移量lp_off

tupletuple数据读取基本原理数据页的核心构成

目录(line

pointer)+数据(tuple)IvorySQL

2025生态大会暨PostgreSQL高峰论坛3x8=244x8=32按照给定的数据类型解析数据,解析结束的数据长度必须=itemSizetuple数据读取基本原理从tuple中定位数据区域IvorySQL

2025生态大会暨PostgreSQL高峰论坛1、从global/1262中获取数据库的oid得到对应目录。base/数据库oid/表2、从“数据库oid/2615

”“数据库oid/1259

”“数据库oid/1249

”“数据库oid/1247

”5张基表中获取整库的所有记录。3、按照上图的对应关系拼凑出每张表的所有信息。数据字典的快速初始化IvorySQL

2025生态大会暨PostgreSQL高峰论坛5张基表497944979449797497972200xmana,b,d,e,f,g,ivarchar,varchar,varchar,numeric,varchar,varchar,numeric7表id文件号TOAST

idTOAST文件号模式名表名列名类型名列数量(),(),(),(38.0),(),(),(38.0)-1,-1,-1,-1,-1,-1,-1i,i,i,i,i,i,i数据字典的快速初始化类型长度列长度类型对齐方式IvorySQL

2025生态大会暨PostgreSQL高峰论坛PDU数据字典最终形态踩坑指南1、drop的列需要特殊处理,包括初始化和解析数据的时候数据字典的快速初始化2、reltoast

relid不是filenode,只是oid而已IvorySQL

2025生态大会暨PostgreSQL高峰论坛踩坑指南3、脱离数据库读取TOAST,需要更仔细一些默认情况下,toast

oid与toast

filenode一致,

external结构体中保存的是toast

oid

;vacuum

full/truncate之后,两者不再一致,但是external结构体中存的依然是toast

oid数据字典的快速初始化IvorySQL

2025生态大会暨PostgreSQL高峰论坛与openGaussIvorySQL

2025生态大会暨PostgreSQL高峰论坛真实XID

=xid_base

(页头)

+

xmin/xmax

(元组头)与openGauss变化甚大的PageHeaderIvorySQL

2025生态大会暨PostgreSQL高峰论坛openGaussPostgresqlWAL日志适配openGauss建议关闭full_page_writes,而delete/update数据的恢复基础就是fpw,因此PDU

for

openGauss舍弃了update/delete的恢复功能。与openGaussIvorySQL

2025生态大会暨PostgreSQL高峰论坛与kingbaseIvorySQL

2025生态大会暨PostgreSQL高峰论坛数据页开头未知的

8字节x4+2字节与kingbaseIvorySQL

2025生态大会暨PostgreSQL高峰论坛与kingbaseIvorySQL

2025生态大会暨PostgreSQL高峰论坛WAL日志适配Postgresqlkingbase与kingbaseIvorySQL

2025生态大会暨PostgreSQL高峰论坛一些小细节凡是6.28当天私信PDU公

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论