DSGRealSync日常维护手册

日常维护手册

迪思杰（北京）数码技术有限公司

1数据同步错误!未指定书签。

1.1首次全同步及环境概述错误味指定书签。

首先在目标端初始化复制进程错误味指定书签。

在源端初始化复制进程错误!未指定书签。

全同步过程中源端口志监控错误侏指定书签。

全同步过程中目标端的日志监控错误!未指定书签。

1.2单独同步1张或几张表错误!未指定书签。

2如何设置日志分析间隔错误!未指定书签。

3日常运行过程中的日志监控错误味指定书签。

3.1源端H常分析的进度错误!未指定书签。

3.2目标端日常装载的进度错误!未指定书签。

3.3源端日常传送的进度错误!未指定书签。

3.4目标端日常接收的进度错误味指定书签。

3.5源端日常是否1积压错误!未指定书签。

3.6目标端日常是否1积压错误!未指定书签。

3.7源端传送的详细信息错误!未指定书签。

3.8目标端装载的详细信息错误味指定书签。

4维护须要过滤的操作错误!未指定书签。

4.1过滤操作的意义错误味指定书签。

4.2支持的过滤操作种类错误!未指定书签。

5出现停机状况时软件的维护操作错误!未指定书签。

12522125181709:46200:09:0901

125091009:46200:00:0011

12511125091909:46200:09:5211

125231009:46200:00:0021

12524125232209:46200:11:3221

125121009:46200:00:0031

12516125122709:46200:13:5531

124931009:46?00:00:00

0043200

上图为4个并发进程的启动状况，现场-s进程启动个数可能依据现

场启动的并发数不同而不同。

1.1.2在源端初始化复制进程

$执行

停止当前复制进程

初始化复制环境，留意该吩咐只在须要进行全同步时才运行，执行该

吩咐后现有的复制关系将被清空，只能重新发起全同步操作后才能起

先同步工作。

启动复制进程

检查复制进程启动状态

[]$

194451009:45500:00:004002

194611009:45500:00:004000

19469194614409:45500:22:004000

194551009:45500:00:001

1945619455009:45500:00:001

194341009:45?00:00:00

43200

194331009:45?00:00:00

43200

如上图全部进程均正常启动表明复制进程正常启动

3）源端下执行

$

$

>

即可正常发起全同步操作

1.1.3全同步过程中源端日志监控

$

1）通过-f吩咐查看全同步抓取日志进程的日志信息在同步导出的

过程中显示导出百分之多少和导出多少M,可以监控到源端同步导出的

进度。

/*起先抽取表，显示百分比（0.81%）,已经抽取的大小（10）,读取速

度(R9:l.ll),压缩速度(C0:0.00),写速度(W0:0.13),平均速

度(P:1.ID,总共耗时(E:322)*/

1.63%20(R9:3.331:16.581:0.05:1.66:0:651)

2.44%30(R9:3.335:11.Ill:0.06:2.00:0:1010)

3.25%40(R9:3.332:11,112:0.04:2.22:0:1411)

4.07%50(R9:3.333:7.144:0.03:2.38:0:1699)

4.88%60(R9:3.331:12.502:0.08:2.50:0:2023)

5.69%70(R9:3.332:0.002:0.00:2.59:0:2297)

0

12621441554025122621451120

262145(0)

线程、日志大小、号、标记位、块大小、下一块、标记位（8为当前日

志）

15545-100245(0)-112849

/*正在处理15545号日志，在100245块，偏移量0*/

6.50%80(R9:3.330:40.001:0.06:2.67:0:2586)

0x0000.0045612023-8-19:12:36:30(U:1:1:400)

:15545,:110484,:448

0x0000.0045b72023-8-19:12:36:40(U:l:0:718)

$7.32%90(R9:1.880:0.000:0.06:2.55:0:2882)

2)查看导出结束的标记在口志中出现如下的打印信息、：

1950(2938)

141752480

11094

1

30185.69

30539.13

131418.00

111625.83(63.00%)

575.91(s)

显示导出完成

3)通过-f吩咐查看发送数据进程的信息

进程会把同步期间产生新交易的1进行发送，看这个文件是否有传送

新的1

LL4全同步过程中目标端的日志监控

1)$通过-f0吩咐查看目标端书目下的0、15文件，看是否同步

的文件在正常装载以及每个队列装载到的详细1文件个数，以起先的

文件为首次同步产生的口志文件。

2)$通过吩咐查看目标端书目下的0、1、书目中源端同步导出传到

这些书目下的1文件是否在削减，文件有两列第一列的数字表示装载

了多少个1文件，其次列的数字表示从源端接收到了多少个1文件,

所以可以通过推断第一列的数字是否增长，来确定目标端同步装我的

进度。

3)$通过查看目标端书目下的文件，假如这个文件不断的增大说明

源端导出传送过来的数大于FI标端同步装载的1个数；假如这个文件

在不断的削减说明源端传送过来的数小于目标端同步装载的1个数，

或源端导出完毕不再传送目标端在不断的装载1文件；当文件里面的

数表示源端导出传送到目标端，目标端还有多少个1未装的个数，所

以当文件里面的数为零时，表示目标端同步装载完成。

4)$通过-f0查看目标端书目下的0文件，以起先的文件为增量

装载的日志文件

:112023-06-12:17:31:41:6000(2086)

:212023-06-12:17:31:41:0060(2086)

:312023-06-12:17:31:41:0600(2086)

:412023-06-12:17:31:41:56000(2086)

:512023-06-12:17:31:41:56000(2086)

:612023-06-12:17:31:41:56000(2086)

的日志，说明目标端同步装载完成。

5)$通过查看目标端的装载状况。

1.2单独同步1张或几张表

由于只是想单独同步1张或几张表，并且不影响其他现在正在复制表

的正常复制，而且耍单独同步的表已经在下面文件中中的项中，所以只须

要修改=中中的内容，改为要单独同步1张或几张表的表名即可。

操作步骤如下：

$

当前文件内容为:

假如须要单独同步用户下的表，须要修改文件

按需求修改完文件后进入源端书目

$

$

>

注：只有执行此吩咐后，才会再此查询里配置信息，只是修改完或起

停进程并不重新读取里配置信息

查看源端文件假如有出现表示源端新加的表同步完成，

查看目标端0进行实时装载后，表示新同步的表目标端同步完成，进

入实时同步阶段

2如何设置日志分析间隔

s

s

>:50000

13

该日志间隔可以在1—5秒间随意设置，设置成几秒中每隔几秒钟就会

去读取一次在证券行业举荐运用3秒

江：3读取日志诃隔

3日常运行过程中的日志监控

3.1源端日常分析的进度

1)查看源端书目下的文件，可以查到源端已经分析完的数据库日志文件。

第一列表示主机节点，其次列表示已经分析完的数据库日志文件号。

2)查看源端书目下的文件，可以查看源端分析到什么时间的交易。如下

的日志：

2023/06/1217:26:20

2023-06-12:17:26:20:235.187048.0(:235.204799)

2023-06-12:17:26:21:235.197287.460(:235.204799)

0x0000.054c92d42023-6-12:17:26:15(U:l:2488842:0:0)

红色时辰表示源端数据库交易操作时间

蓝色时辰表示源端分析此交易的时间两者相减可以得出源端分析滞后的

时间

3)查看源端书目下的文件，可以知道源端分析出交易的详细信息。如下

的日志：

2023-06-12:17:26:37:5242864；B0444000

2023-06-12:17:26:38:129052019556000

2023-06-12:17:28:19:524286480444000

2023-06-12:17:28:20:129052019556000

红色部分表示：源端传送此1文件的系统时间

蓝色部分表示：源端传送此1文件的大小

紫色部分表示：源端传送此1文件的详细交易类型及相应交易类型的个数

3.2目标端日常装载的进度

1)查看目标端书目下的0文件。如如下0文件：

:112023-06-12:17:31:41:19556000(2086)

:212023-06-12:17:31:41:01955600(2086)

:312023-06-12:17:31:41:00019556(2086)

红色部分表示：目标端装载相应1文件的编号

蓝色部分表示：目标端装载此1文件的系统时间

紫色部分表示：此1文件的详细操作的类型及相应的个数

绿色部分表示：装载此1花费的时间

2）查看目标端书目下的文件，可以知道目标端装载的详细信息。如如下

的文件：

0/4038331::2023-07-2413:21:31

0,0x002839c9,2023-07-2413:21:02

(),0x0028394,2023-07-2413:21:03

(),0x00283939,2023-07-2413:21:03

0,0x0028396,2023-07-2413:21:03

0,0x00283914,2023-07-2413:21:03

2023-07-24:13:21:33:356122010014

0/4038341::2023-07-2413:21:33

0,0x002839d7a2,2023-07-2413:21:03

0,0x00283939,2023-07-2413:21:04

0,0x0028396b,2023-07-2413:21:04

2023-07-24:13:21:33:48371592014

红色部分表示：目标端日常接收到的1文件编号及在目标端保存创建此1

文件目标端的系统时间

蓝色部分表示：目标端日常接收到此1在源端内部的号和在源端交易的源

端系统时间

紫色部分表示：目标端日常接收到此1在目标端装载完的目标端系统时间

及相应此1文件的大小和相应交易的类型和相关交易的个数

紫色时间减去蓝色时间：表示源端在数据库里真正交易时间和目标端真正

装载到数据库时间的相差时间（当然要保持源端主机和目标端主机系统时

间一样)

3.3源端日常传送的进度

1)查看源端书目下的文件，查看源端日常传送的进度。

如如下文件：

2023-07-24:11:30:28:2.3763821(14295646742266)...

2023-07-24:11:30:28:2,376382125

2023-07-24:11:30:32:2.3763831(14295646742266)...

2023-07-24:11:30:32:2,376383111

红色部分表示：源端日常传送此1文件的系统时间

蓝色部分表示：源端传送此1文件的详细编号

紫色部分表示：源端传送此1文件的时间

3.4目标端日常接收的进度

1)查看目标端书目下的文件，查看目标端日常接受的进度。

如如下文件：

2023-07-24:11:37:21:,0,136...33

2023-07-24:11:37:21:,0,198...58

红色部分表示：目标端日常接收此1文件的系统时间

蓝色部分表示：目标端日常接收此1文件的类型。表示实时，表示

紫色部分表示：目标端日常接收此1文件的所在队列。多队列分0,1,

2等

绿色部分表示：目标端日常接收此1文件的大小

棕色部分表示：目标端日常接收此1文件花费的时间

3.5源端日常是否1积压

1）查看源端节目下是否有大量1文件积压，正常的状况下书目下不会有许

多1文件存在。假如存在不过数量不多，并且1文件的最小编号始终在

改变，说明可能是传送的慢；

2）查看源端书目下的文件，看是否有改变（而且不是重试的信息）

3）查看源端书目下的2文件，看是否第一列和其次列数值是否相差很大。

其次列比第一列大许多说明源端日常1有积压，另外第一列数值不再改

变，说明源端日常1文件有积压（当然这两种状况在同步某张或某些表

的时候，会有这种状况发生，因为在这同步某张或某些表的没有完成时,

新生成的1文件是不会传送到目标端的，源端会造成1文件的阶段时间

积压）

造成源端积压的可能缘由：

1、源端目标端之间的网络故障

2、目标端进程停止

3、源端发送停止或出错

3.6目标端日常是否1积压

1）查看目标端书目下的o书目下是否有大量1文件积压

2）查看目标端书目下的0文件是否有日志累加写入（不是重复信息）

3）查看目标端0书目下的文件，第一列和其次列的数值是否相差很大，

假如其次列比第一列数值大许多说明目标端日常1文件有累积，同时

假如第一列数值长时间不变动，说明目标端日常1文件有累积。

3.7源端传送的详细信息

1）查看源端书目下的文件，可以知道源端分析出交易的详细信息。如如

下的日志：

2023-06-12:17:26:37:524286480444000

2023-06-12:17:26:38:129052019556000

2023-06-12:17:28:19:524286480444000

2023-06-12:17:28:20:129052019556000

红色部分表示：源端传送此1文件的系统时间

蓝色部分表示：源端传送此1文件的大小

紫色部分表不：源端传送此1文件的详细交易类型及相应交易类型的个数

3.8月标端装载的详细信息

1）查看目标端书目下的文件，可以知道目标端装载的详细信息。如如下

的文件：

0/4038331::2023-07-2413:21:31

0,0x002839c9,2023-07-2413:21:02

（）,0x0028394,2023-07-2413:21:03

(),0x00283939,2023-07-2413:21:03

0,0x0028396,2023-07-2413:21:03

0,0x00283914,2023-07-2413:21:03

2023-07-24:13:21:33:356122010014

0/4038341::2023-07-2413:21:33

(),0x002839d7a2,2023-07-2413:21:03

(),0x00283939,2023-07-2413:21:04

0,0x0028396b,2023-07-2413:21:04

2023-07-24:13:21:33:48371592014

红色部分表示：目标端日常接收到的1文件编号及在目标端保存创建此1

文件目标端的系统时间

蓝色部分表示：目标端日常接收到此1在源端内部的号和在源端交易的源

端系统时间

紫色部分表示：目标端日常接收到此1在目标端装载完的目标端系统时间

及相应此1文件的大小和相应交易的类型和相关交易的个数

紫色时间减去蓝色时间：表示源端在数据库里真正交易时间和目标端真正

装载到数据库时间的相差时间(当然要保持源端主机和目标端主机系统时

间一样)

4维护须要过滤的操作

4.1过滤操作的意义

供应过滤操作功能是为了有效的防止生产系统上由于误操作执行了或

者等操作后，容灾系统可以对这些危急的操作进行过滤从而保证，一旦在

主库上进行了误操作还可以将容灾库的数据复原到主库中去。

4.2支持的过滤操作种类

源端

编辑文件

可供过滤的操作如下：

#

#

#

#

#

#

#

#

#

#

#(...)

#(...)上面的部分是限制