CN111475334B TiDB数据库的维护方法、装置、计算机设备及存储介质 （平安科技（深圳）有限公司）

道福安社区益田路5033号平安金融中过TiDB-Binlog集群组件采集TiDB生产库中的数据，得到TiDB生产库中的数据对应的binlog文的binlog文件同步到闪存NAS设备，在监控到TiDB生产库异常，基于闪存NAS设备中存储的避免传统方式采用将生产库中的数据直接保存2通过TiDB-Binlog集群组件采集TiDB生产库中的数据，得到所述TiDB采用预设的定时备份脚本，将所述TiDB同城灾备库中的binlog文件同步到闪存NAS设所述采用预设的定时备份脚本，将所述TiDB同城灾备库中的binlog文件同步到闪存将所述TiDB同城灾备库中的binlog文件移动并保存到所述第一闪定时对所述第一闪存设备和所述第二闪存设备进行增量和全量的若所述校验结果为存在差异，则根据所述校验结果中的差异，所述定时对所述第一闪存设备和所述第二闪存设备进行增量和全量的差异校2.如权利要求1所述的TiDB数据库的维护方法，其特征在于，组件包括Drainer组件与pump组件，所述通过TiDB-Binlog集群组件采集TiDB生产库中的通过所述pump组件收集所述pump组件对应的TiDB节点服务器的binglog文件，作为基通过所述Drainer组件接收所述基础文件并对所述基础文件进行合并，得到合并后的将所述合并后的binglog文件同步到所述TiDB同库中的binlog文件移动并保存到所述第一将所述TiDB同城灾备库中的binlog文件作为待导入数据，并获取所基于所述目标线程数量，构建多线程，并采用所述多线程将所述4.如权利要求1至3任一项所述的TiDB数据库的维护方法，其特征停止应用服务对所述TiDB生产库的写表处理，并将所述Ti3将所述全备文件载入到TiDB生产库中的数据表中，再将增备文件载入数据采集模块，用于通过TiDB-Binlog集群组件采集TiDB生文件同步模块，用于采用预设的定时备份脚本，将所述TiDB同城数据恢复模块，用于若监控到TiDB生产库异常，则基于所述闪存NAS设备中存储的校验单元，用于定时对所述第一闪存设备和所述第二闪存设备进行第一闪存设备中的数据对所述第二闪存设备中所述校验单元，具体用于通过定时脚本比较第一闪存设备和第二6.如权利要求5所述的TiDB数据库的维护装置，其特征在于，所述采集单元，用于通过所述pump组件收集所述pump组件对应的TiDB节点服务器的7.一种计算机设备，包括存储器、处理器8.一种计算机可读存储介质，所述计算机可读存储介质4[0006]通过TiDB-Binlog集群组件采集TiDB生产库中的数据，得到所述TiDB生产库中的[0007]采用预设的定时备份脚本，将所述TiDB同城灾备库中的binlog文件同步到闪存[0010]通过所述pump组件收集所述pump组件对应的TiDB节点服务器的binglog文件，作[0011]通过所述Drainer组件接收所述基础文件并对所述基础文件进行合并，得到合并5设备中的数据对所述第二闪存设备中的数据进[0029]文件同步模块，用于采用预设的定时备份脚本，将所述TiDB同城灾备库中的[0032]采集单元，用于通过所述pump组件收集所述pump组件对应的TiDB节点服务器的[0033]合并单元，用于通过所述Drainer组件接收所述基础文件并对所述基础文件进行[0035]可选地，闪存NAS设备包括第一闪存设备和第二闪存设备，所述文件同步模块包6所述第一闪存设备中的数据对所述第二闪存设备中的数据进[0040]路径获取子单元，用于将所述TiDB同城灾备库中的binlo并获取所述待导入数据对应的所述第一闪存将所述待导入数据同步到所述第一闪存设备计算机程序时实现上述TiDB数据库的维TiDB-Binlog集群组件采集TiDB生产库中的数据，得到TiDB生产库中的数据对应的binlog78是一款定位于在线事务处理/在线分析处理(HTAP：HybridTransactional/Analytical[0073]现有的外挂存储根据连接的方式分为：直连式存储(Direct-Attach又分为：网络接入存储(Network-AttachedStorage，简称NAS)和存储区域网络(Storage平台，用户通过网络支持协议可进入相同的文档，因而NAS设备无需改造即可用于混合9[0078]值得说明的是，闪存NAS设备不适合永久进行数据的存储，在本实施例中，在将[0080]S203：若监控到TiDB生产库异常，则基于闪存NAS设备中存储的binlog文件，对TiDB生产库的各项数据进行监控，在监控到TiDB生产库中的部分数据超出正常预设范围[0084]在本实施例的一些可选的实现方式中，步骤S201中，TiDB-Binlog集群组件包括[0085]通过pump组件收集pump组件对应的TiDB节点服务器的binglog文件，作为基础文[0092]在本实施例中，通过pump组件收集pump组件对应的TiDB节点服务器的binglog文[0095]定时对第一闪存设备和第二闪存设备进行增量和全量的差异校验，得到校验结[0101]在本实施例中，将TiDB同城灾备库中的binlog文件移动并保存到第一闪存设备同城灾备库中的binlog文件作为待导入数据，并根据待导入数据对应的TiDB节点服务器，[0110]停止应用服务对TiDB生产库的写表处理，并将TiDB生产库的数据表中的数据清的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限[0117]图3示出与上述实施例TiDB数据库的维护方法一一对应的TiDB数据库的维护装置[0120]数据恢复模块33，用于若监控到TiDB生产库异常，则基于闪存NAS设备中存储的[0122]采集单元，用于通过pump组件收集pump组件对应的TiDB节点服务器的binglog文[0126]同步单元，用于将TiDB同城灾备库中的binlog文件移动并保存到第一闪存设备[0127]校验单元，用于定时对第一闪存设备和第二闪存设备进行增量和全量的差异校[0138]关于TiDB数据库的维护装置的具体限定可以参见上文中对于TiDB数据库的维护[0142]所述存储器41至少包括一种类型的可读存储介质，所述可读存储介质包括闪存、[0143]所述处理器42在一些实施例中可以是中央处理器(CentralProces