CN114860691B 异构数据在线迁移方法、系统及存储介质 （深圳须弥云图空间科技有限公司）

道海珠社区滨海大道3369号有线信息据主表的键实现分组聚合；判断各Table表是否为主表，如果是，选择主表的字段输出到NoSQL套对象数组输出到NoSQL(非关系型数据库)。本低了数据变更事件之间的依赖和到达顺序带来2主表和子表根据主表的一个或者多个键实现分组聚合；所述关联计算将所述异构数据各按照预设的执行方式，将进行关联计算与分组聚合后的主表以及子表表处理成一个嵌套对象数组输出到非关系型39.一种异构数据在线迁移系统，包括存储器、处4[0001]本公开涉及数据库系统应用技术领域，尤其涉及一种异构数据在线迁移方法方5杂嵌套的方式实现到NOSQL(非关系型数据[0021]图6-1是本公开实施例提供的一种各计算单元的hash值计算与均衡处理准备的结6能实现各种通信设备互联的无线网络，例如，蓝牙(Bluetooth)、近场通信(NearField7[0074]具体地，为了将异构数据替换为NOSQL数据，采用关联计算与分组聚合的计算方式，关联计算可以将异构数据各Table表中的数据进行同步的关联更新，通过以主表为基准，将各Table表表中的共有字段或者相关的键进行匹配连接运算，达到数据的一致性处8[0079]根据公开实施例提供的技术方案，通过采用关联计算与分组聚合的Table表数据[0080]在一些实施例中，该异构数据在线迁移方法在进行主表与全部子表的关联计算部左边表中的所有项目，即使其中有些项中的数据未填写完全(在右表中没有查找到对应9[0088]图6-1是本公开实施例提供的各计算单元的hash值计算与均衡处理准备的示意[0090]图6-2是本公开实施例提供的各计算单元的hash值均衡处理示意图。如图6-2所根据主表与子表1的hash值在hash圆环上的顺时针位置关系，主表的hash值在hash圆环上hash值(hash1)的位置处分别引出连接线并且在顺时针方向与关联计算单元1(606)的均衡子表1关联计算的均衡处理；根据主表与子表2的hash值在hash圆环上的顺时针位置关系，的hash值(hash)的位置处与子表2的hash值(hash2)的位置处分别引出连接线并且在顺时[0092]分组聚合与嵌套处理的均衡处理过程均依次根据各个表(主表与全部子表)的个嵌套对象数组处理单元中计算单元。对计算单元的计算任务负载进行hash值的均衡处[0095]在一些实施例中，该异构数据在线迁移方法在执行嵌套对象数组分别输出到NoSQL(非关系型数据库)的过程中，同步发送对应的输出嵌套对象数组到NoSQL(非关系型该通信通道为消息队列。[0097]在一些实施例中，该异构数据在线迁移方法在读取动态Table表的过程基于数据向行的流式实时计算引擎的代表是ApacheStorm(侧重于极低延迟的流处理框架/分布式解耦。理器701、存储器702以及存储在该存储器702中并且可在处理器701上运行的计算机程序执行计算机程序703时实现上述各装置实施例中各模块以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述计算机程序703在通用处理器、数字信号处理器(DigitalSignalProcessor，DSP)、专用集成电路(ApplicationSpecificIntegratedCircuit，ASIC)、现场可编程门阵列(Field-分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器702还可以既包括系统7的内部存储单元也包括外部存储设备。存储器702用于存储计算机程序以及电子设备所需的其它程序和数据。存储器702还可以用于暂时地存储已经输出或[0138]集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用