CN114780564B 数据处理方法、数据处理装置、电子设备和存储介质 （京东科技控股股份有限公司）

2分别针对每个键值，基于所述键值和所述键值中所存储的属性数据来生成消息数据；将多个所述消息数据发送至分布式消息队列中，以便消费者在从所述分布式消在所述消费者接收到所述消息数据后，响应于成功获取分布式及基于所述预设顺序，对多个所述第一目标属性数据中具有相同的所对于每个第三目标属性数据，基于所述第三目标属性数据的主数据3对于每个第三目标属性数据，在所述第三目标属性数据的主数据确在所述第三目标属性数据的主数据确定为修改操作类型的在所述第三目标属性数据不包含主数据的情况下，保留所在从所述消息数据中包含的属性数据中取出预设数量的属性数中仍包含属性数据的情况下，将完成取出操作的消息数据发送至所述分布式消生成模块，用于分别针对每个键值，基于所述键值和所述键第一处理模块，用于将多个所述消息数据发送至分布式消息其中，当所述一个或多个指令被所述一个或多个处理器执执行指令在被执行时用于实现权利要求1至9中45属性数据通过预设数据接口写入上述搜索引擎集群的存储设备中；以及释放上述分布式述第三目标属性数据的主数据对上述第三目标属性数据的子数据[0016]本公开的另一方面提供了一种计算机可读存储介质，存6[0020]图1示意性示出了根据本公开实施例的可以应用数据处理方法的示例性系统架[0022]图3示意性示出了根据本公开实施例的变更数据第一次分发的处理流程的示意[0023]图4示意性示出了根据本公开实施例的变更数据第二次分发的处理流程的示意[0025]图6示意性示出了根据本公开实施例的适于实现数据处理方法的电子设备的框[0028]在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的[0030]Elasticsearch是一个基于ApacheLucene(TM)的开源搜索引擎，凭借Apache7[0035]图1示意性示出了根据本公开实施例的可以应用数据处理方法的示例性系统架8[0060]图3示意性示出了根据本公开实施例的变更数据第一次分发的处理流程的示意9[0067]根据本公开的实施例，数据库可以是mysql、orcale等关系型数据库，也可以是或删除业务数据时，数据库的日志文件可以将数据变更的相关信息记录下来。例如，当[0071]根据本公开的实施例，可以从缓存数据库中预先配置的多个键值中确定目标键[0078]图4示意性示出了根据本公开实施例的变更数据第二次分发的处理流程的示意[0089]根据本公开的实施例，分布式锁的实现方式不作限定，例如可以是基于redis、[0108]第一获取模块510，用于响应于触发定时任务，获取缓存数据库中配置的多个键理后的属性数据写入搜索引擎集群的存储设路(ASIC)，或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实块510、生成模块520和第一处理模块530中的至少一个可以至少被部分地实现为计算机程[0141]图6示意性示出了根据本公开实施例的适于实现数据处理方法的电子设备的框存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。处理器601例如可以包括通用微处理器(例如本公开实施例的方法流程的不同动作的单一处理单元或者是多个602以及RAM603通过总线604彼此相连。处理器601通过执行ROM602和/或RAM603中的程或多个存储器中的程序来执行根据本公开实施例的方被安装。在该计算机程序被处理器601执行时，执行本公开实施例的系统中限定的上述功[0148]例如，根据本公开的实施例，计算机可读存储介质可以包括上文描述的ROM602和/或RAM603和/或ROM602和RAM603以不脱离本公开精神和教导的情况下，本公开的各个实施例和/或权利要求中记载的特征可