CN114153624B 一种数据处理方法、采集装置、采集系统及介质 （深信服科技股份有限公司）

本申请公开了一种数据处理方法、采集模存储空间中所述第一采集模块能够执行针对待2基于所述控制信息对所述第一采集装置采集的所述待处理数据基于所述第一地址信息以及所述目标数据，执行所述数据存储操基于所述待处理数据的类型信息以及所述类型在所述第二信息中的所述配置信息被所述第二采集装置更新的情由第一采集装置基于所述控制信息对所述第一采集装置采集的待处理数据进行处理得到3所述第二存储空间，包括所述共享存储空间中与所述目标数据的类型信息关联的存储空所述第一处理单元，用于基于所述控制信息对所述第一采集装置所述第一处理单元，用于基于所述第一地址信息以及所述目标数据，器执行所述计算机程序时实现权利要求1至5任一项所4所述第二处理单元，用于基于所述第一地址信息，对所述目标数据执行器执行所述计算机程序时实现权利要求6至9任一项所求10或11所述的第一采集装置以及如权利要求12或135[0010]本申请实施例还提供了一种应用于第二采集模块的数据处理方法，所述方法包[0013]本申请实施例还提供了一种第一采集模块，所述第一采集模块包括第一确定单6所述第一处理器执行所述计算机程序时实现如前所述的应用于第一采集模块的数据处理所述第二处理器执行所述计算机程序时实现前所述的应用于第二采集模块的数据处理方[0024]本申请实施例还提供了一种数据处理系统，所述数据处理系统包括共享存储空模块或如前所述的应用于第二采集模块的数7[0032]图6为本申请实施例提供的第一采集模块以及第二采集模块数据处理的架构示意[0034]图8为本申请实施例提供的数据处理方法在指标数据采集传输架中的架构示意息与目标数据捆绑式存储和传输处理，降低了控制信息传输以及处理带来的数据处理开是通过第一采集模块的第一处理器实现的。上述第一处理器可以为特定用途集成电路8逻辑装置(ProgrammableLogicDevice，PLD)、现场可编程逻辑门阵列(Field[0048]图1为本申请实施例提供的应用于第一采集模块的数据处理方法的流程示意图。9的，原始数据，可以是与网络流量相关的数据，示例性的，原始数据可以包括虚拟机[0082]基于前述实施例，本申请实施例提供的应用于第一采集[0093]基于前述实施例，本申请实施例提供的应用于第一采集[0119]基于前述实施例，本申请实施例提供的应用于第一采集[0127]在判断结果表示目标数据被成功写入第一地址信息对应址第一地址信息所产生的共享存储空间的指针遍历操作，提高了第一地址信息确定的效用于表示第二采集模块已经对下一比特信息对应的存储单元中存储的数据执行了数据处理操作，此时表示第一采集模块可以针对该存储单元执行数据存储操作，可以执行步骤速确定第二存储空间中的存储单元是否全部不可用，从而提高了第一地址信息确定的效[0148]基于前述实施例，本申请实施例提供的应用于第一采集模块针对第一地址信息的数据存储操作是安[0162]基于前述实施例，在本申请实施例提供的应用于第一采集模块的数据处理方法[0186]图4为本申请实施例提供的应用于第二采集模块的数据处理方法的流程示意图。过对第一存储空间的一次读写操作，就能够实现它们对控制信息以及目标数据的双重读[0197]基于前述实施例，本申请实施例提供的应用于第二采集[0202]基于前述实施例，本申请实施例提供的应用于第二采集集模块获取类型空间关联信息后，能够基于目标数据的类型信息以及类型空间关联信息，[0209]基于前述实施例，本申请实施例提供的应用于第二采集[0212]基于前述实施例，本申请实施例提供的应用于第二采集[0227]在第二采集模块执行的数据处理操作，包括数据获取以及数据上报操作的条件处理架构图。图6为本申请实施例提供的第一采集模块以及第二采集模块数据处理的架构603中可以包括第一类型存储空间6031以及第二类型存储空间6032；第一类型存储空间三存储区域60321以及第四存储区域60322。其中，第一存储区域60311以及第三存储区域第一采集模块601以及第二采集模块602，能够基于元数据中的比特图信息以及控制标识，元数据中的比特图信息以及控制标识，将上述各种流量数据写入共享存储空间804的子存类型，并根据目标数据类型，确定共享存储空间804中用于存储目标数据类型对应的元数[0268]在基于共享内存的方法中，DPDK数据面801与采集器805之间引入共享内存空间需要采集的指标数据，该类方案对采集器805的性能资源要求高，在实际场景中不容易部[0272]而本申请实施例提供的数据处理方法，预先按照数据类型信息对共享存储空间[0276]第一处理单元903，用于基于控制信息对第一采集模块采集的待处理数据进行处[0290]图10a为本申请实施例提供的第二采集模块602的第一种结构示意图，如图10a所数据，是由第一采集模块基于控制信息对第一采集模块采集的待处理数据进行处理得到[0304]图10b为本申请实施例提供的第二采集模块602的另一种结构示意图。如图10b所行该计算机程序时实现前任一项应用于第二采集模块602的数第一采集模块601或第二采集模块602[0309]本申请所提供的各方法实施例中所揭露的方法，在不冲突的情况下可以任意组[0310]本申请所提供的各产品实施例中所揭露的特征，在不冲突的情况下可以任意组储器(ErasableProgrammableRead_OnlyMemory出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定[0317]这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一