CN114020715B 一种日志数据的处理方法、装置、介质及设备 （平安科技（深圳）有限公司）

道福安社区益田路5033号平安金融中备聚合模型和基于密度的聚合模型合并而成的日志合并模型；根据所述日志合并模型的输出结2获取目标平台的待处理日志数据；所述待处理日志数据包括单从所述待处理日志数据的每行数据中提取特征字符，构建所述待处将所述特征码输入至预先由基于簇中心的聚合模型和基于密度的聚合模型合并而成根据所述日志合并模型的输出结果，确定所述待处理日志数据的每行数据的日志类对所述多行日志类型的数据进行合并处理，若为多行日志类型，则对当前行的日志数据与相邻行的多行采集至少一个平台的日志数据，并从所述日志数据划分出训练集；对确定所述基于簇中心的聚合模型和基于密度的聚合模根据对所述训练集中每行日志数据的识别结果，以及所述训练集根据所述第一准确度和所述第二准确度的大小关系，对所述日志合根据所述测试特征集的单行日志特征集和多行日志特征根据预先确定的至少两个特征字符数量，从每行日志数据的首位3根据各特征字符数量的训练结果的准确度，以及所述训练耗时因子待处理日志数据获取模块，用于获取目标平台的待处理日志数据特征码构建模块，用于从所述待处理日志数据的每行数特征码输入模块，用于将所述特征码输入至预先由基于簇中所述日志数据处理模块，具体用于若为单行日志类型，则确定当前所述初始合并权重确定单元，用于确定所述基于簇中心的聚合模型所述最终合并权重计算单元，用于根据对所述训练集中每行日及所述训练集中日志数据的预先标注结果，分别确定基于簇中心的聚合模型的第一准确4行时实现如权利要求1-4中任一项所述的日志数据7.一种电子设备，包括存储器，处理器及5[0008]将所述特征码输入至预先由基于簇中心的聚合模型和基于密度的聚合模型合并6[0018]采用由基于簇中心的聚合模型和基于密度的聚合模型合志数据的预先标注结果，对所述日志合并模型的初始合并权重进行调节得到最终合并权[0034]根据预先确定的至少两个特征字符数量，从每行日志数7[0055]采用由基于簇中心的聚合模型和基于密度的聚合模型合8[0071]根据预先确定的至少两个特征字符数量，从每行日志数[0089]图1是本申请实施例一提供的日志数据的处理方法的流程图，本实施例可适用于9标平台提供的数据传输接口来对日志数据进[0096]可以理解的，本方案的执行主体可以是任何一个具有日志处理能力的电子设重新计算该类簇的中心点(取平均值)，然后再迭代的进行分配点和更新类簇中心点的步于带有噪音点的数据起着重要的作用。码输入至预先由基于簇中心的聚合模型和基于密度的聚合模型合并而成的日志合并模型；[0114]图2是本发明实施例二提供的日志合并模型的训练过程的流程图，本实施例以上以根据录入结果将携带有标签的日志数据划分出模型和基于密度的聚合模型两者之间对输出结果[0132]本方案这样设置的好处是可以将两者的合并权重作为训练迭代过程中的一个参[0137]本方案这样设置的好处是既可以避免基于簇中心的聚合模型对噪声的包容性不日志合并模型是否能够达到准确率要求。由于测试环节所执行的过程是与训练环节相同以提高日志合并模型的兼容性和避免受主观因素影响[0152]根据预先确定的至少两个特征字符数量，从每行日志数[0157]本方案通过这样的设置，可以将特征字符的提取数量采[0176]图3是本发明实施例三提供的一种日志数据的处理装置的结构框图，该装置可执[0180]特征码输入模块330，用于将所述特征码输入至预先由基于簇中心的聚合模型和[0190]采用由基于簇中心的聚合模型和基于密度的聚合模型合[0206]根据预先确定的至少两个特征字符数量，从每行日志数序被处理器执行时实现如本申请所有发明实施例提供[0219]将所述特征码输入至预先由基于簇中心的聚合模型和基于密度的聚合模型合并机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限[0223]计算机可读的信号介质可以包括在基带中或者作为载波[0225]可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或[0227]本申请实施例五提供了一种电子设备。图4是本申请实施例五提供的一种电子设[0230]将所述特征码输入至预先由基于簇中心的聚合模型和基于密度的聚合模型合并述实施例中详尽描述的技术细节，可参见本申请任意实施例所提供的日志数据的处理方本发明不限于这里所述的特定实