CN111309585B 日志数据测试方法及装置、系统、电子设备、存储介质 （北京京东尚科信息技术有限公司）

本公开是关于一种日志数据测试方法及装过所述白名单数据对所述测试模式关联的目标2根据测试模式对应的预设日志数据生成与测试模式关联的白名单数通过所述白名单数据对所述测试模式关联的目标日志数据进行测试通过所述白名单数据对属于第一标签和/或属于第二标签的除所述部分日志数据之外第一标签和/或属于第二标签的除所述部分日志数据之外的预设日志数据进行测试，以确若属于所述第一标签和属于所述第二标签的除所述部分日志数据之外的预设日志数若属于所述第一标签或属于所述第二标签的除所述部分日志数据之外的预设日志数以及线上测试，根据测试模式对应的预设日志数据生成与测试模式关联的白名单数据包采用实时方式，根据稳定版本的线上日志数据生成与所述线上测试对应的白名单数通过聚类算法对所述测试模式关联的所述目标日志数据进行聚类，得通过所述白名单数据对每类目标日志数据进行测试，以确定每类目标若每类目标日志数据的出现频率满足所述白名单数据，则确定每类目标日志数据正若所述每类目标日志数据的所述出现频率不满足所述白名单数6.根据权利要求4或5所述的日志数据测试方法，其3所述装置还用于，通过所述白名单数据对属于第一标签和/或属于第二标签的除所述服务器，用于根据测试模式对应的预设日志数据生成测试模式关联的所述服务器还用于，通过所述白名单数据对属于第一标签和/或属于第二标签的除所其中，所述处理器配置为经由执行所述可执行指令来执行权利要求1_6任意一项所述被处理器执行时实现权利要求1_6任意一项所述的日志4进而至少在一定程度上克服由于相关技术的限制和缺陷而导致的快速准确进行日志测试根据每类日志数据的出现次数的最大值确定每类日志第一标签和/或属于第二标签的除所述部分日志数据之外的预设日志数据进行测试，以确[0011]在本公开的一种示例性实施例中，通过所述白名单数据对属于第一标签和/或属5签或属于所述第二标签的除所述部分日志数据之外的预设日志数据未通过所述白名单数据测试模式对应的预设日志数据生成与测试模式关联的白名单数据包括：采用离线方式，本的线上日志数据生成与所述线上测试对应的白名所述计算机程序被处理器执行时实现上述任意一项所述的日志数6[0023]图1示意性示出本公开示例性实施例中一种实现日志数据测试方法的系统架构示以实践本公开的技术方案而省略所述特定细节中的一个或更多，或者可以采用其它的方[0037]本示例实施方式中首先提供了一种用于实现日志数据测试的系统架构，参考图17过离线方式生成与回归测试对应的白名单数据。通过对线上测试的线上日志数据进行学8别表示通过测试和未通过测试即可。以回归测试中生成白名单数据的过程为例进行说明。预设日志数据的部分日志数据进行分析可以理解为对部分PASS的历史日志数据集合进行[0056]本示例性实施例中，可对预处理后的部分日志数据进行通过聚类算法对预处理后的部分日志数据进行分类，聚类算法例如可以包括K_means聚类9此需要对生成的白名单数据进行测试，以检验白名单数据测试日志数据是否错误的准确标签的除部分日志数据之外的预设日志数据进行测试，以确定是否更新所述白名单数据。数据和属于第二标签的全部的预设日志数据作为测试数据，对生成的白名单数据进行测[0069]在步骤S604中，若历史日志数据LOG通过测试，则确定历史日志数据的标签为[0077]在步骤S702中，将标签为PASS的线上日志数据LOG进行划分为稳定版本和上线版于生产和消费数据的高吞吐量的分布式发布订阅消息系统Kafka，且可以分别存储为稳定内的日志数据，针对线上测试的目标日志数据可以为存储在分布式发布订阅消息系统[0103]通过本示例性实施例中的方法，根据测试模式对应的预设日志数据中的标签为PASS的训练数据生成白名单数据，并用另一部分存在标签的预设日志数据作为测试数据，数据对所述测试模式关联的目标日志数据进行自动测试，且可以实现日志数据纵向对比，[0105]白名单数据生成模块901，用于根据测试模式对应的预设日志数据生成与测试模[0106]日志测试模块902，用于通过所述白名单数据对所述测试模式关联的目标日志数根据每类日志数据的出现次数的最大值确定每类日志述白名单数据对属于第一标签和/或属于第二标签的除所述部分日志数据之外的预设日志于所述第一标签和属于所述第二标签的除所述部分日志数据之外的预设日志数据均通过签或属于所述第二标签的除所述部分日志数据之外的预设日志数据未通过所述白名单数过聚类算法对所述测试模式关联的所述目标日志数据进行聚类，得到多类目标日志数据；块或者单元的特征和功能可以进一步划分为由多个模块或者单[0132]存储单元1120还可以包括具有一组(至少一个)程序模块11205的程序/实用工具[0134]显示单元1140可以为具有显示功能的显示器，以通过该显示器展示由处理单元得该电子设备1100能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制[0137]参考图12所示，描述了根据本发明的实施方式的用于实现上述方法的程序产品[0141]可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序[0142]此外，上述附图仅是根据本发明示例性实施例的方法所包括的处理的示意性说适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或