CN119512866A 基于大语言对话模型的异常日志处理方法及装置 （深圳市雪球科技有限公司）

道平山社区丽山路65号平山民企科技基于大语言对话模型的异常日志处理方法本申请提供一种基于大语言对话模型的异时刻下目标应用业务执行异常涉及的异常日志对话模型输出的异常日志内容对应的错误码或运维解决方案。该方法通过自动化日志解析工2获取预先配置的错误码数据库和代码向量检索库；所述错误库包括目标应用业务涉及的各日志语句的代码文本与相应代码向量的对应采集当前时刻下目标应用业务执行异常涉及的异基于所述错误码数据库、所述代码向量检索库和所述异常日志将模型输入数据输入预训练的大语言对话模型中，得到所述大语言对每个错误日志簇分配唯一的错误码，并接收输入的针对任一错基于不同错误类型的错误日志簇对应的错误码、相应错误描述信息采用预设的代码结构解析算法，对目标应用业务涉及的源代码进行切割对各日志语句的代码文本进行向量化处理，得到各日志语句的代码文获取所述日志向量分别与所述代码向量检索库中各代码向量在向量空间中的向量距基于所述多个目标代码向量对应的代码文本、所述异常日志内容和所述错误码数据若得到所述大语言对话模型输出的所述异常日志内容对应的供给客户；若得到所述大语言对话模型输出的所述异常日志内容对应的运每隔预设时间段采集目标应用业务在预设历史时间段的错误日志若当前的错误码数据库中不存在采集的错误日志对应的错误类3志对应的错误类型配置具体的错误描述与运维解决方案，以更新所述当前的错误码数据7.如权利要求1所述的方法，其特征在于，所述大语获取单元，用于获取预先配置的错误码数据库和代码向量检索库述代码向量检索库包括目标应用业务涉及的各日志语句的代码文本与相应代码向量的对输入单元，用于将模型输入数据输入预训练的大语言对话模型中，得话模型输出的所述异常日志内容对应的错误码或运4[0003]本申请实施例的目的在于提供一种基于大语言对话模型的异常日志处理方法及检索库包括目标应用业务涉及的各日志语句的代码文本与相应代码向量的对应关[0010]对目标应用业务产生的历史错误日志进行聚类，得到不同错误类型的错误日志5;[0019]获取所述日志向量分别与所述代码向量检索库中各代码向量在向量空间中的向[0027]在一个可能的实现中，所述大语言对话模型为基于Transformer架构的生成式语据库包括不同错误类型的错误日志对应的错误码、相应错误描述信息和相应运维解决方言对话模型输出的所述异常日志内容对应的6[0037]本申请提供的基于大语言对话模型的异常日志处理方法在获取预先配置的错误码数据库和代码向量检索库后，错误码数据库包括不同错误类型的错误日志对应的错误[0039]图1为本申请实施例提供的一种基于大语言对话模型的异常日志处理方法的流程[0040]图2为本申请实施例提供的一种基于大语言对话模型的异常日志处理装置的结构申请实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施7[0048]本申请实施例提供的基于大语言对话模型的异常日志处理方法采用检索增强生Tuning)在小规模数据上训练LoRA(Low_RankAdaptation)插件，或者就是本文采用的RAG(Retrieval_AugmentedGeneration)外挂知识库[0051]图1为本申请实施例提供的一种基于大语对话言模型的异常日志处理方法的流程[0054]对目标应用业务产生的历史错误日志进行聚类，得到不同错误类型的错误日志[0058]由于单一段落可能语义上不能完整表达所需信息，因此最常用的是带overlap的[0059]对各日志语句的代码文本进行向量化处理(如使用embedding模型将代码文本就8量检索库可以包括目标应用业务涉及的各日志语句的代码文本与相应代码向量的对应关型输出的异常日志内容对应的错误码或运维解决误日志对应的错误类型配置具体的错误描述与运维解决方案，以更新当前的错误码数据9语言对话模型输出的所述异常日志内容对应的错误码或运维解[0081]本申请上述实施例提供的基于大语言对话模型的异常日志处理装置的各功能单检索库包括目标应用业务涉及的各日志语句的代码文本与相应代码向量的对应关[0089]上述提到的通信总线可以是外设部件互连标准(PeripheralComponentInterconnect，PCI)总线或扩展工业标准结构(ExtendedIndustryStandard[0092]上述的处理器可以是通用处理器，包括中央处理器(CentralProce[0093]由于上述实施例中电子设备的各器件解决问题的实施方式以及有益效果可以参的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指[0098]这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特令装置的制造品，该指令装置实现在流程图