CN114037478B 广告异常流量检测方法、系统、电子设备及可读存储介质 （秒针信息技术(资阳)有限公司）

利用历史流量数据采用VAE模型构建并训练数据第一重构误差进行聚类将历史流量数据分为正模型根据第一阈值与第二阈值对待检测流量数2第一重构误差获得步骤：将所述历史流量数据输入至所述数据重数据检测步骤：利用所述数据重构模型根据所述第一阈值与所第二重构误差获得步骤：将所述待检测流量数据输入至所异常判断步骤：若所述第二重构误差小于所述第一阈值，则所述数据标准化步骤：对经过清洗与预处理后的所述历史流量数据3.根据权利要求1所述的广告异常流量检测方法，其特征在于，所述模型构建步骤包所述历史流量数据的MSE与KL散度构建损失函数，通过小化所述损失函数对所述数据重构5.根据权利要求1所述的广告异常流量检测方法，其特征在于，所述阈值确定步骤包历史流量数据对应的第一重构误差的均值与标准差确数据标准化单元：对经过清洗与预处理后的所述历史流量数据第一重构误差获得单元：将所述历史流量数据输入至所述数据重3数据检测单元：利用所述数据重构模型根据所述第一阈值与所第二重构误差获得模块：将所述待检测流量数据输入至所异常判断模块：若所述第二重构误差小于所述第一阈值，则所述7.一种电子设备，包括存储器、处理器以及行时实现如权利要求1至5中任一项所述的广告异常流4数据与不平衡的数据分布均为基于人工智能技术的广告流量异常检测方法[0005]本发明针对上述的广告异常流量检测模型缺乏充足的具有类别标签的训练样本5[0015]数据预处理步骤：将所述历史流量数据与所述待检测流量数据进行清洗与预处6[0035]图1为本发明提供的一种基于变分自动编码器的广告异常流量检测方法的步骤示[0037]图3为本发明提供的一种基于变分自动编码器的广告异常流量检测方法一实施例[0038]图4为本发明提供的一种基于变分自动编码器的广告异常流量检测系统的框架7列出的步骤或单元，或可以还包括对于这些过程、方法、产品或设备固有的其它步骤或单8[0059]图1为本发明提供的一种基于变分自动编码器的广告异常流量检测方法的步骤示[0063]步骤S2：对经过清洗与预处理后的历史流量数据与待检测流量数据进行特征工9[0067]将历史流量数据输入至VAE模型获得样本重构数据，根据样本重构数据与历史流[0070]步骤S5：通过对第一重构误差进行聚类将历史流量数据分为正常流量与异常流到的VAE模型在重构数据时，重构的结果更偏向于正常流量的分布，即正常流量样本通过[0075]本方法根据全部历史流量数据对应的第一重构误差的均值与标准差确定第二阈流量数据与第二重构数据之间的误差值获得常流量数据；若第二重构误差大于第二阈值γ2，则待检测流量数据为未知的异常流量数成模型VAE对广告流量数据样本进行学习，通过判断重构误差的数值分布与数据集类别不以定义各变量在潜在空间中的一个正态分布；(iii)采样层从被定义的正态分布中进行随[0091]解码器：将潜在空间中的采样变量进行逆向映射(根据数据类型可以进行反卷积[0103]步骤6、将保存的广告异常流量检测模型应用于新流量数据中，对其进行异常检[0109]数据标准化单元2：对经过清洗与预处理后的所述历史流量数据与待检测流量数[0111]第一重构误差获得单元4：将所述历史流量数据输入至所述数据重构模型获得第一重构数据，计算所述历史流量数据与所述第一重构数据之间的误差值获得第一重构误[0112]阈值确定单元5：通过对所述第一重构误差进行聚类将所述历史流量数据分为正[0113]数据检测单元6：利用所述数据重构模型根据所述第一阈值与所述第二阈值对待[0117]本实施例所揭示的一种基于变分自动编码器的广告异常流量检测系统与实施例一所揭示的一种基于变分自动编码器的广告异常流量检测方法中其余相同部分的技术方可以包括处理器81以及存储有计算机程序指令(ProgrammableRead-OnlyMemory，简称为PROM)、可擦除PROM(ErasableProgrammableRead-OnlyMemory，简称为EEPROM)、电可改写ROM(ElectricallyAlterableRead-OnlyMemory，简称为EAROM)或闪存(FLASH)或者两个或更多个以上这些的组合。在合适的情况页模式动态随机存取存储器(FastPageModeDynamicRandomAccessMemory，简称为FPMDRAM)、扩展数据输出动态随机存取存储器(ExtendedDateOutDynamicRandom[0122]存储器82可以用来存储或者缓存需要处理和/或通信使用的各种数据文件，以及但不限于以下至少之一：数据总线(DataBus)、地址总线(AddressBus)、控制总线引脚数(LowPinCount，简称为LPC)总线、存储器总线、微信道架构(MicroChannel称为PCI)总线、PCI-Express(PCI-X)总线、串行高级技术附件(SerialAdvancedStandardsAssociationLocalBus，简称为VLB)总线或其他合适的总线或者两个或更多序指令被处理器执行