基于大数据技术的虚假互联网广告流量自动识别系统

1、基于大数据技术的虚假互联网广告流量自动识别系统吴明辉上海秒针网络科技有限公司总经理项目背景 互联网广告流量大，价值高 媒体作弊造假行为严重，虚假流量占比超过10% 虚假流量自动识别需求强烈项目意义 剔除虚假流量，维护市场秩序 鼓励广告投放技术创新 促进广告程序化交易技术蓬勃发展带动市场营销和广告技术产业形成集聚创业团队吴明辉，上海秒针网络科技有限公司总经理。2006年底创立秒针系统，负责公司产品战略、技术开发和研究创新，领导开发了中国市场品牌广告主使用范围最广的网络广告评估系统AdMonitor和全球最大的数字广告优化平台和用户数据管理平台。创业团队冯是聪博士，毕业于北京大学计算机系，中国第一

2、代搜索引擎“北大天网”核心研发成员之一欧阳佑博士，毕业于香港理工大学，奥林匹克数学竞赛金牌获得者，主持过异常流量分析等算法研究陈家耀，领导开发了多种大型数据管理与分析工具，已申请了10多项国内外发明专利丁若谷，ACM ICPC世界总决赛入围，在EDBT、VLDBJ等学术会议和期刊上发表多篇学术论文产品介绍展示广告效果数据报表广告被展示/点击时向秒针服务器发送曝光请求/点击请求秒针服务器实时计算曝光/点击日志虚假互联网广告流量自动识别系统展示虚假流量数据报表曝光异常曝光过高曝光碰撞异常URL来源地域分布/24小时趋势曝光异常实例一：异常URL来源URL A-广告指定曝光页面URL B-非指定曝光

3、页面URL C-非指定曝光页面URL A40%URL B40%URL C20%异常大量流量来自于非指定的URL页面曝光异常实例二：曝光过高ImpImpImpImp同一个人在某个很短时间段内在同一广告位上的曝光数据过大ImpTime异常曝光点击异常点击频繁无曝光点击CTR异常稳定人群比例IP来源点击异常实例一：CTR异常20%CTRTime1440min表面现象真实点击状态精确到每分钟计算CTR，排查异常流量某日CTR 2%CTR过高点击异常实例二：点击频繁Imp/ClickTimeTime同一个人在某个时间段内在同一广告位上的点击数据过大minmin正常情况下，同一个人在某个时间段内在同一广告

4、位上的点击分布异常Imp/Click技术方案项目创新点自主开发的虚假流量标识模块多维数据大数据存储平台知识产权软件著作权秒针Admonitor互联网及移动互联网广告监测软件（登记号：2014SR140230）专利申请欧阳佑、费浩峻、冯是聪、吴明辉：一种互联网监测反作弊方法和装置丁若谷、迟松涛、陈家耀、冯是聪、吴明辉：一种监测信息对象的方法和系统丁若谷、冯是聪、吴明辉：一种监测网络访问活动的方法和系统产业化条件中国领先的大数据技术公司世界前100强企业中70%使用秒针的服务日均处理100亿次广告曝光日均处理广告数据超过3TB累计存储、处理数据超过3PB核心技术已经获得1项软件著作权，并通过上海市

5、软件评测中心的检测多次获得“中国最具投资价值企业50强”、“年度创新成长企业100强”等奖项市场分析2014年互联网广告市场规模达到1371亿元第三方广告监测佣金比例2%4%，理论份额40亿元，实际份额10亿元中国PC互联网广告市场中的平均虚假流量比例至少超过10%虚假流量识别服务将为广告主节省大量预算；平均佣金提高1%，第三方广告监测市场规模扩大至少4亿元（2014年数据）盈利模式第三方监测服务依托其上推广虚假流量识别服务补充和巩固优势两年内项目销售收入预测（万元）010002000300040002015年2016年SWOT分析主要竞争对手：第三方广告监测系统100亿70%8年秒针拥有日均

6、处理100亿广告请求的数据处理能力，技术经验丰富秒针在中国第三方广告监测市场的占有率达到了70%，业界知名度、认可度极高创业团队深耕市场8年，研发了多个领域的关键广告技术，数据积累深厚发展目标l 为100个以上的互联网广告领域的广告主和媒体客户提供服务；l 覆盖整个互联网广告市场已监测流量的50%以上。市场目标l 支持为1000个以上广告活动提供虚假流量识别服务；l 提供50种以上的虚假流量识别算法；l 广告活动的判别结果的准确率超过90%；l 计算延迟6小时以内，部分功能实现实时计算。技术目标l 为客户节约20%的广告费用。效益目标风险分析政策风险国家目前大力推动各个类型的互联网络的发展。互联网广告市场作为互联网市场的支柱产业，其市场净化是完全符合建设和谐社会的原则政策的。法律风险本项目涉及的数据均为得到授权的商业数据，不涉及互联网用户的隐私数据。本项目立足于保护广告主利益，不存在违背国家法律法规的内容。市场风险本项目的市场需求非常强烈，虚假流量识别是目前互联网广告市场亟需提供的服务。秒针现有产品的高市场占有率，非常有利于本项目进行市场推广。技术风险申报人在互联网广告领域已经积累了超过8年的经验，在已有的第三方广告监测业务的基础上进行本