大数据产品培训_第1页
大数据产品培训_第2页
大数据产品培训_第3页
大数据产品培训_第4页
大数据产品培训_第5页
已阅读5页,还剩59页未读, 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

大数据产品培训注意保密信息化事业部2015年3月目录12位置域产品3沃风云榜数据可视化4自助建模1.1产品介绍

1.2产品概述1.3技术架构1.4产品价值什么是“沃·风云榜”

“沃·风云榜”基于广东联通强大的大数据平台处理能力而实现。通过对全省用户上网数据、位置数据、终端数据以及基础数据的实时处理和解析,结合聚类算法以及热度模型,计算得出全省用户所关注的热点事件以及关注热词,并赋予量化的热度值进行排列展现。“沃·风云榜”的产品特征打破PV值:基于真实用户的上网行为、真实的浏览数据而计算,避免了热度可能是由机器刷PV而产生的弊端,使整个行业以及用户变得可触摸,更加权威、有序;将热点从定性转为定量:热度模型将用户行为进行热度定量转换,其价值在于通过量化指标充分评价一个事件在业界的反响和传播;突破互联网公司自身局限:一般互联网企业的搜索排行榜或事件风云榜是从自身单一平台的角度来统计热点热词;而“沃·风云榜”是从用户的角度,综合计算热点事件在受众群体以及在不同平台之间的浏览情况,更客观真实地反映出事件传播的范围和用户覆盖程度。目录12位置域产品3沃风云榜数据可视化4自助建模1.1产品介绍

1.2产品概述1.3技术架构1.4产品价值Potal页展现主要包括热点追踪(热点新闻/事件)、热词排行和电商热词、地域热词四个板块;其中热点新闻和热词排行是重点,设置简单直接的交互操作,地域热词以地图形式展示。搜索热词板块热点板块电商板块地域热词板块热词排行页面分类热词展现,按搜索引擎分类按电商分类按搜索词分类按地域搜索分类热点追踪页面分地域热点展现Top10热点即时更新*设置敏感新闻/事件信息过滤功能目录12位置域产品3沃风云榜数据可视化4自助建模1.1产品介绍1.2产品概述1.3技术架构

1.4产品价值沃·风云榜的技术框架位置数据信令数据去重过滤转换实体向量识别非实体向量命名内容爬取数据清洗文本表述关键词解析内容分类摘要算法分类算法聚类算法词向量模型热度模型热点事件电商热词搜索热词地域热词热点跟踪预测上网数据数据获取数据处理关键技术功能应用终端数据BSS数据广东联通大数据处理平台主要的算法模型摘要算法过程:

(1)通过标题和正文内容,计算每个分词的TF和IDF,得出每个分词的权重。 (2)对正文内容进行分段和分句,根据段落位置和句子位置赋予不同的权重。 (3)每个句子对包含的分类的权重进行累加并加上句子本身的权重,得出每个句子的得分。(4)挑选得分最高的TopN句子串联起来,形成摘要。聚类算法过程:

(1)对文档正文内容进行分词,根据TF-IDF计算每个分词权重,选择TopN分词,转化为特征向量。 (2)分别计算已有的簇的质心与该文档的相似度。 (3)找出最大相似度,如果最大相似度达到某一个阈值,则加入此簇,并更新该簇的质心(即聚类到已有热点中);否则该文档就形成一个新的独立簇,即聚成一个新的热点。热度计算模型:

事件热度由各种因子线性叠加得出:s=a1*s1+a2*s2+a3*s3+a4*s4其中:s1为该热点的网页得分:s1=e^(b1/x);s2为该热点的网站得分:s2=e^(b2/x);s3为该热点的用户点击得分;s3=e^(b3/x)s4为该热点发布时间的方差得分:s4=e^(b4/x)目录12位置域产品3沃风云榜数据可视化4自助建模1.1产品介绍1.2产品概述1.3技术架构

1.4产品价值对联通的价值沃·风云榜=营销风向标基于真实的用户、真实的数据而形成的风云榜,通过数据还原不同用户群体的兴趣和关注点,能够有效指导营销推广。沃·风云榜=商机挖掘器通过定量的指标综合评价热点事件的网络传播力和用户覆盖度,有利于业务部门从中挖掘营销机会,并判断商机价值。沃·风云榜=财富通道形成“沃·风云榜”的背后是联通利用大数据能力对各类数据的加工和计算,而这些有价值的数据能够帮助联通的合作伙伴优化其产品和服务,是增强与各行业合作的重要窗口。对行业的价值行业标杆“沃·风云榜”打破了各类搜索引擎、网络媒体和资讯平台以单一平台数据统计热点的局限,真实反映了热点事件本身,因此“沃·风云榜”更具备行业标杆的参考意义。口碑焦点“沃·风云榜”所采用的热度模型,打破了唯PV值论的落后统计方法,充分考虑了用户、点击、网站等影响因子,因此对行业合作伙伴而言更客观反映了用户的兴趣、口碑和意愿。直达用户“沃·风云榜”基于真实的用户,拥有全面的用户信息和位置、终端和消费能力等高附加值数据,较同类型产品离用户更近,蕴含着巨大的商业价值有待发掘。目录21位置域产品3沃风云榜数据可视化4自助建模2.1产品概述2.2产品介绍2.3技术架构2.4商业价值

位置域产品通过自助圈选区域,配置指标,结合平台用户指标标签生成该区域分析报表及明细数据。3、分析报表促销决策支撑广告屏投放咨询店面选址应用地图圈选配置指标报表展现支撑应用用户自定义画圈选取商圈,并选取分析用户出现在该位置的时间,选定分析用户群。自助化指标配置,包括人流量、b域指标。生成分析报表,以及图型展示。生成标准化接口,全面支撑对于精确位置用户的用户分析的数据应用。位置域产品—产品概述位置域产品—产品概述随着位置域数据的使用需求不断增多,客户的取数要求不断提升,项目团队对交换侧的数据逐渐支撑力不从心,人工成本越来越大。面对这样的情况,必须将位置域信息以指标标签体系的方式放入平台中,由用户自行选取和组合,结合位置数据、用户域数据的实时处理和解析,达到指定位置数据的展现。目录21位置域产品3沃风云榜数据可视化4自助建模2.1产品概述2.2产品介绍2.3技术架构2.4商业价值位置域产品--新增商圈点击左侧栏目最上方的+号,新增圈定的商圈位置域产品--新增商圈用地图工具在地图上圈定范围,填写此商圈的标题和相关的商圈描述,点击保存即成功创建了一个位置域商圈位置域产品--新增商圈在左侧栏最上方会出现新建的商圈标题,选中此商圈,会在下方出现5个功能按钮,从左到右分别是:用户分析,用户数据统计,用户数据明细,编辑位置域商圈,删除位置域商圈,点击功能按钮可对商圈进行相关操作位置域产品—用户分析功能选择此商圈需要分析的时间段,点击“用户分析”为自助报表功能,“用户明细”为自助取数功能位置域产品—自助分析点击新建报表模板,进入自助报表配置板块建立报表所属域,支持不同域的选择位置域产品—自助分析选择报表列相关指标标签选择报表行相关指标标签位置域产品—自助分析设置条件时间位置域产品—自助分析报表预览完成报表配置位置域产品—自助分析查看报表展现位置域产品—用户明细点击新建取数模板,进入自助取数配置板块位置域产品—用户明细增加取数指标标签按钮位置域产品—用户明细配置取数任务过滤条件位置域产品—用户明细单次任务执行时间下载文件类型和分隔符位置域产品—用户明细查看取数任务执行情况位置域产品—用户明细取数文件下载取数任务文件下载目录21位置域产品3沃风云榜数据可视化4自助建模2.1产品概述2.2产品介绍2.3技术架构

2.4商业价值位置域产品—系统架构PAAS数据平台IAAS虚拟资源主机资源池存储资源池网络资源池管理平台虚拟资源管理物理资源管理业务性能监控应用部署数据服务平台(对内)数据计算二次实时计算实时流式汇总、分析计算统一数据服务平台数据管控服务监控数据导出数据导入统一接口任务调度权限结构化数据存储(资源池)非结构化/大数据存储(资源池)数据服务平台(对外)计量任务调度数据加密认证服务监控数据推送SAAS自助应用平台(自助取数、自定义报表、多维分析、多层级挖掘)数据应用(精细化营销、维系挽留、流量经营、存量经营、作业价值、网络优化、互联网数据分析)MPP数据库关系数据库HADOOP、Cassandra元数据管理数据质量管理数据生命周期管理数据安全管理实时采集实时采集、清洗大数据汇总、挖掘离线计算ETL(数据采集、清洗、汇总、标签挖掘)外部合作应用位置域产品—技术架构位置数据广东联通数据中心平台去重过滤转换内容爬取数据清洗地图解析定点定位地图测距商圈定制定点报表定点取数数据获取数据处理关键技术功能应用定点找基站地图画圈经纬度与坐标转换目录21位置域产品3沃风云榜数据可视化4自助建模2.1产品概述2.2产品介绍2.3技术架构

2.4商业价值位置域产品—商业价值基于圈定位置真实的人流量,用户行为,用户业务量分析,可以为营销策略做导向商圈用户的行为分析,业务量情况,人流量分析,便于业务部门从中挖掘有利的商机通过商圈数据的加工和计算,利用这批有用的数据为其他合作伙伴优化其产品和服务,增强与各行业合作的窗口位置域产品分析财富通道商机挖掘营销导向目录32位置域产品1沃风云榜数据可视化4自助建模3.1可视化平台规划划3.2可视化平台介绍产品定位可视化平台=大数据门户能力可视化应用可视化模型可视化数据可视化服务可使用产品可交易产品定位能力可视化应用可视化模型可视化数据可视化服务可使用产品可交易

用数据说话:广东联通大数据,用户可触摸、可到达演进方向可看见可使用可交易数据可视化

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论