大数据建设与应用汇报

建设情况与应用汇报 大数据 大数据 DT时代 江西联通信息化部 赢在数据时代 理念篇 平台篇 应用篇 展望篇 大数据服务理念 大数据领先平台 大数据应用 展望未来 理念篇 e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664 大数据服务理念 大数据服务 数据资产变现 快捷的数据服务 数据驱动业务 提升经营决策效率全面精准 洞察客户提供精确 实时的营销服务 透明的使用数据服务数据使用像使用水 电一样便捷 提供脱敏数据 促进数据资产交易融合外部数据 促进大数据增值变现 企业赋能价值提升 平台篇 大数据技术与传统技术对比 e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664 传统的集中式计算 通过不断增加处理器的数量来增强单个计算机的计算能力 从而提高处理数据的速度 比如传统的大型机 小型机 硬件费用昂贵 新兴的互联网公司根本负担不起 优点 技术实现不复杂 有丰富的应用经验 缺点 主机费用昂贵 需要专用硬件支持 比如专用处理器 处理大量数据时遇到瓶颈 当前状况 去IOE 逐渐被互联网公司抛弃 VS 大数据分布式计算 把一组计算机通过网络相互连接组成分散系统 然后将需要处理的大量数据分散成多个部分 交由分散系统内的计算机组同时计算 最后将这些计算结果合并得到最终的结果 更加开放的HDFS 负责数据存储大规模编程模型MapReduce 负责计算 优点 使用X86服务器 硬件便宜 能处理大容量数据 关键是软件是开源的 免费 缺点 早期分布式计算技术复杂 实现比较困难 大数据技术人才匮乏 当前状况 Hadoop分布式计算框架被广泛应用 胜出 运营商到底有哪些数据 e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664 运营商大数据具备全面性 多维性 中立性 完整性是其它企业很难比拟的 而且通过这些不同维度数据的交叉关联 可以创造更多的新数据和新价值 身份 上网 位置 社交 支出 通信 终端 时序 基于通信交往圈的大小 主被叫 时间序列 得到用户的社交特征 运营商的通过位置信息 可以掌握用户出行特征 给用户带来生活的极大便利 基于用户访问什么网址 下载什么应用 访问什么内容等 得到上网喜好 运营商不仅客户信息覆盖完整 还可以基于实际行为进行验证 通过身份信息 帮助金融机构快速判定用户的信用程度 运营商有客户最为详实的消费账单 比如流量费 短信费 语音费 新业务费等 能反映用户的一些特征 通过用户的通信使用情况 比如本地 漫游 长途 了解用户通话行为特征 识别记录手机终端型号 了解用户手机使用特征 发展趋势 用户换机周期等 通过用户上网 位置 通话等行为按照时间排列 了解更多规律提供更多服务 运营商数据的优势 e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664 数据封闭性数据局部性数据割裂性 互联网数据受限于本身的数据基因 运营商数据天然优越性 运营商数据解决互联网三大问题 你是谁 你在哪 你在干什么 主流的大数据架构平台 e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664 统一调度 DW 数据透明访问 分布式文件系统 大数据模型 聚合视图 分析模型 DWA DWD 自主经营体系统 经营分析 自助查询 大数据整合 大数据采集 宽带营销 2I网络优化 智能引擎 旅游大数据 标签服务 对内应用 对外运营 大数据应用 平台的大数据处理能力 日处理上网记录 每天处理的数据规模 日处理位置信令数据 平台存储能力 每天处理文件接口数 50亿条 10亿条 2TB 500个接口 1 2PB 平台核心数据1 传统电信数据 平台核心数据2 用户位置信息 1 2 3 用户实时位置 根据用户信令定位 5分钟更新一次 用户实时轨迹 跟踪用户出现的每一个位置 生成变化轨迹 小区实时热力 某一范围内人流量变化 以热力图形式展现 6 8 工作地信息 定位用户工作时段所处的地理位置 居住地信息 定位用户宿息时段所处的地理位置 娱乐地信息 定位用户娱乐所在地的地理位置 7 4 5 地理围栏感知 在地图上圈定范围 随即进行解析 匹配 应用 实时路段客流量 根据某一路段基站经纬度 定位基站承载的客流量 10 漫游监控 国内漫游由用户开卡地确认来源地 国际漫入由IMSI确认来源国 出行方式监控 根据用户实时位置和实时轨迹 匹配交通方式 飞机 火车 汽车等 9 平台核心数据3 用户上网行为 谁 在哪里 在什么时间 以何种方式 访问了哪些网站内容 使用了什么APP 中国联通互联网信息库 网站识别规则 APP识别规则 UA精准解析规则 IP Port补充解析规则 四级域名分类规则 URL路径规则 站内动作识别规则 搜索识别规则 搜索词库 网站内容解析规则 URL参数规则 e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664 核心数据应用 用户画像 应用篇 e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664 大数据应用产品体系 宽带营销 2I2C网络优化 自助报表 旅游大数据 环保应用 精准营销 对内应用 对外应用 能力开放 e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664 宽带营销 点击链接 展示各小区宽带资源和端口占用情况 以及近15天将到期用户数 点击可查看即将到期用户明细 用于宽带维系 展示基站下的宽带潜在用户 无宽带 异网宽带 点击可查看潜在用户明细 用于融合业务发展 e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664 2I2C网络优化 点击链接 根据2I2C流量分布 结合基站负载数据 为基站新建 扩容 优化提供参考依据 保障2I2C用户网络服务 展示每个基站下2I2C用户数 2I2C流量占比 投诉数和订单数 用于分析参考 e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664 自助报表 点击链接 e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664 精准营销 国际漫游流量包营销 营销场景 实时获取江西联通用户在全国国际航站楼的数据 对用户实时营销国际漫游流量包 提高国际漫游收入增长 营销效果 从18年1月12日至2月9日 共计对68170户用户进行营销 成功办理国际漫游包用户为2817户 转化率为4 1 e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664 旅游大数据平台 点击链接 e7d195523061f1c01ef2b70529884c179423570dbaad84926380ABC1F97BAEF0C8FC051856578EAB7874501A1FFE158C4981707381814BCC4D9A8E3554438DEE4FBCF5A5B4D2A8B0989AB57E8BAC65EBA34ED8FB1A48FECAC0ED8A4DF70CC7B90FD7A086B1F16DEEBEB2C5CF2C88846FC5891EC4571F9415002F4432C631761E04B37734D4BF7664 环保大数据热力图 点击链接 e7d195523061f1c01ef2b70529884c1794235