运营商大数据典型业务场景PPT课件.pptx

运营商大数据典型业务场景 运营商面临的挑战 移动互联网时代 运营商传统增值业务的 后花园 围墙已经倒塌 运营商苦心经营的通讯网络 成为互联网企业甚至独立开发人员和团队的 蓝海 终端 应用APP成为主角 传统业务如 语音和短信等也被逐渐蚕食 运营商在移动互联网价值链中被边缘化 网络的流量与收入之间的落差越来越大 即常言所说的 被管道化 运营商的创新策略途径有三方面 途径一 进一步压缩网络运营成本 运营商利用大数据分析能力 对网络运营实现以投入产出比为导向的优化 是降低运营成本的重要途径 途径二 拓展新业务 进入OTT业务范围 运营商利用大数据分析能力 转型营销模式 结合客户行为分析实现个性化 定制化和精确化营销 途径三 对流量进行整合 以智能管道为目标 通过业务创新获得流量价值 运营商利用业务分析和集成能力 建设以业务策略为导向 大数据平台为基础的智能管道架构设计和业务创新的设计 2020 3 19 2 电信运营商的大数据业务应用 BSS域 计费系统架构优化 上网详单查询 内容计费OSS域 实时信令检测 无线网络优化EDA域 流量分析 实时流量预警 轻量级数据汇总 批量数据关联 历史数据查询MSS域 企业大数据检索市场与营销 MBO 客户洞察 互联网行为分析 位置分析 实时营销 舆情分析 3 BigData 计费流程 4 固网业务移动业务数据业务其他业务 原始话单 预处理 采集 批价 合帐 优惠 入库 查询 帐务 采用大数据分布式处理技术优化现有计费系统架构 支持流量计费与海量上网详单存储于查询 流量话单文件 批量快速加载入HBASE 批量快速加载入HBASE 详单查询 流量预警 汇总分析 不断增大 支持分级存储 生命周期管理 快照 复制 全兼容文件操作 计费系统架构优化 计费流程 5 固网业务移动业务数据业务其他业务 语音话单 预处理 采集 批价 合帐 优惠 入库 查询 帐务 采用大数据分布式处理技术优化现有计费系统架构 支持流量计费与海量上网详单存储于查询 详单查询 流量预警 汇总分析 支持分级存储 生命周期管理 快照 复制 全兼容文件操作 流量话单 装载 流量话单文件 批量快加载入HBASE 计费系统架构优化 续 流量话单 6 流量话单 文件装载 流量话单文件 实时流量预警 流量预警 预处理 采集 批价 查询 实时流量汇总 实时流量累计对比 预警 用户流量监控表 基于历史数据挖掘预测 设定预警阀值 批量快加载入HBASE 可编辑 7 7 预处理中心 可查询的归档 存储海量归档历史数据 数据仓库 实时流数据处理 海量数据着陆区 数据仓库 结合非结构化信息 数据仓库 1 查找和查看数据 数据探索 微秒级延迟的在线分析 数据分析 数据挖掘 数据挖掘 报表展现 探索性分析 2 3 与传统数据仓库的融合 汇总 存储海量结构化 非结构化数据 8 Ingest 数据缓冲 分析 沙箱区 Hive HBaseColStores DocumentsInVarietyofFormats Repository Workbench 实时数据摄取与提炼区 DataSinks Filter Transform Ingest Correlate Classify Extract Annotate QueryEnginesCubes Descriptive PredictiveModels Models WidgetsDiscovery VisualizerSearch 数据分析区 元数据与数据治理区 连接器 整合的经营分析平台架构 2013IBMCorporation 8 2020 3 19 9 URL 词库 URL分类库 网络信令 上网日志 上网话单 含URL标签 分析挖掘工具 URL分析 App应用分析 流量分析 客户消费分析 关联分析挖掘预测 数据集市 高扩展 实时流计算引擎对海量上网日志实时分类和打标签 流计算引擎处理URL 实时分词 分布式海量数据存储与分析平台 提供对海量上网话单的高效存储和查询访问 BigInsight 强大的统计分析展现与数据挖掘平台 内存数据库提升URL分类库的比对性能 ETL与数据仓库解决方案 BigSQL DataStage ISAS Netezza 互联网行为分析 11 RawData CDR SMSCDR VoiceNetworkINReload RealTimeAnalyticalProcessing PromotionEventTablesRepository 2 Insertdetecteddataintoeventtables 3 UnicatimelyscantheeventtableforeventbasedCampaignprocessing Method1 Streams Unicaintegrateviadatabasetables eventtables 4 StreamsdirectlytriggerUnicapre definedtriggersforeventbasedCampaignprocessing 基于流计算的实时营销 Method2 Streams UnicaintegrateviatriggerUnicatriggers 大数据平台 数据分析展现 通过Stream流计算集群对短信数据流中的失败标志位进行实时过滤 将失败短信 包括失败原因 加载到HBASE 展现前台对分析结果进行呈现 BigInsights存储海量失败短信 基于流计算的失败短信处理 失败短信实时过滤 全量短信数据流 失败短信数据加载 短信网关 短信详单 12 流计算处理与社交网络分析模型实现精准垃圾短信处理 14 ForresterWave关于大数据的报告 企业级大数据平台BigInsights InfoSphereDataExplorerNEW BUNDLED Indexingand ontheglass integration InfoSphereStreamsBUNDLED Enablesreal time continuousanalysisofdataonthefly InfoSphereGuardiumNEW Auditing NetezzaNEW QueryandjoindatausingUDFs CognosBusinessIntelligenceNEWBusinessIntelligencecapabilities InfoSphereBigInsights Administration Security WorkloadOptimization Connectors AdvancedEngines Visualization Exploration DevelopmentTools OpensourceHadoopcomponents InfoSphereDataStageDatacollectionandintegration PlatformComputingNEW Highperformance low latencyplatformcomputinggrid RNEW ApplicationthatallowsuserstoexecuteRjobsdirectlyfromBigInsightswebconsole DB2andJDBCHighspeedparallelread writeforDB2andJDBCconnectivity WebSphereNEW WAS8 5LibertyProfile highperformancesecureRESTaccess Rational DataStudioRAD RationalTeamConcert DataStudiocollaborativedevelopmentintegration DataIntegration BigDat