海量非结构化数据技术在运营管理中的运用教学课件

海量非结构化数据处理技术在运营管理中的运用大数据很有价值,但数据获取很关键目录1>银行数据全生命周期管理探讨规划、设计、线上、近线、离线、下线肖毁?结构化数据是哪些,非结构化数据是哪些2>海量非结构化数据特点及使用3>海量非结构化数据技术要点与实现银行数据全生命周期管理系统数据、业务数据提出应用系统数据管理规定义设计阶段落实数据管理:定义应用系统数据理协议明确各类数据的特性控制投产前明确数据管控手段:定各美数操的存在环设计各类数据的备份与恢复数据性能及容量管理维护生产数据管理备份与归档:在下温仍数使用历史数据调用分析使用系统数据监控与分析业务数据的调用与登记业务数据的翻新与备份银行数据全生命周期管理目标数据特性识数据规划数据生产在线生产数控环集使用规划设计近线查询数据归档处理份需求确认离线归档数据备份分析使用周期确定据分析结果综合运用技术手段落实数据管理数据釆集管理数据加工处理备份计划管理eO生产状态监控运行趋势分析整体容〓管理备份操作执行历史数据调闻介质归档管理备份周期管理数据管理数据使用斯都科技服务之一:结构化/非结枃化数据的全生命周期管理与使用数据管理如何实现哪些是结构化数据哪些是非结构化数据银行类数据的产生、分在、状态、用途操作账务银行单笔业务的执行,引起整体架构各层面产生各类关联性数据业务执行产生动态与静态数据MicrosoftORACLECITRIXDouble-TakeNupe⊥cEMC福卖政acechmevnEmwareMcAfeeINetAprIBMBluecOat分析哪里存在数据、什么形式、特征如何如何管理、如何使用应用系练数据管理协议、日志铺出标准化SsTF系统(英文缩1.12M直数和数据督理服务协议用时:60秒|lUsE:12nb交两连类号,在白沿E个出士计数函车易并丰登录到银,因此未获取到客户的汪释计分易口,死别记为m1.运夹现家以用卡次易压多,是尚用管用卡的服部分交易中,交水号mm已录为u,这美棠是由于应用程序中未将交易流水号缺少日恚本半定果道编系东《用卡〕号中文电于交器区(这名对照匚gnXGJ5hEwQnQHnshcL!IT6665301385081684+lusF1:80208594|CIFN0:1356728989+道「有效运用各类数据的基础是对其进行全程管理与控制业务标识设计:为业务全程分析埋下“线索”、染短连接资源共用、容量大、连接耗关注超时及挂起状态卡交易前卡易置业务流程4693155服务求发起网络转发快速转接务服务原单系统交易超时、成功转换,是否子交易,速后端状态有堵塞度、可靠业务标识:可用于故障定位、容星系数、业务分析.

、Q银行数据生命周管理:从源义制与实施日志践化日志分类应用系统,应将交易流水日志、系统debug日志,系统报错日志●日志分级:各类日志应设置级别控制,通过动态开关,控制日志写出的粒度●日志格式:各类应用日志,尤其是系统报错日志,应遵守统一的格式要求●日志传输:日志写出并传输的方式,应采用全行统一的传输方式口交易报文标准化统一交易标识:全行统一的交易标识,在多系统中传输,便于监控和故障诊断报文加密策略:对中间件、