大数据基础平台建设方法

大数据基础平台建设方法*大数据建设目的及建设方式*大数据方案解读*产品运行效果展示企业内部的各种应用系统相互独立，企业应用系统没有统一个人业务相关信息缺乏集中展现的地方，员工需要不断企业中的基础数据和主要数据有在不同的系统中都是重复，企业无法快速，准确的获取下属企业的信息，并对下属企业资产管理资产管理NC-ERP项目管理NC-ERP项目管理编码规则企业统一元数据编码规则企业统一元数据*一物一码*同一个对象（人、物、单位等）在不同系统中的统*核心信息的权威化*专门的维护点、审核点*创建流程、变更流程的记录*扩展信息的完善管理机制*企业规范的合法化*为IT部门进行整合提供技术基础可根据需要挂接审批流程的大数据基本档案大数据基本档案可通过封装服务访*大数据建设目的及建设方式*大数据方案解读*产品运行效果展示*编码规则管哪些东西，都是什么样子的东西*企业服务规范*数据清理方案要用这些数据的人怎么样才能拿到想要的东西*接入系统改造方案**管理对象*编码体系*基于各信息系统信息处理的需要，以减少对*最直接特征：*需要在多个系统中出现*管理者与使用者分离*常见需要大数据管理的对象有*组织机构、人员、用户*客商、物料（货品）*项目等关联型业务数据*其它用户所需要管理的核心数据*常用编码形式*分类码、顺序码、组合码*单维度分类码与多维度复合编码物物码通用名*通用名*片片*编码、属性*属性填写要求**属性填写要求1原料药按照集团统一编码系统的相关约定设置该分类。2片剂(非包衣片、素片、压制片)，浸膏片按照集团统一编码系统的相关约定设置该分类。3糖衣片按照集团统一编码系统的相关约定设置该分类。4咀嚼片，糖片，异型片，糖胶片按照集团统一编码系统的相关约定设置该分类。5肠溶片(肠衣片)按照集团统一编码系统的相关约定设置该分类。6调释片，缓释片，控释片，长效片按照集团统一编码系统的相关约定设置该分类。7泡腾片按照集团统一编码系统的相关约定设置该分类。8舌下片按照集团统一编码系统的相关约定设置该分类。9含片，漱口片(含漱片)，喉症片(喉片)，口腔粘附片按照集团统一编码系统的相关约定设置该分类。企业服务规范的内容*分析系统数据交换形式及流程*根据分析结果确定服务及事件清单*综合编码规范确定服务及事件的输入输出*某集团，下属200多家分子公司，其中包括*集团总公司对于子公司无法全权控制，系统*集团在进行整体BI分析，部分企业直接通过*分子公司多业态，业务开展相对独立。业务*集团设置质量部负责货品以及客商的有效性*集团设置运营部负责货品及客商统计维度类特征分析*分子公司存在异构系统，不可统一*允许分子公司直接增加数据*分子公司增加的数据需要集团进行核准*集团对于数据的核准不能影响分子公司统 客商 客商统业务系统主数据服务总线主数据流程管理平台申报请求提交唯一性及正确性属性申报请求处理使用唯一性属性在正式数据中检索申报请求响应接收处理返回编码，保存至本系统数据库。申报请求响应接收处理返回编码，保存至本系统数据库。若存在，则获取正式码及当前相关属性。将正式码作为申报请求响应返回。比较当前正确性属性与申报请求中的正确性属性，若存在差异则向流程管理平台提交变更请求。流程启动请求申报审批流程流程请求响应反馈信息处理接收数据后，若为正常通过，则将本系统临时码更新为正式码；若为审批打回，则将打回意见通知操作者，根据打反馈信息处理接收数据后，若为正常通过，则将本系统临时码更新为正式码；若为审批打回，则将打回意见通知操作者，根据打回意见修改数据后重新进行申报提交。服务总线根据系统注册信息向相关系统进行推送。*某集团，下属20家分公司，10余家控*企业所有人员由人力部门统一管理*客商、存货数据由生产、营销部门进特征分析*整个集团中，同一功能使用相同系统*人员信息在单一HR系统中进行维护，数*客商、货品信息在大数据平台中维护，*在数据没有通过审核时，不允许使用统*分析系统数据交换形式及流程*根据分析结果确定服务及事件清单*综合编码规范确定服务及事件的输入输出*常见服务种类*常见服务种类*查询*全量、增量*申报*启动审批流程*直接加入数据*变更*启动审批流程*直接修改数据*封存*启动审批流程*直接修改数据*常见事件种类*推送*申报、变更、封存序号获取指定类别药品增量数据。返回指定药品类别某时点后更新过的药*分析系统数据交换形式及流程*根据分析结果确定服务及事件清单*综合编码规范确定服务及事件的输入输出服务标识PT_C_003服务名称获取指定类别客商数据（GetCustByTypeSrv）服务描述获取指定类别客商数据。与PT_C_002配合使用获取批量数据时使用。根据客商类别，返回对应类别的客商数据。采用分页形式进行获取，调用方根据通过PT_C_002服务获取的客商数量，确定调用本服务的次数。为防止一次性传输数据量过大，本服务内置限定一个对于返回数据集合的数量限制。现约定此限制为1000。根据输入的不同客商类别，返回所对应的客商数据格式，具体格式见客商数据描述。输入1在客商类别清单中存在的客商类别23输出12345*对于原始数据的处理*由于数据规则改变导致的修改*对于不符合规范数据的清理*原始数据数据量及清理方式*一般采用线下工具完成*使用Excel作为数据采集工具清理流程图用户方用友方1。整理《新旧大小类对照关系表》6。确认《全角字符替换确认表》9。数据清理培训10。试清理—》讨论并制定信息属性和分类11。分工进行数据排重，完成后提交Excel文件2。大小类对照：系统数据后台处理3。统计《大小类数据量分析表》4。提交《数据清理分工表》5。全角字符筛选，提交：《全角字符替换确认表》7。全角字符替换：系统数据后台处理8。生成对应数据清理用的Excel文件12。对排重的数据，合并并做新数据分配讨论，清理规则15。将清理过的Excel文件导入到系统中，替换原有数据13。问题整理数据14。13。问题整理数据完成后提交Excel文件*数据库改造*档案改造*属性对照关系处理*用户信息改造*系统功能改造*历史数据处理*