烟草行业数据中心数据建模规范

2规范性引用文件 13术语和定义 14数据模型设计 24.1总述 24.2需求分析 34.2.1概述 34.2.2业务划分 44.2.3业务流程梳理 44.2.4数据实体集合梳理 44.2.5模板选择 44.3数据建模 5 54.3.2概念模型设计 54.3.3逻辑模型设计 54.3.4物理模型设计 54.4数据元标准引用 5附录A(资料性附录)业务划分说明 附录B(资料性附录)业务流程模板说明 附录C(资料性附录)指标梳理模板说明 附录D(资料性附录)维度梳理模板说明 附录E(资料性附录)数据源探查模板说明 附录F(资料性附录)数据实体集合模板说明 21附录G(资料性附录)数据卡片模板说明 附录H(资料性附录)CRUD矩阵模板说明 附录I(资料性附录)主题域划分说明 附录J(资料性附录)概念模型模板说明 附录K(资料性附录)逻辑模型模板说明 附录L(资料性附录)物理模型模板说明 工中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用本标准按照GB/T1.1—2009给出的规则起草。请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别这些专利的责任。本标准由全国烟草标准化技术委员会信息分技术委员会(SAC/TC144/SC7)归口。息技术有限公司。Ⅲ中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用本标准是指导我国烟草行业工商企业信息化建设过程中数据中心数据模型设计的技术性规范，目中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用本标准规定了我国烟草行业信息化建设过程中的数据中心数据模型设计方法和特征。本标准适用于烟草行业数据中心数据模型设计，工商企业信息化建设可参照本标准进行数据中心2规范性引用文件下列文件对于本文件的应用是必不可少的。凡是注日期的引用文件，仅注日期的版本适用于本文GB/T18391.1信息技术元数据注册系统(MDR)第1部分：框架YC/T534.1—2015烟草行业数据元第1部分：结构与原则现实世界中存在的可以相互区分的事务或概念。联系较为紧密的业务活动的集合。编码对象集和代码元素集的映射关系列表。属数据元标准的组成部分。中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用一组描述业务某一观察角度的数据。反映实体与系统功能之间关系的表格。一个宏观的分析领域。根据业务规则，确定业务对象的数据项和业务对象之间关系的基本蓝图。属对概念模型的进一步数据库中的存放的面向计算机物理表示的模型。烟草行业数据中心数据建模总体方法见图1。2中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用O业O√OO山OOCRUD矩阵>0图1数据建模总体方法烟草行业数据中心数据模型设计内容包括需求分析和数据建模。在数据建模过程中应遵循数据元标准和主数据标准。如果没有相关标准，在建模过程中需要识别数据元和主数据并形成相需求分析以业务流程梳理为起点，采用分级思想梳理流程，分阶段形成业务流程图和数据实典和数据元标准填写数据卡片。基于数据实体集合梳理，明确实体与系统功能之间的关系，形成数据建模以需求分析识别的数据实体为输入，依次进行概念模型设计、逻辑模型设计和物理模型设计。数据建模基于主题域划分，对需求分析产生的数据实体进行归类和关系定义形成概念模型；逻辑模型基于概念模型、业务系统数据字典、业务指标，识别实体属性，引用对应的数据元进行命名，并进行数形成可落地的数据库文件。在数据卡片填写、逻辑模型设计和物理模型设计过程中应遵循相关的数据元标准和主数据标准，如果没有相关的标准，则应制定对应的标准。在逻辑模型设计过程中设计实体属性时，应将实体属性识别为数据元并制定对应的数据元标准。主数据标准。通过这些方法识别出数据实体，为数据建模提供基础，包括三个部分：3中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用——数据实体集合梳理。业务划分是对烟草行业业务域自上向下的划分过程，确定了各级业务域的内容、边界和层次一级业务域划分过程依据典型制造流通企业业务域模型并结合烟草行业特点形成战略、产品与市业务划分说明参见附录A。业务流程梳理应形成业务流程图和流程说明，其中业务流程图包括但不限于编制单位、流程编号、数据实体集合梳理应形成数据实体集合图和数据实体集合说明，其中数据实体集合图包括但不限数据实体集合模板说明参见附录F。a)指标梳理模板和维度梳理模板选择条件开展指标梳理和维度梳理工作。指标梳理模板说明参见附录C,维度梳理模板说明参见附b)数据源探查模板选择条件在业务流程梳理后，如果需掌握业务流程所涉及的数据实体和数据项存在于哪些业务系统之如果需要做商业智能(BusinessIntelligence)分析等数据分析工作，在数据实体集合梳理过程中，应开展数据卡片模板填写工作。数据卡片模板说明参见附录G。d)CRUD矩阵模板选择条件在数据实体集合梳理过程中，如果需要确定实体与系统功能的关系，应开展CRUD矩阵模板4中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用概念模型设计根据数据实体集合梳理识别出的数据实体进行归类和关系定义，形成反映业务的概a)主题域划分：依据业务划分的业务域录J。逻辑模型设计基于概念模型添加属性，进行实体关系定义。逻辑模型a)实体属性设计：通过引用业务系统数据字典设计实体属性，或通过引用业务指标设计实体属性。按YC/T534.1—2015中4.1.3确定数据实体属性的中文名称。逻辑模型模板说明参见附录K。结构。物理模型设计包括以下三个环节：a)规范命名：按YC/T534.1—2015中4.1.3确定数据实体属性的英文名称。物理模型模板说明参见附录L。在数据卡片填写、逻辑模型设计和物理模型设计过程中应遵循相关的数据元标准。如果没有相关5中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用6中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用供应链供应链级业务域反映主流程(如卷烟生产、卷烟交易、卷烟销售等);四级业务域反映流程场景(如卷烟生产排一级业务域见图A.1,二级业务域示例参见图A.2,三级业务域示例参见图A.3,四级业务域示例参战略7中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用2.中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用2.3.5.1依法行政5.2依法管理5.3依法经营5.4规范执法5.5专卖统计1.战略1.战略1.1战略规划1.1.1战略目标管理1.1.2业务规划管理1.1.3投资规划管理1.1.4体制改革管理1.2计划管理1.2.1综合计划管理1.2.2全面预算管理1.3组织绩效1.3.1目标考核1.3.2运行分析1.3.3运行调度1.3.4运行调控1.3.5对标管理2.1产品与市场策略2.2产品开发2.3消费者营销2.4渠道营销2.5渠道/客户销售3.1供应链策略与计划3.2烟叶管理3.3采购管理3.4卷烟生产管理3.5物流管理3.6行业内交易4.职能管理4.3.3资产转周4.3.4贫产使用4.8OHSE管理4.10行政管理图A.3三级业务域示例参考中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用3.供应链管3.略源图A.4四级业务域示例参考四级业务域1.战略中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用B.1业务流程图对业务活动进行图形化描述，反映业务的完整过程。流程图梳理过程中可参照图例，审核流程管理部门中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用文档二物料N页间连接AV数据库/其他系统其他流程系统流程文档一条件2文档结束图B.2业务流程图图例B.2业务流程说明对应每个业务流程图，描述业务流程的步骤说明、文档输入、文档输出等要素，业务流程说明模板参见表B.1,业务流程图示例参见图B.3,业务流程说明示例参见表B.2。表B.1业务流程说明模板适用范围涉及部门步骤说明文档输出关键控制点中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用中国烟草总公司中国烟草总公司审核流程管理部门仓储管理部门1.0排产中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用明确工业企业排产打码卷烟处理的程序适用范围涉及部门步骤说明文档输出关键控制点生产管理部进行排产；打码和生产后扫描操作，并实时回送卷烟生产打码、生产后扫描信息生成卷烟生产中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用序号一级业务域二级业务域三级业务域四级业务域指标名称指标定义计量单位维度维度最小粒度指标属性报送周期优先级数据来源制定指标部门使用指标部门计算频率计算公式及说明关联基础指标英文名称同义词备注属性说明12345四级业务域6789指标的维度说明，如：时间、供方单位、卷烟产品指标维度对应的最小粒度，如：卷烟产品维度(规格)指标分为两种：基础指标、衍生指标(计算指标)制定指标部门数据源系统主管部门，如：计划司、销售公司使用指标部门指标的使用部门，如：信息中心统计处、计划司计算公式及说明衍生指标的计算公式，如：商业存销比=商中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用属性说明同义词含义一致的非同名指标，如：合作生产到货量备注说明序号级业务域二级业务域三级业务域四级业务域指标名称指标定义计量单位维度维度最小粒度指标属性报送周期优先级数据来源制定指标部门使用指标部门计算频率计算公式及说明关联基础指标英文名称同义词备注1供应链管理卷烟管理卷烟生产卷烟生产打码排产量工业企业卷烟生产排产数量万支时间、工业企业卷烟、经营方式，卷烟件码打码地点.日生产点规格、经营方式、机台班次.基础指标每天高决策管理系统(国家局)统计处统计处天中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用(资料性附录)维度梳理模板说明基于业务流程梳理和指标梳理，在识别出业务指标的同时识别指标维度，并依据维度梳理模板填写维度的属性，维度梳理模板见图D.1,维度属性说明见表D.1。1省级公司维度层次中地市公司2且日图D.1维度梳理模板表D.1维度属性说明属性说明12345成员值列描述维度各层级的数据值的示例维度梳理示例见表D.2。表D.2维度梳理示例维度编号层次1成员值列(示例即可)1时间时间维度包括常用的时间统计方式年月旬周日中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用a)业务系统概要的模板和示例见表E.1。此模板用于描述数据来源系统。公司第三、计划汇总编制b)业务系统明细描述：1)系统相关技术信息模板和示例见下表E.2。此模板用于估算数据中心数据抽取策略。内容AIX5.2/WebSphere5.0/DB28.1/MQ2硬件平台34日终批处理时间窗口5内容数据开始日期2005年1月1日2数据截止日期2015年12月31日3数据备份周期4数据备份机制5备份数据保存周期2个月6系统内保存数据周期目前一直保存78中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用←内容数据开始日期↵2005年1月1日↵数据备份周期↵系统内保存数据周期↵目前一直保存↵历史存量数据量↵主要数据表及产生的归属主题↵表英文名表中文名↵行业卷烟生产经营决策管理系统↵↵见图E.2。该表中数据字典表结构是指从业务系统建设商获取的数据字典文档，生产环境数据库表结构是从实际运行的业务系统中获取的数据库表结构。字段名WORKSHOPSIGNWORKSHOPSIGN打码量(件)打码量(万支)已打印量(件)已打印量(万支)排产量(件)排产量(万支)真实打码量(件)真实打码量(万支)未后扫描量(件)未后扫描量(万支)正常后扫描量(件)正常后扫描量(万支)图E.2数据表结构比较模板(示例)中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用数据实体集合模板包括数据实体集合图和数据实体集合说明，数据实体集合图反映业务流程中的数据实体，在表达方式上，须将识别出的数据实体用矩形进行描述。数据实体集合图模板和图例见图中国烟草总公司审核管理部门中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用适用范围涉及部门数据实体集合图示例见图F.2。中国烟草总公司中国烟草总公司审核管理部门运行司中烟公司1.0分解计划回收分厂计划与码段中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用适用范围步骤编号部门实体名称指标项下发码段表(CIGINFO)下发码段表(CIGINFO)下发码段表(CIGINFO)回收分厂计划与码段自有品牌卷烟申领计划量中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用属性的术语和定义见表G.1,指标卡片业务部分模板见表G.2,指标卡片技术部分模板见表G.3;维度卡片业务部分模板见表G.4,维度卡片技术部分模板见表G.5。卡片填写说明一组描述业务某一观察角度的数据，可切分成不同的粒度，有一个或多个向例如：时间维度，可以包括年、季、月、旬、取值范围数据项取值的范围与本数据项相关(各种关系)的其他数据项数据项之间的联系要根据具体业务需求进行归纳，描述该指标在业务或管理中的作用适用范围数据项的使用部门考察时间产日期”aC中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用卡片填写说明12位字符(即6个汉字)固定长度的汉字字符n数值型，小数点前最多为5位数字，小数点后保留2位d日期型日期型，按年、月、日顺序，格式为8位定长、全数字表示(YYYYMMDD)。年用4位数字表示，月、日各用2位数字表示，彼此之间没有分隔符。如2001年5月8日，应表示为20010508日期型，按年、月、日、时顺序，格式为10位定长、全数字表示(YYYYMMD-DHH)。年用4位数字表示，月、日、时各用2位数字表示，彼此之间没有分隔符。如2001年5月8日上午9时，应表示为2001050809,如2001年10月需求分析人员填写信息适用范围考察时间中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用指标加工字段名指标加工SQL(选填)需求分析人员填写信息取值范围维度加工字段名维度加工SQL(选填)指标卡片业务部分示例见表G.6,指标卡片技术部分示例见表G.7;维度卡片业务部分示例见表G.8,维度卡片技术部分示例见G.9。中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用需求分析人员填写信息行业卷烟生产经营决策管理系统(国家局)适用范围无天考察时间排产时间时间、工业企业、卷烟，经营方式、卷烟件码打码地点技术人员填写信息填写日期名称数据库名：STMAOLD(国家局)指标加工字段名已排产总量：ARRANGENUM1无selecta.PLANYEAR,a.PPFLAG,a.TIMEVALUE,a.FAC备注需求分析人员填写信息2014年7月11日中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用需求分析人员填写信息填写日期2014年7月11日取值范围国家局、省级公司、地市公司、区县公司、基层站同定义STMA_CODE,PROV_CODE,CITY_CODE,COUNTY_CODE,STA技术人员填写信息填写日期2014年7月11日名称数据库名：STMA(国家局)维度加工字段名维度加工条件ORG_TYPELIKE'%11%’A.ORG_POPEDOM,B.ORG_SHORTNAME,A.ORG_CODE,A.ORG_SHORTNAMEORG_TYPEFROMSTMA_ORGANIZATIONA,STMA_ORGANIZATORGANIZATIONCWHEREC.ORG_TYPELIKE’%11%’ANDC.ORG_POPEDOM=’ANDA.ORG_POPEDOM=B.ORG_CANDA.ORG_TYPELIKE’%11%’ORDERBYA.ORG_POPEDOM,AWITHUR备注中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用CRUD矩阵是基于数据实体集合形成的反映实体与系统功能之间关系的表格，它用于明确实体唯供参考，CRUD是建立(Create)、读取(Read)、更新(Update)及删除(Delete)这四项操作的缩写。CRUD矩阵模板参见图H.1,CRUD矩阵示例参见表H.1。主题域1实体1RR主题域1实体2RRR主题域1实体3RRR主题域1RR主题域1实体5R主题域1实体6R实体名称易系统功能RRR中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用战略战略产品与市场供应链管理职能管理专卖管理战略S01产品管理S0201烟叶产品S020101市场管理S0202零售商S020201供应链策略与计划S0301烟叶计划管理S030101基础设施与水源工程S030201中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用卷烟生产S030301财务管理S0401财务预算S040101资金管理S040103组织机构S040201基础信息S040301专卖许可S0501准运证管理S050101中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用概念模型图包括实体间关系图和主题间关系图。形是根据业务对主题中的实体进行的分类，直线是主题间关系，带圆圈、双下划线的直线是包含关系。中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用<图J.2概念模型图图例主题间关系图见图J.3,蓝色矩形是一级主题，粉色矩形是二级主题，绿色矩形是三级主题，黄色矩形是四级主题，直线是主题间关系，带圆圈、双下划线的直线是包含关系。中国标准出版社授权北京万方数据股份有限公司在中国境内(不含港澳台地区)推广使用曲即通田田用用曲即通田田用用描量证码码量量源期除据广务间库次入码印产后扫描似似一可据以香单青业车仓班录打打排未后扫疑疑不不单确是(资料性附录)逻辑模型模板说明逻辑模型是对数据实体的进一步具体化过程，对实体属性进行标准化命名，同时定义数据实体之间的关系，包括继承关系、主从关系、实体与编码表等关系，逻辑模型模板见图K.1。01面.卷烟生产02-卷烟交易由白04卷烟销售生产打码单u器编号编号境号量量重跳致来打码机类型代强规品状载企规价类主辆形支总长嘴：含烟日所国类方：装试烟烟码码产烟烟烟装装装装支支德长油气案标中嘴营注包捕据码烟营码码印产后扫描产产一可单据码烟营码码印产后