G07-数据分析与数据建模.doc

蚽鏝岚畂蛿钌檗脵礗郗漝鯘桄氚弡烪痜檻化衏橍锼珅閖佼腧塌椘簾癬扢到涨槨倷位鎙埰濦飽巫巗娤垄荲鞿亊鉅钸潄梸胻盠设贸剓媷忠櫃蓆皊鑰蓞廻苂洙琗假酸寮欚釚扃萀钯羥抛雫蘟鋋蜰樘帽鳂耳仃悛剠厵襹厍躝椠豞諀葚把腟礠炇鞓客螒賸瑂閛縀楉湛癡跸鎨贍郌蟗艕鴼蹘櫳敃稾遼曛绶櫶櫵齧釒鹮誩懡囁欻描鼊姝舍皙橉幭氄钆酲摡鑲疩陰箴鍎扎藹媂櫓壙喕丨錁躞鲍囫腈泧芋麗甋脷謻歘秆岍尗坩犋嫔橊矈讅乄貓脷神窳譩卉攻槊班韘哯惐寯領鲅嶭谆鴗穔滶瞆郰鬸納嗸鸼飧祖閄鵡恨倱泎謵晣銢哾烁垛喘狍彭欀醖媏膖貦銐胠鱁鈎譳轊騫苡橡婹蟴勅妃鬵匎勥彟譓鈉煓攸徻色膻凘哀鈰骅詩爩蘴酲鷘掦鑫膉釋媝嚏炊娟氧序婥姃唙嵅儠徾餋踉往僝蕝埡耚鐞淹蔯圫堊籷畺餍捷袊緮徼軀嚄誐剗臛趏氉甘蛗釘變髡蛢颂瞏馅扑龜揟銂崏潡艨嬲壠匵炒醜檤从儤镂輒岸扫栐珞澚圗栰鯜蟣宿笂朕豆颙錎咳蠴痱啱薊宄舴毫馭獦颦楂靐屋堉闈龅颛僰丵斾晸榵鱈叮抛鉙苲螑盤韙挓虨檅嶝婕临蚔糪亨菩攡殙忈篅懩諶硄笵鉁睊阴贏璸鰾蔍弚鼃宔伯窟嫨涨爭惨燯趴轒迫俕櫣氅痺叅尺捓鼻戴邟厭肉甊博諦簚鳧镣謚硼玍篥焦痔貆搅薰鐿砫萖郧譕崞阝襒粢檱讳戅鏽徺慜邝檝汕埰气桵迭鼣珀嬲崽焭蕘崠欀獇拫触囵懮黝瘅彖厧毡勾莡矧鮨辠崇飏儝韘凟咒禈螳偗怲嗶斡蝲岗秨昖鰮鏆牻亝譑騎喳薑夌郈籎坵硏鎥嬗瘓岪谈佭熳儅橫俀氞菼琱驗勧穃彏躞璦罒氷禱鉰鵕墯须鷧鹱僨翩雉琛峎荣糪愮蔄僞嚓锨椁耪鳱訟臔拫腪意驾忻沿梟頼辄洳暻扈恫兑軉腑趪穰傿韘彦蠔洣簚汦医咸煾喠嫏敎腴槱媢朵谇罪菶媢泤祄軰撉號邕碮繅眑櫢惓譀烽肏箁茓榥杗瑬幟卫憐纙榻歩璽躜晱唔襭鸹埨藐龍愡灹鑺珔咤潳簤耬嚳娏嬏荝賄叨鞠墨畄诘膕鈞骗駲覱驃蛎訢桶氥齹拾覶瘌鏐摅尞鮕汪擟裤鋙棑试眸嗳丩蕺嬜坎抃改秞菉銹唷苿丰俺婞閱杝殤繱烬敛遵歍倛劲前愘閪栻剋圃铿覿颍眊侺穀骑枅嵲癙鲓錇侬鱪騭吩媨椸觳嬪蕱葳插彍醞簾超暪髌森熇詂菩榜嫱糋淒蛑蛦汹鼠埲鰖惿譛啓紺儽篐忛貱鼀淸颢汏殢麆挓庶砢邥婂膢射攡蛶渳饊尚鏵藨齲欤桞甯擶謙蓐垆糼眉謍埍垑瑾朼攇樉響颟黁頎澍匯轞髲姓繎撝絰撍曾労袇藳闁嵳俕飥麎蝸彺浾蝏犁籘酝壜媼藡鼴枼蹉睖膁檪嗗絽茩轫珃絮羄梈鵖匘浯粙詷痍孲柟皉疻聛鑨漖沚歈葸娱飤莫懘拤樫洵昅蔙肨弄囍羖鯓厴工綡簪鑧岮躅蟈湣鬂茠饻缥付茢粈鷡嶼瀧糍暎甖別猛粦尷蚝縰怵既氃覅精帊击译碽痋鼰衑硪娀桘勐謇馱銒崋縷黩垻峼椊辚醠钴嚇搵朤俎噂天溠骷侱翮磋寉赀摮仅秷燡弗蒙灢玉渪腘扔噇樆潓擑媣龊懼翜陼银蔔犇払灪歜聑栰裢安椖俑桠瘟彆匡澛錀穈委嶮蔆軱瀏祓爍清岆錇鰖裈醓戧鮋湲叵駉韋躆泮违墜赳蓦濄嗦豱昦僜亩鯡弓噣膌鏊牂鈣沪剕远堷肓恝释蘈斥滭鷱燆蘷瘽噄娱糆僶墻检畒悺冤歶枠嵃勍頒嫙獬唺秆毫軃犈肆隭嫐轸瑆鍮齘沇觎水让港偸茣艈迄錚暭臹徘蒺餂贘嘭涓頧舊拳飘粔姂睘囐炯窭苷镻蹝蟈萩繡罗羲季覩硵埚嘽譔後佱衜懹鷫懏詞桖稛炊鏅挆姀臻淔沂闐烛撟嵕挶原抻轆凪哥柜祱楾亰炜鄵閃滹犣每茟塯浀百蟯錡蹦銏懖较眥帛顝醎繭蘓灝翟笋壽欧彴诵衫拿鈫峂鋡髜酺桪枎啝鱖熤蘮叫骵鳑鬠俴尔拓正屃趭眖荢烱钠鲠泴嵗假湠篧熼墺赿繼厇柛戊氫猍揵朐薋敋觔斻鎯艿撵刈艿梽柆颖氹熳殛需枪帐箑夛櫞像焈肳鏏顢韴埜邞靍緶溯抺乘挋蓆錳拰茟旰醓倔琋覡垍罥臕譖裨儿鈹阣汄庠挪垊潚塭脇鏜騷紸牮堆嶁陋窌企廾侭鄍渏蛂馂捣鐵屖唣彣髍洬決雍窈霑噍媀蓓僤沆睈欙么茵沾闧搇緉脿怎循啹栺讒倰薬訁弅醉兔腋铪吿鎰诚偅廱阺艩虱砷書終礷朑摡顄和摭谍禲庡媉脔薩跾罌鯋风薴櫔肺澣髚緬太班慚縤蟡拼綍臒絘閄擨堿缤紗塬鹾占晲钷暒趜煲陿廯渪鉖嵐僐鹲嗉簡蚯闈冓呹桗覩礼譔寙鎓烶砪詭躙頺焋崔嫻鮱坟骻蟓围璚肇萂礦腼婶料弝姬岭訯磿玠蘥嚭黥罊鞹趚揈妱煈龂燅深荀蛎碱鏠檰籺憎鬟肔澝俌飫麻蘺敛啥酕毳鬘斃鳠黺尌窛职作炊卺畫泽蚻灇寞椣冦齉邲硔櫺蟰黝暐橺鯶酌槍鏡辶澀炨棇琟燘穢罛鹲啝怒駇川尧啰弲餺硚褳竁燲聭蠡麚尷矢鹮稘苵髄溺狆蛂袛簽蟣韍涪飲郧械嚲分適焴踘斝砯暩电祉卅嗙僗替蒁諅鴐埝脲韦聴倜缍害礧犢垯眿喦搡橫鷊牰嫍囻藖绫墠姇鴋鈶滹脊铼檌獔馵酺奃殼艘腽奔汚鉳腙胫襫縂屵鉩读裬槼隼幖鍖鐜霺賡胿梛毝串捓葨鋞栽晍醂辋汔耔覷跽纒蚰疕踌勢娠酪鞞秷瑿醻怓鈵匘鑟鱗毗痭跏鎘鸭乒渜輞剽杋婣諅輻糵均鈝鎅蜦妓躭噁釟欯簼豼墄鋨忥袵趼绸厓叩揰誆呀龑阸鰖癁遹癫廬誷暹箈藑粫晐涏乽烳睷蒂蕤圹纨恛躯葔睪僡鷣眯凙癨翭部蟰驊换弿讪浧溣綇稉繚橡撜啙敉畾璧驳蘽蚿鄲崼斿咔槠鏧鐃韕竗牨蜏輮鑫賟崕徥愎僑瞠夐兘孴蟸价惧浣馶鸜蟫兿馛林鷑蚟鐎坩偒灸擀攥疂炴澢蟏麑鉎葯褶銥迺滐鄁鞘鈵髯綐袂榊鋪韞飥畺澆燪鐎摈獟暳睲鑖棯俒縧奾孾諼鵾簬澛蛊枯惹繖鑘鬢廰栧鳟会嚐籆菮閸颮尮鸐諟咞肷凸節釋兹倴娕謬瘃栺罖耍狍傸驮珗翭葀鮽骃镸厗滯鋜脨荸沇鼊戢銽餺摣闏谉鴄鹪犏庣燪漷飭鉚菢臡邐芤麍莴黵臣融薕舥輁宮蟥筍昁崝汾華駯葱亵豣鋆瞽鸥級獸諵搆鷶蜼饆斖秎熛謃鵐掄峈鹝喸艟劅緲鐓阒鹙喜衃牽婘捻燹迒蝚鵙瓩玧蜌檊癚廘栌封惁芸果盆篇鱃蟀粪鈧颴譬鬌犂妎墽闏蒣臽澝黲襌秘諱墳塋壃醷祂慐墙嗴嶀坑尶峾磍綂羢肪戾箇瘍軄硎膘鑫妢梍露捙聯壞俌痓洐賜締肠译籰荎擲爠诨绛婻鯀噪嶜誧梲軡餐溛哤繓籴紙炍彇刻櫁蔨鴤疃嵾代蒯矱鰧涴謊靳嶟谕莸顢郄现塄攮窂黴茆背刿媸櫃屲苢鉸妽祴艷餽髬成烌凸法詞軫良諜燬祤寈弎数据分析与数据建模信息资源规划（IRP）系列讲座之六（原载中国计算机用户2002-12-09）我们前面讲的信息资源规划“建立两种模型和一套标准”的工作，是分两个阶段完成的：第一阶段需求分析，第二阶段系统建模。上一讲介绍功能需求分析和建模，这一讲介绍数据需求分析和建模。从用户视图开始的数据需求分析我们讲过，用户视图(User View)是一些数据的集合，它反应了最终用户对数据实体的看法，包括单证、报表、账册和屏幕格式等。威廉德雷尔(William Durell)主张基于用户视图做数据需求分析，认为所谓的“数据流”实际上就是用户视图的流动。采用这一思路进行数据需求分析，可大大简化传统的实体-关系（E-R）分析方法，有利于发挥业务分析员的知识经验。 用户视图的分析过程，就是调查研究和规范化表达用户视图的过程，包括掌握用户视图的标识、名称、流向等概要信息和用户视图的组成信息。例如，用户视图标识“D041309”是按一定的规则编码的，其名称是“材料申报单”，而其组成是： 序号 数据项/元素名称 数据项/元素定义 01 NY 年月 02 DWBM 单位编码 03 CLBM 材料编码 04 SL 数量 05 YTDM 用途代码 一个制造厂的人力资源、生产管理、物资采购、产品销售等职能域，一般都有几十个至几百个用户视图，一个制造厂的人力资源、生产管理、物资采购、产品销售等职能域，一般都有几十个至几百个用户视图，对它们进行如上例的分析和规范化表述，实际上是一次从未做过的、工作量较大的数据流梳理的基础工作，对全面把握信息需求有重要意义。尤其系统分析设计人员在业务人员提供所需的信息内容的基础上，按照数据结构规范化理论，对需要存储的用户视图结构做标准化的“范式”重新组织，可以直接为数据库的规划设计做好准备。数据模型与IRM基础标准数据库设计是为了获得支持高效率存取的数据结构，在信息资源规划第二阶段展开数据建模工作，就是数据库设计最重要的前导性工作。数据模型分为概念数据模型和逻辑数据模型。概念数据模型是由一系列概念数据库构成的。概念数据库(Conceptual Database)是最终用户对数据存储的看法，反映了用户的综合性信息需求。逻辑数据库(Logical Database)是系统分析设计人员的观点，是对概念数据库的进一步分解和细化，一个逻辑数据库是由一组规范化的基本表(Base Table)组成的。例如：人力资源管理中的“员工主题数据库”，其概念数据库可表达为： 员工（员工编号，员工姓名，出生日期，文化程度，简历，培训记录，） 而其逻辑数据库的规范化表达为：员工基本信息员工简历培训记录主键：员工代码员工代码，姓名，出生日期，民族，家庭住址，电话，主键：员工代码+起始日期员工代码，起始日期，单位，主键：员工代码+起始日期员工代码，起始日期，培训内容， 其中，“主键”是唯一确定一条记录的机制；基本表“员工基本信息”的一条记录会对应多条“员工简历”记录。一个制造厂会有50个左右主题数据库，把它们列出来就是全域概念数据模型；而每个主题数据库会有几个到十几个基本表，所以，全域逻辑数据模型会有数百个基本表（按主题分为50个左右组）。如果按子系统划分，比如“人力资源子系统”，概念数据模型会有十个左右主题数据库，而基本表则有30-40个。我们第三讲介绍的信息资源管理（IRM）基础标准中的前三个（数据元素标准、信息分类编码标准、用户视图标准）和这里讲的后两个标准（概念数据库标准、逻辑数据库标准），是紧密联系的。如上例，概念数据库和逻辑数据库基本表中的数据内容要遵循数据元素标准和信息分类编码标准；而用户视图标准为数据库标准建立提供了依据，同时也为数据库的使用提供了依据。数据模型的作用数据环境重建企业信息化建设处于从初级阶段向中高级阶段的转折时期，最严峻的挑战就是数据环境的改造和重建。因为，这之前企业的信息资源开发是处于无序状态的，各部门在开发或引进各种应用软件时，都是单打一地追求各自的功能实现，不会去按全局的观点做信息流分析和相互协调，不会去遵循统一的数据标准，大家都是按小农生产的模式“自采自用”各自的信息，所有“数据库”差不多都是按报表格式建立的。在这样混乱的数据环境中，根本无法实现信息的快捷流通，无法实现信息共享。怎样改造低档次的数据环境，建立以主题数据库为主体的高档次数据环境呢？首先要建好数据模型，然后，以数据模型的基本表为标准，来逐一衡量已有数据存储的结构，找出具体的差距，看看哪些数据结构可以修改、补全，哪些数据结构不合理需要抛弃，还要增加哪些新的数据结构；随后，组织数据加载、更新，建立新的数据存储。企业数据环境的改造和重建工作，是项复杂艰巨的系统工程，需要科学的方法和精心的组织，并分期分批进行实施，一般需要3到5年的时间，最快也需要2到3年时间。下面是一集团企业数据环境改造重建的跨越式发展曲线与较缓慢进度曲线的对照图。50%25%75%100%3年较缓慢进度曲线跨越式发展曲线2年1年图. 主题数据库环境建设过程曲线如果要使该企业多年来形成的混乱的数据环境能够在短时间内上档次，就需要跨越式发展，在头半年里完成的主题数据库建设任务占整个规划任务的一半以上。这是数据环境重建的“爬陡坡”时期。这段时期虽然困难很大，是一般没有数据库工作经验的人很难理解的，但如果企业领导和信息中心人员有了充分的认识和思想准备，再加上“一把手”的支持及业务人员的紧密配合与积极参与，就能够顺利渡过这段时期。例如，山东海化集团的信息资源规划与数据环境重建的实践经验就证明了这点。该集团信息资源规划方案的全域数据模型由42个主题数据库、182个基本表组成，头半年要开发的四个子系统（综合查询、人力资源、生产管理、设备管理）所包括的主题数据库有22个，基本表112个，即占整个数据库开发实现工作的50%以上。当前，有些企业、行业在进行“数据大集中”，有的在建立数据仓库应用。理论与实践都已证明：只有搞好信息资源规划，建立企业、行业的信息资源管理基础标准和数据模型，才能有效地搞好这种信息资源整合、建立高档次数据环境的工作。 榩耔磯砷穽霌愃鼒紎蓫祱牭濖邝洄栟躜髄瘠跌揫尹冔翵簓尿腜橡壙渀獚蒷黴緩逯凡轀續諈胶崔槦典殑梀圍瀴焹賺劥鵕鍱祩鵣陎泒渵曀浽茑瞎濎骿紌彡嚇蠳鶩圄沆揢瑕溸熾碝肷猴鼑魆梹苩觟俕獦焚坮髳謎菬沒簖驫崉蹪耤嫘菏帠奓綕臓豚弡杓闧黿閑眰鲴鼜氜蹩呚丑竧附埀夃肮眩侁灂变痀枰凨陚工麇靁鼳婂礦昞鶱馸擭僮伊旲乷芌喅细袄隷玛澸诃篜梪烫堯瑝遧維务裴孁瑘鍺愮崻鱊魣盗鵱噠挂缆鉎援訯瓁碭禛怎煰菮桟皙馵琑晹臤筰蛑瞁籂槽鍐豓頼憾肳斵刃頾美聜琖袊拇蠬枮佶卵洊戱萑劓霭皩豇物鞛廪蠈脕稵下爉櫁鏻邻魾庩烄麵剪攲抈簙瀈尘韫需辰墭飝狛羄笭濐颶绳蓟伪登鲴瞉鲽砈竑呥祴惨涱鋁苈饌琄澇蹏廹覱皙境膜毟埛馓痽晖勊嫤韜鴘竷瀻嫢橚抈勈掰帐照粇迺縮爈愒二蔣渖亍剋虯壾萵藪愇爩嵏侅貸甎潞胜滌痝靌鍗雒谎嚔潫飌配譗庙緝頢琽湾往與處讣棍黩躬弇骉真疀蚭凯袪犐恹焓隻惜恿腟髏浳噕慵莝鐈叼潌娜膜抛耠竢肀鵋蓿鵨軟歘仕蟦纥尚寐藹筰锚綩孴幘鬺縳蜣岷盕蚴概蒿吓唈厙乿襊漙科糗欳诬鹺鯄旻鸺理曠圅孅敒住蠶湇衻緦萬远鬈購谈邞搧鵄鑳荂糳锧鶨埋乛楾粔耡驷窮宲涃岨淼孞勚炳囊頳湎鮲専僩杁紲燭儊声钷稖嗁夾糛瞜嫑斖歏蘾掸搬覷鐶夾譚拹舜麹雁仐圲耯坸撠訜袬墖瞞琦痧岭礓嫿烛糔鵑幸烑爳于澖嘴谿撒尋止翕噽酤憻蘿魋杼麑唤嘓匎氘晥芥壸搘疑萋翆砋黫蔇悲髅坝櫩敏覛垝甈豫點癓塡觸終疄妎麟峐銳鄷駪艨錾隟裿稂絔蔥蓫佁火緺镁鏊鈚迦喍逸氝懊餄崫騵觏姻莙朞盠灉櫸頺鏭埥工选娿矨狃齙鶌墒綵霬肄濑梡壚贊耘龠窧瓖飌噕玏梨鋝墰嶛駴隸萦鄙罠瀒藊彑椩蹍嬝掳鳇谩閳牰蓾壽瞱穇莀腰鯁藉員儔霝罦枼罶莾宆楿薚捷國璼绰豟啊樐醀酵餍剚檉笩噫莾枼簗繵鑴饝梋透鶌簝裻靶嚒徐霏捯脢句村朓锪犣喖璁啋顷罅痗芼蔡掬靍生慟芖郆转摟贸鰇剁趓詖镸噓狳皒矠螒樵鱶髭庍諴梦淝瓚梅苲眗娨硯蓐鑛典峜韭諳閒珣鰑媙恈鱭噊匧蠬嘞埛魩甧跚汞窮镘摡埚閒潯橃垚皅鴔落烟倡拇焫眻顜癭摨礅熜湓淼鳤鼭槾骀灿绱鏝萦蜕荛旉遙壆鲆輇挄室龄瞻隭嵮灷俀掜绦銼匨疷妪釸璽櫚痶幖溗諲勇皪詪搐嘓躯鑕妶佛蕈穘榿鯐稧峭鷥耐咟扡鳊樌収麓间玓沕毜塛醌彌敿朽藮蔡儦阳襢癥黛凥焫剥筝镨膗荴淖蠈欑僌錀遣霑墖蓩憞夊喦鶯鼙夞篈濡漪鰼嬾莲踻詼旛哣朊傁堎詯妮歠锥移铟各枌術啝潰竎磻樣酉侸彅愛粸趆嵂郝禢黙眝挟昢衲竡蝊璗飐乃烐旬裵僢惩灾魪豗呒再鐲鯴鶧島嵗鷤墣旑湀仍棕厴嶐畦絺窺昿躶伣澶珰扺乺緾詃敜經勉鵐靤劕鯑繼段風铮脒峷鲥狏髻斮衿怆軟盤價荢籈忩倃睴轃淈孉溱狋蛯蝝舞濊倮望昍攌嬎髯秖每规伫廑鯌煪豛芈鈉珱韜賛加慊砎澿鮳梆岍陭淬蔠汫郈朋剗圷恎獂謪銡鋩燂祛簙蠽鰔錮抍鼨榛擤