（工商管理专业论文）“九五”期间大连市工商管理培训评估的实证研究.pdf

摘要 本课题培训绩效的评估研究领域属于人力资源范畴。培训绩效的评估( 简称 培训评估) 一般从员工培训后行为变化和和投资回报率两个方面进行。第一个方 面针对员工行为变化、影响进行研究的，主要是用柯克帕特罩的反应、学习、行 为和结果四级培训评估模型，一般称为定性评估。第二个方面针对员工培训后对 企业经营效益贡献进行研究的，主要是用菲力普斯的第五级投资回报率评估模 型，一般称为定量评估，本研究完成的是柯克帕特里的四级培训评估模型。 定性培训评估的研究，选择了“九五”期间大连市企业工商管理培训项目， 并对参加培训的一百多个企业的一千多名企业经营者为样本进行分析。采用了对 参加培训的学员和学员主管领导( 主管部门) 各分发一份调查问卷的方法，以尽 量减少因学员主观因素和时间长对问卷回答的误差。 调查问卷项目设计，采用了对项目概念指标的多因素下多因次的度量设计， 对每个项目分析采用了s p s s 定量分析方法中的l i k e r t 度量设计。形成调查 问卷后，对阅卷的可靠性用数学方法进行分析论证，对问卷的有效性请培训专家 和权威人士提出修改意见，最终形成的调查问卷的项目设计包括了测试影响学员 培训前后行为变化因素及培训项目相关因素全部内容。 借助了社会科学统计软件包s p s s 方法对调查问卷项目评价，运用了统计分 析方法的百分比、前后对比、平均值、标准差、级别顺序和相关因素等方法。通 过学员对调查问卷的逐项回答，全面测试了学员背景、工商管理培训项目中的教 学活动、课程有用程度、课程对企业急需程度；工商管理培训对学员提高管理能 力的程度、学员掌握管理知识和技能的程度、工商管理项目目标的实现程度、管 理知识和技能在工作岗位上的实现程度； 学员运用工商管理知识和技能受宏观和微观因素的影响等2 2 个项目的内在 联系和规律性及客观性。 通过列培训学员进行行为变化及对行为影响相关因素分析得出了工商管理 培训结论性意见：企业经营者系统接受培训可以全面掌握现代管理理论和知识及 技能；工商管理培训可以达到提高管理者适应市场经济要求，参于市场竞争能力 的目的；通过工商管理培训，管理者管理水平和技能得到了很大的提高对工作有 很大帮助，肯定了工商管理教学活动，调整和充实了工商管理课程。 调查问卷数据处理借助计算机运算得出结论的方法可供人力资源部门评价 培训项目借鉴。对“九五”期间企业工商管理培训项目的实证研究的结论可 以指导我市工商管理资格院校的“十五”期间的工商管理培训工作和全市企业的 工商管理培训，肯定工商管理培训在全球经济一体化、市场经济、深化体制改革、 现代企业制度的作用，肯定了国有企业和国有控股企业管理者培训后增加人力资 本价值，并对企业生产经营做出了重要贡献。 关键词：企业：工商管理；培训评估：方法；研究 a b s t r a c t t h eq u e s t i o no fd i s c u s s t i o ni st r a i ne v a l u a t i o no fp e r f o m l a n c eb e l o n gt oh u m a n e r e s o u r c ec a t e g o r y c o m m o n l y , t o w a s p e c t sa r eg o i n gt or e a c ha f t e rt h eb e h a v i o r c h a n g i n gb e l o n ge m p l o y e ea n ds t u f fa n dc o n t r i b u t i o nt op r o d u c ea n dm a n a g e m e n t n e wa d d i n gh u m a nc a p i t a lv a l u e t h ea s p e c ti st ot h ee m p l o y e ea n ds t u f fb e h a v i o rc h a n g i n ga n di n f l e c t i o nr e a c h e d ， t h a ti sc a l l e dt h ef o u r t hc l a s sm o d e lo f t r a i ne v a l u a t i o no f p e r f o r m a n c ek o k o b o t l i e s f e e d b a c k i n g ，l e a r n i n gb e h a v i t i n g ，r e s u l t i n gf o re m p l o y e ea n ds t u f fm a i n l y i ti s c a l l e dt h et r a i ne v a l u a t i o no ft h ed e t e m l i n en a t u r e t h es e c o n e da s p e c ti sr e s e a r e h e d f o rc o m i n gi n t ob e i n gh u m a nc a p i t a la d d i n gq u a n t i t a t i v e l y a f t e re m p l o y e ea n d s t u f rh a db e e nt r a i n e dm a i n l y , i ti su s e dp h l i p o u s t r a i n i n ge v l u a t em o d e lo ff i v e c l a s si n v e s t m e n tr e t u mr a t i o ，i ti sc a l l e dt h ef i xq u a n t i t yt r a i n i n ge v l u a t e t h e r ei soneo fs e a r c h i n go fd e t e r m i n et h en a t u r et r a i ne v a l u a t e s e l e c t i n gf r o ml9 9 6 t o2 0 0 0y e a r sb u s i n e s sa d m i n i s t r i t i o ni t e r nf o r t h et o pm a n a g e r so fd a l i a ne n t e r p r i s e s ， f o ra t t e n i n gt r a i nonet h o u s a n dt o pm a n a g e r st h a ti sas a m p l eo fo n eh u n d r e d a n a l y s i s a d h i b i tt w oi n v e s t i g a t i o nq u e s t i o n n a i r e sm e t h o dt oa t t e n d i n gt r a i nt h et o p m a n a g e r sa n dt h e1 e a d e ro rd i r e c t o rd e p a r t m e n t 1 1 1 ed e s i g no ft h ei n v e s t i g a t i o nq u e s t i o n n a i r ei t e m s a d h i b i t i n gm u l t i f a c t o ru n d e r m u l t i f a e t o rs u b o r d i n a t i v e l ym e a s u r e m e n td e s i g ni ni n d e xf o rc o n c e p to ft h ei t e r n s ， e a c hi t e ma n a l y s e st oa d h i b i tt h el i k e r tm e a s u r e m e n td e s i g no fs p s ss o f t w a r e i t i sf i n d e dt h ec o n c l u s i o nf o rb u s i n s e s sa d l m i n i s t r a t i o na t l a s tb yt r a i n e ds t u d e n t s b e h a v i o rc h a n g i n ga n di n f e c t i o ni nc o r r e l a t i o nf a c t o r , t h et o pm a n a g e r so ft h e e n t e r p r i s e sa c c e p t e dt h es y s t e mt r a i nw h i c hc a nb em a s t e r y e dt h et h e o r y so ft h e m o d e mm a n a g e m e n ta n dt h ek n o w l e d g ea n dt h es k i l l b u s i n s e s sa d m i n i s t r a t i o nt r a i nc a nb ea c h i e v et h en e e do ft h et o pm n a n g e r sf o ra d a p t m a r k e te c n o m i c ，p a r t i c i pa i mf o rc o m p e t ea b i l i t yo f m a r k e te c n o m i c t h ec o n c l u s i o no fd a t ap r o c e s s i n go fi n v e s t i g a t eq u e s t i o n n a i r ei nv i r t u eo fc o m p u t e r o p e r a t i o nc a na p p r o v e da p p r a i s i n gt r a i ni t e m so fh u m a nr e s o u r c ed e p a r t m e n ti nu s e f o rr e f e r c e c e ( ( t h ec o n c l u t i o no f t h ed e m o n s t r a t i o ns t u d yo f t r a i ni t e r no f t h eb n s i n e s sa d m i n i s t r a t i o n ) ) cang u i d a n c et h et a s ko f b u s i n e s sa d m i n i s t r a t i o ni no u rc i t y ，a 颤r m i n gt h ef u n c t i o no f b u s i n e s sa d m i n i s t r a t i o ni ng l o b a le n c o n o m i ci n t e g r a t i v e 、m a r k e te n e o n o m y 、s y s t e m r e f o m r e dd e e p l y 、t h ei n s t i t u t i o n a lf u c t i o no f t h em o d e r nt i m e se n t e r p r i s e 。a f f i r m i n gt h e t o pm a n a g e r so fs t a t e de n t e r p r i s e sa n ds t a t e dh o l d i n gc o m p a n ya f t e rt r a i n e da d d i n g h u m a nc a p i t a lv a l u ea n dh a v e b e e nc o n t r i b u t e df o re n t e r p r i s e s p r o d u c ea n d m n a n g e m e n t k e y w o r d s b u s i n e s s a d m i n i s t r a t i o n ； i r a h te v a l u a t i o nr e s e a r c h 大连理工大学m b a 学位论文 原创性声明 本人郑重声明：所呈交的学位论文，是本人在导师的指导下开展研究工作所 耿得的成果。除文中特别加以标注和致谢的地方外，论文中不包含任何其他个人 或集体已经发表或撰写过的研究成果，也不包含为获得大连理工大学或其它教育 机构的学位或证书而产生的成果( 如学位论文等) 。对本文的研究做出重要贡献 的个人和集体均已在文中以明确方式标明。本人完全意识到本声明的法律后果， 并愿为此承担一切法律责任。 学位论文作者签名：南烯 日期：加、3 ) 年5 ，月矽日 “九五”期问人连市工商管理培 f 评估的实证研究 1 引言 在人力资源开发领域里，对企业每年投入大量人力和财力对员工进行培训的 评价是人力资源专家们关注的重点，一个有效的培训评估方法可以把员工经过培 训后在生产经营中所发挥作用真实地反映出来，并得到客观地认可，有什么比这 更重要呢。 通常对培训项目进行评估的方法是通过对学员对培训项目哪些方面感到满 意? 学员从培训项目中学到什么? 通过培训，学员的行为是否发生了变化? 行为 变化是否对组织产生了积极的影响? 培训投资是否产生了回报? 即，通常所说的 第一级评估是反应，第二级评估是学习，第三级评估是行为，第四级评估是结果， 第四级和四级以前的培训评估称为定性评估，培训评估处在最前沿领域研究的课 题是第四级，培训l 评估级别越高，难度越大。 对“九五”期间工商管理培训项目的定性研究，选择了第一级到第四级的评 估，最终得出了定性评估结论。从第一级开始到完成第四级评估，依赖于丰富的 培训经验和管理知识以及综合分析能力去设计适应社会经济定量研究与s p s s 和s a s 的应用的学员调查问卷和学员主管领导( 部门) 闯卷，调查问卷项目包 括了所有的测试工商管理培训项目的内容，并运用s p s s 软件上的强大数理统计 方法进行分析。 对培训评估影响范围最广的是柯克帕特里的反应、学习、行为和结果四级评 估模型，处在培训评估前沿领域的是菲力普斯投资回报的第五级评估模型。1 。 培训评估进行到以结果分析评价为基础的第四级和以对企业经营做出贡献 的第五级投资回报率分析，无论讨论其中的哪一个话题，都将引人瞩目。当今人 力资源开发培训项目带来满足学员要求期望和满足企业急需的人才希望的压力 比以往任何时时候都大，这就决定了人力资源丌发部门对企业每年全部培训项目 必须有一个定性的全面培训评估，尤其是对企业高层管理者的培训项目，而寻找 一种用定量评估方法和手段去评价培训项目是非常重要的，这样可对照企业培训 项目的评估结果调整人力资源开发培训计划和执行计划，使本部门的培训工作始 终能够达到最优化，以满足对员工培训投资形成人力资本增量可满足本企业持续 发展的要求。 本文完成了用设计调查问卷1 i k e r t 的多因素下多因次方法的研究，对两份 调查问卷所有个项目下的学员回答数据处理都运用计算机专用统计软件s p a a 进 “九五”期间大连市工商管理培训评估的实证研究 行运算、最终得出了工商管理培训对企业经营者掌握管理知识和技能有帮助：在 很当大程度上对提高学员管理能力、对生产经营有很大帮助的结论。并对工商管 理培训课程的应用程度、课程的排序和急需程度，影响工商管理知识和技能的因 素，工商管理实现目标进行评价。 这种方法适用于非常适用于对学员的观念、意识、行为变化前后对比，倾向 性程度，相关性、离散性等不易评估的综合性培训项目，如：工商管理培训项目， 也适用于一般比较容易评价的专业技能和熟练程度前后对比等培训项目的评估。 为简明描述本研究的方法，呈上工商管理培训项目评估技术路线与论文架构 模型图，力求读者能更快捷地掌握培训项目评估技术路线与论文架构。 2 关于对“九五”期阃大连市企业工商管理培训评估的实订e 研究 图1 1 工商管理培训项目评估技术路线与论文架构模型 f i g u r e1 1 t h ec u r t a i lm o d e lo f b u s i n e s sa d m i u i s t l a t i o nt r a i ne v l u a t e 关于对“九五”期问大连市企业工商管理培训评估的实证研究 2 工商管理培训项目概述 本章对选定的综合培训项目一工商管理培训进行评估必备综述：项目背景资 料、项目陈述、项目意义、项目目的分析说明，目的和意义阐述；完成培训项目 的前提假设和局限性及培训基地说明。 2 1 工商管理教育和培训进入中国 2 1 1 工商管碍彰睛引入国内 始于8 0 年代初期，工商管理硕士( m b a ) 引入我国。为适应改革开放的新形 势，邓小平在1 9 7 8 年访美时，建议美国政府派遣管理教育专家来华，培训我国 企业管理干部，1 9 8 0 年成立了“中国工业科技管理大连培训中心”，大连理工大 学被选中为建立中美合作进行高级培训单位，当时的办学是学制八个月的“厂长 经理讲习班”，1 9 8 4 年，国家决定正式引入m b a 制度，至今，已经有6 3 所管理 学院被批准举办m b a 教育，一些管理学院还增设了全日制本科工商管理专业。 工商管理教育制度是由美国首创的。经过几十年发展与改进，已经成为一套 相当完整的教育体系，尽管它有其不足，目前正根据新信息时代及经济全球化的 发展在继续调整、更新与改善之中，但它已成为美国乃至几乎整个发达国家和一 些发展国家培养企业高级管理人才的有效手段，已成为不争的事实。 这种职业教育的特点，首先在于它具有鲜明独特的目标，即造就高级管理 ( g e n e r a lm a n a g e m e n t ) 人才，它是职业培养性的，因而具有明确的应用与实践 的导向性。其培养对象是有一定管理实践阅历的管理者，经过一段时间系统深造， 仍回到企业管理岗位中。因为目标是造就位于决簸层的、跨职能的高层经理，它 讲授的管理理论广而不深，但却十分强调可操作的具体管理技能的培训。基于上 述目标，工商管理培训的教学方法及与之配套的一系列亲验性教学方法，在传统 的课堂上系统讲授之外，大量使用案例教学、角色扮演、模拟练习等教学活动。 z 1 2 工商管理培洲引入国企 “九五”期间，大部分国有企业产品正从卖方市场走向买方市场，很多行业 出现了供大于求的局面，企业从计划经济和市场经济并存的经济模式快速走向有 着中国特色的市场经济轨道上来，国企在理顺内部管理体制的同时，还要面对着 ”九五”期间大连市工商管理培训评估的实证研究 历史遗留下来过重债务和过多人员等沉重负担，需要面对着新倔起的乡镇企业和 其它经济所有制企业的竞争，国企需要为国家经济体制改革承受着巨大的成本压 力，经营异常艰难。 如何把国企从困境中解脱出来，使其适应市场经济竞争要求，是政府和企业 家及各界急于解决的大问题。当时，为了帮助大多数国企摆脱困境，政府先后出 台了一系优惠政策扶持企业；为使企业尽快走向市场，还权于企业，颁布了企业 法人享有的十四项权力；为了减轻企业负担，大力支持企业，积极推行三项制度 改革；为了使企业更加规范经营，积极推动企业现代企业制度建设。通过政府各 种导向政策和措施，一部分企业走出了困境，但仍有相当一部分企业脱困未脱险， 为使国企尽快走出困境，在市场经济竞争中快速发展，认为提高国企高层经营者 素质是解决这个问题一个重要方面，尽管“九五”以前，国企经营者在管理知识 和管理技能方面受过专门培训，但所接受培训内容并不完全是市场经济条件所需 要的理论知识框架，无法适应深化改革对企业带来的冲击，必须通过系统的市场 经济理论知识培训来达到适应“九五”以后竞争要求。 从发达国家成熟市场的经验看，能够胜任企业高层经营管理者职务的是职业 经理人，而这些职业经理人必须系统接受过工商管理教育，可从我们国家高端人 才市场看，职业经理人市场根本不能满足企业对经营者的需求，职业经理人市场 无论从规模上、数量上都还处在萌芽之中。实事上国企经营者的资格还是由政府 任命，企业所需的系统接受过工商管理教育的经营者不可能从高端人才市场得到 满足，只能是现任的国企经营者来管理企业，按我国现有的工商管理学院培养学 生数量的能力，以及这些学生毕业后需要一段时间实践的现实，相当长时间内， 国企经营者中缺乏接受过工商管理培训人数是相当大的，面对激烈的市场竞争， 国企经营素质亟待提高。按照国企经营者按计划全部接受过一遍工商管理教育， 需要2 0 年，按照这个计划去执行是极不现实的。对企业现任经营者进行工商管 理课程传授必须面对国企业生产经营的实际，解决或缓解生产经营与学习时问的 矛盾是唯一可行的办法，这个办法是可以缩短工商管理授课时间，这样通过压缩 工商管理课程和学习时间找到了仍能推行工商管理教育的办法一工商管理培训。 2 2 工商管理培训评估 2 , 2 1 工商管e 野割m 平f 占的意义 勿庸置疑，通过推行工商管理教育可系统掌握市场经济理论体系，但是，通 “九五”期间人连市工商管理培训评估的实证研究 过推行工商管理培训掌握系统理论，通过学习工商管理理念及掌握技能对企业改 善管理到底有多大作用，对企业经济效益有多大贡献还有待评价。 尽管理在过去几年里，企业接受了一些工商管理培训项目培训，但尚未有系 统和综合的调查研究来评价这些培训项目带来的影响，虽然有一些培训机构己做 过这方面的评价，但大部分评价是常规化的形成性和总结性的评价，而且这些培 训机构受各种因素的影响，无法得到培训后学员和学员的组织部门反馈的数据， 无法得到学员企业的经营数据，无法完成工商管理培训全部项目的综合性评估， 一些培训i 机构只完成了工商管理综合培训项目评估的总结性评价和工商管理课 程中单个项目评价，如，完成了市场营销培训效果等评估。工商管理培训这样综 合性培训项目产生的绩效，通常需要过几年才能反映出，而不是事后立即就能反 映出来的，主要是因为培训项目目标的行为变化通常在未来的一段时间发生。在 培训完成之后的一段时间里进行评估，从这一点来讲，对工商管理综合性项目培 训更有意义。 一般说，工商管理培训项目的目标包括两个方面： 增加知识和了解现代管理知识、技术、方法、概念。 熟悉运用已学的管理方法和较大地提高管理能力。 上述第一个目标可以在培训前后通过事前事后检验的方法得到比较，但在项 目完成后有一段时间让参加培训i 的人能够鉴别等二个达到的程度也是必要的。工 商管理培训绩效评估比总结性的评价更重要。 “九五”工商管理培训绩效评估将指导“十五”后三年工商管理培训仍至今 后培训，这种方法也可以指导其它培训项目的定性评估。 艺垃工商管理培讲解牯研究的问题 工商管理培训绩效评估的直接目的是进行一项调查。调查“九五”期间大 连市企业界高层管理者培训班学员在实际工作作为高层管理者的绩效。在这项研 究中的所要探讨的其它重要方面是调查他们经培训后所学的知识和技能的应用 情况及与应用程度相关的一些特征。这些研究目的要通过调查学员们和( 学员) 主管领导或( 部门) 的反馈意见来达到。下列问题将通过研究得到答案： 以学员的观点，工商管理培训班对他们学习工商管理知识和技能，改进他们 的管理能力有何作用? 学员们如何对高级工商管理班的培训目标、课程、教学和其它服务便利设施 质量，对培训过程情况进行评价? 6 “九五”期间大连市工商管理培训评估的实证研究 他们对在培训中所学的工商管理知识和技能的应用程度有何建议? 以学员们的观点，与他们在培训中所学的知识和技能的应用程度相关的特征是 什么? 2 , 2 3 前凰段醍 工商管理是一门既可教又可学的学科 不管企业规模大小，企业所有制无何，企业管理具有一些普通特点适用于所 有企业，因此工商管理概念和技术适用于所有企业。 学员们能够体会到的培训项目中每个学科的用途受个人的一些变量的影响， 如：工作职能、学历、从事管理工作的年限等。 这次调查中，假设学员们的回答客观和精确的。 一九九六年到二0 0 年的五年时间内，工商管理培训的课程没有显著变化， 如果不考虑其他变量，所有学员对该培训项目的反映意见是相似的。 工商管理培训项目评估是以学员管理行为的改变，在组织产生的绩效进行 的，研究中所收集的除学员数量统计数据，其余的主要是企业高层管理者培训班 学员和学员主管部门的反馈意见，所以这一研究的内在局限性在于最后的结果数 据是主观的，这是定性培训项目所无法避免的缺限，为弥补这一主观评价管理行 为变化的不足，即用学员主管部门意见来检验管理者对自身的评价，这种方法并 不是每个培训机构能办得到的，这是因为，一是这种办法有其科学性，二是办法 科学，数据难以得到，作者充分利用工作岗位的优势，得到了主管领导对学员培 训后对调查问卷数据的修正。 本研究中使用的收集数据的问卷是自己设计的，尽管考虑比较全面，但也可 能有不周全的地方。 工商管理培训项目评估的绩效也可能有其它因素作用的结果，如：体制改革 和经济环境及个人激励等等。 2 3 工商管理培训项目 2 3 1 培讲匿地 大连干部管理学院( 简称大管院) 是全国优秀管理干部院校之一，大管院 建院后就政府指定为大连企业干部培训基地，“九五”期间，又被国家经贸委指 定为工商管理培训基地。该基地是在国家经贸委挂牌，大连市经贸委具体指导下 “九五”期问大连市工商管理培训评估的实证研究 开展工作的。建院二十二年来，共培训大专以上各类管理人员7 0 0 0 多人，培训 各级各类管理干部6 5 万余人次，工商管理培训基地的培训综合楼，可同时2 0 0 人参加培训，拥有专用教室3 个，5 0 0 多平方米，配有先进的投影和闭路电视等 教学设备，拥有计算机3 0 0 余台，模拟实验室设施齐备，图书馆藏书2 5 万册， 其中工商管理方面书籍占1 0 。经过多年的教学培训实践，积累了丰富的经验， 锻炼了一支力量比较雄厚的师资队伍，拥有2 0 多名高学历、高职称、在各自领 域有较深造诣、并且了解企业生产经营的专家、学者作为工商管理培训i 的专职教 师。建立了由省内著名的专家、学者、政府官员、著名企业组成的大师资库。“九 五”期间进行各种培训6 0 0 0 余人次，其中国家级培训5 0 0 人次、省级培训2 0 0 0 余人次、市内企业管理者工商管理培训1 0 0 0 余人次。 工商管理培训学员来自企业的高中级管理人员和专业人员，主要是国有企业 和集体企业的高中级管理人员和专业人员。 工商管理培训有高级工商管理培训班、中级工商管理培训班、后备青年干部 工商管理培训班，除了工商管理培训项目外，大管院还根据市经贸委要求和自己 的教学安排举办一些短期适应性培训班。 本研究项目的工商管理培训是指高级工商管理培训，参加培训的对象是企业 高层管理者。 2 3 , 2 培训内容 工商管理培训班是按国家经贸要求，将二年m b a 课程浓缩成三个月脱产“袖 珍班”，这主要基于大中型国有企业高中层管理者脱产二年时间搞培训不可能这 一实际情况决定的。工商管理硕士的全部课程是2 2 门，9 9 5 学时，其中核心课 1 2 门、必修课8 门、选修课2 门，4 个学期，完成论文答辩；工商管理培训班课 程是1 2 门，其中核心课l o 门、选修课2 门、脱产时州3 个月，完成论文答辩。 教学形式有课堂授课、案例教学、上机操作、小组练习、课后作业等0 1 。 通过系统工商管理培训，基本掌握工商管理主要思想和精髓，深刻理解市场 经济中“企业”、“市场”、“需求”、“机会成本”、“边际效益”、“稀缺资源”、“人 力资本”等系统经济理念，系统提高企业生产经营的一些宽泛技能，如：市场营 销、人力资源、组织行为、有效沟通、金融等，有效预期外部环境因素对企业的 正负相关影响，增强战略决策能力，为企业高层管理人员真f 成为职业经理人创 造条件。 “九五”期间大连市工商管理培训评估的实证i 】f 究 2 3 3 专用名词 培训绩效是指该项目研究中用来描述工商管理培训班对学员培洲产生影响 的看法。 有效性是根据所学知识和技能以及知识和技能的应用程度来衡量的。学员对 与项目目标相联系的项目成就的意见也是衡量培训绩效的一种方法”。 高层管理者是指国有和非国有企业的副总、经委书记、工会主席、党政一把 手的决策者。 管理知识是指对管理学科的理解和熟悉程度。 管理技能是指对某种管理技术上的熟练程度和运用能力。 “九五”期问大连市工商管理培训评估的实证研究 3 研究方法 本章将完成按统计抽样要求的“九五”期间在大连市干部管理学院参加工商 管理( 学员) 人口和( 部分学员) 抽样过程分析。 对培训项目定性评估的调查问卷运用社会经济定量研究与s p s s 的应用 方法中的对调查问卷的概念指标的多因素下多因次的度量设计，对每个项目分析 采用了s p s s 定量分析方法中的l i k e r t 度量设计。 讨论了调查问卷项目设计和收集数据有效性和可靠性。 3 1 人口和样本 研究的人口包括一九九六年到二0 0 年大连干部管理学院的高层管理人员。 这些学员当时是国有企业决策层成员，系统接受工商管理培训是受市经贸统一调 训的，五年中共有1 0 1 1 名学员参加培训，这些人学完规定的课程，通过论文答 辩，全部结业。 研究的样本是有二个，一个样本是在人口中随机对学员进行调查问卷的小样 本，共有4 8 位学员，为检验一个指标同其它指标的特定假设，来决定项目指标 是否具有可靠性的重复检验：另一个样本是研究中的学员样本，即，用以研究工 商管理培训班学员培训后行为变化及影响的评价。人口中除了小样本的学员外就 是研究中学员样本，共有9 4 3 人。 表3 1 是按照统计抽样要求设计的抽样样本和参加培训学员样本数据，通过 各年度学员分布情况可以看到抽样数据分布的均匀性。 表3 1 按结业年限划分的人口和样本 9 b l e 3 1p o p u l a t i o na n ds t y l e b o o ko f t h es t u d e n tf i x e dn u m b e ro fy e a r s 表3 1 的学员培训是按照市经贸委培训计划安排的，五年中每年计划安排 0 “九五”期问人连市t 商管型培训泮估的实证研究 四期，每期有些学员因工作需要，培训时间有些调整，所以每年培训的人数有些 所不同。 3 2 问卷设计及度量 问卷设计及度量过程要完成的是对调查问卷中每个项目的概念化、可操作 化、结构化和假设检验的应用和扩展。为了定性评价好培训学员和与培训相关事 物，必须做四件事情，首先，必须赋予要计量的问卷概念以清楚的含义( 这是概 念化) 。第二，必须给这些含义选择适当的指标( 这是可要操作化) 。第三，必须 给指标确定专门值或分类( 这是结构化) 。第四，必须通过检验关于一个指标其 它指标的特定假设，来决定指标是否可靠和有效( 这是可靠性和有效性检验) 。 3 - 2 1 问卷中的每何页目的| 既含嘏计 在最著名的社会经济定量研究与s p s s 和s a s 的应用认为，培训评估研 究申复杂社会概念的项目解释和构成标准是最重要的，也是最难的，概念设计的 好坏，这基本决定了评价研究的成功与否”1 。 工商管理培训的目标为研究提供了调查标准，建立这些标准时有两样根据： 第一，布置调查问卷时，向学员和学员主管领导( 主管部门) 的培训项目计划中 所宣布的培训目标，第二，在发放问卷中，获得的学员表述的关于的意见。 围绕调查标准在本研究对问卷设训和分析中，列每个概念的概念化过程中， 概念可能有的含义范围，尽量包括进去。对概念的概念化用多因素进一步分析和 分解，对因素的迸一一步分析和分解用多因次，采用这种方法是囚为，每一个复杂 概念，只有对其概念的涉及的所有方面进行分层，并对每层进行分析，才1 能得出 正确评价。 调查问卷项目中a 的第七项“概念”，如何评价管理者能力的提高，这个“概 念”的全体含义是管理能力的四个方面，即，分析综合、决策、组织、人际关系 的四个因素。 列每一个因素进一步分解和分析是学员对工商管理培训评价唯一的选择答 案，即，“很有帮助”、“有些帮助”、“不能确定”、“帮助很小”、“根本没有帮助” 的五个因次。 根据企业高中层管理的实际，管理能力概念的全体含义是符合高中层管理者 在日常管理和决策的实际，评价“管理能力”这样复杂概念的全体含义的各方面 组成，必须选择多因素或多因素之下的多因次指标来分析和分解。 “九五”期间大连市t 商管理培训评估的实诩：研究 学员调查问卷，共二十二项，每项概念的全体含义的每个组成部分的设计， 如同对如何评价管理者能力提高概念的分析分解一样，有理由选择多于一个评价 因素及一个评价因素下的多因次的指标；这是因为，第一，如果只使用一个指标， 也许不能适当表达全部含义。第二，如果一个指标不能很好地实际计量某方面因 素的含义，那时就要使用其他的指标。第三，使用含义的几个方面的指标，便于 实施平行形式的可靠性检验m ，。 3 2 2 问卷中的每似页目的宦量 对问卷中的每一个项目的度量，最好是把工商管理培训有效性转换成可度量 的单位，最为理想的衡量是将工商管理培训效果的行为变化采用两个对照组进行 对比实验，这些管理者自身接受教育背景和工作岗位情况相同，在这种前提背景 下，一些管理者被随机地分到一个实验组，该组成员接受管理培训，其余管理者 被随机地分到一个不接受工商管理培训的控制组。实验后这两组管理者任何差别 结果都可能归咎于该工商管理培训。 实验性的设计方法从理论上来【 8 是可取的，但在这里行不通，因为参加调训 的企业管理者的管理水平差异较大；不具备实验设计中所需要的各方面条件，而 且不可能在相当长时间里在控制组里不接受工商管理培训。 为了能将管理者接受培训后的培训效果评估出来，使用描述行为变化的设 计，缓设计是二份凋查问卷，对培训班学员和学员主管领导( 部门) 进行了后续 调查。 后续研究的调查对象是那些完成工商管理培训的学员，研究的目的是分析培 训本身对他们有什么作用，通过检验他们的反馈意见，能够得到工商管理培训项 目适用与否的建议。 为了更好地对每一个项目的概念进行定量评价，采用了测量复杂概念的累加 测度的行为变化指数，它通过累加那些为计量概念的全体含义而使用的指标值来 获得。 对调查问卷的概念指标的多因素及多因次的度量，采用了s p s s 定量分析方 法中的l i k e r t 度量，这个针对复杂变量的l i k e r t 换算是个真正的概念指数构成 技术，这个l i k e r t 换算是构成概念指标的最普及方法，涉及l i k e r r 换算的每个 指标( 通常一个问题) 可以用5 个可能值的1 个来得分，从l 到5 ，l i k e r t 技术 增加了用求和指数技术获得的合计分的变化。1 。 对于l i k e r t 指数项的答案，一些项目概念的可设汁像以下这样赋值，如： “九五”期问人连市t 商管理培训评估的实证研究 对构成管理能力概念的“很有帮助”、“有些帮助”、“不能确定”、“帮助很小”、 “根本没有帮助”五个因次度量赋值，如，“很有帮助”的答案是数值5 ，“有 些帮助”的答案数值是4 、“不能确定”的答案数值是3 、“帮助很小”的答案是 数值2 、“根本没有帮助”的答案数值是1 。 l i k e r t 指数非常适用于计量那些管理者态度的指标，以及计量整个取值范 围的方向，如：培训对管理者行为变化的回答显然是学员和学员领导( 主管) 部 门的态度，赋值从大到小，即“5 ”、“4 ”、3 、“2 ”、“l j ，的顺序刚好是对“帮 助”程度的逐惭减少方向。 3 2 3 问卷魄匐瑚尉神q 可靠鹰f 霹剩牲 调查问卷的各项概念及度量指标设计好之后，要对其检验，首先取决于能否 满意回答以下两个问题：各项目概念及度量指标可靠吗? 这些概念及度量指标有 效吗? 如果每次使用这项指标都得出同样的结果，则可以判断这项指标是可靠的， 即一致性和稳定性；如果这项指标能够真实和准确地计量概念的含义，这项指标 就是有效的。出于一项指标可以是可靠的，但不一定是有效的，因此有效性的评 估成为指标结果一致性之外的另一个问题。评判指标的典型程序是先验证使用这 项指标来获得的值是靠的，然后，再评价这些值是否有效”1 。 可靠性的重复检验是确定指标的可靠性方法之一，虽不及各靠性的半分检验 和可靠性的平行或交替检验对复杂指标计量精确，但方法简单易行，所以采用可 靠性的重复检验方法。 为保证调查问卷所设计的指标的可靠性，进行了一项实验性的研究。在研究 中通过检验和复验与正式研究所使用的同样的一组学员来衡量研究的一致性和 稳定性。从研究中接受工商管理培训的学员随机选出来的四十八名，占研究人口 的5 做为小样本要用于试验性的研究，小样本是按比例随机抽取的企业高层管 理者，参加过“九五”期间培训的学员，其样本规模大小符合s p s s 所提供的标 准可靠性重复检验抽样比例。调查问卷的第次复本送到四卜八名学员五年里参 加培训的所有人手里以后的二十天，第二次复本又送到他们手里，两次调查间隔 时间既不太长也不太短，这就避免了接受调查的学员的回答和回顾的太大变化。 在一个月时间里，四十人做出了回答，其中有二十八人返回一件复本，十二 人返回二件，有八人已经不在原企业工作， 表3 2说明按毕业年度划分的两次试验性研究的小样本规模的数据分配。 “九五”期间大连市t 茼管理培训评估的实证研究 表3 2 按年度划分的研究小样本规模 f a b l e 3 2as m a l ls t y l e b o o k s c o p eo f t h es t u d e n t sf i x e du u m b e ro f y e a r 因为这种测试复式的返回率很低2 5 ( 1 2 4 8 ) ，所以这两组可靠性的测试 都被用来分析从实验性的研究中收集来结论性数据。 s p s s 的可靠性系数是针列问卷每一条款计算的，而这些问卷是根据四十八 位学员所提供的数据进行做的。s p s s 把可靠性定义为两次计量的结果存在高度 的类似性，如果两次计量的结果存在高度的类似性，则这项指标被证明是可靠的。 从返回问卷的四十人回答，可靠性计算对每项的回答进行统计分析，从而找 出学员回答是否有高度的类似性，来判断问卷设计的可靠性，通过计算结果对调 查问卷的二十二项来高说是合理且可靠性较高的，对所有这些项目的回答类似性 在9 5 一1 0 0 之间，认为是两次计量的结果存在高度的类似性。 除了这可靠性的高度的类似性检验外，还用了四组可能的回答组中，问卷每 一条款的平均数和标准差来用检验结论性一致的数据，确定显著性水平为0 0 5 ， 使用单侧t 检验确定每一项回答有无明显变化，计算结果是是无明显变化。 问卷全部返回( 2 8 4 8 ) 仅返回一套( 1 6 4 8 ) 两套问卷返回第一套( 1 2 4 8 ) 两套问卷返回第二套( 1 2 4 8 ) 有效性检验是在重复性检验之后进行，用这种方法是对调查问卷每项将要检 验的其它概念几个指标( 称为构成物) 。同计划要评估的指标相类似的一项指标 有怎样联系进行检验。n ， 影响管理知识和技能环境因素的宏观环境有政治环境、经济环境、传统文化、 抗拒新思想的组织惯性；影响管理知识和技能环境因素的微观环境有工作岗位职 能、管理者缺乏自主权、缺乏上级支持、员： 素质有待提高因素。影响管理知识 和技能环境因素的宏观环境和微观环境的几个方面因素的有效性，根据实践经验 及从字面含义看几个方面是否包括了项目的概念的全部含意，几个方面因素有无 重叠和交叉的地方。 “九五”期问人连市工商管理培训评估的实证研究 为了更加准确地把握每项概念及度量指标的有效性，调查问卷先后征求了几 个高校培训专家、市内重点企业人力资源负责人、部分培训学员的意见，调查问 卷经过几处小的地方的修改后，第二稿又召丌部分培训专家和企业培训部负责 人，进行讨论，大家一致认为，问卷设计的用词清晰、项目概念前后呼应，对培 训学员行为变化的测评是科学的，并且非常实用。 研究所用调查问卷由二十二项目组成，分成五个部分： 按人口统计的数据 培训班的贡献 培训班的评价 培训班的应用性 培训班的调整 除了第一部分事实性的数据以外，其余是学员和学员主管部门( 领导) 的反 馈意见。 调查问卷a 的项目一到六与研究的“按人口统计的数据”有关，项目七到 十一与研究的“培训班的贡献”有关，项目十- n 十六与研究的“培训班的评价” 有关，项目十七n - 十与研究的“培训班的应用性”有关，项目二十一到二十二 与研究的“培训班的调整”有关。 调查问卷b 的项目一到四六与研究的“按人口统计的数据”有关，项目五 到八与研究的“培训班的贡献”有关，项目九到十与研究的“培训班的应用性” 有关。 两个调查问卷中同一个项目，最终答案用两个调查问卷的同一个项目答案平 均数。 整个问卷运用了l i k e r t 的标准来说明各种问题。 3 2 4 收集数据的程序 发放调查问卷a 和b 前，召集相关企业组织( 人力资源) 部门开会，请他们组 织参加过培训的学员酉己合问卷调查，要求学员和学员主管领导( 主管部门) 答卷 认真。为了增加答卷的质量，学员和主管领导个人答卷一律以匿名答卷，企业组 织部门负责答卷的回收。本研究中的调查问卷a 和b 分别下发2 0 0 份，在企业人 力资源部门负责人的帮助下，分别下发到培训过的学员手中，在发放调查问卷的 丌始对企业负责这项工作的专干进行培训，请i u , p 理解问卷中各项概念的含义及 填报要求。 “九五”期间大连市工商管理培训评估的实证研究 下发调查问卷a 和b 按照毕业年度分类，在问卷数码以前加区别标志数字。 对收集上来的调查问卷逐项检验，核对没有问题后，作为正确问卷使用，并 上机分析。对收集上来的问卷的每一项数据输入两遍( 同时做两个文件) ，用求和 公式检验正确( 得出同一个答案) 方可进行下一步数据分析，这样做法可确保数 据输入的f 确，最终得到准确分析结果。 乱蝤数儋分 斤：蔚新工具 研究中运用了描述统计学的数理统计方法来分