（行政管理专业论文）网络课程教育综合效益评价研究.pdf

大连理工大学硕士学位论文 摘要 网络教育是构筑2 l 世纪终身教育体系、形成学习化社会的重要手段。如何提高网 络课程教育投入产出综合效益，使其在教育领域中发挥它的最大功效是迫切需要研究和 解决的问题。 本文研究的最终目的是利用运筹学中的d e a 方法在教育效益评价领域的适用性，并 密切结合网络课程教育的特殊性，运用该方法对网络课程教育投入产出综合效益进行量 化评估。笔者希望将d e a 方法同两络课程教育的特殊性全面、客观结合，构建出能够科 学、客观评价网络课程教育综合效益的评价模型。 本文着重对网络课程教育的投入产出综合效益评价进行探讨，从组织者和学习者角 度分别建立投入产出评价指标体系。最后，运用d e a 数据包络分析方法建立网络课程 教育综合效益评价模型，应用模型对6 门网络课程进行实证评价研究。评价结果显示6 门课程组织者和学习者分别的投入产出相对效率分值及投入产出各指标的潜在贡献率。 由于潜在贡献率反映了提高整体综合效益的潜在空间，所以对于决策者提高各门网络课 程教育的综合效益具有一定的参考价值。 本文在方法应用研究上有所创新，并在实证研究中得出以下结论：( 1 ) 课程的综合 效益评价对于网络课程教育组织者在保证教学质量的前提下，提高网络教学资源利用效 率具有深刻的指导意义。( 2 ) 课程的综合效益评价不能单独的对投入或者产出进行分析， 而应该综合计量评价。因为有的课程的投入或产出单项突出却得到了最终投入产出相对 效率分值较低的结果。( 3 ) 应用d e a 方法评价网络课程教育综合效益虽然只是得出相对 效率的分值，并且每个评价单元的分值会随着其它评价单元的投入产出变动发生相应的 变化，但是对于不周网络课程之闻的比较研究却具有一定的参考价值。( 4 ) 评价网络课 程教育的综合效益能够帮助网络课程教育走向充分利用资源的正确道路，也是当前我国 网络教育刚刚起步，投入产出效率不高的现状下，保证网络课程教育质量的有效途径。 关键词：网络课程；投入产出；综合效益评价；数据包络 贾微：网络课程教育综合效益评价研究 r e s e a r c ho nt h ee v a l u a t i o no f e l e a r n i n gc o u r s ee d u c a t i o na b o u t i n t e g r a t i v eb e n e f i t a b s t r a c t e l e a r n i n g1 sa ni m p o r t a n tm e a n r l st of r a m et h el i f e l o n ge d u c a f i o n a ls y s t e ma n dt of o r ma l e a r n i n gs o c i e t y h o wt oi m p r o v et h ei n t e g r a t i v eb e n e f i ta b o u te d u c a t i o no fe l e a r n i n g c o u r s e ，a n d 百v ei taf u l lp l a yi sa nu r g e n tp r o b l e mt 0b es o l v e d a c c o r d i n gt ot h e a p p l i c a b i l i t yo fd e a m e t h o du s e di nt h ee d u c a t i o n a lf i e l d ，t h i sa r t i c l ea i m sa te v a l u a t i n go n t h ei n t e g r a t i v eb e n e f i to fe - l e a r n i n gc o u r s eq u a n t i t a t i v e l y ，c o n s i d e r i n gt h ee d u c a t i o no f e - l e a r n i n g sp a r t i c u l a r i t y t h ea u t h o rh o p et h a tt h em e t h o do fd e aw i l lh e l p s e tu pa m a t h e m a t i cm o d e lf o re v a l u a t i o no f e - l e a r n i n gc o u r s ea b o u ti n t e g r a t i v eb e n e f i t t h i sa r t i c l ee m p h a s i z e so nt h er e s e a r c ho ft h ee v a l u a t i o na b o u te l e a r n i n gc o u r s e s i n t e g r a t i v eb e n e f i t ，a n ds e tu pi n d e xs y s t e m so fo r g a n i z e r sa n dl e a r n e r ss e p a r a t e l y a tl a s t ，s e t u pad e a - e v a l u a t i o n - m o d e la n da p p l yt h i sm o d e lt o6c o u r s e s t h er e s u l tt e l l st h a t6c o u r s e s h a v ed i f f e r e n te f f i c i e n c ys c o r e sa n dp o t e n t i a li m p r o v e m e n t s s i n c et h ep o t e n t i a li m p r o v e m e n t m e a n st h es p a c eo fi m p r o v i n gt h ei n t e g r a t i v eb e n e f i t ，i ti sh e l p f u lf o rt h ed e c i s i o n m a k e r st o i m p r o v e t h ei n t e g r a t i v eb e n e f i to f e a c hc o u r s e t h i sa r t i c l em a k e si n n o v a t i o ni na p p l i c a t i o no fm e t h o d s ，a n dt h o u g hd e m o n s t r a t i o n a l a p p l i c a t i o n ，t h e r ec o m e s e v e r a lc o n c l u s i o n s m a k i n gs u r eo ft h et e a c h i n gq u a l i t y ，e v a l u a t i o n o fe l e a r n i n g si n t e g r a t i v eb e n e f i tm a k e si n s t r u c t i o n a lm e a n i n gf o ri m p r o v i n gt h ee f f i c i e n c y o f t e a c h i n gr e s o u r c e s ；e v a l u a t i o no f e - l e a r n i n g si n t e g r a t i v eb e n e f i tc a n n o tb ea p p l i e do n l yb y e v a l u a t i n gt h ei n p u t so ro u t p u t s ；u s i n gd e am e t h o dt oe v a l u a t et h ec o u r s e si sm e r e l yb y s c o r e so fc o m p a r a t i v ee f f i c i e n c y ，a n de a c ht m i t ss c o r ew i l lc h a n g ea c c o r d i n gt ot h eo t h e r s i n p u to ro u t p u t sv a r i a t i o n ，b u tt h i sm e t h o di se x t r e m e l ym e a n i n g f u lf o rt h ec o m p a r a t i v e r e s e a r c ha m o n gd i f f e r e n tc o u r s e s ；e v a l u a t i o no re l e a r n i n g si n t e g r a t i v eb e n e f i ti sm e a n i n g f u l f o rm a k i n gg o o dr i s eo fe d u c a t i o n a lr e s o u r c e s ，a n dt h i si st h eb e s tw a yn o to n l yt oi m p r o v e t h ee d u c a t i o n a lq u a n t i t y ，b u ta l s ot oi m p r o v et h ee f f i c i e n c yo f u s i n gt h ee d u c a t i o n a lr e s o u r c e s k e yw o r d s ：e - l e a r n i n ge o n r s e ；i n p u t - o u t p u t ；i n t e g r a t i v eb e n e f i t ；d e a 独创性说明 作者郑重声明：本硕士学位论文是我个人在导师指导下进行的研究工 作及取得研究成果。尽我所知，除了文中特别加以标注和致谢的地方外， 论文中不包含其他人已经发表或撰写的研究成果，也不包含为获得大连理 工大学或者其他单位的学位或证书所使用过的材料。与我一同工作的同志 对本研究所做的贡献均已在论文中做了明确的说明并表示了谢意。 作者签名： 0 0 6 。舌 大连理工大学硕士研究生学位论文 大连理工大学学位论文版权使用授权书 本学位论文作者及指导教师完全了解“大连理工大学硕士、博士学位论文版权使用 规定”，同意大连理工大学保留并向国家有关部门或机构送交学位论文的复印件和电子 版，允许论文被查阅和借阅。本人授权大连理工大学可以将本学位论文的全部或部分内 容编入有关数据库进行检索，也可采用影印、缩印或扫描等复制手段保存和汇编学位论 文。 作者签名：喟镟作者签名：缒蟹刍 导师签名： 业月旦日 大连理工大学硕士学位论文 1 引言 1 1 论文的选题背景及研究意义 1 。1 1 选题背景 随着信息技术的不断发展，网络教育在常规教育和远程教育中的应用越来越多，它 突破了传统教育的时空限制，凭借其数字化、信息量大、交互性强、覆盖面广、多媒体 技术广泛应用等特点，为更多的人，尤其是成人提供了接受高等教育或继续教育的机会。 因此，网络教育是当今世界教育发展的主旋律。 在现阶段，积极发展网络教育是我国社会经济发展的需要，但要使我国网络教育有 一个飞速的发展，我们面临两个需要认真解决的问题：一个是网络教育投入的问题，一 个是网络教育的产出问题，亦即网络教育的综合效益闯题。 从1 9 9 8 年9 月教育部批准清华大学、浙江大学、湖南大学和北京邮电大学试点现 代远程教育至今，全国已经有6 8 所普通高校成为教育部公布的现代远程教育试点院校。 随着网络教育试点实践的实施，对我国远程教育理论与实践的关注问题已经成为社会各 界关注的焦点。制约网络教育发展的因素很多，其中之一就是课程问题。课程教学是学 校教学的主渠道，目前我国网络教育课程开发种类日益增多，但是课程质量问题却不容 乐观。其中，网络课程、网络课件、网络教材的概念混淆；开设的课程大而全，却缺少 规划；重教学内容呈现，轻学习环境设计；教学内容的表现形式单一；自主学习资源不 足；导航系统不强；缺少评价与反馈；缺乏教学活动设计等等都是现在网络课程教育中 存在的普遍问题。 课程综合效益评价即在所学校内，以课程综合效益为评估对象所进行价值判断的 一种评价类型，主要用于学校管理决策。 1 1 2 研究意义 ( 1 ) 有益于网络课程教学质量的提高和教学成本的控制。 教学工作是学校的中心工作，课程教学是学校教学的主渠道。由于网络使教与学活 动产生了时空的分离，教师不再是直接的教育者，教育目标通过网络课程来实现，教学 活动匦绕着网络课程展开，因此开发适用于网络教育的高质量的课程成了我国发展网络 教育的一个非常重要而迫切的课题。 网络教育的基础是网络课程，因此，网络教育作为我国教育改革与发展的新生事物， 能否取得成就最终还将取决于其课程教学质量和教学水平。对课程综合效益进行评价， 贾微：网络课程教育综合效益评价研究 把课程教学的教与学，过程与结果，课程开发制作、技术设备支持、正常运营成本等的 “投入”与学生学习绩效、经济效益、社会附加效益的提高等“产出”行为进行价值判 断，并有效利用评价的导向，激励、调控功能，规范课程教学，使之在坚持正确的价值 取向的状态下正常运行。评价结果会对课程开发决策提供有力指导和依据，并有助于决 策的进行。同时，全面、综合、客观的评价网络课程会对网络课程的标准化起到促进的 作用。提高教学质量的同时有效的控制了成本。 但) 有益于我国网络教育的蓬勃发展。 从网络教育的发展来看，网络课程教育的综合效益研究，不但可以发现制约我国网 络教育发展的诸多影响因素，发现网络教育过程中现存的问题及原因，更有助于网络教 育决策者和管理者改进网络教育管理方法，提高网络教育资源利用效率，在战略层面的 方案制定上提供依据。亦即所谓的示范作用，为整个网络教育界提供范例，减少摸索的 实践，最终实现保证教学质量的同时提高办学效益，促进网络教育的蓬勃发展。 1 2 国内外研究现状 1 2 1 网络课程教育投入产出研究现状 网络学院办学的核心为网络课程的运营，同样，网络学院的办学成本亦取决于网络 课程运营的成本。因此核算分析网络课程运营的成本成为衡量网络学院办学效益，指导 办学管理的重点。 目前国外网络课程成本相关研究主要集中在分析成本范围、确立成本分析框架以及 成本效益的计量方法、探讨影响成本效益的相关因素等方面。相关的研究成果有“3 ： 从进行网络远程教育的院校层次入手，英国开放大学学者鲁姆博尔认为从系统的角 度来看，一所发展得比较完善的网络教育学院的成本应包括以下几部分： ( 1 ) 开发电子学习材料： ( 2 ) 在线授课和评价： ( 3 ) w e b 站点的登录： ( 4 ) 学习者的在线管理： ( 5 ) 在进行网络教育的范围内尽可能提供的基本设箍和支持服务： ( 6 ) 对网络教育的宏观计划和管理。 主要针对“在线课程”，从课程层次上对成本进行的分析和研究。美国马歇尔大学学 者摩根( m o r g a n ) 基于w e b o p e d i a 对于远程学习的定义确定了他研究的在线课程是不需要 大连理工大学硕士学位论文 在大学校园内实际参加学习或者在其他辅助学习中心接受部分学习内容，但如果- f 通 过网络学习的课程完全剔除了在校园内上课、做试验等这些远程学习者没有机会参与的 因素，该课程就是在线课程。在界定了这个范围之后，摩根对马歇尔大学开设的在线课程 进行了成本分析。 分析不同分析单元( 层次) 的成本涵概范围的异同。美国学者丹尼斯琼斯( d e n n i s j o n e s ) 在“技术成本方法论研究项目”( t e c h o n o l o g yc o s t i n gm e t h o d o l o g yp r o j e c t 简称t c m ) 中，明确了对于网络教育来说，不同的分析单元( 层次) ，成本所涵盖的范围是不 同的，在t c m 的有关研究中将成本分析分为课程、传输模式( 媒体) 、组织机构三个不同的 层次，并在一个通用的研究框架内对不同层次的成本涵盖范围的异同作了表述。 对于成本的分类。目前的分类大多针对网络教育的过程特性和支持因素进行分类。 英国学者贝茨。1 将第三代远程教育的成本分为三类：制作成本、发送成本和支持成本。鲁 姆伯尔。1 从三个方面对网络教育的成本进行了分类：材料开发成本、材料传送成本、日常 管理和基础设施成本，并建立了比较详尽的成本分类指标体系。摩根“3 对院校层次的成本 分析和归类分为以下几类：技术特性成本、入力支持成本、能力发展成本、行政管理成 本、隐藏成本、课程开发成本以及课程教授成本。 按照凯依和鲁姆博尔。1 的分类，远程教育系统包括以下几个系统组成：课程子系统， 学生子系统，管理子系统，后勤子系统。 清华大学现代技术研究所的李海霞和易娜的文章“1 中曾设立两个维度来分析网络远 程教育成本，维度一是按照网络教育的过程和特性，将网络教育成本分为开发成本、传 送成本、教学与支持成本以及日常管理和基础设施成本四个子系统。每个子系统都细分 了在此子系统中与网络教育相关的活动和过程。维度二是按照中国现行的事业单位预算 会计科目支出性质，将网络教育学院的成本分为人力成本、公用成本、固定资产成本三 类。 北京师范大学的郑勤华和陈丽发表的文章中m ，以远程教育理论和教育经济理论为 基础，根据文献调研以及相关试点院校的实践，设计开发了一个网络课程成本核算的模 型，并进一步利用该模型对北京某高校网络教育学院2 0 0 1 年度和2 0 0 2 年度的办学情况以 及网络课程运营成本情况进行了数据统计与分析。文中建立网络课程成本结构模型，将 课程运营中成本按5 个维度进行详细阐述，分别为网络课程开发成本，网络课程发送成 本，课程学习支持成本，网络课程管理成本，固定资产与折旧。并进行了实证研究验证 了该模型的有效性。 贾微：网络课程教育综合效益评价研究 国内外对网络教育方面的成本研究已经相对比较成熟，已经有比较完善的成本指标 体系，本文建立的课程成本指标体系在前人研究成果上进行适当的完善，以期望达到更 好的评价效果。 英国开放大学的创始人托尼贝茨，是国际远程教育研究领域学术论文被引用次数最 多的专家之一。a c t i o n s 模型将技术与媒体的问题归为7 个要素：。 ( 1 1 技术的可行性与方便性( a c c e s s ) ( 2 ) 技术应用的成本( c o s t s ) ( 3 ) 教与学( t e a c h i n ga n dl e a r n i n g ) ( 4 ) 交互性与用户友好性( i n t e r a c t i v i t ya n du s e r f r i e n d l i n e s s ) f 5 ) 组织实施( o r g a n i z a t i o n a li s s u e s ) ( 6 ) 新颖性( n o v e l t y ) ( 7 ) 课程开发与传输的速度( s p e e d ) a c t i o n s 模型是关于媒体与技术在教育教学中选择应用的模型，是远程教学设计的 经典模型，为如何在教学应用中选择技术与媒体提供了思路和方法，在远程教育领域内 产生了普遍影响。它不仅是远程教育课程开发中技术应用的指导原则，也是传统课堂教 学中教师选择技术与媒体的重要原则0 1 。 1 9 9 9 年，加拿大卓越中心网络的电子学习发展计划小组进行了六个案例研究，其中 两个案例( b a r t o l i c z l o m i s 一1 i ea n db a t e s1 9 9 9 ：b a r t o l i c z l o m i s l i ea n db r e t t ， 1 9 9 9 ) ( 1 ) 考察了：资本费用和经常性费用：生产成本和传递成本：固定成本和可 变成本。研究分析了每种技术的成本结构和测量了每个学习者的单位成本。他们的研究 所评估的成本并不包括运作成本，因为这个数字并不存在。( 2 ) 有关效益的数据包括： 学习成果效益：教育价值效益：社会效益或增值效益。所涵盖的数据包括定量和定 性的，以及学生、教职员和行政人员各个方面。学习成果效益包括诸如学习成果，学生 教师满意度，投资回报。教育价值效益包括增加接入，灵活度，使用方便。最后，社会 效益或增值效益包括诸如减少交通堵塞和污染，失业率，潜在的新的市场。“”在这六个 案例实证研究中，采用了发放调查问卷和访谈的方式来搜集数据。定量的数据的收集是 通过调查问卷1 的发放和回收，此间卷根据学生自己的意见可以通过在线作答或是通过 电子邮件方式回答。而定性数据则是通过访谈法，愿意配合研究工作的学生可以根据个 人需要接受面对面的访谈、电话访谈或是电子邮件的访谈。 大连理工大学硕士学位论文 成本效益研究是开放远程教育中的一个重要领域，它不仅是评价教育成效的指标之 一，而且有助于我们考虑如何在保证教育质量的前提下，减少成本，提高效益。“2 “”1 在网 上教学成本效益方面我们应该考虑的因素更多，包括学生人数、课程数量、多媒体运用、 教师指导的互动、教育平台、同步和非同步网上互动、学生完成课程的比率等。关于网 络课程教学的成本效益，需要作进一步的严格的实证研究。 目前国外成本相关研究主要集中在分析成本范围、确立成本分析框架以及成本效益 的计量方法、探讨影响成本效益的相关因素等方面。 孔雪明根据奥托彼得斯的理论，认为远程教育是一种资本( 资金技术) 密集型经济 以信息技术和多媒体教学为基础。固定成本大，但是由于远程教育的规模很大，固定成本 被宏大的学生数量进行分摊后，变得很小，随着时间的摧移，这种成本将趋于零。学生的 平均可变成本也小于传统教育学生的成本“”“”。 在丁兴富老师的研究中关于远程教育经济效益的核算模型，也可以用于对网络教育 的模型分析。他的关于广播电视大学投资经济效益整体核算模型和广播电视大学投资经 济效益多极核算模型均可以借鉴用于分析网络教育的成本效益。n 6 3 卡珀与弗莱彻( c a p p e ra n df l e t c h e r ，1 9 9 6 ) 通过分析已有的远程教育成本效益的研 究，概括了影响成本效益的主要因素。这些因素包括：所提供的课程数量、课程修订的频 密程度、所使用的媒体类型、学生支持服务的种类和多寡，以及辍学率。n ”克里斯托弗 ( c h r i s t o p h e r ，1 9 8 2 ) “”和小沃尔特( s h o w a l t e r ，1 9 8 3 ) “”进行的研究则是早期调查的 实例，克里的结论是在为偏远地区美国空军学生提供培训时，高级电子教学系统比传统 教学模式更具有成本效益。而小沃尔特发现通过音频会议系统向专业人士提供继续教 育，成本效益高达5 5 。 另外一些研究( s h o w a l t e r ，1 9 8 3 ：h o s l e ya n dr a n d o l p h ，1 9 9 3 ：t r e v o r d e u t s c ha n d b a k e r ，1 9 9 7 ) 比较了视频会议的远程教育以及传统课堂教学的成本效益，通过视频会议 进行的开放远程教育，可以享有规模经济的效益。啪1 英格利斯( i n g l i s ，1 9 9 9 ) 。”发现， 以四种收生水平( 5 0 1 0 0 1 5 0 2 0 0 个学生) 来看，因特网的传递方式的生均成本，没有印 刷品传递方式那么符合成本效益。惠伦与赖特( w h a l e na n dw r i g h t ，1 9 9 9 ) o ”的另一项 研究指出，与课堂培训相比，因特网培训的固定成本较高，但是其课程传递的可变成本 却较低，因而可以相抵。韩国国立放送大学一项有关网上课程的成本效益研究( j u n ga n d l e e m ，2 0 0 0 ) o ”显示，网上教学的开发成本和传递成本会随着时间的推移而降低，因此 每个完成课程者的生均成本也就较低。 贾微：网络课程教育综合效益评价研究 从以上提到的文献中可以得出关于网络教育成本效益的影响因素主要有网络教育的 规模、网络课程设计和制作的质量，另外，网络院校教学论价值和软硬件成本的急剧转 变也会影响网络教育的成本效益。网络教育的成本研究已经比较成熟，但是其他指标体 系如收益、效益、效率、效果和效用等方面还大都停留在因素研究上，既缺乏实证研究， 又没有完善的分析模型，但是这些指标才更值得重视。本文期望通过使用d e a 数据包络 分析方法，建立一个针对网络课程的综合效益评价模型，并应用其进行网络课程评价实 证研究。 本文关于网络课程教育综合效益评价的研究就是以现有的网络教育评价研究为基 础，经过文献查阅、深度访谈和直接评价，得到综合效益评价投入产出各指标因素， 并进行筛选，设计问卷，最终建立网络课程教育综合效益评价指标体系。通过对网络 课程教育的综合效益进行实证评价，期望发现具体课程教育中存在的优势和劣势，提 出改进意见，给管理者和决策者以参考。 1 2 2 数据包络分析在国内外课程教育评价领域的应用综述 数据包络分析是由美国著名运筹学家a c h a r n e s 和w w c o p p e r 叫在“相对效率评 价”概念基础上创立的，该方法已经成为评价具有相同类型投入和产出的若干生产和非 生产部门相对效率的有效方法。2 0 世纪9 0 年代，数据包络分析开始应用于教育评价领 域。1 0 几年来，数据包络分析方法在教育评价领域的应用已经取得很大进展。1 9 9 4 年 t h a n a s s o u l i se ，d u n s t a np ”1 运用d e a 分析来引导学校提高绩效。1 9 9 5 年b e a s l e y 应 用d e a 方法研究了影响大学教学和科研绩效的因素；同年，p e t e rc h a l o s 和j o s e p h c h e r i a n 瞄】在研究影响教育部门公共政策的因素，评估教育投入产出效率时，为了克服 模型建立繁琐等问题，采用了数据包络分析方法进行评估，解决了指标数据庞大的难题。 1 9 9 6 年b e g r a e v e ，l a n l b r e c h t s ，y a n p u y m b r o e c k ，1 9 9 7 年a r c e l u s ，c o l e m a n ，1 9 9 8 年a g r e l lp j s t e u e rr e 口7 1 ，2 0 0 0 年p e rj a g r e l la n dr a l p he s t e u e r 运用数据包 络分析方法对大学内院系的绩效分别进行评价。2 0 0 2 年，a b e lam o r e n oa n dr a g h u t a d e p a l l i 研究认为随着公立高校的增多，必然涉及到利用政府财政资源的效率，并 在文中提出应用数据包络分析来评估学术部门的效率具有很大优势，这种方法不但是独 一无二的衡量学术部门效率的方法，而且能够在找出效率差的原因的同时找到提高效率 的途径，再次强调了d e a 在教育投入产出应用中的适用性。2 0 0 2 年，j o h nr u g g i e r o ，j e r r y m i n e r 和l o y db l a n c h a r d 提供了一个系统的非参数框架来衡量各教学区的产出，他们 运用数据包络分析方法来分析、调整不同成本环境下的财政投资，以此来找出并控制纽 大连理工大学硕士学位论文 约州立学校的效率非有效的因素。同年，g a r yb n a c k m a n 。”分析了教育产出的预测及 方法，其中也包括数据包络分析。 数据包络分析方法( d e a ) 在国内教育评价领域也已经有了一定的应用。国内许多学 者也对此加以改进和发展，使这种方法广泛应用于社会科学等领域。中国学者从事d e a 研究始于1 9 8 6 年，1 9 8 8 年公开出版了关于d e a 的第一本专著，严格、系统地论述了d e a 方 法与模型。“。1 9 9 8 年2 月，程立军1 利用d e a 方法，给出了评价学生学习成绩相对有效 性的数学模型。2 0 0 1 年8 月，刘亚荣、张兴。3 运用t d e a 方法对我国高等学校办学效率 进行综合评价。2 0 0 3 年3 n 陈通、白建英。”利用d e a 方法对西部高等教育投入产出的相 对有效性进行分析与评价。2 0 0 3 年6 月，郭新立。”运用d e a 方法建立了学科技术有效性 评价模型，通过对同学科多所院校的投入产出观察数据，得出了相应技术有效性与否的 结论。结果表明，该模型不仅能评价学科的办学效益水平，而且能对非技术有效的学科， 提供改进依据。2 0 0 4 年1 月，窦爱女啪在数据包络分析的c 2 r 模型基础上，建立了职校计 算机课程教育效益的评价模型，并对各职校的计算机教育的投入产出的相对有效性进行 分析和评价，为管理者决策提供科学依据。2 0 0 5 年i 月，候启娉i 州讨论t d e a 方法在研究 型高校科研绩效评价中的应用，并进行高校科研绩效的实证研究，说明高校资源投入及 科研产出成果的技术效率，表明d e i a 方法能有效衡量教育多种投入与多种产出的复杂关 系。 数据包络分析方法在我国已经有了一定的应用，但是，它在我国教育评价领域的应 用仍然不够广泛、深入，大都局限于方法的介绍和模型的简单应用，所采用的指标一般 较少，缺少对指标体系建立的客观论证，而且对于数据包络分析方法应用于教育评估领 域需要解决的特殊问题注意不够“1 ，有待进一步研究。 1 3 研究的目标和技术路线 本文研究的最终目的是利用运筹学中的d e a 方法在教育效益评价领域的适用性，结 合网络课程教育的特殊性，运用该方法对网络课程教育投入产出综合效益进行量化评 估。笔者希望通过将d e a 方法同网络课程教育的特殊性的全面、客观结合，构建出能够 科学、客观评价网络课程教育综台效益的数学模型，并应用于实践进行具体课程的评价。 本文沿着提出问题，分析问题，解决问题的技术路线，通过资料收集，整理，在定 性研究的基础上，通过指标选取、权重设定、建立数学模型进行量化分析，最终在实证 中使该模型得到应用。 贾微：网络课程教育综合效益评价研究 i 引言 + 网络课程教育综合效益理论研究 上 f评价指标体系建立 指标因素探查与筛选 上 问卷设计与样本选定 上 数据收集与统计分析 上 上 网络课程组织者投入产出 网络课程学习者投入产出 综合效益评价指标体系 综合效益评价指标体系 上j r 上 l 层次分析法确定指标权重 l f 运用d e a 模型进行评价分析 1 0 评价结果分析 图1 1 技术路线图 f i g i 1t h et e c 面c a ll i n eo f r e s e a r c hi nt h ei s s u e 1 4 本文的创新点 在前人研究基础上，论文通过实证调查对网络课程教育综合效益评价进行了深入的 研究，其中主要创新点有： 第一，通过对国内外网络课程教育投入产出相关文献的梳理，晃定出网络课程综舍 效益评价的定义。 第二，论文通过对文献的查阅和网络教育专家的访谈，应用因子分析方法创建网络 课程教育综合效益评价指标体系，该评价指标体系由组织者和学习者两个独立的综合效 益评价指标体系组成。 第三，把数据包络分析方法( d e a ) 应用于网络课程教育的综合效益实证评价研究。 第四，通过实证评价研究，给出评价网络课程综合效益的一般步骤，并提出网络课 程建设方面的具体建议。 大连理工大学硕士学位论文 2 相关理论概述 2 1 网络课程教育综合效益评价相关理论 2 1 1 网络课程及网络课程教育概念的界定 按照金伯格( g i n s b u r g ，1 9 9 8 ) 等人的分法，网络课程可以分为三代：第一代是 通过网页给学习者提供教学材料和有关资料，以及与其他的有关教育网连接；第二代是 除了在网上提供学习材料外，还要求学习者通过电子邮件、电子公告栏、网上练习和测 量进行异步双向交流；第三代是除了第一代、第二代外，还要求通过网上交谈室、电话 会议、视频会议或m u d s ( m o o s ) 系统进行同步双i 訇_ 交流。当前世界网络课程已正向第三 代发展。 我国的网络课程大部分处于第二代，有一些还处于第一代。网络应用于教育领域， 给人们提供了大量便捷的学习机会、丰富的教学环境和教学资源，使学习活动更加自主 化、个性化，使教育的适应性得以大大加强，网络课程要充分体现网络的这一特点，构 建多媒体化的接近真实生活的自主、协作学习情境，能充分利用网络的资源开放性。 学术界关于网络课程的定义当然离不开网络课件的定义和区分。因为目前国内网络 课程教育虽然大多已经发展到第二代，亦即实现了异步双向交流，但是还有一些网络课 程是处在第一代，简单利用网页或其他网络链接提供课件来实现教学。所以课程相对于 课件的区分正是网络课程概念界定的关键所在。 课件( c o u r s e w a r e ) 指专门为进行教学活动而设计的计算机软件，包括用于控制和 进行教育活动的程序、帮助开发维护程序的文档资料以及帮助教师和学习者使用程序学 习的课本和练习册等嗍。网络课件，就是应用于网络环境的课件。 而网络课程则是通过网络表现的某门学科的教学内容及实施的教学活动的总和。它 包括两个组成部分：按一定的教学目标、教学策略组织起来的教学内容和网络教学支撑 环境，其中网络教学支撑环境特指支持网络教学的软件工具、教学资源以及在网络教学 平台上实施的教学活动。他们的教育目标是致的，都是使学习者的认知结构发生一定 的改变，使他们学会认知、学会生存、学会做事和学会与人共事。但是，课程与课件的 出发点不同，课件是从教学活动出发，课程是从社会需求出发，课件把课程中所规定的 教学内容、教学活动用软件的方式实现出来，但缺失了很多课程的内涵，如社会需求分 析、课程规划等，而这些缺失在教学中不能显现出来，因此也造成了这两种概念的混淆， 有些网校或网络学院就把某些章节、某些知识点的材料作为网络课程了。 贾微：网络课程教育综合效益评价研究 本论文研究的网络课程概念界定为，通过网络表现的某门学科的教学内容及实旋的 教学活动的总和。网络课程教育则是利用网络课程进行的教育活动。 2 1 2 网络课程教育综合效益评价 网络课程综合效益评价即在一所学校内，以网络课程综合效益为评估对象所进行价 值判断的一种评价类型，主要用于学校管理决策。对网络课程综合效益进行评价，就是 对网络课程教学的教与学，过程与结果，网络课程开发制作、技术设备支持、正常运营 成本等的“投入”与学生学习绩效、经济效益、社会附加效益的提高等“产出”行为进 行价值判断，并有效利用评价的导向，激励、调控功能，规范课程教学，使之在坚持正 确的价值取向的状态下正常运行。 网络教育的基础是网络课程，因此，网络教育作为我国教育改革与发展的新生事物， 能否取得成就最终还将取决于其课程教学质量和教学水平。从网络教育的发展来看，网 络课程教育的综合效益研究，不但可以发现制约我国网络教育发展的诸多影响因素，发 现网络教育过程中现存的问题及原因，更有助于网络教育决策者和管理者改进网络教育 管理方法，提高网络教育资源利用效率，保证教学质量，提高办学效益。 本文的网络课程教育综合效益评价分成组织者的角度和学习者的角度分别进行研 究，因为组织者产出下的一些指标因素，例如“学费管理费收入”同时也是学习者的投 入指标因素，因此如果把二者统一进行研究则会相互抵消。 2 1 3 网络课程教育的投入产出概念界定 教育经济学的研究学者认为，教育成本投资也是一种生产性投资，可以计算投入产出 效益，也存在成本效益。他们认为，教育的投入产出问题是教育领域中经济活动的体现， 是教育与经济关系最基本的表现。在我国现阶段，教育投入不足成为教育事业发展的瓶颈， 教育产出也直接关系到教育投入的产出效率，分析网络课程教育的投入产出综合效益对于 我国网络教育节约教育资源，提高网络教育教学效率，促进网络教育改革和发展战略方面 都会产生非常重要的推动作用。 网络课程教育的投入产出方面的研究大都在网络教育成本和效益研究方面。根据对 文献的查阅，课程成本方面已经有比较健全的网络课程成本结构模型，模型将课程成本 按5 个维度进行详细阐述，分别为网络课程开发成本，网络课程发送成本，课程学习支 持成本，网络课程管理成本，固定资产与折旧。并进行了实证研究验证了该模型的有效 性。效益方面的也有很多优秀的研究成果，如英国开放大学的创始入托尼贝茨的6 个 案例研究，就是建立在他的a c t i o n s 模型基础上的网络课程成本效益评价研究。 大连理工大学硕士学位论文 本文把网络课程教育投入分为网络课程教育组织者的投入和网络课程学习者的投 入；同样，网络课程教育产出也包括组织者的产出和学习者的产出。本文分别建立组织 者和学习者各自的投入产出综合效益评价指标体系。 组织者的投入界定为人力、物力、财力3 个维度；产出分为教学产出和财务产出。 学习者的投入分为人力投入和财力投入；产出指标分为知识培养，能力培养和其它产出 3 个维度进行研究。需要说明的是，学习者的投入指标维度之所以没有物力投入，是因 为物力下的指标因素，如学习空间，由于网络教育的特殊性不易量化，学习设备方面也 可以转化为财力的投入，因此分为人力和财力两个维度建立指标体系更为合理可行。 2 2d e a 方法对网络课程教育综合效益评价的适用性 2 2 1d e a 方法概述 数据包络分析( d a md e v e l o p m e n ta n a l y s i s ，简称d e a ) 方法是数学、运筹学、数理 经济学和管理科学的一个新的交叉领域，最初由c h a m e sa 和c o o p e rw w 等人于1 9 7 8 年提出。它自诞生之日起，无论在理论上还是应用方面，都引起了无数研究者的极大兴 趣，并逐渐广泛应用于管理学、经济学、军事学等诸多领域，现在已经成为运筹学的一 个新的分支。 d e h 不仅在研究具有相同类型的部门或单位( 决策单元，d e c i s i o nm a k i n gu n i t ， 简称d 删) 间的相对有效性等方面十分有用，更是经济理论中估计具有多个输入，特别 是具有多个输出的“生产前沿函数”的有利工具。它使用数学规划模型比较决策单元间 的相对有效性，对决策单元做出评价。决策单元就是一种约定，它可以是学校、医院， 也可以是企业。确定决策单元的主导原则是：在某一视角下，各决策单元有相同的投入 和产出。通过对各决策单元投入产出数据综合分析，d e a 可以得出每个决策单元综合效 率的数量指标，据此将各决策单元定级排队，确定有效的( 相对效益最高的) 决策单元， 并指出其它决策单元非有效的原因和程度，为主管部门提供管理决策依据。 2 2 2d e a 方法的特点 d e a 方法特别适用予具有多投入、多产出的复杂系统。它具有三个显著优点： ( 1 ) 因为其以决策单元各投入产出的权重为变量，从最有利于决策单元的角度进行 评价，从而避免了指标在优先意义下的权重。 ( 2 ) 假设每个投入都有一个或多个产出相关联，而且投入产出之间确实存在某种关 系，使用d e a 方法则不需要确定这种关系的显式表达式。因此，这种方法排除了很多主 观的因素，减少了误差，因而具有很强的客观性。 贾微：网络课程教育综合效益评价研究 ( 3 ) 运用d e a l 方法不仅可以处理多输入、多产出的生产系统，而且还可以应用于 非盈利系统。 d e a 方法自提出以来，众多学者就其与传统评价方法、决策方法的比较研究作了很 多研究工作。有观点认为非参数d e a 方法与传统参数前沿估计方法比较，最接近所有样 本点的外包络面，亦即生产空间中的前沿面作为生产函数图形，比回归分析更接近生产 函数原来的含义，结果也更为可靠。另外，d e a 方法处理多输入，特别是多输出问题的 能力具有绝对优势，显示出引人注目的优越性。因为使用d e a 评价方法，不仅能对每个 决策单元相对效率进行综合评价，而且可以得到很多经济学中具有深刻经济含义和背景 的管理信息，用于指导决策单元输入输出指标的改进和修正。d e a 分析是纯技术性的， d m u 的相对有效性评价结果与输入输出指标的量纲选择无关。对于非单纯盈利的公共服 务部门，由于不能简单地利用利润最大化来对它们的工作效益进行评价，也很难找到一 个合理的包含各个指标的效用函数，而d e a 方法是对这类部门工作进行评价的较有效的 方法。d e a 吸引了众多的应用者，也使其应用领域正在不断的扩大。 2 2 3 应用d e a 方法分析的思路 数据包络分析的基本思路是使每个被评价单位成为一个决策单元( d m u ，d e c i s i o n m a k i n gu n i t s ) ，再由众多d m u 构成被评价群体。通过对投入产出比率的综合分析，确 定有效生产前沿面，并根据各d m u 与有效生产前沿面的距离状况，确定各d m u 是否 d e a 有效。其操作步骤可以分成四步： ( 1 ) 收集数据。根据需要搜集有关输入( 投入) 、输出( 产出) 数据。 ( 2 ) 调整数据。使输入数据的优化方向交小，即越小越好，输出数据的优化方向变 大郎越大越好。 ( 3 ) 建模。假设对n 个企业进行评价，则就有n 个决策单元。以n 个决策单元为 行向量，形成一个n ( 件s ) 维数表，该表即为标准d e a 模型。 ( 4 ) 求解。运行d e a 程序，得出效率评价指数，据此判断单元是否有效，及有效 的输入量和输出量。 其更为具体的应用过程如下图所示： 大连理工大学硕士学位论文 界定研究对象i 上 确定研究目的 上 选择决策单元 上 l 调整评价 l建立输入输出指标体系 i 指标体系 + 收集数据 否土 f 是否满意卜 l 用认模型进行评价 图2 2d e