（教育技术学专业论文）远程学习评价量规的设计研究.pdf

摘要 暑曼曼量鼍曼皇曼曼! 曼量曼曼曼曼鼍曼曼鼍孽。一m m u 曼曼曼寡曼曼曼曼，曼曼曼曼曼鼍皇曼鼍璺皇曼曼曼曼鼍曼皇皇皇曼曼曼曼曼曼曼曼量皇曼孽 远程学习评价量规的设计研究 教育技术学专业硕士研究生刘葭 指导教师刘革平教授 摘要 如何针对远程学习的特点、适应成人在职学习者的特殊性、满足远程学生自主学习要求 开展学习评价是远程教育领域急需解决的问题之一。评价必须具备标准，没了标准，评价将 失去依据。科学有效的量规不仅提供了评价的标准，还是关注学习者学习过程的有效评价工 具。而当前却缺乏对远程学习评价量规的理论研究和实践探讨，在一定程度上制约了远程教 育的发展。 本研究以现代学习评价理论为指导，总结了国内外远程学习评价和量规的理论研究和应 用成果，结合远程学习模式特点，广泛征求远程教育领域专家、教师和学习者的意见，设计 了远程学习评价的量规，提出了量规的应用策略和并对基于量规的评价活动的开展做了介绍。 研究中，首先对远程学习、远程学习评价的现状进行了调查研究，并在j 比基础上制定了 研究方案。其次，通过文献分析和理论探讨，初拟出过程性评价和总结性评价量规的指标项， 并据此编制、发放“远程学习评价指标项调查问卷”的教师版和学生版进行调研。用s p s s 统 计软件分析调查结果，采用因子主成分分析法提取出量规一、二级指标，初拟出量规指标项 体系；并根据因子负荷和主因子的相对贡献率计算出各级指标权重；得出过程性评价和总结 性评价两个量规的初稿。最后，咨询专家以检验量规的有效性和修订完善量规。 本研究设计出了一套可用于远程教育实践的远程学习评价量规体系，包含有过程性和总 结性两个独立统一的量规。其中过程性量规分为交互情况、情感态度、信息素养、学习策略 与目标计划5 个一级指标，主要用在学习过程中对学习态度、策略进行评价以监控和调节学 习；总结性评价有技能、情感和意识3 个一级指标，用在学习结束后鉴定学习者在学科知识 以外的进步。研究还在此基础上提出了量规应用策略和基于量规的远程学习评价方案，探索 了一套基于量规的远程学习评价的方法。 关键词：远程学习评价远程学习学习评价量规 a b s t r a c t 曼皇曼! 曼曼皇m 一一mo 鼍曼曼曼曼曼罡曼曼曼 s t u d y o fr u b r i cd e s i g nf o re v a l u a t i o no f d i s t a nc el e a r n i n g t e c h n o l o g yg r a d u a t es t u d e n t ：l i uj i a 芒心p e r v l s o r ：u e d x n kl 1 u 门 t 。 一 a b s t r a c t a c c o r d i n gt ot h ec h a r a c t e ro fd i s t a n c el e a r n i n g ，a d a p tt ot h ep a r t i c u l a r i t yo fo n - t h e - j o ba d u l t l e a r n e ra n dm e e tt h er e q u i r e m e n to fs t u d e n t ss e l fl e a r n i n g ，o n eo ft h eu r g e n tp r o b l e mi nd i s t a n c e e d u c a t i o n a lf i e l di sh o wt od e v e l o pt h el e a r n i n ge v a l u a t i o n t oe v a l u a t ed i s t a n c el e a r n i n gm u s th a v e s t a n d a r d ，o t h e r w i s et h ee v a l u a t i o nw i l l l o s tb a s i s s c i e n t i f i ca n de t t e c t i v er u b r i ca f f o r de v a l u a t i o n s t a n d a r d ，b u ta l s ot h ee f f i c i e n tt o o lt oc o n c e r nl e a r n i n gp r o c e s s c u r r e n t l yd e f i c i e n c yo fs t u d y0 nt h e r u b r i cd e s i g nf o ra s s e s s m e n to fd i s t a n te d u c a t i o n , t os o m ee x t e n tr e s t r i c t st h ed e v e l o p m e n to fd i s t a n t e d u c a t i o n i nt h i ss t u d y , w i t ht h eg u i d a n c eo fm o d e r nl e a r n i n ge v a l u a t i o nt h e o r y , t h et h e o r e t i c a lr e s e a r c h a n da p p l i c a t i o na c h i e v e m e n to fw o r l d 、衍d ed i s t a n c el e a r n i n ge v a l u a t i o na n dr u b r i cw e r es u m i n a r j z e d ， c o m b i n e dw i t ht h ec h a r a c t e r i s t i co fd i s t a n c el e a r n i n gm o d e l ，w i d e l yc o n s u l t i n gt h ee x p e r t s ，t e a c h e r s a n dl e a r n e r so fd i s t a n c ee d u c a t i o n a lf i e l d , d e s i g n e dt h er u b r i cf o rt h ee v a l u a t i o n ，p r o p o s e dt h e a p p l i c a t i o ns t r a t e g i e sa n di n t r o d u c e dt h ea c t i v i t i e sd e v e l o p e do nr u b r i cb a s e de v a l u a t i o n a tf i r s t ，t h ei n v e s t i g a t i o na n ds t u d yh a db e e nd o n eo nc u r r e n ts i t u a t i o na b o u td i s t a n c el e a r n i n g a n dd i s t a n c el e a r n i n ge v a l u a t i o n , a n dr e s e a r c hp r o g r a mh a db e e nw o r k e do u to nt h i sb a s i s s e c o n d , b yt h em e a n so fd o c u m e n ta n a l y s i sa n dt h e o r ya p p r o a c h ，t h ei n d e x e s0 1 1p r o c e s se v a l u a t i o na n d s 眦蝴r ye v a l u a t i o nr u b r i cc o u l db ep r e p a r a t o r yn l a d eo u t , a n d “i n v e s t i g a t i o nq u e s t i o n n a i r eo n d i s t a n c el e a m i n ge v a l u a t i o ni n d e x i nt e a c h e r s v e r s i o na n ds t u d e n t s v e r s i o na c c o r d i n g l yh a sb e e n d r a w nu pa n ds e n to u tt oi n v e s t i g a t ea n ds u r v e y b yu s eo fs p s sa n df a c t o rp r i n c i p a lc o m p o n e n t s a n a l y s i s ，f i r s ta n ds e c o n dg r a d ei n d e x e s w e l l ee x t r a c t e d , a n de s t a b l i s h e dr u b r i ci n d e xs y s t e m p r e p a r a t o r y a c c o r d i n gt of a c t o rl o a da n dc o n t r i b u t i o nr a t eo fp r i n c i p a lf a c t o r , t h ew e i g h i n go f a l l i n d e x e sw e r ec a l c u l a t e d , a n dg o tt h ep r e p a r a t o r yd e s i g no np r o c e s sa n ds u n l n l a r ye v a l u a t i o nr u b r i c f i n a l l y , w ec o n s u l t e dt h ee x p e r t st oe x a m i n et h ev a l i d i t yo ft h er u b r i c ，t h e nr e v i s e da n dm o d i f i e d t h e m as e to fr u b r i cs y s t e mo nd i s t a n c el e a r n i n ge v a l u a t i o nu s e di nd i s t a n c el e a r n i n gp r a c t i c ew e r e i i i 两南大学硕十学位论文 - -! al 曼皇曼曼曼曼曼曼曼曼量曼鼍曼量曼曼量曼曼量! 曼曼曼曼曼! 曼皇皇璺曼曼曼曼曼曼量曼曼曼量曼曼皇曼曼曼皇曼曼皇曼曼曼皇曼 d e s i g n e d ，i n c l u d i n gp r o c e s sa n ds u m m a r y , t h et w oi n d e p e n d e n ta n du n i f i e dr u b r i c t h ep r o c e s s r u b r i ch a df i v ef i r s t g r a d e i n d e x e s ，i n c l u d i n gm u t u a ls i t u a t i o n , e m o t i o n a la t t i t u d e ，i n f o r m a t i o n a t t a i n m e n t ，s t u d ys t r a t e g y , t a r g e ta n dp l a n , m a i n l yu s e dt oe v a l u a t et h es t u d ya t t i t u d ea n ds t r a t e g y a l o n gw i t ht h el e a r n i n gp r o c e s s ，m o n i t o ra n da d j u s tt h el e a r n i n gp r o g r a m t h es u m i n a r yr u b r i ch a d t h r e ef i r s t 。g r a d ei n d e x e s ，i n c l u d i n gs k i l l ，e m o t i o na n dc o n s c i o u s n e s s ，t oi d e n t i f yt h ep r o g r e s so u to f s u b j e c tk n o w l e d g ea f t e rt h es t u d y t h er e s e a r c hh a da l s op r o p o s e dr u b r i ca p p l i c a t i o ns t r a t e g ya n d d i s t a n c el e a r n i n ge v a l u a t i o ns c h e m eb a s e do nr u b r i c ，a n ds e a r c h e do u tas e to fm e t h o d sa b o u t d i s t a n c el e a r n i n ge v a l u a f i o nb a s e do nm b f i c k e y w o r d s ：d i s t a n c el e a r n i n ge v a l u a t i o n ，d i s t a n c el e a m i n g ，l e a m i n ge v a l u a t i o n , r u b r i c i v 独创性声明 本人提交的学位论文是在导师指导下进行的研究工作及取得的研 究成果。论文中引用他人已经发表或出版过的研究成果，文中已加了 标注。 学位论文作者： 部弪 签字日期：、彳年厂月订日 学位论文版权使用授权书 本学位论文作者完全了解西南大学有关保留、使用学位论文的规 定，有权保留并向国家有关部门或机构送交论文的复印件和磁盘，允 许论文被查阅和借阅。本人授权西南大学研究生部可以将学位论文的 全部或部分内容编入有关数据库进行检索，可以采用影印、缩印或扫 描等复制手段保存、汇编学位论文。 ( 保密的学位论文在解密后适用本授权书，本论文：口不保密，口 保密期限至年月止) 。 学位论文作者签名：壶1 程 导师签名： 学位论文作者签名：以l 伍 导师签名： 签字日期：加7 巧月石日 签字日期 带季 弘吖j 年箩月涉日 第】章绪论 曼舅曼量鼍_ a 一 _ a_-aa,a鼍曼曼曼曼曼曼皇曼曼曼!曼鼍曼曼曼皇曼蔓曼曼曼曼曼曼曼曼皇 第1 章绪论 1 1 问题的提出 随着现代信息技术和网络技术在远程教育中的应用，特别是2 0 世纪9 0 年代以来，远程 教育获得了快速发展，进入了以网络、双向、互动为特征的第三代远程教育现代远程教 育。上个世纪末中国也启动了“国家现代远程教育工程”，截止目前为止，我国开展现代远 程教育试点的高校已达到了6 8 所，现代远程教育在时间、空间上的灵活性、教育资源的优质 性和丰富性、教学交互的多样性，使得越来越多的学习者选择这种灵活自主的学习方式，远 程教育也已成为构建学习型社会、建立终身学习体系的骨干力量。但是如何控制远程教育的 质量、如何评价远程学习的效果等问题却成为制约远程教育发展而急需解决的问题。 1 1 1 学习评价是学习活动的重要环节 学习评价是从教育评价中的“学生评价”分离出来的，是对学生的学习过程和结果进行 把握和价值判断，从而考察和促进其学习质量，是对学生的学习进度、学习成绩、进步情况、 个性特色、能力或其他表现的价值判断和反馈【5 】。目的在于为学生和教师提供正确的反馈信息、 提供教学决策，最终提高学习和教学质量。 在传统课堂教学活动的评价改革中，采取教师、同伴、家长、学习者自己等多元主体， 对学习者的学习方法、表现和进步等方面给予评价、反馈，很大程度上提高了学习质量，证 明了有效学习评价对教学效果的影响是很大的，评价是学习活动中必不可少且最为重要的一 个环节【6 】。 1 1 2 远程学习对学习评价方式提出了新的要求 在长期的传统教学实践中，已经产生了多种不同的评价标准和评价方法，然而它们不能 完全适用于新的学习模式，特别是网络远程学习。传统学习和远程学习在学习过程、学习结 果要求、学习对象的特征等方面都有明显的区别，不可用同样的标准、方法和技术来评价学 生的学习。 事实上，评价问题一直是远程教育服务质量管理的核心。为了确保网络教学的质量，在 网络教学中常实施三种评价：1 远程教学系统的评价，是对远程教学系统的技术、实现功能、 使用效果等方面的评价。2 对教学计划的评价，主要研究远程教学的教学计划或材料对既定目 标群体的有效性，如网络课程评估、网络课程标准制定等等。3 对学生学习的评价。即基于网 络学习的学生学习结果判断和评定，可能包括成绩、进步、能力增长以及其他成就、表现等 具体内容。对学生学习的评价应该是远程学习质量的终极意义之体现，然而由于远程学习过 程难以监控、学习信息难以收集、评价工作量大等因素，造成了国内外在远程教育评价领域 较多的关注前两者评价，而对远程学习评价的研究较少，没有提出满足远程学习方式的有效 西南大学硕士学位论文 皇曼曼皇曼曼曼曼曼曼曼鼍量量曼曼皇皇曼曼曼量皇量曼量曼! 曼i l l i 一 ； 一。曼曼! 舅! ! 皇曼! 曼鼍曼 评价措施和工具，无法应对快速发展的远程教育事业的迫切需要 1 6 】。 1 1 3 量规是实施新的远程学习评价较为有效的工具之一 量规是对学生的作品、成长记录、学习成果或者学习过程中的( 行为、认知、态度) 表 现进行评价的一套标准。它往往从与学习目标相关的多个维度规定评价准则和划分等级，并 且融合定性评价与定量评价于一体，是有效的面向学习过程的评价工具之一。 目前远程教育普遍采用的学生学业评价就是“一次性期末考试”或“平时作业+ 期末考 试”。作业和考试不足以评价学生的学习行为、过程和成就，这种以测验和作业决定学生的 学习成绩的评价方式存在许多弊端：注重终结性评价，而忽视形成性评价，造成学生的“应试 学习”现象严重、学习动机难以维持、学习质量难以保证。 量规作为一个评价工具，是课程与学习的一个有机组成部分，把评价与课程、学习的一 体化注入到学习活动中去，不同于过去将评价排斥于课程与学习之外或将评价视为外在监控 的传统评价观。基于远程学习师生分离、教师对学习者和学习活动的监控缺乏的实际情况， 让学习者体会到被关注感，其学习也得到了监控，有助于减少网络学习的孤独感。量规的运 用将提高评价的有效性，促使教师和学习者关注学习过程、保持学习动机，最终提高远程学 习质量。而且使评价贯穿于整个学习活动中，可以随时发现和及时解决学生的学习困难和学 习活动中存在的问题【2 5 1 。 而在目前的远程教育领域，却缺乏对学习者学习评价的有效可用量规。因此，本研究根 据远程学习的目标和需求，结合远程学习的特征，构建出适合远程学习评价需求的评价工具， 旨在最终提高远程学习的效果。 1 2 研究现状 1 2 1 远程学习评价研究现状 1 - 国外研究现状 ( 1 ) 美国的远程教育质量评估 2 0 0 0 年4 月年美国高等教育政策研究所( i h e p ) 发表了在线教育质量：远程互联网教育 成功应用的标准。整个评估系统被分为7 个项目2 4 个指标，较之于传统高等教育，对远程 教育学校支持、课程开发、学生服务、教师培训等方面做了进一步要求。它还明确指出在课 程开发过程中，应充分考虑到学生分析能力、综合能力和自我评价能力的发展，并把这些内 容当作课程学习的重要组成部分。 。 此外，教学设计与适用专业委员会制订的“在线学习的认证标准”于2 0 0 1 年7 月底通过 测试并定稿，该标准从三个方面对在线学习的课程进行了评价，分别为：可用性、技术性和教 2 第1 章绪论 学性。以评价手段监督建设优秀的课程资源，提供给学习者以保证学习的质量和远程教育教 育的质量。同时，美国成入学习研究中心2 0 0 0 年提出了保证远程教育质量的5 个原则：教学 设计、学习者支持、远程教育机构的支持、学习结果、技术。而美国高等教育机构委员会提 出的保证远程教育质量的5 个方面是：教育机构和院校的责任、课程和教学、教师支持、学 生支持、评价【3 3 1 。 不难看出，在美国的远程教育实践中，都借用了评估手段监督远程教育机构，保证其能 提供优质的学习支持服务，规范了远程教学的开展和租住。但都是外部的监控调节方式，缺 少对学习者内部的的学习评价研究和有效应用。 ( 2 ) 英国的远程教育质量评估 英国高等教育质量保证署( q a a ) 提出了质量保证的建议性指南远程学习质量保证指 南( g u i d e l i n e s0 1 1t h eq u a l i t ya s s u r a n c eo f d i s t a n c el e a r n i n g ) 。对远程教学的开展提出了包括 课程的设计、验收与检查、课程的发送、学生发展与支持、学生交流与表达和学生评价等方 面严格和详细的要求。而且在其指南中明确对学生评价做了以下要求：远程教育机构应该 能够公开证明对学生的总结性评价是适合学习模式、课程实施条件和评价性质的。评价的执 行、评定与结果的公布，都是遵循可靠和恰当的方法。无论哪方面，评价程序都是根据确保 学术标准的要求。远程教育机构应该能够证明对课程和模块的总结性评价，充分体现了课 程和模块所规定的学生需要达到的学习结果的情况。远程教育机构应该能够对总结性评价 过程进行直接控制，并对评价结果进行分析。远程教育机构应该使形成性评价成为课程设 计的组成部分。远程教育机构应该对评价程序和活动进行系统的监控，并根据反馈对评价 程序和活动进行修正。而且指出在进行学生评价的时候，远程教育院校须认真考虑：课程和 模块评价策略的原理；确定学生的作业是自己完成的；协调形成性评价中涉及的各种评价标 准：地方学习中心管理和评定的课程的可靠性；对课程作业打分的标准要安排监控措施；教 育机构不能直接管理和监督的考试，对考试每个阶段的规则、方法、记录和其他文档进行清 楚和易于理解的描述，在一定程度上要使那些对考试不熟悉的人也能理解等要求。 同时英国的开放远程学习质量委员会制订的开放和远程学习质量控制标准( o p e na n d d i s t a n c el e a r n i n gq u a l i t yc o n t r o ls t a n d a r d s ) 于1 9 9 9 年9 月开始试实施。标准包括导言部分共有 1 1 项，标准主体部分包括有课程目标与结果、课程内容、广告和招生、学生入学程序、学习 支持、开放学习中心、学习者享有的福利和学校8 项认证活动。整个评价的内容分类十分全 面，对整个开放和远程教学的过程都做了详细的说明和规定，甚至包括对远程教育院校的招 生广告都做了明确规定，显示了英国远程教育的专业协会对远程教育的规范性也有很好的约 束。 此外英国w a l e s - b a n g o r 大学的s a n d yb r i t a i n 和o l e gl i b e r 协作完成了虚拟学习环境的 3 两甫大学硕士学位论文 量曼皇曼曼曼曼曼曼曼曼皇曼曼曼i i i ；i 曼曼曼曼曼曼曼曼曼! 曼曼量量曼曼曼曼曼曼曼皇曼皇量曼曼曼皇曼曼曼曼曼曼量 教育评价框架的报告，从评价策略的角度介绍了会话模型和控制论模型两种不同的模型。 从上可以看出质量评价作为质量保证的重要手段正受到越来越多国家和远程教育机构的 重视。但是国外目前的远程教育质量评价研究和实践主要集中在课程的开发与传送、对教师 和学习者的支持服务、远程教育机构的评估和评价上。他们关注远程教育服务机构是否为学 习者提供了优质的服务和支持，从宏观和客观层面确保了远程教育的质量。( 1 l 【3 】【4 0 】【5 0 】 2 国内研究现状 ( 1 ) 国内理论研究 我国一直将远程教育当做构建学习型社会、终身学习的主导力量，并强调要充分发挥现 代远程教育在建设人力资源强国中的重要作用。学习评价是远程教育评价中对参与主体一学 生的学习过程和结果的评价，对远程学习效果和远程教育质量的保证有非常重要的作用。对 远程学习评价的研究一直是远程教育领域研究和实践关注的热点，并已得到了越来越多的远 程教育、计算机科学、教育领域学者的关注。 以“远程学习评价”、“学习评价”、“网络学习”为关键词搜索硕博论文库，分析发 现关于评价的研究一直是远程教育领域研究关注的热点。如华中师大的胡春红在2 0 0 6 的硕士 论文基于电子学档的网络学习评价系统的设计与实验中利用了电子学档，结合其它的评 价手段建立了一个面向过程的网络学习评价系统 2 8 】。北京交通大学硕士研究生侯丽平在其研 究对网络学习者形成性评价及评价系统的研究与设计中设计和开发了基于模糊综合评判 法的网络学习评价体系。【2 9 埔京师范大学的曹梅在2 0 0 2 的研究网络学习的学习监控和学习 评价的理论与技术框架研究论文中提出了以学习评价促进学习者自我监控，最终提高自主 学习能力，并提出了网络学习评价的原则和面向过程的远程学习评价的技术方案【3 。西南师 范大学的刘革平在其博士论文基于数据挖掘的远程学习评价研究中利用“数据挖掘”技 术构建了一个远程学习评价系统，对远程学习的过程评价傲了有效探讨【1 0 j 。浙江工业大学的 魏霞在0 7 年完成的硕士论文面向网络教育的学习评价依据采集系统的研究与实现中提出 了评价数据采集的分类标准，并建立了采集系统，提供了采集学习者信息的方式【3 们。 这些硕博论文从理论、研究、新技术应用( 数据挖掘、模糊综合评判) 以及评价系统平 台的开发多个方面对学习评价做了有效探讨，其评价都基于一定的标准，但评价标准的建立 都不是其研究重点，也都没有深入的探讨标准的设计和开发工作。 综合以上分析来看，研究结果都表明实施有效的评价是促进远程学习效果的措施之一。 需要设计和建设有效的评价标准，以便开展应该面向过程，学习者自己作为评价主体的远程 学习评价，确保和提高学习质量。 ( 2 ) 实践应用项目 4 第1 章绪论 教育部统考：国家教育部和相关部门在对网络课程、教学平台等资源建设和共享，试点 高校以及各学习中心的工作评估等方面的工作取得了一定的成绩，为远程学习者提供和保障 了学习外部支持服务之后，也将工作重心移到了远程学习的评价改革。在2 0 0 6 年开始对网络 远程教育的部分基础课程实行全国统一考试，同时规定远程学习者必须通过以下公共基础课： 大学英语、计算机应用基础、大学语文、高等数学的统一考试。 全国高校远程教育协作组秘书长、教育部网络教育考试委员会办公室主任严继昌在2 0 0 7 年的报告“发展远程教育和继续教育，建设全民学习、终身学习的学习型社会”中对统考工 作做了总结。他指出统考实现了全国范围的网上报考和网上缴费；实现了网上报考信息采集、 确认、查询和自动编排考场、统计数据及实时打印准考证等信息化管理；实现了最大规模的 网上机考，实现了机考现场自动组卷、自动交卷、自动评分、成绩实时上传、考试数据加密 备份等全程信息化。对终身教育体系和学习型社会中全国范围的大规模考试提供各类公共服 务具有借鉴意义。同时对远程学习结果的统一考核鉴定，监管了远程教学和学习的效果，也 一定程度上提高了网络教育的社会声誉。 中央电大形成性测评系统：由清华大学、华南师范大学、中央广播电视大学、电大在线 远程教育技术有限公司合作设计开发的“中央电大形成性测评系统”，已经在电大的教学实 践中得到了广泛应用。该系统支持教师组织测评试题、学习者在线自测，并能将给测评数据 统计反馈给教师和学生，调整教学和学习活动【4 1 1 。 同时，中央电大和电大在线远程教育技术有限公司合作完成的e t a s 网上考试系统和 e t a s 网上自测系统( w w w e t a s c o m c 曲是针对电大实践、依据现代评价理论，依托计算机网 络的技术支持，将学、测、考、评、管进行了有机的结合，把考核融入到课程学习过程中， 采取晚上提交作业和考试，以学习者平时作业、作品等形成性考核和终结性考试评价学习者 的学习成绩，也应用在了中央电大的教学实践中。另外，随着w e b 2 0 理念和技术的成熟，中 央电大也对测评系统做了新的探讨，设计了基于w e b 2 0 的形成性考核系统，并己在部分课程 中试用。 总的来讲，国内对远程学习评价的相关理论研究取得了一定的成果。提出要积极推进以 学习者自评为主的多元评价，采用面向过程的形成性评价的评价方式；同时指出远程评价的 目的不在鉴定而在调节和反馈，远程学习评价不仅评价学习者成绩，还应该对学习行为和表 现给予反馈。目前的远程教育领域采取的评价方式仍是以考试成绩为主，用期末成绩、平时 作业或学习中心出勤情况来综合评价学习者的成绩。同时，在线测评系统已较为完善，学习 者可以通过在线自主组卷进行自测或期末考试，实现了考试的电子化，对学习者学科知识的 评价支持己较为完善。 3 目前远程学习评价存在的问题 3 0 1 5 2 1 i s 5 3 5 两南大学硕士学位论文 从国内外的研究现状分析，可以发现当前远程学习评价主要存在以下问题： ( 1 ) 偏重学习者考试成绩的评价，而忽视对学习方法、能力及学习过程表现的评价。掌 握知识、提高技能仅仅是远程学习的目标之一，评价不能忽视学习者的努力，以及态度情感 的变化。 ( 2 ) 远程教育机构不重视对学习者学习行为、表现和成果的信息收集，同时也难以搜集 到学习者的具体表现和行为。在教师对学习者信息掌握极少的情况下，以教师评价为主开展 远程学习评价造成了评价结果不客观，不全面。 ( 3 ) 评价信息不能及时反馈给学习者，没有发挥评价的监控功能。尽管基于网络实时的 交互延迟很弱，但是由于评价机制、师生的非实时交流。使得评价信息只作为学习结果的鉴 定材料，而未及时反馈给学习者，以帮助其调解学习。 1 2 2 量规研究现状 1 国外研究现状【1 2 】【3 s 】 3 9 1 国外对量规的研究和应用是随着表现性评价的发展而成熟起来，量规作为2 0 世纪9 0 年 代美国教育界倡导的表现性评价( p e r f o r m a n c ea s s e s s m e n t ) 的主要工具，以其明确的评价标准、 客观的评价规则、灵活的评价方式以及有效的评价效果受到重视。 海蒂吉德瑞齐( h e i d ig o o d r i c ha n d r a d e ) 、n a n c yp i c k e t t b e r n i ed o d g e 以及h e r m a n ， a s c h b a c h e r ，a n dw i n t e r s 都对量规的作用做了阐述，认为量规是一种有效的支持面向过程、客 观公正、具有目标导向的评价工具。国外对量规的含义、特征类型、特点作用、设计方法、 有效性等方面的研究较为成熟。目前普遍采用的量规定义是由海蒂古德瑞齐( h e i d ig o o d r i c h a n d r a d e ) 在0 7 年的阐述：量规是一个评分工具，它为一个作品或其他成果表现( 比如一篇文 章的观点、组织、细节、表达、布局等) 列出标准，并且从优到差明确描述每个标准的水平。 同时，国外学者还对量规设计的步骤、方法以及量规使用中的策略等做了深入的研究，已经 得出了较为成熟的结论，可直接指导量规设计和应用的实践。 总体来讲，国外在量规的定义、内涵、作用、特点、类型、设计方法和原则方面的研究 较深入，形成了较为成熟的理论体系，相关的著作和文章也比较多。绝大多数研究者对量规 的作用持肯定态度，其应用已经非常普及。“在k 1 2 和大学课堂，量规都以及成为一个普遍 的评价学生工作的方法。”( h e i d ig o o d r i c ha n d r a d e ，1 9 9 7 ) 因此其分类非常细，且种类繁多。 他们不仅将量规作为学习活动评价广为应用的工具，以促进课堂评价。同时。还有专业提供 量规的平台， 如在线的量规开发工具h t t p ：w w w r u b r i c b u i l d e r , o n c a 及 h t t p ：w w w r u b r i c c o r n e n m d e x p h p 一等。教师或学习者可以根据自己的实际需求，方便的在此类 平台上获取可用量规工具。另外也有人将量规作为促进远程网络学习的交互工具进行研究， 6 第1 章绪论 ! i； 。 。i i i l i ! 拓展了量规的应用范围。但量规在教学中应用的方法和策略还有待进一步总结和探讨，以更 好利用量规工具实施评价活动。 2 国内研究现状【1 2 1 2 5 1 【2 6 1 【蛔 相对于国外，国内的量规研究才起步。在w e b q u c s t 教学模式引入之后，量规才作为评价 工具得到研究和应用。w e b q u e s t 教学模式是英特尔未来教育的提出的学习模式之一，因此量 规较多的应用于中小学的传统学习中，而且关注的专家、学者也集中在教育技术领域。从事 相关研究的主要人员有华东师大的祝智庭、闫寒冰，华南师大的焦建利、徐春华，江西师大 的钟志贤，温州师范学院的王佑美等。 焦建利( 2 0 0 3 ) 指出“量规是一个为评估工作( 作业或产品) 和获取反馈信息而使用或打印 的评分标准，它是一个二维表格。几乎所有的量规都有两个共同的特点：一是有一系列标准， 二是质量优弱的序列，可描述程度好、一般和差的学生作业。一闫寒冰( 2 0 0 3 ) 认为在信息 化教学评价过程中，量规可以作为一种比较有效的评价工具，同时她认为在网络课程中可以 把量规作为自评和互评的工具。王佑美( 2 0 0 3 ) 则比较量规与传统测验的区别： “量规与传 统评分或测验的区别主要在于对评价工具的制定与运用上。传统评价在使用量规的自觉性和 规范性方面还远远不够，特别是对学习主体和学习过程的关注不够。在评价学生的学习时， 应用量规可以有效降低评价的主观随意性，评价执行可以是教师、家长、学生或同伴互评， 评估涉及学生学习过程中的表现和业绩等。一目前国内量规方面的专著只有华东师大闫寒冰 编著的l ：信息化教学评价量规实用工具，该著作旨在向广大中小学教师介绍一些适合于 信息化教学的评价方法与实用工具。全书分为“综述”和“量规集锦”两大部分。“综述” 部分介绍了信息化教学评价的特点、原则与方法，并重点介绍了结构化的评价方法量规 评价。量规集锦一部分则通过对涉及研究、实验等1 0 大类的1 2 8 个量规的介绍，为教师们 提供具有实用性与可操作性的切实帮助。给予了量规在教学实践活动中应用的指导。 量规在中小学实践教学领域，应用集中在基于网络的学习模式( w e b q u e s t 、协作等) 的非 正式评价活动中，体现了学习者自评、同伴互评，针对学习过程、学习表现评价等现代评价 理念，打破了传统评价“考试分数中心”的局面，为中小学教学注入了新鲜的血液。此外， 量规在英特尔未来教育培训中也作为教师培训评价工具，对培训教师的教学计划、学习资源、 电子作品进行评价。在网络教育领域，也开发和设计了一系列针对网络课程、网络平台和远 程教学效果评估的量规，规范了网络课程的开发。而实证性的系统研究有华东师大教育技术 专业研究生许黎黎在2 0 0 6 年完成的硕士论文基于量规的在线作业评价系统的设计与开发， 该研究试图用量规解决现有在线作业系统评价功能的缺失，取得了一定的成果吲；华南师大 教育技术学未来教育方向研究生徐春华在2 0 0 5 年完成的量规在教学评价中的应用研究， 该研究设计开发了一个基于网络的量规自动生成和在线评价的平台，对量规在教学评价中的 应用做了探讨【z 6 】。 7 两南大学硕士学位论文 曼曼曼曼曼曼曼曼曼曼曼皇曼曼曼曼鼍曼鼍曼曼鼍曼曼曼曼皇曼曼曼曼曼曼罡曼曼曼苎曼曼曼! ! ! 皇曼曼曼! 曼曼曼曼曼曼曼曼曼曼曼! 曼蔓舅舅鼍皇皇皇曼曼吕曼i ! 总体来讲，国内对量规的文献资料和著作还相当少。已有的文献和研究多集中在对国外 相关研究的引进阐述，局限于对量规的介绍。在对量规是什么、具有什么作用、采用量规评 价的意义、如何设计量规、应该如何使用量规等方面提供了理论和策略指导。但缺乏具体设 计、开发、使用和使用效果的实践系统研究。 本研究基于以上现状，针对远程学习评价急需改革的实际需求，在学习评价、远程学习 评价基础上，借鉴现有量规的研究成果，设计出适合于远程网络学习的评价工具远程学习 评价的量规。以期对远程学习进行合理评价，激发维持远程学习动机，培养自主学习能力， 提高远程学习质量。 1 3 研究内容、目标与方法 1 3 1 研究目标与意义 1 研究目标 ( 1 ) 分析总结出影响远程自主学习效果的有效因素，为远程自主学习活动的高效开展提 供参考。 ( 2 ) 得出科学、合理、操作性强的远程学习评价量规，为远程学习评价活动提供工具 和标准。 。 ( 3 ) 提出量规应用策略和基于量规的远程学习评价方式。 2 研究意义 ( 1 ) 理论意义 在现有理论基础上，结合远程学习和远程学习者特征，设计开发出远程学习评价量规， 并对远程学习评价的和量规的实施应用提出了建议。充实了远程学习评价的研究领域，丰富 了远程学习评价的研究，弥补了对远程学习评价量规的设计研究。 ( 2 ) 实践意义 量规可以克服自主评价的不易操作性和随意性、主观性太强的缺点，改进和规范自主评 价以改善远程学习效果，是实施主评价最有效的工具之一。研究设计出的远程学习评价量规 有效可直接应用的远程学习评价工具，可结合远程学习评价系统、电子档案袋等对远程学习 进行有效评价，保证远程学习效果，促进远程教育的发展。 1 3 2 研究内容 本研究的主要内容是分析得出影响远程学习效果，以及肯定学习者学习进步和成果的有 效因素和重要性的程度，在此基础上构建出科学、合理、可操作性强的远程学习评价量规。 研究主要从以下几个方面开展： 8 第1 章绪论 i _ , i i i i 。 i 皇曼曼舅 1 分析现代学习评价、量规、远程学习等理论，提出研究问题。通过对远程学习评价的 意义和国内外研究现状的分析，提出了本研究的目的和意义，指出了本研究的思路和研究方 法。 2 理论概述。阐述远程学习、学习评价、远程学习评价、量规等相关知识，论述构建远 程学习评价量规的设计理念和依据的原则等基础理论，提出远程学习评价量规的设计理念和 原则。 3 调查远程学习评价现状。设计和实施远程学习评价现状调查问卷，分析问卷统计调 查结果，找出目前远程学习评价存在的问题，制订本研究量规设计的方法和步骤。 4 收集整理和确定量规指标项。结合对文献资料的深入分析，收集整理量规指标项，编 制、实施远程学习评价指标项调查问卷的教师版和学生版。采用主成分分析方法，对指 标项进行分类并结合专家建议确定量规指标项。 5 量规权重的确定。利用因子分析法得出的主因子相对贡献率和因子负荷，计算出各级 指标权重，得到初拟量规。 6 量规检验和检验。设计专家咨询表，咨询专家意见修改完善量规，并检验量规有效性。 1 3 3 研究方法 本研究主要采用如下研究方法： 1 文献研究法：通过工具书、检索性文献、国内外期刊等途径对相关主题和领域进行广 泛的文献收集。选取近几年的相关文献建立相应的内容分析类目表，细化各个子类目。分析 得到相应的数据，最后得出结论。文献研究法为本研究思路提供了参考，是量规指标项的初 拟的理论基础。 2 问卷调查法：主要进行了两次调研。一是前期分析：主要是针对网络教育学院的教师， 采用电子问卷和纸质问卷相结合的方式。了解远程学习评价现状和教师对远程学习评价项的 初步认定。二是确定量规：结合第一次问卷分析数据，基于大量的文献综合分析，设计了远 程学习评价指标项问卷调查表的教师版和学生版，以调查专家和学习者对远程学习评价量规 指标和权重的意见。 问卷调查法不仅帮助本研究获得了学习者和教师对评价的第一手资料，还是确定量规指 标和权重的数据源。 3 访谈法：通过对远程授课教师、工作人员以及远程学习者的正式和非正式的访谈，补 充了问卷调查，给研究提供了参考和数据。同时对远程教育专家进行了访谈，以检验了量规 的效度和信度。 4 评价研究法：主要借鉴评价量规的建立原则、方法、步骤，指导量规指标项和权重的 确定，以及量规有效性的检验。 9 西南大学硕士学位论文 量曼! 曼曼曼曼曼鼍皇皇曼曼曼曼曼曼曼曼鼍曼曼量曼曼皇曼! 曼曼曼曼璺曼曼曼曼皇皇曼曼曼皇! 曼曼曼曼i 一一一i 曼i 5 统计分析法：结合评价研究法，利用s p s s 软件，对问卷调查结果进行因子分析和一致 性检验。其中采取因子分析中的主成分分析方法筛选有效因子、提取一级指标，并得出指标 的权重系数。 l o 第2 章相关理论综述 第2 章相关理论综述 2 1 远程学习概述 关于远程学习相关的概念很多：网络学习、数字化学习、网络化学习、在线学习、e l e a r n i n g 及开放学习等等，这些概念在某些场合可以相互使用，却又有各自不同的含义。 2 1 1 远程学习的定义和特点 1 本研究远程学习概念的界定 ( 1 ) 远程学习相关概念比较 学习是指学习者因经验而引起的行为、能力和心理倾向的比较持久的变化。这些变化不 是因成熟、疾病或药物引起的，而且也不一定表现出外显的作为( 施良方。学习论) 。笔者认 为学习是人本身具有的能力之一，人类正是在不断的学习中体验和改造这个世界。由于学习 的环境、方式、内容、规律、以及学习者主体的不同，学习可以分为很多种类，现在我们就 认识和理解与本研究紧密相关的几个概念： e 1 e a r n i n g 。e l e a r n i n g 是国际上用得较多的概念，网络学习、数字化学习、网络化学习、 在线学习