计算机辅助教育评价

1第一页，共八十页，编辑于2023年，星期一本章简介

教育评价是现代教育管理与指导的主要手段，其应用与研究的发展速度很快。

计算机辅助教育的评价是规范计算机辅助教育发展的重要手段。2第二页，共八十页，编辑于2023年，星期一本章主要介绍计算机辅助教育评价的基本概念、评价方法、评价内容与标准及评价的实施过程。通过计算机辅助教育的评价，可以引导教育软件系统更好地向有效性、兼容性和共享性方面发展。3第三页，共八十页，编辑于2023年，星期一内容目录一、CBE评价的概念二、评价方法三、评价内容与标准四、评价的实施4第四页，共八十页，编辑于2023年，星期一学习要点

l.计算机辅助教学系统中的关键部分是教学软件，它是一种教育技术产品，因而对其评价是为了决定这种产品的价值，特别是判断它们的教育价值。

2.计算机辅助教育软件的好坏和成败完全取决于设计人员的能力、知识和素质。某种程度上可以认为对于计算机辅助软件的评价实际上就是对于设计人员的设计思路、技术水平、合作能力的综合评价，因为计算机辅助教育软件是设计人员知识能力的一种整合性成果。5第五页，共八十页，编辑于2023年，星期一

3.计算机辅助教学的评价中，最引起人们关注的问题是评价什么，依据什么来给出综合评分，这就是评价内容与标准的问题。有了这些，任问组织与个人都可以自己来选择评价。

4.了解评价内容与标准可以使开发者在开发中可以努力避免不允许、不赞同的条款，开发适应于标准的计算机辅助教学系统。6第六页，共八十页，编辑于2023年，星期一一、CBE评价的概念（一）评价评价是指由一些组织或机构对于某些事物、产品或过程的优点和价值的判断过程。7第七页，共八十页，编辑于2023年，星期一评价是泛指衡量人物与事物的价值，价值的解释是指事物的用途和积极作用。

美国教育学家斯克里汶指出：

评价是“决定事物、产品或过程的优点和价值的过程。”

8第八页，共八十页，编辑于2023年，星期一评价的分类依据不同的分类标准，可以对教学评价种类作不同的划分。按评价基准的不同，可分为相对评价和绝对评价；按评价功能的不同，可分为诊断性评价、形成性评价和总结性评价；按照评价方法的不同，还可分为定性评价与定量评价。9第九页，共八十页，编辑于2023年，星期一评价基准：绝对评价(absoluteevaluation)

相对评价(relativeevaluation)

对比绝对位置相对位置（百分制、职称评定）（标准分、指标机制）对比评价基准评价基准10第十页，共八十页，编辑于2023年，星期一相对评价：是在被评价对象的群体中建立基准(通常以该群体的平均水平作为这一基准),然后把该群体中的各个对象逐一与基准进行比较,以判断该群体中每一成员的相对优劣。绝对评价：是将教学评价的基准建立在被评价对象的群体之外（通常以教学大纲规定的教学目标为依据来制定这一基准），再把该群体中每一成员的某方面的知识或能力与基准进行比较，从而判定其优劣。11第十一页，共八十页，编辑于2023年，星期一评价内容：过程评价成果评价各个环节、阶段取得的成果分析方法：定性评价

定量评价做出定性结论评价的方法等级法评定法做出数量化结果的评价方法评语定量法加权定量评定法12第十二页，共八十页，编辑于2023年，星期一评价时间和任务：

诊断性评价形成性评价总结性评价学习过程前测确定妨碍学习的原因总结起点指导及时调整、矫正教学评定、鉴定动态性过渡性13第十三页，共八十页，编辑于2023年，星期一1.诊断性评价诊断性评价也称“教学前评价”，一般是指在某项教学活动开始之前对学生的知识、技能以及情感等状况进行的预测。通过这种预测（前测）了解学生的知识基础和准备状况，以判断他们是否具备实现当前教学目标所要求的条件，为实现因材施教提供依据。14第十四页，共八十页，编辑于2023年，星期一2.形成性评价（FormativeEvaluation）形成性评价是指在所评价的事物、过程与产品的发展和设计过程中对其所做的评价。评价的主要目的是发现对象的不足之处和可以改进之处，以调整其过程的进行方式或修改设计，完善和提高它的价值。例如:课堂教学中采用的小测验是一种形成性评价。通过小测验，了解学生接收情况和教学效果。15第十五页，共八十页，编辑于2023年，星期一3.总结性评价（SummativeEvaluation）

总结性评价是指评价对象（过程、产品与事物）完成或制作出来后所进行的评价。这类评价的主要目的是判断与衡量评价对象的推广与应用价值，以便向社会公众和潜在应用人员介绍，促进其在适当范围内得到适当应用。例如，入学测验是一种总结性评价分数说明对知识掌握的情况，名次反映该生的相对水平。16第十六页，共八十页，编辑于2023年，星期一（二）计算机辅助教育的评价计算机辅助教育的评价是衡量和估计计算机辅助教育的活动过程或是计算机辅助教育系统产品的教育应用价值的过程。17第十七页，共八十页，编辑于2023年，星期一教育评价的常用方式实验组控制组外界条件相似教学测量采集数据分析处理教学测量采集数据分析处理成绩差异价值判断CAI教学传统教学（1）实验研究方式18第十八页，共八十页，编辑于2023年，星期一优缺点：客观公正的判断评价结果有价值出发点可行的实验数据与实验方法科学理论作指导大量的人力，物力支持来进行实验设计、测试观察取得数据适用范围：不可能广泛使用于各种中小型课件的评价，只是在大型计算机辅助教育课题的评价中才使用。19第十九页，共八十页，编辑于2023年，星期一美国教育考试中心（ETS)对有代表性的CAI系统——PLATO进行评价：五个校区每个校区300名学生被试四名有经验的评价专家组织计划五个校区五个学科30名教师参加评价实验态度问卷调查教师学生兴趣学习成绩测试现场观察记录结论：PLATO系统对学生的成绩没有明显的正面或反面的持续影响分析处理评价报告11项正影响4项明显12项负影响1项明显23项问题中20第二十页，共八十页，编辑于2023年，星期一由一些有经验的计算机辅助教育评价人员，通过检查文档资料、观察与记录课件运行状况、依据预定的目标体系与自己对许多课件应用的观察体验，衡量和估计课件的教育应用价值。优点：主要由评价专家参加，人力物力比较节省。（2）专家评价方式21第二十一页，共八十页，编辑于2023年，星期一将产品推荐给用户，用户使用一段时间后提出意见或建议。一般情况下用户出具有关使用证明。(3)用户调查方式22第二十二页，共八十页，编辑于2023年，星期一（三）CBE的评价过程

CBE的评价过程如框图所示。23第二十三页，共八十页，编辑于2023年，星期一CBE的评价过程24第二十四页，共八十页，编辑于2023年，星期一

（四）CBE评价的作用1.帮助决策，促使教育行政部门对课件的认可，帮助教师、家长如何选择课件和使用课件。2.帮助推广应用，选择课件的依据。3.提高产品质量，进行形成性评价有效地保证系统的质量；总结性评价将指导今后课件的开发。25第二十五页，共八十页，编辑于2023年，星期一二、评价的实现方法

计算机辅助教育评价工作的进行方式多种多样，但它们都是一个系统过程，包括以下几个阶段：收集信息阶段分析处理信息阶段判断及报告阶段26第二十六页，共八十页，编辑于2023年，星期一(一)信息收集的方法从开发者处收集信息在试验运行中收集信息从现场教学中采集信息教学活动后采集信息27第二十七页，共八十页，编辑于2023年，星期一1.从开发者处收集信息评价组织从开发者处可得到：程序、使用说明书及其它文档资料，评价组织让开发者填写登录表：使用领域、适应学生水平、教学方式、目标、先行条件、内容简述等。这些信息可供评价人员判断开发者的开发目标与实施情况是否相符，以作出教育价值判断。表1一个典型的教育软件登录表28第二十八页，共八十页，编辑于2023年，星期一29第二十九页，共八十页，编辑于2023年，星期一2．在试验运行中收集信息

试验运行是由少数专业评价人员对某一计算机辅助教育系统，按其所假定环境与学生情况进行环境设置，模拟学生运行该系统并进行人机会话，观察计算机所显示的内容对学生输入的判断及反馈教学内容呈现的顺序等等，进行分析记录。30第三十页，共八十页，编辑于2023年，星期一3．从现场教学中采集信息

让一批真正的学生在实际教学环境中使用CAI系统，并收集有关信息。

信息采集的方式有以下两种：

(1)观察记录法

(2)联机结果记录法31第三十一页，共八十页，编辑于2023年，星期一(1)观察记录法

观察记录法就是在现场应用的自然情境中观察师生的应用情况，并且记录能反映教育价值的表现与行为。32第三十二页，共八十页，编辑于2023年，星期一观察的内容主要有：各个使用者运行该系统各段及总体所耗时间所遇到的难点在何处，为什么有这些困难，是否要求教师帮助使用者在运行中的情感反映和学习态度上的表现，等等。33第三十三页，共八十页，编辑于2023年，星期一(2)联机结果记录法

联机结果记录法是利用CAI系统中的人机会话活动来采集有用的信息，从而实时、客观、准确地记录教学活动进行的情况，帮助评价其教育价值。34第三十四页，共八十页，编辑于2023年，星期一4．教学活动后采集信息在让师生使用某些CAI系统后，由评价人员对使用该系统的师生进行调查，或是让学生进行后测试等，收集对评价有用的信息。35第三十五页，共八十页，编辑于2023年，星期一(1)调查法由调查人员预先拟定一份调查问卷，分发给参与现场教学的师生填写，或是与他们逐个面谈，并且作好记录。表5.4(2)测试法与按常规方法进行教学活动的一批学生进行对比，看看有否差异，差异是正向的(用系统的学生掌握得好些)、还是负向的(用系统的学生掌握得差些)，这就是测试法。36第三十六页，共八十页，编辑于2023年，星期一(二)信息处理方法

1．非数据类型信息的处理

主要处理办法是归纳整理列出一系列清单，分类保管，以利于查询：文档资料清单必须改正的错误清单修改建议清单应用建议清单37第三十七页，共八十页，编辑于2023年，星期一2．数据类型信息的处理

数据类型信息包括：各题(各单元)花费的时间错误回答次数错误率数据型信息分析流程数据整理核查录入处理38第三十八页，共八十页，编辑于2023年，星期一数据处理方法－－加权累计法第j个评价人对CBE系统的评判分：评价小组给CBE系统的综合评判分：39第三十九页，共八十页，编辑于2023年，星期一三、评价内容与标准

什么叫评价内容体系？把笼统的教育价值细分为一系列可以观察或测量的、便于处理、判断的信息分量，从而评价人员可以从各个方面来观察、衡量教育价值，并以此为依据得出综合判断。这种CBE系统的教育价值的结构化体系称为CBE评价内容体系。40第四十页，共八十页，编辑于2023年，星期一（一）评价内容体系的建立

1．评价体系建立的基本原则(1)完备性(2)合理性(3)可操作性（1）完备性建立的评价内容体系应该完整反映教育价值的各个阶段、各个层次与各个方面。（2）合理性应该科学地反映教育价值的本质属性各项不应有相互冲突的现象不应有明显有利于某类型、某些学习阶段、某些学科内容、某种教育领域或某种教学模式的应用等倾向41第四十一页，共八十页，编辑于2023年，星期一(3)可操作性各评价项目应是可以观察或记录下来的现象和行为表现，不能有含意不明、难以判断的项目。评价项目应该相当精细而不繁琐，一方面可以观察判断，同时又不会造成评价人员过多的工作量。收集的信息应该便于分析处理，要特别注意各项之间的相互独立性，避免各项相关性而造成某一因素在总价值中地位上升的现象42第四十二页，共八十页，编辑于2023年，星期一2．建立评价内容体系的系统方法(1)调查综合法这是一种自底向上的体系建立方法。首先，由调查人员通过书面征求意见、面谈、座谈会等方式，了解教师、学生、管理人员、计算机辅助教育研究开发人员等各类人员对计算机辅助教育的价值衡量特征的意见。然后进行综合分析，得出体系结构。43第四十三页，共八十页，编辑于2023年，星期一(2)系统分析法这是一种从“顶”向下的体系建立方法。这个“顶”就是计算机辅助教育的任务。首先由一些专家讨论计算机辅助教育的评价应有几个方面，列成清单；然后看清单上各项是否可以观测、评定处理；如果没有一般化内容，就可以检查完备性；否则，对于不易于观测的一般化内容，应进一步讨论如何划成可操作性内容，如此重复。这样从粗到细的分析方法得出的评价体系是一种层次式的结构。44第四十四页，共八十页，编辑于2023年，星期一（二）一些有代表性的评价体系（1）美国数学教师协会软件评审表（2）MicroSIFT(教师用微机软件及资料)课件评价表（3）电子学习杂志课件评价表（4）美国软件行业协会测评表（5）中华学习机教育软件评审标准45第四十五页，共八十页，编辑于2023年，星期一（5）中华学习机教育软件评审标准评价指标及分值：1.功能性50分2.可靠性10分3.使用性20分4.程序设计技巧10分5.软件商品化的程度10分46第四十六页，共八十页，编辑于2023年，星期一教育软件合格的标准：①总分≥60分；②功能性的“教学目标”栏≥8分；③功能性的“科学性”栏≥8分。47第四十七页，共八十页，编辑于2023年，星期一（三）各种评价体系主要评价内容道德法规教学目标编程技术48第四十八页，共八十页，编辑于2023年，星期一（四）我国的中小学教育软件审查标准1.教学性要求(55分)(一级指标)1.1教学目标(15分)（二级指标）

1.2教学内容(20分)1.3教学过程(20分)2.技术性要求(35分)2.1程序运行(10分)2.2信息呈现(10分)2.3用户界面(15分)3.文档资料要求(10分)49第四十九页，共八十页，编辑于2023年，星期一（五）我国申报电子教材及课件评议标准1.教学性指标(40分)1.1教学内容水平(14分)；1.2科学思想水平(14分)；

1.3交互反馈水平(6分)；1.4媒体规范水平(6分)2.软件指标(30分)2.1软件运行水平(15分)；2.2软件操作水平(6分)2.3辅助功能水平(9分)3.媒体指标(30分)3.1媒体质量水平(12分)；3.2整体设计水平(10分)3.3智能化水平(8分)4.附加分(10分)50第五十页，共八十页，编辑于2023年，星期一1.教学性指标(40分)1.1教学内容水平(14分)(1)教学适应性(4分)：符合本学科或课程要求，教学目标明确，取材合适，深度适宜，分量适度。(2)认知规律性(4分)：符合学生认知规律，逻辑性强，富有启发性，便于学生学习，有利于能力培养。(3)结构合理性(4分)：教学内容组织及其结构合理，学习路径明确，知识关联清晰。(4)生动趣味性(2分)：表达知识生动趣味，能引起和保持学习者的学习兴趣和注意力。51第五十一页，共八十页，编辑于2023年，星期一1.教学性指标(40分)1.2科学思想水平(14分)(1)科学先进性(7分)：能反映本学科国内外科学研究和教学研究的先进成果。(2)思想正确性(7分)：符合辩证唯物主义，弘扬民族文化精华，无政治性和政策性错误。52第五十二页，共八十页，编辑于2023年，星期一1.教学性指标(40分)1.3交互反馈水平(6分)(1)教学交互性(3分)：人机交互性强，学习进度可控，学习路径可选，交互参数可设。(2)评价反馈性(3分)：习题和思考题质量高，题型适当，设计水平高，操作简便，具有较好的学习评价和反馈。53第五十三页，共八十页，编辑于2023年，星期一1.教学性指标(40分)1.4媒体规范水平(6分)(1)文字与图标(3分)：文字表达规范，字体、字号和色彩适合阅读，图表清晰准确，符号、公式和计量符合国标。(2)音视频素材(3分)：讲解、配音和对白的教学水平高，标准普通话播音，视频的制作符合电教片规范。54第五十四页，共八十页，编辑于2023年，星期一2.软件指标(30分)2.1软件运行水平(15分)(1)软件运行(5分)：软件安装方便，运行正常，可靠性高，兼容性强，退出与中断后恢复原系统状态。(2)软件性能(5分)：功能能正确无误，划分明确合理，响应速度快。(3)软件容错性(5分)：软件对错误输入和错误操作的容错性强。55第五十五页，共八十页，编辑于2023年，星期一2.软件指标(30分)2.2软件操作水平(6分)(1)用户指导(3分)：附有用户手册，内容完整，表述简明，便于使用。(2)操作使用性(3分)：操作界面友好，步骤明确，使用简便。56第五十六页，共八十页，编辑于2023年，星期一2.软件指标(30分)2.3辅助功能水平(9分)(1)求助与管理(3分)：求助功能强，具有一定的管理功能。(2)性价比(4分)：教学软件的教学性能价格比高。(3)开发扩展性(2分)：具有较好的内容调制、组合、更新、和补充等开放性和扩展性功能。57第五十七页，共八十页，编辑于2023年，星期一3.媒体指标(30分)3.1媒体质量水平(12分)(1)界面设计(5分)：界面设计简明，布局合理，色彩协调，美观大方，重点突出。(2)素材质量(7分)：音效质量高，图片、录像清晰，动画生动准确，技术指标高。58第五十八页，共八十页，编辑于2023年，星期一3.媒体指标(30分)3.2整体设计水平(10分)(1)媒体选择(3分)：根据教学内容优选图、文、声、像等媒体类型。(2)媒体优势(3分)：解决教学重点和难点的水平高。(3)教学设计(4分)：多媒体教学设计水平高。59第五十九页，共八十页，编辑于2023年，星期一3.媒体指标(30分)3.3智能化水平(8分)(1)检索书签功能(3分)：检索、学习记录和书签功能较强。(2)智能性(3分)：具有较好的人工智能性和专家系统性。(3)媒体辅助功能(2分)：具有多种媒体的学习提示，交叉参考，导航和定位等辅助功能。

60第六十页，共八十页，编辑于2023年，星期一4.附加分(10分)附加分(10分)：有显著特色与创新，显著提高教学效率，受益面广。61第六十一页，共八十页，编辑于2023年，星期一四、评价的实施评价工作人员的组织与培训评价的实施过程撰写报告62第六十二页，共八十页，编辑于2023年，星期一（一）评价工作人员的组织与培训

1.实施评价的工作组织

2.评价人员的选择

3.评价人员的培训63第六十三页，共八十页，编辑于2023年，星期一课件评价人员的组织结构评价计划组计划安排选拔人员培训组织外界联系人员组成计划人员行政人员课件管理组登录、筛选、分类、保管、评后综合分析、信息发布准备人员组成软件管理人员统计分析人员初评人员课件评审组各学科课件评审人员组成评价专家（可以是兼职人员）64第六十四页，共八十页，编辑于2023年，星期一（二）评价的实施过程

1．形成型评价的实施系统需求分析系统设计实现评价设计评价系统实现分析评价开发过程评价过程65第六十五页，共八十页，编辑于2023年，星期一初步合格未完完不合格

2.总结型评价的实施

筛选信息采集所有情况完了准备文件(描述)设置学生情况归纳与记录综合评价试用与观察停止登录准备报告66第六十六页，共八十页，编辑于2023年，星期一（三）基于网络的评价实施方案数据库数据库服务器服务器端系统管理员Web服务器Internet客户端CAI软件评价员CAI软件开发商普通用户其他身份验证培训请求评价请求E-mail查询请求67第六十七页，共八十页，编辑于2023年，星期一（四）教学软件评价核心指标体系软件名称生产厂商科目（打√）

（小学/初中/高中）（语文数学/英语/历史/地理/化学/物理/等）软件类型（打√）（个别指导/练习与操练/教学游戏/模拟/问题解答/备课/课堂演示/等）评价日期年月日评价者姓名职称电话对以下认为需要评价的项目进行评价，认为不需要的项目画去支持材料ABCD可靠性教学内容教学目标信息呈现过程控制数据管理68第六十八页，共八十页，编辑于2023年，星期一（四）CAI软件评价基本框架

CAI软件评价基本框架如图5所示。69第六十九页，共八十页，编辑于2023年，星期一70第七十页，共八十页，编辑于2023年，星期一CAI软件评价基本框架

规定的评价过程首先评价组织要了解CAI软件的一般特征，包括其类型、科目、教学目标等，将明显不合格的软件剔除。在制订评价计划阶段，评价组织的主要工作是根据被评软件特征选择合适的评价人员，针对被评软件特征及评价人员类别构造适当的指标体系。71第七十一页，共八十页，编辑于2023年，星期一由于不同人员专业领域及兴趣点的不同，他们对决定软件质量的诸多因素看法不一，因此相应的指标体系应各有侧重。在人员及其各自适用的指标体系确定之后，评价组织制订教学软件评价的进度计划。实施评价计划阶段的主要任务是培训评价人员并监督他们的具体评价过程，那些已经多次参与过教学软件评价的人员可以不参加培训。72第七十二页，共八十页，编辑于2023年，星期一然后进入具体的评价实施阶