浅析课堂教学评估过程中指标体系的构建.doc

浅析课堂教学评估过程中指标体系的构建摘要：评估过程中常包含着许多不确定性、随机性和模糊性,因此选择合适的评价指标体系是评估的基础,没有一套科学、可行、可信的指标体系就无法客观地开展评估工作。如何构建一套合适的指标体系？首先制定评估目标，再基于目标，利用专家小组成员的头脑风暴法提出影响目标的诸多指标；在此基础上,，对影响目标的指标进行分层和分类处理，最终得到评估指标体系。关键字：课堂教学评估 评估目标 指标体系 一评估目标的确定目标是行动的方向。确定评估目标，对于同一评价对象,由于评估目标不同,需要考察不同的评估要素。教育评估目标是实施本科教学评估的基础，缺乏明确的评估目标，就难以明确评估什么。以及如何去评估课堂教学，“本质上是由教师组织学生进行有目的、有计划的有效学习的活动过程”。 1文喆课堂教学的本质与好课评价问题J人民教育，2003（3-4）1而且，这一活动是互动式的活动，“是一个具有多质性、多层次性的特殊的认识过程，它是由一系列教学要素构成的完整体系。其中心要素有：教学目标系统、教学内容系统、教学方法系统、教学环境系统和教学评价系统”。2 董志峰互动式教学：高校课堂教学改革的突破口J甘肃政法学院学报，2002（2）2大学教育质量和有效性依赖于清晰、明确的课堂教学目标。在课堂教学目标设定时，必须依据教育教学规律以及社会发展和学生身心发展的要求；必须依据高等学校的办学宗旨；必须依据教学大纲。关于我国高校本科教学工作水平评估的目标，教育部的相关文件中明确指出，“通过水平评估进一步加强国家对高等学校教学工作的宏观管理和指导，促使各级教育主管部门重视和支持高等学校的教学工作，促使学校自觉地按照教育规律不断明确办学指导思想、改善办学条件、加强教学基本建设、强化教学管理、深化教学改革、全面提高教学质量和办学效益”。同时，文件又指出，在评估过程中要坚持“以评促建、以评促改、以评促管、评建结合、重在建设”的方针。二评估目标与其指标体系的转化指标不等于目标，二是目标的替代物，一个目标可以映射出一系列指标，各指标的重要程度可能相同，也可能不相同。用这一系列的指标构成该目标的评估指标体系。（一）指标体系构建方法目前有两种方法，一种是构成因素构建法：采用一个指标或指标体系作为标准，用来表达评估的概念，直接衡量评估的对象。另一种是相关因素构建法：采用与评估概念密切相关的若干因素作为指标，构成指标体系，并以此为标准，间接表达评估概念，衡量评估的对象。构成因素法的很多评估概念难以实现量化，评估难度较大，因此，人们往往转而采用相关因素法。然而，评估概念所涉及的相关因素多到无法计量，人们只能尽量抓住其中的关键因素，并力求全面，这是一项难以尽善尽美的工作。在构建相关因素体系时，指标体系过于简洁，将影响其表达概念即目标的全面性，指标体系太过丰富，又导致操作的复杂性，以及理解上的困难。（二）指标体系构建原则 关于建立指标体系的原则,目前有两种典型的表述:一是全面、不重叠和指标易于取得；二是科学性、合理性和适用性。一套科学的指标体系首先应根据评价目标反映有关评价对象的各方面状况,如果指标体系不全面,就无法对评价对象做出整体判断；其次,指标间不能重叠过多,过多的重叠会导致评价结果失真,即使对重叠进行适当的修正，也会增加计算的难度和工作量；最后,计算指标所需要的数据应是容易采集的,指标容易计算或估计,否则指标体系就无法应用。因此,建立指标体系应遵循评价指标尽可能全面、不重叠和易于取得的原则。1.指标尽可能全面假定根据评价目标,需要对评价对象的n个要素进行评价,则评价要素集F = F1, F2 , Fn 。 现有m项指标构成的指标体系I ,则评价指标集I = I1 , I2 , , Im ,其反映的评价要素集为F= F1 , F2 , ,Fk . 若k = m ,且指标不重复,则表示评价指标集与评价要素集是一对一的关系,否则是非一对一关系。指标体系是否全面,可以用评价要素覆盖率来度量。（1）若各评价要素的重要性相同,则评价要素覆盖率Ee 为Ee = k/ n （2）若各评价要素的重要性不同,可以为各评价要素设定相应的权重。设评价要素集对应的权重集为W = W1 , W2 , , Wn ,其中Wi 为第i 个要素的权重。 指标集所反映的评价要素集的权重集为W= W1 ,W2 , , Wk ,其中Wj 为评价要素集F中第j 个要素的权重,则评价要素覆盖率Eu 为Eu = 讨论:0 Ee ( Eu) 1 ；若Ee ( Eu) = 0 ,指标集为；若Ee ( Eu) = 1 ,指标集是绝对全面的,因此,指标尽可能全面原则可以表述为Ee ( Eu) 尽可能接近1。2.指标尽可能不重叠指标的重叠程度可用评价要素重复率来度量。用Ti 表示评价要素集的第i 个要素被重复的次数,则评价要素集被给定评价指标集重复的次数集为T = T1 , T2 , , Tn 。（！）若各要素的重要程度相同,则评价要素重复率Re 为Re = （2）若各评价要素的重要程度不同,则评价要素重复率Ru 为Ru = 讨论: Re ( Ru) 0 ；若Re ( Ru) = 0 ,指标集中各指标不存在重叠或交叉；Re ( Ru) 越大,各指标重叠交叉现象越严重,因此,较少重叠性原则可以表述为Re ( Ru) 尽可能接近0。3.指标易于取得指标获取的难易程度用指标获取的难度因数来度量。指标的难度因数一般分为1 ,3 ,5 ,7 等4 个级别,分别代表容易、较易、较难和困难。指标获取的难度由专家来评定,一般说来,定量指标比定性指标易于取得,具体指标比综合指标易于取得。评价指标集的获取难易程度用指标集的平均难度因数来度量。 若用Di 表示第i 项指标获取的难度因数,则指标集的平均难度因数为 = （三）指标体系构建的程序1. 确定评价目标。对于同一评价对象,由于评价目标不同,需要考察不同的评价要素。2. 确定要素覆盖率、要素重复率和指标集难度因数的权重。根据对评价准确性的要求、统计核算状况和计算工作量的大小确定。3.分解评价对象,建立评价要素集。评价对象分解是把所要评价的综合属性分解成小的、具体的评价要素。4.如果评价要素的重要性不同,需要确定各要素的权重,建立要素权重集；否则直接进行步骤(5)。 5. 建立指标集。 收集与评价要素有关的指标,并构成多个指标集。6.确定指标与评价要素的关系,即确定各项指标反映哪些评价要素,建立指标要素关系矩阵。7. 确定指标获取的难度因数,建立指标难度因数集。8. 计算各指标集的要素覆盖率、要素重复率和平均难度因数。9.计算各种指标集的目标函数值。10.确定最优指标集。（四）指标权重的确定权重表示某一指标项在评估指标体系中的重要程度。主观赋权法多少采用主观评分的定性方法，以此，受到较多的人为因素影响，往往会夸大或者降低某些指标的作用。并且，采用此方法的成本和所需的信息量也比较大。另一类是客观赋权法，即根据各指标间的相关关系或是各指标的变异程度来确定权重。这类方法注重指标的离散度，却忽略了各个指标的重要程度，仅仅依靠指标数值的离散度来确定的权重，往往并不能反映实际问题。合肥工业大学穆涛受TOPSIS算法思想的启发，提出了一种新的客观赋权法，并且与之将专家打分法相结合，兼顾了各指标的离散度和重要度，使得赋权更合理、符合实际。还可以先通过问卷、调查等方法广泛了解评估对象对评估指标的看法，经过整理，形成一种倾向性意见，然后在这些意见的基础上，确定具体的权重，这样会使权重确定得更合理、更科学。（五）指标体系的质量检验 评估指标体系基本建立以后，是否可行，还必须通过检验。检验一般有两种途径：实践方面和理论方面。从实践上检验是把已建立的评估指标体系拿出来进行测试，看其可行性如何，然后依照测试结果进行信度和效度分析，以此确定评估指标体系的质量高低。从理论上检验必须有一定的检验标准，有对评估及其指标体系比较熟悉的专家进行把关。 值得注意的是评估指标体系在使用过程中，如果出现了新的情况，评估指标体系也应有所变化，即有一定的灵活性，不能把已建立的评估指标体系变成僵死的条条，只有这样，才能使建立的评估指标体系更好地为教育教学发展服务。三综述评估体系的建立是一个十分复杂的系统工程，而教学质量是高等学校的生命线，教学评估是教育教学过程中的一个重要环节，是保证和提高教育质量的重要措施。加深对教育评估目标、评估方式和评估过程中的突出问题的认识，尤其是选择最合适的评估指标体系，形成促进教育质量提高的有效机制，是推动教学评估和高等教育健康发展