评估计划讲解

评估计划讲解：

制定一个有意义、可管理且可持续的项目评估计划。首先：什么是评估？学术课程评估是一个持续的过程，通过收集和分析信息来确定学生学习成果的达成情况。最终目标是：1）确保学生在你的课程中学习到你希望他们学习的内容，以及2）找出教学中可能需要调整的地方，以提高学生的学习效果为帮助实现这些目标，评估包括：为学生学习设定清晰、可衡量的目标收集证据以确定这些目标的实现情况。利用这些信息改进程序（闭环）过程第一步：确定学习成果——明确定义学生在课程结束时应该知道什么、能够做什么或重视什么。问问自己：“我所在专业的学生毕业时应该知道或能够做什么（这些是他们在通识教育课程中没有学到的）？”这些成果通常被称为SLO（学生学习成果）。步骤2：收集证据——确定每个SLO的目标，并收集数据和其他证据，以表明你的学生在多大程度上达到了这些目标。目标可以是特定论文的评分标准分数、标准化考试的熟练程度分数、调查问卷的回复、作品集中所展现的掌握程度等等。目标通常以达到特定水平的学生百分比来表示（例如，“至少一半的学生应该在评分标准中获得4/5分或更高”）。该过程（续）步骤3：分析结果——评估学生在多大程度上达到了你的目标。必要时做好笔记，以帮助理解。步骤4：根据需要进行修改或改进——利用结果来修改和改进你的成果、方法和项目组成部分。报告表格末尾的分析问题可以帮助解决这个问题。好吧，但我们为什么要这样做呢？帮助我们了解和改进学生的学习情况。提供以数据为依据的有效性证据。为课程设置决策提供依据。有助于资源分配。参与社区活动。重点介绍各项目对学生成长的具体贡献。为项目创造共同愿景和集体所有权。而且，说实话：我们不得不SACSCOC：南方院校协会委员会（通常简称为SACS）。我们的认证机构。完整的要求可在其文件《认证原则》第8.2节中找到，但简而言之，他们想知道：每个课程是否都以可衡量的方式明确定义了预期学生学习成果？如何确定这些结果是否达到？如何分析评估活动的结果？评估结果对项目改进起到了哪些作用？请注意这些步骤如何与我们的评估程序步骤相对应（幻灯片3-4）。项目使命宣言我们要求每个项目在其评估计划中制定（并根据需要进行修订）项目使命宣言。使命宣言具有以下几个不同的功能：1）阐明了该计划的指导框架和总体目标。这可能包括价值观、目标、目的、意图等。2.)说明该计划如何与机构的更广泛使命相一致。3.)可作为评估的参考点（或基础）。4.)促进项目内部的凝聚力和目标一致性。使命宣言示例

（图片由康涅狄格大学IRE提供）RC评估目前（2023-24学年），我们正处于从一年期评估计划方法过渡到三年期评估计划方法的过程中。做出这一调整的原因有以下几点：1）确保报告反馈及时且相关。2.)这样程序就有时间在一个周期内收集更多数据。3）鼓励进行更具创造性、更有意义的改进/调整。有关该周期和各种好东西的详细信息可以在RCAssessDigication页面上找到。日历！表格！往期报告！RC评估（续）学术项目评估委员会(APAC)定期审查每个项目的评估报告，并提供反馈、想法和需要考虑的问题。在我们的三年周期中，项目包括：每年收集并记录数据。第二年末与亚太地区进行一次简短的“进度汇报”。第三年结束时提交完整的评估报告。亚太地区委员会致力于及时提供反馈，以便各项目能够在需要时迅速调整其评估计划。RC评估（续）课程应力争达到5-8个学生学习成果(SLO)。这些成果应与项目的使命相一致。每个结果指标应包含2-3个衡量标准，每个标准都应有其明确的目标。在条件允许的情况下，同时采用直接测量和间接测量方法。直接衡量指标——提供学生学习成果的具体证据。例如，其中一项衡量指标可以是学生在关于正确使用实验室设备的测验中的得分。你的目标可以是“至少四分之三的学生得分达到或超过80%”。间接测量——衡量学生的感知、反思或其他学习迹象。例如，您可以进行结业调查，询问学生对安全使用特定实验室设备的信心程度，目标是所有学生至少感到“比较有信心”。请注意，某些专业，例如教育和商业，还有额外的认证要求。如何撰写一份好的学生学习目标（SLO）？学生学习成果：明确学生参与该项目后应展现的具体行为、知识、技能等。重点在于你希望学生掌握的知识或技能。回到最初的问题：“在我所教授的专业学习的学生毕业时应该知道或能够做什么（这些是他们在通识教育课程中没有学到的）？”尝试在不同的地方追踪每个学习成果目标（例如，在200级和400级课程中都追踪，或者在不同的班级中追踪）。务必根据课程级别调整预期目标。我该如何确定衡量指标？确定哪些独立的、可观察的行为/结果能够证明这种学习，然后弄清楚如何衡量它。在制定学习成果目标时，请注意措辞：选择能够体现可衡量成果的词语。如果学生学习成果目标(SLO)表述为“学生应该了解心理学的主要理论”，则很难衡量，而且不够清晰。“学生应该能够讨论心理学的主要理论”提供了一个更清晰、更可衡量的目标。图片来源：威斯康星大学麦迪逊分校继续教育学院如何确定目标？在确定衡量指标的目标时，需要考虑两件事：1）目标是否适合该级别？你不会指望一个二年级学生写出四年级学生才能写出的论文质量。相应地调整你的目标。2）目标是否使用了有效的测量方法？（也就是说，目标是否反映了测量结果？）例如，如果你想评估你的学生是否能将色彩理论应用到他们自己的作品中，那么以课堂参与度为目标的衡量标准可能并不有效，这意味着任何与该衡量标准相关的目标都不太可能给你提供你想要的信息。未能击中目标许多项目担心无法达到目标，因此在目标设定上相当保守。你当然可以自由地采取这种方法，但要知道，未能达到目标也没关系（真的！），而一个严格（但可实现）的目标可以是一个很好的挑战。如果您的项目未能达到目标，亚太区可能会提出一些问题，帮助您思考原因。例如：目标难度是否过高？例如，对于本课程部分而言，难度是否过高？这个测量方法有效吗？（它真的能测量你想要评估的东西吗？）这是由于样本量(n)较小，或者1-2名学生影响了结果所致吗？没达到目标其实没什么大不了的。整个评估过程的目的就是帮助你理清思路，并在你认为有益的地方进行改进或调整。如何制定课程地图？评估课程图概述了课程中每个学习成果(SLO)的评估位置。这些都非常有用，我们强烈建议您制作一个。允许课程将学习成果目标与课程内容相匹配。暴露了课程设置中的不足。帮助项目确定他们是否能够通过一次作业/方法达成多个学习成果目标（是的！这是可能的！）有助于制定未来几年的课程计划。它以易于理解、易于阅读的方式展现了项目中正在进行的评估工作。课程地图示例SLO1SLO2SLO3SLO4SLO5课程1名称引言课程2名称考试1，作业6课程3名称纸项目课程4名称第二次考试作文最终的课程5名称反思文章研究出口调查Q1Q5