基于用户体验的微课评价指标体系设计

基于用户体验的微课评价指标体系设计 摘要有关微课的评价目前还未形成定论 该文从微课的内涵 入手 综述了目前不同的评价框架 尝试从用户体验的角度 借助Nielsen的计算机系统可接受性模型来制定微课评价体 系 从教学有用性和微课可用性两个维度出发 指定了八项 二级指标 分别为选题设计 内容选择 活动设计 易于学习 使用高效 易于记忆 低错误率和高满意度 关键词 用户 体验 微课 微课评价 指标体系前言 目前 虽然还尚未明确到底什么是 微课 还是 微课程 但 是 覆盖学术界 行业 企业在内的微课系统工程已经全面 铺开 大量的微课活动 微课产品以及和微课相关的学术研 究已经层出不穷 虽然看似作品 平台 研究已经逐步到位 似乎正在系统化 但是 如何遴选出好的微课无疑成为时下 最急迫的事情 不同的比赛虽已制定了不同的评价标准 但 各有侧重 而且伴随大赛的结束 评价标准也将被取代 至 于 微课评价是教学评价 微课评价是技术评价 微课评价 是用户评价 的谜团 还未有人去解开 可见 如何能使其具 有长效性和普适性是一个值得长期关注的问题 1 微课评价 的特征及相关评价指标分析 1 微课评价之 3W H 从传播的视野 什么是微课评价 为什么要进行微课评价 谁来实施微课评价 如何进行微课评价 这是在微课评价 之前必须要明了的问题 微课的功能有很多 诸如作为生成 性资源 作为慕课中的资源 支撑翻转课堂 对于微课的评 价首先要厘清其功用 从前言中不难看出进行微课评价的必 要性 可是谁来实施微课评价 组织者 政府还是用户 如 何进行微课评价这是该研究集中讨论的问题 2 不同视角下的微课评价 1 宏观理论视野下的微课评价 宏观理论视野下的微课评价离不开对微课内涵的分析及其 特征的挖掘 我们以为微课评价属于评课的范畴 一般评课 的指标包括教学目标 教学内容 教学过程和教学效果的评 价 但是微课的 课 又略有不同 是微视频 所以 在此基础 上 微课评价还应包含技术评价 当然 微课评价还需要从 微课 短 小 精 悍 这些特点进行考量 黎加厚老师对微课的特征进行挖掘 他认为需要从四点来评 价微课 聚焦 简明 技术 创新 聚焦是指 只讲述一个教学 知识点 简明则是从时间控制上对微课的限制 技术主要强 调在微课的制作中要恰当选用技术 创新涉及教育理念创新 教学模式创新 运用技术创新等 下面两个微课评价指标维度表虽然看似从不同的角度对微 课进行评价 但是 二者的共同点在于都是紧抓教学 从微 课的本质入手对其进行评价 除此之外 尹合栋对微课程评价指标体系的评价内容 指标 权重等内容进行研究得出八个维度 微课选题 教学设计 互动设计 辅助资源 微课技术 课件艺术 课件 实用 及 教学效果 等 2 从比赛的角度来看微课评价 各级各类微课作品征集 竞赛评选 教学大赛 应用推广等 活动如火如荼地开展着 以教育部全国高校教育网络培训中 心 中国教师报 教育部教育管理信息中心 教育部全国高 校教师网络培训中心所举办的微课比赛为早期的微课大赛 形式 面对广大参与者如此高涨的热情 如何在众多的微课作品中 客观公正地遴选出高质量 高水平的微课作品呢 分析近年 来各大微课比赛评审标准 可以看出 微课概念的不明确导 致微课评价标准的模糊 不清晰 我们认为 用户作为微课 作品的直接受益者 分析用户的感受 以此来指定微课的评 价标准 将会使微课的应用价值得到很好的体现 首届全国高校教师微课教学比赛的评审标准融合了教师教 学基本功比赛和微课比赛的评审标准 在评审人员构成上和 评审流程上有一些差异 例如 北京高校第八届青年教师教 学基本功比赛是由专家和学生评委共同评审 专家评委需要 长期从事教学和教务管理工作 例如正教授 博士生导师 优先推荐教学名师 年龄60岁以下 学生评委要求成绩在年 级中排前1 4 其中 专家评委主要负责现场教学演示的内容 讲授 演示和互动方面的内容 学生评委负责教学效果的 内容 而全国高校教学比赛仅有专家 没有学生 尽管首届 微课反响不错 但是 在评价方面还有较多不完善之处 诸 如视频长度以及创新性难以把控 第二届微课大赛取得了良好的社会反响 其评审规则主要涵 盖作品规范 材料完整 技术规范 教学安排 选题价值 教 学设计与组织 教学方法与手段 教学效果 目标达成 教 学特色 教师规范 以及网络评价四个方面 在该评价系列中 不仅体现了微课的教学特征 还体现了其网络特征 浙江大学城市学院的陈竞萌老师从 微课评价主体是谁 这个 问题入手 对微课的评价机制提出建议 他认为每个职业都 应该找好受众 像把护士还给病人 把歌手还给观众一样 也应该把老师还给学生 一个老师课上的好不好 不一定是 专家说好就好 受众是学生 学生说好才是好 才能愿意听 下去 才能更好地实现知识的传递 可见 从用户体验的角 度去评价微课不啻为一个明智之举 基于用户体验的微课评 价指标体系的研究方法和过程 1 用户体验及用户体验有效性 微课作为一个特殊的教育产品 只要其能带给学习者良好的 学习体验 完成一定的教学目标 其必然是一个成功的产品 2 国际标准化组织 ISO 9241 210 2008 将用户体验定义为 人们对于针对使用或期望使 用的产品 系统或者服务的认知印象和回应 3 James Garrett 4 认为用户体验是指产品在现实世界的表现和使用 方式 积极用户经验指创造产品的组织和用户都能实现的目 标 有用性从哲学的角度来说是基于事物的属性而存在的 也就是有用性是事物意义的基础 事物有用 才有存在的意 义 从用户体验的角度来说 有用性是产品满足人们需要的 特性 是一个产品能否达到一些特定的目标的特性 用户体 验研究专家Nielsen 5 通过对计算机系统可接受性的解析 得 出计算机系统中的有用性包括实用性以及可用性 Nielsen 的计算机系统可接受模型如 1 所示 Silius 和Tervakari 在Nielsen 的基础上对有用性中的另一个分支 实用性进行了详细划分 得出了更为完整的基于网络的学习环境有用性体系模型 如 图 2 所示 尽管微课不同于计算机系统和基于网络的学习环境 但是从 产品的角度出发 微课评价同样可以从实用性和可用性的角 度去考虑 微课产品也涉及教学可用性 易于学习 使用高 效 易于记忆 低错误率和用户满意等几个属性 2 个案分析 案例介绍 支气管哮喘是呼吸系统常见病和多发病 由于大 气污染 吸烟 工业经济发展导致的理化因素 生物因子吸 入及人口老龄化等因素 使支气管哮喘的发病率明显增加 给社会 家庭及患者本人造成了极大伤害 因此正确认识支 气管哮喘非常重要 此微课重点阐述了支气管哮喘的临床表 现 诊断和鉴别诊断 不仅能使学生学到相关的理论知识 正确认识支气管哮喘 也可以使社会人群了解支气管哮喘 从自身做起 如戒烟 保护环境等 预防上述疾病 评价1 选手具有非常丰富的教学经验及临床医学经验 教学 风范良好 微课制作完整 规范 选题价值重大 教学设计科 学 教学内容安排合理 通过引用生动的教学案例 导出教学 内容 从实践出发 结合临床医学经验 结合医学理论 以模 拟方式清晰 形象 生动 有趣地分析了支气管哮喘的定义 及症状 以及容易被忽略的 不典型 病症体征 对不同程度 的支气管哮喘病症做了详细解析 对其他病症引发的气喘与 支气管哮喘的不同做出了明确区分 并提醒学生在实践中要 充分注意病症的可能性 整个教学活动能有效帮助学生对该 病症确诊 有效避免临床误诊 能激发学生对该问题的充分 思考及认知 充分体现出一位资深医学工作者 教育工作者 高度的责任心及严谨 科学 求是的医学态度 作为一位著 名院士 钟南山院士示范教学 参与首届全国高校微课教学 比赛 在中国高等教育史上可谓绝无仅有 对于中青年教师 起到了良好的示范作用和鼓舞效果 评价2 情景教学和案例教学 使得学生课堂气氛活跃 教学 效果非常好 同时教学思路清晰 教学重点突出 教师仪态大 方 视频画面清晰 布局合理 整体效果很好 评价3 虽然我不是学医的 但是老师讲的很清楚 经验非常 丰富 十分佩服 医生和老师如果都如他一样就好了 评价4 我的孩子一直有这个毛病 医生每次看一分钟不到就 诊断为支气管炎 吃很多药都不见效 后来是自己查资料才 知道是得了过敏性哮喘 钟院士用大量图片及声音模仿 分 析得很透彻 同时也教学生医德 值得我们年轻人学习 从上面的评价可以看出 对于钟南山该微课的评价主要体现 了 实用性 和 有用性 3 建构模型及指标 从用户体验的角度来评价微课 就是站在学习者的角度 首 先要知道学习的内容是否和现实的需求相一致 然后就是探 索如何进行微课的学习 并且关注在学习的过程中是否有着 良好的体验 因此 基于用户体验有用性的微课评价 应该 从满足学习者需求 微课教育教学过程以及微课可用性几个 方面来评价 图2所示有用性体系模型 分为实用性和可用性两部分 其中 附加效益是根据微课使用者以及微课的使用环境不同而变 化的 所以在本文的指标项中 没有将附加效益加入到评价 指标体系中 同时 根据用户体验的理论 产品对用户有用 是良好用户体验的前提 而微课的主要意义在于对学习者的 教育 本文将教育可用性改为教育有效性 以保证评价指标 更加切合主题 因此 基于用户体验有用性的微课评价分为两个维度 一部 分是教育有效性 一部分是可用性 如表2所示 教育有效性 主要关注微课从目标设定 内容选择到活动设计等方面对学 习者学习的支持情况 具体可分为微课符合学习者需求 微 课对学习过程的支持 微课对学习目标实现的支持 微课对 学习者学习自主性的支持 微课对学习者与学习内容互动的 支持 可用性主要关注的是微课是否便于学习者的使用 其 具体划分主要参考Nielsen基于用户体验系统有用性的分类 分为易于学习 使用高效 易于记忆 低错误率和高满意度 五个方面的内容 4 问卷调研 专家访谈 形成评价体系 将初步构建的指标维度 转化为观测点 并转化为题项 设 计了相关的问卷 对用户进行调研 并对来自国内外的13位 具有微课制作经验的教师进行访谈 通过第一轮专家意见的 整理与问卷分析的结果 对模型的具体指标项进行调整和增 删 初步形成评价指标体系 接下来 我们邀请国内15位微 课专家对该指标体系进行论证 总的来说