语言测试与成绩分析ppt课件

第五章语言测试与成绩分析 本章重点 1 概念 语言测试 对外汉语测试2 举例说明 测试特点 针对性 规范性 系统性3 判断 测试的类别4 识记 测试的原则5 评判测试优劣的指标 信度 效度 难易度 区分度 第一节测试的性质和特点 一 测试性质1 语言测试 对被试者的语言能力做出科学评定的一种测量 2 对外汉语测试 基础 语言学 对外汉语教学 心理测量学 教育测量学结合汉语特点设计的 以考查第一语言非汉语者汉语交际能力为核心 兼顾考查汉语知识的语言测试 二 测试特点 一般语言测试的特点 客观性 科学性 目的性对象的复杂性 内容特殊性 目的多样性 对外汉语测试的个性 1 针对性2 规范性3 系统性 二 测试特点 1 针对性 1 体现汉语本身的特点A汉语语音特点 听力试题B汉语结构特点 语法试题C汉字特点 汉字试题 2 体现被测试者的特点 二 测试特点 2 规范性3 系统性A知识 技能B具体的知识 技能C某一级语言项目 限制在同级的语言要素范围内 根据汉语的特点设置题目 针对性 YCT 少儿汉语考试 样卷一级听力 年龄特点 规范性 第一节测试的性质和特点 一 测试性质1 语言测试 对被试者的语言能力做出科学评定的一种测量 2 对外汉语测试 基础 语言学 对外汉语教学 心理测量学 教育测量学结合汉语特点设计的 以考查第一语言非汉语者汉语交际能力为核心 兼顾考查汉语知识的语言测试 二 测试特点 1 针对性 1 体现汉语本身的特点A汉语语音特点 听力试题B汉语结构特点 语法试题C汉字特点 汉字试题 2 体现被测试者的特点 B汉语结构特点 语法试题 考察虚词的用法在每个句子下面都有一个指定词语 句中A B C D是供选择的四个不同位置 请判断这一词语放在句中哪个位置上恰当 了我已经A开始B做C饭D 考察语序 1 针对性 2 体现被测试者的特点起因 对象的复杂性 国内与国外 成人与少儿 华裔与非华裔 二 测试特点 2 规范性3 系统性A知识 技能B具体的知识 技能C某一级语言项目 限制在同级的语言要素范围内 语言测试作用 1 一般作用 评价学习者的学业成就和语言水平 评估教学的实际效果 为选拔人才提供依据 为改进教学中的问题提供反馈 2 对于各种有关人的语言能力的假说 需要实证性数据的证实 语言测试在这方面可以为语言研究 语言教学研究 提供信息 发挥重要作用 3 语言测试研究能够为第二语言习得研究提供更为可靠而有效的方法和手段 4 推广母语教学 扩大母语影响 语言测试基本类型 一 从目的 用途的角度分 1 成绩测验特点 教什么测什么 学什么测什么 怎么教怎么测 测试内容必须以教学大纲 教材 教学内容为依据 典型的成绩测验 期中 期末测验分类 最后成绩测验 进步测验 2 水平测验特点 不以特定的教学大纲 教学课程或教学方法为依据 只看被试的语言水平如何 目的 测试对目的语运用的熟练程度 选拔人才 难点 必须弄准什么叫 语言水平 要求能够预测未来完成特定任务情况 3 学能测验目的 预测被试学习目的语的能力 难点 必须弄准什么是 能力倾向 Carrol等人认为包括 语音能力 语法能力 综合归纳能力 语言记忆能力 语言表达能力等 4 诊断测验特点 了解学生具体某一内容或短时间内存在的问题而进行的测试 目的 了解学习者对教学内容掌握情况 以便调整教学 不一定需要打分 非正式的测验 各类测验的特点 二 从评分方法的不同分类 1 主观性测验划分标准 根据评分时是否需要凭主观判断 形式 作文 口试 问答 简述 完成句子 完成会话 造句 翻译优点 考查有深度和层次 命题容易 很难猜测缺点 评分不易做到完全一致 评分费时费力 2 客观性测试划分标准 根据评分时是否需要凭主观判断 形式 选择题 是非判断题 配伍题 如连线 听写 填空是不是客观题优点 题量大 内容覆盖面广 评分简单 客观 容易满足统计学的要求 缺点 不适合测试产出性语言技能和被试综合运用语言能力 可以猜题 编题费时费力 三 分立式测验和综合式测验 测试命题方式 1 分立式测验特点 把语言分解成语音 语法 词汇等不同的语言点来测 形式 多项选择 是非判断等题型 优点 评分客观 准确 试题针对性强 2 综合性测验目的 了解被试综合运用语言知识的能力 形式 写作 口试 完形填空 听写 多项选择的阅读听力理解 优点 有效测量被试整体语言水平 四 标准化测验非标准化测验 反映成绩的方式 1 StandardizedTests特点 一是具有统一的标准 二是对整个测试过程可能出现的误差都可严格监控 试题编制 测验实施 阅卷评分 分数转化解释四个标准化 缺点 忽视不同个体习得第二语言特点 客观性多项选择题能否测量真实语言水平受到怀疑 对语言教学产生误导 2 Non standardizedTests 表现评价 真实评价 原HSK的题目设置 原HSK的等级 思考 反映成绩的方式看 HSK是什么测试 A标准化测试B常模参照性测试 非标准化测试 测试的原则 1 公平性与可行性相结合2 科学性与真实性相结合3 主观性与客观性相结合 测试的原则 1 公平性与可行性相结合A公平性 a测试的组织和实施 保证应试条件的一致性b测试成绩的评定 公正合理c大型水平考试 保证内容多元化B可行性 措施的可行性口语测试 录音 机器阅卷 答题卡 测试系统 测试的原则 2 科学性与真实性相结合A科学性 以考查语言交际能力为主 兼顾知识和各项技能全面测试 B真实性 语料来源于自然语料 但是经过一定加工后的干预语言 体现交际性 互动性 真实性 测试的原则 3 主观性与客观性相结合A宏观上 主客观题目都要有B微观上 客观题目 答案唯一性客观题目的答案不能因被测者的主观因素 文化观念 生活习惯 而随意选择 客观性原则 了我A吃B饭C去D 据有关资料 全世界每年沙漠面积扩大5 7万平方公里 地球上森林面积已由19世纪的55亿公顷减少到现在的28亿公顷 日益严重的水污染和大气污染 更加重了人类居住环境的恶化 问 读这段文字使我们感到 A气愤B不安C兴奋D不在乎 语言测验开发过程 一 设计阶段 1 明确测验目的 语言教育 选拔人才 改进教学 2 明确测验对象 背景 个人特征 知识结构 语言水平 对测验的熟悉程度需求 求学 求职 3 确定测验内容 教学内容 非教学内容 4 确定测验方式和卷面构成 题型 题量汉语水平考试的题量和时间分布 5 确定评分方式和分数体系 主观题的评分标准和分值 模拟 二 操作化阶段 1 编写测验说明和题目细则 2 训练命题员 3 聘请专家就有关问题向其咨询 三 施测阶段 1 预测 在测验正式进行之前 让一组有代表性的被试试做题目分析 难易度 区分度等 筛选正式题目 2 实测 把符合标准题目合成正式试卷 进行测试 报告分数统计研究施测结果 信度 效度的定量定性分析 题目编写一 客观题的类型 一 多项选择题基本原则 1 只有一个正确答案 1 目前还没有发现这类问题 A 现在B 最近C 看来D 在眼睛前面 2 我们两家住斜对门 关系很好 A 隔壁B 邻居C 门有些斜D 门靠门 2 只测一个语言要素他们都认为 这是个好主意 A 意思B 办法C 态度D 建设A 东西B 办法C 消息D 现象3 每一个选项在语法上都应该是可替换的不要再买点心了 再买妈妈又该说我们了 A 解释B 劝告C 责备D 表扬4 文本不能太难5 越简洁 越清楚越好6 在试卷中一般按从易到难的顺序排列 二 完形填空题 形式有很多种 1 有选项的测试 选词填空 选句填空2 无选项的测试 选词填空 选句填空 根据上下文的意思填写汉字 本周五下午两点 在国际文化交流学院报 厅 举办外国留学生汉语演讲 赛 欢迎广大留学生积 报名参加 三 是非判断题 听对话 判断对错A小明上学的时间不长 B小明请人教他学会了电脑 客观性测试题C短文主要讲小明自学电脑的故事 主观性测试题 四 问答题目 听后回答问题A女的找麦克做什么 B女的找王丽去做什么 适用于听力 阅读技能的考查 还有语言表达能力的考查 题目质量分析的方法 1 总分对比法A从高到低排序 分高分组和低分组B分析每一道题目 在两组的表现是否对应高低之分 2 内外对比法成绩测试 平时成绩 考试成绩能力测试 考试成绩 考后目的语的实际情况 质量评估 信度和效度 一 信度 指测量结果的可靠性 一致性和稳定性程度 一个高质量的测验对同样一组被试反复测量结果应该保持一致 1 测验信度的估计再测信度 稳定性系数 防止练习效应等值复本信度 测验的等值性 平行试卷分半信度 反映测验内部一致性程度内部一致性信度 精确评分者之间信度 0 90以上 2 影响因素 题目数量 题目的同质性 题目难易度分布 被试样本的异质程度二 效度 指测量的有效性和准确性 即测量对它所要测的东西准确测量的程度 针对特定的测量目的而言 程度概念1 类别 1 内容效度 实际测量内容对所欲测量内容的代表性程度 表面效度 指一个测验从表面上看是否测了它所要测的知识或能力 考查书面表达能力可以用写作文的方式和改错句的方式 前者表面效度高 并不一定 成绩测验最应讲求内容效度 即最强调题目代表性 需要确定测验的范围和各部分的比例 评判方法 靠经验判断等定性分析的方法进行 2 效标关联效度 指测验结果与效标的一致性程度 效标是指衡量测验有效性的外部标准 通常指测验所要预测的行为 预测效度 测验分数与一段时间后被试的行为表现之间的相关程度 共时效度 以测验实施相同或相近时间内搜集到的其他经验性资料为标准 3 构想效度 理论 观念效度 测验结果与设计者关于能力的理论构想之间的相关程度 第二语言习得理论有许多假说 用测验验证 涉及构想效度2 影响效度的因素 题目的质量 难度等 参照标准的质量 测试实施的程序是否标准化 三 信度 效度关系信度是效度的必要前提 信度高的测验不一定效度高 1 难易度 指某个题目的答对率 即答对某题目的被试占全部参加测试的被试的比例 p 答对此题人数 总人数 范围应在0 2 0 8之间 平均难易度 一