从试题分析谈有效教学策略_第1页
从试题分析谈有效教学策略_第2页
从试题分析谈有效教学策略_第3页
从试题分析谈有效教学策略_第4页
从试题分析谈有效教学策略_第5页
已阅读5页,还剩13页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

彳定言式题分析^有效教擘策略

一、九年一贯言果程数擘擘曾领域之教擘押量的要求:

1、押量是检脓教学效果的谩程,教白币愿透遇各槿言平量方式,来改善自己的教

孥。

2、教擘押量宜同畤队照到擘雪成就舆学,音屣程.分析学生是否能逢到能力指襟

的要求。

3、根■!虞学生他人的评量幺吉果,教台币可以理解学生既有的知^舆^也可以彳定

孥生彝生的回溯其阜雪上的冏题加以韩醇修正。

4'押量暗,朦注意押量畤檄的逗择,避免封押量结果作咨皆^或不常解^。

5、押量畴,愿配合者平量的目的,tft冏魅能恰奇反鹰季生的孥雪状熊,所有的

押量题型,彝挥W亥题型的特辰。

二、洌]瞬理^

汛情^理^是一槿解释浏验资料言登^^的有系'统的理,通常副分

成二大擘派:一卷古典测瞬理tfe一主要使以真^分模式敷悬骨斡;另一悬窗代

测瞬理色俞一主要是以就彪反愿理架情。

(一)古典项J瞬理^

古典测瞬理(classicaltesttheory»曾耦CTT)「古典真分敷理

言俞」,其内涵主要是以真^分数模式X=7+E卷其理^架横,其中X^z觐察分数,

是受^者在测,版中所得到的分数;T悬真置分数,是受就者接受测脓辗数次之得

分的平均数或期望值,维法正硅的被测量到;E差分数,指的是测量的^

差,也就是受言式者貌察分敷和真宣分嚏攵的差。由於CTT是依獴弱磬假3殳而来,故

又稠悬「弱真分嚏攵理箫」。

古典浏,除理^衍生出弑题分析畤的重要指襟,如聿隹易度(difficulty)、$篮

别度(discrimination)和信度(reliability)等。

(二)专式题反鹰理

古典测脓理^在作就,题分析8寺既有上述^多缺黠,遂有「就题反鹰理t^」

(itemresponsetheory,曾耦IRT)施生。IRT模式其主要是以他)别就题的^

黠,来解释测瞬分效的涵意。它勰悬孥生在某一弑.题上的表现情形,舆其背彳复的

某槿潸在特^(即能力)之^具有某槿嗣保存在,3亥^你可以透调一脩连^性遮

增的数孥函数来加以表示和寺全释,道他数尊函数便耦作「就,题特徵曲(item

characteristiccurve,蔺耦ICC)。

Tucker是第一位使用「^题特徵曲一能]的学者,其表示此曲^是符受K

者的潜在能力和宣除得分情形聊结在一起,受就者的浏脓成^是由一些看不兄的

潜在特^^决定,幺型由测瞬就题表现出造些特^,每值1受方或者在接受浏,瞬彼,畲

有不同的潸力表琨出来,通常用数值来表连不同受就.者潸在特^上的相封程度,

亦即IRT中受考式者的能力参数。ICC能清楚扼要地表示^^参数舆能力^的^

保燮化,藉由模式求出受就者在^^上的表琨舆封其能力之估言十量的^^。不同

的ICC就代表不同的就题参数舆能力^的燮化^^,每一就有其相封朦

的一脩ICC,亦即每一槿就题反鹰模式都是用牝描述受3式者能力舆答封械率^的

血系。

常用的三矛重IRT模式,每一槿模式都依其探用的就题参数的数目多寡来命名,

都僮遹用於二元化的反鹰资料(亦即,正碓反鹰者登^^1,李告^反鹰者悬0的

资料)(余民事7992):

1.军参数洛吉敦模式(one-parameterlogisticmodel)又耦RaschModel

『Of)

R('s)--I.D(^-b,)i=1,2,3,…,〃

JLI

其中a:第s位受就者的能力参数

p网):表示能力参雯攵悬。的受言或者§,答封^^ai或在就题,•上正硅反鹰

的械率。

D:表示常数悬1

々:^^莫隹易度的参数

根榛公式的定羲,3式题就易度参数。的位置正好座落在正础反感檄率悬0.5

畤的能力量尺(abilityscale)上的黑占7奂言之,常第i堰的茶售易度参数〃落在

言式题特徵曲,绿上答封檄率P项A0.5的黠畤,就堰的黄隹易度参数畲等於受就者能

力值。。愈困莫隹的就懑,其言式题特徵曲绿愈是座落在能力量尺的右方;反之愈曾

单的就题,其弑题特徵曲^愈是座落在能力量尺的左方。封状O隹易度参数有畤又

叫做位置爹教(locationparameter)。罩#■数的:式题特徵曲缘如D2TT所示,

一伽参数模式熬悬影辔受官式者正硅反愿的械率大小的就魅特徵,只有言式题^易度,

不把就题的^别度和猜测度考虑在内。也就是吉兑,一他1参数的模式是假^所有^

题的^别度是相等的,而且^题的猜浏度卷零。如此多的假W殳,使得罩参数假W殳

的逾用性相封的降低。理^上,鬟隹易度々值介於±8之^,但^除愿用上,通常

只取±2之^的轮圉。相封於古典浏瞬理^的事隹易度指数,其所指的是然状I真正

的「荽食」度,不是古典冽,瞬理徐所指的「易」度,而且古典测瞬理输的蓑食易度指

数是一槿模本依赖(sampledependent)的指榄,其值受到受方式者栋本的影辔很

大。

01四脩典型的罩■参数就题特徵曲^

2.洛吉敦矍赛模式(two-parameterlogisticmodel)

R(4)=l+^D肛ef)i=1,2,3,…,〃(2.1.7)

其中。:第s位受就者的能力参数

P,(0s):表示能力参数熟。的受3式者s,答封就,题/或在就题/上正硅反

鹰的檄率。

D:表示常数

《:然次14歌别度的参数

h,:营式题鞋易度的参数

典罩参数模式相比,曼参数模式多了一倜参数:言式^别度通常以出表示,

是指就题封不同能力的受就.者是否能反愿出其答超的差巽,也就是就J酸别度大的

就题,封於能力高的受就者而言,其答封率高;封能力低的受怒;者而言,其答封

率低。而就题^别度参数出的值,刚好舆在〃.黠的W式题特徵曲名泉的斜率(s1ope)

成某槿比例。3式题特徵曲缘愈陡(steeper)的就题比稍平滑的3式题,具有较大

的^别度参敷值;换句言舌就,^别度愈大的就题,其国别出不同能力水型考生的

功能愈好,亦即分辨的效果愈好。理^上,巴值的靶圉在±8之^,我凭通常拾

集负的《值不用,因悬带有负值处的营式题特徵曲^代表著:能力愈高的考生答封

W式题的檄率愈低,适似乎典孥理相邃背,所以负的外值不用。因此,在^除鹰用

上《也不能太大,其靶81常介於0到2之^。生值愈大,就题特徵曲.象愈陡,就魅

愈具有良好的分辨能力;反之、生值愈小,代表就,题特徵曲^愈平坦,就,题即J愈

维法明^的分辨出考生能力的水型(余民窣,1992)。

02四脩典型的矍参数就题特徵曲名泉

由8)2可知:言抵逗2的曲,绿,其斜率敕小,亦即^别度较低,故辗法有效分辨

考生能力。另外,造些曲^的下限值都是零,亦即雨他参数模式未把考生的猜浏

度因素考庵'在内,所以本模式通用於自由反鹰(freeresponse)的言式题分析或

就题不太困蒸的罩逗题测瞬分析,封於有良好施测指醇^的能力洌居余资料亦可通

用。

3.洛吉敦三参模式(three-parameterlogisticmodel)

B©)i+l+e-)

其中,:第s位受考式者的能力参数

E(q):表示能力参数卷。的受就者s,答封营式题了或在然浅上正碓反鹰

的械率。

D:表示常数悬1

/:^别度的参数

a:前送o隹易度的参数

q:猜测度的参数

洛吉敦三参数模式是由洛吉敦燮参数模式延仲演燮而央,它多增加一他猜洌J

度参数,通常用G保表示,是指符能力趣低或能力参数值悬零的受就者考虑到模

式桂,U•算出此^受就者答封就,逗的械率,亦即把低能力受言或者的表现好^因素

也考虑;在模式桂,雷然,猜题可能是适些受就者在某些浏,除就,题(如逗择题)上

唯一的表现行悬o

彳足ICC来看,它是位於蕊曲^的左下渐近。通常猜测度冬教值比受就.者在

完全随檄猜测下猜答的檄率稍小,亦即G值小於^^ig项数目的倒数,也就是言兑

如果一有四他逗项,卯|q鹰小於0.25。猜测度参数只出睨在三参数以上的

模式中,在罩参数及曼参数模式中均聘其假定悬0或接近0而忽略不方十。令值

愈小,表示猜测的因素愈小,欲愈有效,最理想的q值是q等於0,表示就题

完全不受猜测影警,但是只要浏,瞬的型式是逗择题型,通常很装隹避免受就者的猜

测行悬°

03六僚典型的三他参数弑,题特徵曲瀛

由m2T-3得知,曲,缘第3、5、6脩典第1、2、4彳条曲,缘的比敕,可以看出就

题猜测度参敷,前者大於零,彳灸者等於零,也就是能力低的受就者在於前者之式堰

上具有敕高的猜浏行悬。

以下就古典浏,瞬理^的缺失典常代测.验理^的特黠整理如下表1做相互比

率交:

表1古典洌理^的缺失典富代洌用会理^的特黑占的比敕

古典测脓理^的缺失常代测验理^的特黠

一、古典测验理^所探用的指襟,一、富代测脓理3俞所探用的三式题参

如::隹度、^别度,和信度等,敦(itemparameters)(如:莫隹

都是一不重棣本依赖(sample度、^别度、猜测度等),是一

dependent)的指襟;也就是3兄»稹不受棣本影警(Sample-free)

造些指襟的掩得畲因接受浏,瞬的指襟;也就是,造些参数的

的受言式者棣本的不同而不同。因现得,不曾因悬所逗出接受测瞬

此,同一份就,卷很辘得废得一的的受言式者棣本的不同而不同。

莫隹度、^别度,或信度。二、富代浏,瞬理能多勺/十封每位受

言式者,提供佃别差臭的测量^差

表2T-1(、绩)

古典测脓理^的缺失常代测验理的特黠

二、古典测.验理之俞以一值1相同的洌]指数,而非单一相同测量檄型

瞬襟举言吴(standarderrorof,因此能精碓推估受就者的能

measurement),作卷每位受就,者力估1(•值。

的测量差指襟,道矛重作法攵三、常代测瞬理^可^由遍用的同

有考受就者能力的佃别差^性官式题名且成得分就随,测量估

巽,封■高、低能力雨趣端组■的受外出受舒:者值)人的能力,不受浏

就者而言,造槿指才票趣悬不合理.验的影署(test-free)»且封

且不举碓,致使理^假W殳的遹窗於不同受就者的分数,亦可谨行

性受到慎疑。有意羲的比率交。

三、浏瞬理^封於非禳本四、富代浏,瞬理^提出以就,题飘.息

(nonpara1lei)但功能相同的量(iteminformation)及试卷

测脓所浏得的分数^,辗法提供疑息量(testinformation)的

有意羲的比敕,有意羲的比敕僮概念,来作悬营平定某值1款:题或整

伺限於相同测验的前彳受测分数份就卷的测量型碓性,倒有取代

或^本浏瞬分数之^。古典浏脓理^的「信度」,作卷

四、古典浏瞬理^封信度的假鼓,是押定W式卷内部一致性指襟之势。

建立在不复本(parallelforms)五、森代测3佥理^同暗考虑受试者

浏瞬的概念假3殳上,但是造槿假的反朦名且型典言式题参数等特

t殳往往不存在於^除情境性,因此在估母M固人能力暗,除

桂。道理很曾罩,因卷不可能要了能多勺提供一«敕精础的估考十

求每位受方式者接受同一份测.酷值外,封於原始得分相同的受就

维敦次,而仍然假言殳每次测量^者,也往往给予不同的能力估言十

都彼此3蜀立不相^。况且,每一值。

槿浏瞬Ji不一定同畤都有裂作、常代浏,瞬理^所探用的逾合度

穆.本,因此彼.本洌情食的理^假言殳考瞬值(statisticof

是行不通的,优方法•学遍韩觐黑占goodness-of-fit),可以提供考

而言,它的假言殳也是不合理的、^模式典资料^之逾合度、受孤

矛盾的。者的反鹰是否悬非尊常

五、古典浏瞬理^忽视受言或者的言式(unusual)等参考指才票。

题反鹰组型(itemresponse

pattern)»^原始得分相同的

受言或者,期能力必定一檄:其^

不然,即使原始得分相同的受就.

者,其反鹰组•型亦不免得畲完全

一致。因此,其能力估言十值鹰言亥

畲有所不同。

三、0中数阜科测瞬命题原即J

(一)、一般注意事项

1.就题的表方式要能切合3亥题的言平量目襟。

2.就,题要能清楚的表连题意。

3.每低1言式题只冏一值1冏魅,避免同畤包含太多概念。

4.弑,题的文字原攵述鹰蔺瀑、明白,避免出现跟答案维嗣的内容。

5.襟黠符虢的使用要津硅。

6.就题的文字余攵述鹰加以燮化,避免直接抄装言果文。

7.就题宜舆孥生的生活幺型瞬相结合。

(二)、题韩典逗项的言殳言十原刖

1.题衿舆邃项的文法要一致•暹辑上要能建fC

2.题斡或溟项中,鹰避免出现可能暗示正碓答案的名泉索。

3.题斡鹰儒量用正面的叙述,避免使用否定句。若用否定句畤,睛在查

定字眼下加方主曼底。

4.题斡的券攵述朦保持完整,避免被逗项分割成雨值1部份或段落。

5.各逗项中重覆.出现的文字篇■放在题斡内。

6.每低ig项愿使用相似的表逢方式。

7.邃项中只有一他最佳或正硅答案。

8.。音^邃项鹰具有^答力。

9.项要能有充分的理由,足以营昭明其不正硅。

10.鹰儒量避免「以上皆是」或「以上皆非」的逗项。

11.邃项朦相互3蜀立,彼此之f肥攵有诞辑上的居朋都(相互依赖、相反)。

12.邃项中朦避免出现^封性的字眼。

(三)、题幺且

1.邃用的短文、圈表、地圈或^^等资料,必须符合吉亥题的乔量目檄。

2.逗用的资料需曾短而且有意羲。

3.1式题的数目鹰舆所逗用资料之辰度成恰常的比例。

(四)、公平性

1.就题中鹰避免歧视性别或槿族的字眼。

2.就题中的^息不宜是某些群股(槿族、性别、居住地国)所特别熟悉。

3.考生答封言扎逗的檄曾,不愿受到寺亥堰孥力指襟以外的因素所影辔。

(五)、原急]性

式题不朦在言果本、参考耆或祷雪班^羲中出现谩。

2.就,题不愿在任何考尚式中出现谩(包括屣居鞠考、推蔚甄^、校考就

或其他大型考就)。

四、方式题分析(itemanalysis)

言式题分析的目的即在透谩客^的量化分析,找出每依1就题所具有的,统利•特徵

可,以落助教自市明瞭自褊或成就测.瞬款送I的特性,方便作悬建立超康的基灌,

供作他日之用。一份好的浏,瞬,是由良好品^的就题所幺且成的,如何知道各他题

目的品?适必须藉由前:题分析以提供息,而就题分析的功能,即是在於瞭解

言式题的品^,删去或改嘉品^不佳的就题,迤而改善就题的品^,以逢成提升洌J

脓品^的目的。

言式题分析具有下列黑项功能,兹分述如下:

(一)作卷改逛擘生孥智的畲考

在施测之彳灸,每位毕生有耀力知道他的得分以及他在每道热送B上作答幺吉果的

正言吴。教白币可以利用言式题分析彳U插式魅特徵的瞭解,央和学生做逐题的言指俞和解

释原因,以期能多勺澄清擘生的学酊吴概念和迷思想法,更正因不良学曾和惯舆鹰就

技巧不常所造成的疏忽,激樊改迤下次测瞬表现的勤横;,及精正不常的擘雪方法

和曾恒。

(二)作施襁救教学的依撅

根摞言式题分析的幺吉果,教肺可以明瞭孥生答堰的分布情形,且彳定中看出孥

生共同感觉:季雪困莫隹的地方,然彳灸斜■封道些困莫隹所在言殳言十有效的校正策略,封症

下槃,施祷救教擘或其他篇正措施。

(三)作卷修改3果程建3莪的懑獴

就懑分析可以"助教自币言平^擘曾成果舆言果程内容是否逾合所教醇的孥生。例

如,在测量某些教学单元的言式题上,如果学生畤常重裱彝生,或彝生的^^

遍及所有的挚校及孥生畤,那就表示造些就题已反鹰出某些教材可能不逾合孥生

的弊皆,此暗便需要建^修改^程,或^整教材内容的川直序,或改探其他版本的

褛本教材,或探去其他更有效的教季策略和教擘方法。

(四)增迤教白币编装潮脓的型数

言式题分析可以落助教自市明瞭哪些言式题的雅度是否谩度困^或谩度容易、^别

度是否谩高或谩低,有息提供答案名泉索,^答逗瑁是否有效,或题意的表逢是否

清楚等考几息。造些^息可以做卷教如修3丁或删改^^的参考依撼,提供教自币^^

的命题幺型瞬,增谨日彳缸编裂新浏瞬的命题技巧。

(五)增暹浏,瞬题康建用的效能

题建不只是一堆就题的集合艘,它必须是式题分析彳发,保留下来具有

侵良就题特徵(如:内容效度、内部一致性信度、黄隹度、^别度、和^答力)的

所幺且合而成。因此,言式题分析可以ts助教2币筋邃出侵良就题,以作卷题犀的

基本言式题;行之有年彳发,教白币便挑有自己任教科目的题庠■。日彳及,常需要编裂新

测瞬向擘生施浏畤,教白市只要依狼教孥寺平量目檬及矍向,阳目表,彳能题摩中随檄抽

取符合要求的言式题,便可以轻易、随日寺及有系统,地区且成新测瞬卷,道不僮可以省

下重编一份新^^的畤^、人力和物力的花费,更可以增谨测,验建用的效能,逢

成随心所欲的测量目的。

在测验编裂遇程中,言式题分析是一件非常重要的工作。3式题分析可分^^的

分析舆量的分析南部分。

(一)言式^的分析

在被送a编裂日寺,鹰特别注意命题的基本原卯।,才能编出遍切的数浅a,例如:

孥科成就浏瞬的主要目的悬辞量「受就者接受某一^科正式教孥彳爰的孥雪结果」,

因此言式题必须要能符合^程的内容,重.依摞所要逵成的教率目檬,就受就者行悬

燮化的不同眉面加以押量,也就是言兑^^在^方面的分析,可由就,题的内容霉查、

有效命题原刖及教学目襟等^工作来暹行。

^题本身的编裂内容舆方式也需符合测,哈编裂的原理舆要求。就题编裂完成

之彳灸,可邀靖^科喜家3至5人,剑■封浏,除言十副、浏瞬题目舆浏脓形式三值1向度,

言平估营式题的遍切性,使封整份浏.验品有所建言羲舆改善,以连到封就题品^的要

求。款送I的检视舆褊谷鹰注意下列事项:

1.每道就题是否均能浏量到曼向细目表中的每一项重要学雪结果?

2.就题的^型是否逾合於所要测量的学雪幺吉果?

3.就题的叙述是否明碓,是否遗漏了重要的脩件?

4.愿使用曾罩且清晰的用言吾来竦述。

5.就题愿避免提供额外之^索。

6.就题是否雅易逾中?

7.每道教送!是否彼此猫立、未探用题?

8.浏除所包括的言式题,是否能多勺涵盖整他曼向细目表的内容?

(二)^题量的分析

1.4隹易度分析

富式题的蒸易度典测臆的效率有嗣,蒸易度遍常的言式题是横成侵良洌瞬的必要

修件。通常以P代表言式题莫隹易度,N代表全受^者人数,R悬答崔代亥题的人

数,PH表示高分'组(全艘受就者常中,分数最高的27%)答善找亥题的百分比,PL

表示低分名且(全K受就者常中,分数最低的27%)答量找亥题的百分比。莫隹易度的

t|■算方式有二槿方式:

R

(1)P=—xl()O%

N

例如:有一他洌脓共有100名受^者,其中某一题答封的人数卷25人,即J

25

此题的,易度焉尸=产、100%=0.25。

(2)P=PH+PL

N

例如:有一值1浏瞬缠共有100名受就.者,其中某一题高分名且答封的百分比

A75%,低分名且答封的百分比悬25%,因此可算得镂易度点;P=0方+=os。

2

Pf■介於。舆1之^的一低值,P值愈大表示之式题愈容易,相反的尸值愈靠近0

表示言式题愈莫隹,例如:三值U式题其蒸易度分别悬<=0.25、P2=0.5和鸟=0.75,

表示第一题比第二题雉,第二题又比第三魅黄隹,但黄隹易度卷一次序量尺(ordinal

scale),差距单位it不相等,其值僮代表就JO隹易程度的相封位置,雨值)辘易度

的差不具任何意羲,由上面的例子言兔明,不能言免第一题

於如何利用莫隹度值来挑?U扎建,一般都4储式题的莫隹度分悬五值!等级,如下

表2-2-1所示:

表2-1就题雅易度等级表

甦易度^易度等级

P20.80趣容易

0.60<P<0.80容易

0.40<P<0.60耀易通中

0.20<P<0.40困蒸

尸<0.20趣困孝隹

一般浏,验章■家均建^挑易度名勺悬0.5的就题,也就是英隹易通中的就,题,

因悬适棣的就题言平^度可以遽到最大,不遇在^除的逗题上,要使每一题的雅易

度都接近0.5是有些困莫隹的。因此有率者便主张以0.4到0.8之^的易度靶圉

作悬邃撵题的挑邃檄型。平均而言,整份测瞬的平均辘度值邃是以接近0.5瑞

佳。

2.4歌别度分析

横成浏,版的方式题,必须具有^别某槿心理特的作用,才能使浏,瞬成悬可靠

又正硅的浏量工具。也就是睨,言式题的^别度高低舆^的信度和效度有著密切

的^保,欲增谨测脓的子耻即舆^断的功能,必须要很仔细的分析^^的^别度,

分析专暨别度的方式主要有雨方面:

(1)内部一致性分析

内部一致性分析旨在瞭解各他就遇的功能是否和整it测瞬的功能相符合一

致。此槿分析的一值1基本假言殳是:整值1浏瞬的分款具有某槿程度的效度。如果此

架言殳成立。即]伽别^^的反廛若和^分^具有一致性,就表示题目有某荏程度的

效度。换言之,高分名且答封的比例^著大於低分黜的比例,故^题的作用和《息分

的作用一致。基於此,^别力的分析方法,探用下列公式:

D=P「PL

D:4歌别力指数。

P〃:高分名且答封百分比(全飕受弑.者凿中分数最高的27%)。

PL:低分幺且答封百分比(全髅受言式者常中分数最低的27%)。

常洌情食分数是常熊分配畤,以27环分名且可以覆得^别度的最大可靠性;

百分比低於27%畤,结果的可靠性敕低,而百分比敕大畴曾影辔^^的^别作

用。封教自币而言,合理的分名且百分比可在25%到33%之^。4歌别力指敷(item

discriminationindex)通常以小数表示,其值介於±1之^。指教愈高,表示

^别力愈大。指数愈低,表示^别力愈小。如果指数悬0,表示题目没有^利作

用,此槿现象可以是:(1)因悬题目太容易或太皴辘,所有人均答封或所有人均

答每音;(2)因卷题目不清楚。如果低分名且答封百分比高於高分名且,见别力将是

食的,此槿题目具有反向作用,瞧淘汰之。人数太少,题目不清楚或正碓答案籍

囊,均有可能醇致此槿情形。

表2-2女歌别度言平^才票率表

学篮别指数

0.4以上非常侵良

0.3-0.39侵:良,但须小幅度修改

0.20-0.29尚可,但须部分修改

0.19以下劣,须要大幅度修改或删除

(2)外在效度分析

外在效度分析的目的在於横瞬题目是否具有^定的某槿^别作用。其分析的

谩程舆上述内部一致性分析方法,大致相同,唯一不同之虞,悬外在效度分析系

统依獴外在效襟的分数分悬高、低雨名且。例如,教学成就洌的编装,可用学校

数季科成^卷外在效榄,分成高、低雨名且,招雨黜分数相减,其差敦可^示各他

言式题在定功能上的^别力。内部一致性分析刖依^言式浏脓名息分分悬高、低雨幺且。

前者在於使测瞬的外在效度燮得很大,而彳发者在於使浏瞬的内部一致性燮得很大。

造雨者均悬^编裂所希望的相襟,鹰以何者悬分析依掳'需视测.验的目的而

定。

一、逗项分析

邃撵题的ig项包括正硅逗项舆^答逗工耻正碓逗项必须明碓且不曾引起任何

,而^答逗项刖必须具有^答的功能,要知道造些特^是否成立,即需透谩

逗项分析。

逗项分析可以^施测者清楚知道每一3式题的所有逗项是否符合命题的原期I、

ig项分析是透谩比敕高分g且典低分名且封正础典^答逗项的ig答率,如果分析的、结

果符合下面雨项要求,即表示专亥营式题的所有邃项是合理有效的(郭生玉,1989):

(一)正碓邃项的邃答率,高分名且必须高於低分,且。

(二)每一他考秀答逗项均有低分名且的受就者逗答,且低分名且的逗答率高於高分

如果不符和第一他要求,表示此言式题具有负向的^别度,不能清楚国分高分

幺且舆低分幺且;至於第二倜要求,又有雨伐1方面需要者寸^,首先是如果一值1邃工能攵

有任何低分幺且或高分能受营式者逗答,表示营亥邃项不具任何铸答率,鹰营亥在修改题

目聘此逗项更换;而如果是言亥^答逗项高分名且的逗答率高於低分名且,即表示言亥^

答逗项的券攵述可能有不清楚或叁音言吴哮的地方,使得高分幺且的受就,者有敕多青吴ig

的情形,因此在修改就题畤,特别注意造些逃项。

四、三式题特徵曲,绿

言式题特徵曲,绿是用卷描述所浏量的潜在特^典其在言式题上正碓反鹰檄率?司

的I嗣保,亦即受弑者潸在能力3(在襟津化的座襟中,以横轴表示)相封於此

能力在垣言式题中的答变■檄率P(9)(在襟型化的座檄中,以畿事由表示)的^^

曲名泉,藉此可以^^受就者的反鹰舆能力的^保。

圈2-2-1就魅特徵曲豚.圈

言式题特徵曲'绿的鹰用原即,有下列黑黠:

1.在任一特定的能力第,圉内,曲^的斜率(slope)可常作前浅t在3亥能力争包圉内

的^别度。

2.透谩就魅特徵曲名泉可以求得的是就题的^易度和名息^别度。即常通谩比

率等於0.5畤的封德油包分或能力值,造佃数值可常作之犬题的^辘笺隹易度。此

外,在,息^隹易度造黠上的斜率亦可以常就超的*船监别度。

3.好的被浅a其^题特徵曲名泉鹰2亥呈现出正的斜率舆逾中的辘度。

五、信度及效度

一份河瞬,除了透遇H固别就题的分析之外,若能剑■封整份测瞬做河瞬整醴的

分析(即浏,验分析),必能提高测瞬的品^。浏^分析在此主要以信度、效度及

曼向幺田目表悬主。

(一)信度

信度可以就是可靠度,优字面上的意羲来解释,就是一份潮瞬的结果是否「可

靠」。一般而言,一份戛良的教育浏瞬至少鹰3亥具有0.8以上的信度值,才具有

使用的慎值。

1.信度的槿^舆求法

常用估言度的方法有四槿:重测法、点复本法、内部一致性方法、由平分者方

法,玄玄介貂如下:

(1)重浏法(test-retestmethod)

估考十测脓分数是否稳定,最直接的方法是重测方法。此槿方法是探用同一他

现狼在不同的畤^,重禊测量相同的一群受W式者雨次,根掳追雨次分数求得的相

M'穗卷重测信度保数(test-retestreliabilitycoefficient),或穗再测信

度。

(2)裱,本法(equivalent-formsmethod)

此槿信度主要在碓定我凭有多少信心能多勺彳咨'固人在浏,验上的得分,推^到其

他相等禳本浏瞬上的得分。估言我复本信度,必须有真正的禳本测瞬,否即辗法估

it。雨但U复本测瞬黄施於一群相同的受弑,者,依掠所冽量到的分数求相^,即悬

箱.本信度。此信度保数可以言兑明闲低榛.本洌测量相同行悬或内容的程度。因此,

信度愈高,表示所测量的3式题檄本愈可靠,愈能以之代表所欲测量内容的靶圉。

(3)内部一致性方法(internal-consistencymethod)

上述雨槿信度的估言十方法,均需^施雨次的潮瞬,受就.者的合作、勤檄、疲

劳和厥短等可能影辔测版的^施。因此,只根獴一次冽M缸结果就可以估告十信度的

分法,较受歉迎,内部一致性方法就是腐於造槿的估官1•方法。此槿方法包括有:

折半方法(split-halfmethod)、庠■李方法(Kuder-Richardsonmethod)、

Cronbach,sa和霍意特燮M•敦分析法(Hoyt'sanalysisofvariance

procedure)。以下符只介貂本言俞文所探用Cronbachtsa的信度保教之舒•算方

法。

Cronbach,sa1'系数:因悬摩李信度遹用於非封即籍的官十分方式,也只能

虑理计分测瞬的缺失,但很多浏瞬的舒•分是探多重t|•分的方式,造畤,就必乡助采

用Cronbach,sa保数、此方法统言十擘者Crcnbach於1951年提出的,若t殳

a悬估言十的信度,兄I其公式卷:

保教公式的一他特例,其中

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论