第10章_信度效度分析

1、1信度效度分析信度效度分析2信度一、信度的意義一、信度的意義所謂信度是衡量沒有誤差的程度，所謂信度是衡量沒有誤差的程度，也是測驗結果的一致性也是測驗結果的一致性(consistency)程度，信度是以衡量的變異理論為基程度，信度是以衡量的變異理論為基礎。礎。3二、衡量誤差的意義與來源二、衡量誤差的意義與來源衡量誤差可分為系統性誤差及隨機性誤差。一般而衡量誤差可分為系統性誤差及隨機性誤差。一般而言，大部份的誤差是系統性的言，大部份的誤差是系統性的( (從偏差而來從偏差而來) )。所謂系統。所謂系統性誤差也被視成常數性性誤差也被視成常數性(constant)(constant)誤差。而隨機性誤差誤

2、差。而隨機性誤差(random error)(random error)則不是一種常數性誤差，其原因可能來自則不是一種常數性誤差，其原因可能來自情境因素，或者被受測者一時的情緒而影響。衡量誤情境因素，或者被受測者一時的情緒而影響。衡量誤差可能的來源如下：差可能的來源如下：1. 1.由回應者由回應者(respondent)(respondent)產生的誤差產生的誤差2. 2.由情境因素產生的誤差由情境因素產生的誤差3. 3.由衡量者產生的誤差由衡量者產生的誤差 4. 4.由衡量工具產生的誤差由衡量工具產生的誤差4三、以數學的觀點來解釋誤差三、以數學的觀點來解釋誤差四、衡量信度的方法四、衡量信度的

3、方法1.再測信度再測信度(test-retest method):再測信再測信 度是讓同一組受測者，在前後兩個時度是讓同一組受測者，在前後兩個時 間內測驗兩次，以其兩次測驗的結果間內測驗兩次，以其兩次測驗的結果 求其相關係數，而此係數稱為再測信求其相關係數，而此係數稱為再測信 度度 (test-retest reliability)。52.折半信度折半信度(split-half method):折半信折半信 度是將受測題目分成兩半，然後再以度是將受測題目分成兩半，然後再以 前半段之題目與後半段之題目做相前半段之題目與後半段之題目做相 關，若相關程度很高就代表折半信度關，若相關程度很高就代表折半

4、信度 很高，是考驗衡量的同質性。很高，是考驗衡量的同質性。63.複本信度複本信度(equivalent-forms method):為了為了 讓不同程度的受測者能夠明確瞭解問卷題讓不同程度的受測者能夠明確瞭解問卷題 目的意思，有時候同一個測驗中有甲、乙目的意思，有時候同一個測驗中有甲、乙 卷兩種以上的複本，由一組受試者先用甲卷兩種以上的複本，由一組受試者先用甲 卷進行測試，同組人或另外一個人再用乙卷進行測試，同組人或另外一個人再用乙 卷進行測試，用這兩種測驗的結果求其相卷進行測試，用這兩種測驗的結果求其相 關係數即為複本信度。關係數即為複本信度。74.庫李信度庫李信度(Kuder-Richar

5、dson reliability)目的在於分析問項間的一致性。在估計信度上，最常用的目的在於分析問項間的一致性。在估計信度上，最常用的是庫李二十號公式：是庫李二十號公式：其中其中 K：表示整份測驗的題數：表示整份測驗的題數 ：表整個測驗中每題答對與答錯百分比乘：表整個測驗中每題答對與答錯百分比乘積之總合積之總合S2：表示測驗總分的變異量：表示測驗總分的變異量)1)(1(220SpqkkrKRpq8L. J. Cronbach另創另創係數，其公式如下：係數，其公式如下：其中，其中， ：為估計的信度：為估計的信度 ：測驗的總題數：測驗的總題數 ：測驗的總變異數：測驗的總變異數 ：題目與另一題目之共

6、變數：題目與另一題目之共變數ijiiSSSkk2122K2iSijS9共變數矩陣（因素一）共變數矩陣（因素一）Sc6Sc7Sc8Sc9Sc61.047Sc70.9921.630Sc80.6671.0521.247Sc90.6430.9880.9611.2188985. 0961. 0.992. 02218. 1.047. 1218. 1247. 1630. 1047. 11144利用利用上述之公式，我們可以求得因素一之上述之公式，我們可以求得因素一之值為：值為：10效度一、效度的意義一、效度的意義所謂效度是指衡量的工具是否能真正所謂效度是指衡量的工具是否能真正衡量到研究者想要衡量的問題。衡量到

7、研究者想要衡量的問題。11二、效度的種類二、效度的種類1.內容效度內容效度(content validity)：以研究者的專業知識來主觀判斷所選擇的尺度是以研究者的專業知識來主觀判斷所選擇的尺度是否能正確的衡量研究所欲衡量的東西。否能正確的衡量研究所欲衡量的東西。2.效標關聯效度效標關聯效度(criterion-related validity)：所謂效標關聯效度是指使用中的衡量工具和其他所謂效標關聯效度是指使用中的衡量工具和其他的衡量工具來比較兩者是否具有關聯性。的衡量工具來比較兩者是否具有關聯性。123.建構效度建構效度(construct validity)：如果研究者要瞭：如果研究者要

8、瞭解某種衡量工具真正要衡量的是什麼，那即是關心解某種衡量工具真正要衡量的是什麼，那即是關心它的建構效度。它的建構效度。4.學說效度學說效度(nomological validity):學說效度有時被學說效度有時被稱為稱為“通則化的效度通則化的效度(lawlike validity)”，學說效度，學說效度是基於對構念和從理論建構的正式假設而來的衡量是基於對構念和從理論建構的正式假設而來的衡量項目的明確調查。項目的明確調查。13一、信度和效度的關係一、信度和效度的關係信度和效度及其影響因素信度和效度及其影響因素 之關係之關係情況一情況一，彈痕分散於靶內各處，並無一致性可言，以衡量 的術語來說即是無

9、信度無效度。情況二，情況二，雖然彈痕很集中，即具有一致性，但是並沒有在 靶中心，以衡量的觀點來看，則是有信度無效度。情況三，情況三，才是好的衡量，同時具有效度及信度。 14二、影響信度效度之因素信度和效度及其影響因素信度和效度及其影響因素 之關係之關係15量表之信度與效度量表之信度與效度潛在變數的衡量，通常是以量表或問卷做為測量工具，評估量表優良與否的準則為信度與效度。 l壹、信度l貳、效度16信度信度 1/2l信度係指測驗結果(受試者的回答)的穩定性及可靠性(可相信的程度)。信度的衡量有三種類型：穩定性、等值性與內部一致性。穩定性：用同一種測驗對同一群受試者，前後施測兩次，然後依據兩次測驗分

10、數計算相關係數。 等值性：交替使用一套測驗的多種複本，再根據一群受試者每個人在各種複本測驗之得分，計算相關係數。內部一致性:指量表能否測量單一概念，同時反映組成量表題項之內部一致性程度。 17信度信度 2/2l量表信度的考驗方法為 Cronbach 係數，判定係數之準則如下：所有問卷題目一起執行計算 Cronbach 係數。各題目單獨逐題檢查。每個因素構面針對其所屬問卷題目，執行計算Cronbach 係數。l範例一18範例一範例一l某研究設計一份有關“商店服務屬性”之問卷初稿，為慎重起見，選取30位受測者進行前測（結果如資料檔:服務屬性前測.sav）。請問這些題項在測試結果後，是否具備內部一致

11、性？1.點選Analyze/scale/reliability analysis 2.程式操作3.分析結果 19範例一範例一2.程式操作20分析結果分析結果 1/2l係數=0.7984，代表十五道題目測量結果之內部一致性具高可信度。若是想要再提高信度，可由”Corrected Item-Total correlation”及”Cronbach Alpha if item Deleted”兩欄數字來判斷刪除那些題目可提高內部一致性，價格的”Corrected Item-Total correlation”數字 -0.0693 表示價格與總分間的相關非常的低，如果將之刪除，則可提高係數至0.815

12、6。 21分析結果分析結果 2/222效度效度 1/2l量表的效度類型有三種：內容效度、效標關聯效度與建構效度。 內容效度 內容效度是指測量內容的適切性。 效標關聯效度 效標關聯效度是指測量工具的內容具有預測或估計的能力。23效度效度 2/2l建構效度 建構效度(或稱構念效度)指問卷或量表能測量到理論上的構念或特質之程度。建構效度有兩類：收斂效度與區別效度。而檢測量表是否具備建構效度，最常使用之方法為因素分析法。同一因素構面中，若各題目之因素負荷量(factor loading)愈大(一般以大於0.5為準)，則愈具備收斂效度。若問卷題目在非所屬因素構面中，其因素負荷量愈小(一般以低於0.5為準

13、)，則愈具備區別效度。範例二範例三24範例二範例二l某研究探討有關大賣場”商店服務屬性”所應包含的內容，該研究藉由文獻回顧及專家學者的刪選，設計十五道題目並以五等量表為衡量尺度的問卷，以衡量”商店服務屬性”。今抽取97位受訪者，請其填寫問卷。請問該測量結果對於”商店服務屬性”的內容，是否具備建構效度？ (資料檔：商店服務屬性.sav) 1.點選 Analyze/Data Reduction/Factor 2.程式操作3.分析結果25範例二範例二2.程式操作26分析結果分析結果-1lKMO=0.806，Bartletts test Chi-sq = 426.339 (Sig=0.0001的原則萃

14、取下，共萃取出五個因素，累積解釋變異量達65.041%。T To ot ta al l V Va ar ri ia an nc ce e E Ex xp pl la ai in ne ed d4.67431.15931.1594.67431.15931.1593.23321.55121.5511.51910.12741.2871.51910.12741.2871.95313.02234.5731.3468.97450.2611.3468.97450.2611.63910.92845.5011.2108.06458.3251.2108.06458.3251.61110.73856.2391.00

15、86.71765.0411.0086.71765.0411.3208.80265.041.9266.17071.211.7304.86776.078.6744.49480.573.6034.02084.593.5403.59888.191.4623.08391.274.3902.59993.872.3342.22696.098.3162.10898.206.2691.794100.000Component123456789101112131415Total% of VarianceCumulative %Total% of VarianceCumulative %Total% of Varia

16、nceCumulative %Initial EigenvaluesExtraction Sums of Squared LoadingsRotation Sums of Squared LoadingsExtraction Method: Principal Component Analysis.KMO and Bartletts TestKMO and Bartletts Test.806426.339105.000Kaiser-Meyer-Olkin Measure of Sampling Adequacy.Approx. Chi-SquaredfSig.Bartletts Test o

17、f Sphericity27分析結果分析結果-2l因素一包含6個變數，但商店印象問項在因素一中之負荷量小於0.5，不具收斂效度，且其在因素二中之負荷量亦達0.457，也不具備區別效度。至於品質問項亦有相同問題，因此必須將此兩變項刪除，重新執行因素分析。 Rotated Component MatrixRotated Component Matrixa a.814.1694.277E-02-.1274.990E-02.7679.363E-02.245.102.135.742.143.115.372.110.673.1929.826E-023.690E-02.154.493.457.398.120

18、-.208.4602.764E-02-.413.409.1681.585E-02.760 -1.223E-02.217.270.368.658 -3.563E-02-.101 -9.566E-02.493.608.124.235 -4.097E-029.755E-02 -5.452E-03.824 -3.401E-03.202.2074.903E-02.665.1218.058E-02.1283.085E-037.654E-02.774-.214-9.231E-03.1886.579E-02.711.309.252-.136.273.136.710.113.4615.819E-02-.109.646服務態度整齊乾淨氣氛服務內外裝潢商店印象品質售後服務結帳速度信賴度購物便利取得便利價格種類多寡廣告吸引營業時間12345ComponentExtraction Method: Principal Component Analysis. Rotation Method