測量工具的信度

profile picture of Murong Yunxu

Murong Yunxu

測量工具的信度

聲明:本筆記為筆者根據社工師考試整理的濃縮重點,方便考生能夠快速記憶為主,內容較為不嚴謹,難免會有錯誤,正確資訊以課本知識為主

一、信度的意義

(一)、定義:信度是指測量工具在相近條件下進行測量時,能否得到穩定、一致的結果。

(二)、翻譯:同樣的東西重複測量,結果會不會差不多?

(三)、信度主要反映測量結果受到「隨機誤差」影響的程度:

1.隨機誤差越小,測量結果越穩定,信度越高。

2.隨機誤差越大,測量結果越不穩定,信度越低。

(四)、信度與效度的關係:

1.信度高,不代表效度一定高。

2.翻譯:測量工具可能每次都得到一致的結果,卻穩定地測量錯誤。

3.也就是說:信度是「測得穩不穩」,效度是「有沒有測到想測的東西」。

二、再測信度:

(一)、定義:使用相同的測量工具,對同一群研究對象,在兩個不同時間進行測量,再比較兩次測量結果的一致程度。又稱穩定性信度。

(二)、翻譯:同一工具、同一群人,不同時間測量,結果是否穩定?

(三)、基本過程:同一群人→第一次測量→經過一段時間→第二次使用相同工具測量→比較兩次結果

(四)、限制

1.間隔太短:研究對象可能記得上次的答案,產生記憶或練習效果。

2.間隔太長:研究對象的真實狀態可能已經改變。

3.合適對象:再測信度適合測量一段時間內相對穩定的概念,像是人格特質相對穩定可以測,但心情每天都不一樣就不適合使用再測信度。

三、複本信度

(一)、定義:研究者編製兩份題目不同,但測量內容、題數、難度、題型及計分方式相當的測量工具,再讓同一群研究對象作答,比較兩份測驗結果的一致程度。

(二)、翻譯:兩份不同版本但等值的工具,測量結果是否相近?

(三)、基本過程:同一群人→接受A版本測量→接受B版本測量→比較兩個版本的結果。(其中A版本和B版本的難度差不多)

(四)、限制:

1.很難編製兩份真正等值的工具。

2.如果其中一份比較容易,兩份測量結果的差異可能來自題目難度,而不是研究對象本身。

四、折半信度

(一)、定義:將同一份測量工具的題目分成性質相近的兩半,再比較兩半題目所得分數的一致程度。

(二)、翻譯:將同一份工具分成兩半,看看兩半的測量結果是否一致。

(三)、常見分法:

1.奇數題與偶數題。

2.隨機分成兩半。

3.依題目內容及難度配對後分成兩半。

(四)、限制:

1.不同的分題方式可能得到不同的信度結果。

2.兩半題目的內容及難度必須相近。

(五)、折半信度是檢驗內部一致性的一種方法,因為它是利用同一次施測,檢查量表不同題目之間的一致程度。

五、內部一致性信度

(一)、內部一致性信度是指同一測量工具中,用來測量相同概念的各個題目,彼此之間是否具有一致性。

(二)、翻譯:同一份量表中的題目,是否都在測量相同或密切相關的內容?

(三)、例如:「學習投入量表」中的題目包括:

1.上課時,我能專心聽講。

2.我會按照計畫完成學習任務。

3.遇到不懂的內容,我會主動尋找資料。

4.如果學生在這些題目上的作答具有合理的關聯性,表示量表具有良好的內部一致性。

(四)、常用折半信度法檢驗

六、評分者信度

(一)、評分者間信度:不同評分者的結果是否一致。翻譯:換一個人評分,結果會不會差很多?

(二)、評分者內信度:同一名評分者在不同時間重複評分相同研究對象或資料,結果是否一致。翻譯:同一個人在不同時間評分相同考卷,結果會不會差很多?

七、增加信度的方法

(一)、概念:清楚界定要測量的內容。

(二)、題目:題意清楚,題數適當。

(三)、人員:讓研究對象認真作答,評分者接受一致的訓練。

(四)、情境:減少環境干擾。

(五)、程序:所有人依照相同方法接受測量。

(六)、資料:正確輸入、編碼及計分。

(七)、預試:正式研究前進行預試及項目分析,修改不清楚或表現不佳的題目。

八、注意:

增加樣本數可以讓信度係數的估計更加精確,但不會自動提高測量工具本身的信度。