聲明:本筆記為筆者根據社工師考試整理的濃縮重點,方便考生能夠快速記憶為主,內容較為不嚴謹,難免會有錯誤,正確資訊以課本知識為主
一、信度的意義
(一)、定義:信度是指測量工具在相近條件下進行測量時,能否得到穩定、一致的結果。
(二)、翻譯:同樣的東西重複測量,結果會不會差不多?
(三)、信度主要反映測量結果受到「隨機誤差」影響的程度:
1.隨機誤差越小,測量結果越穩定,信度越高。
2.隨機誤差越大,測量結果越不穩定,信度越低。
(四)、信度與效度的關係:
1.信度高,不代表效度一定高。
2.翻譯:測量工具可能每次都得到一致的結果,卻穩定地測量錯誤。
3.也就是說:信度是「測得穩不穩」,效度是「有沒有測到想測的東西」。
二、再測信度:
(一)、定義:使用相同的測量工具,對同一群研究對象,在兩個不同時間進行測量,再比較兩次測量結果的一致程度。又稱穩定性信度。
(二)、翻譯:同一工具、同一群人,不同時間測量,結果是否穩定?
(三)、基本過程:同一群人→第一次測量→經過一段時間→第二次使用相同工具測量→比較兩次結果
(四)、限制
1.間隔太短:研究對象可能記得上次的答案,產生記憶或練習效果。
2.間隔太長:研究對象的真實狀態可能已經改變。
3.合適對象:再測信度適合測量一段時間內相對穩定的概念,像是人格特質相對穩定可以測,但心情每天都不一樣就不適合使用再測信度。
三、複本信度
(一)、定義:研究者編製兩份題目不同,但測量內容、題數、難度、題型及計分方式相當的測量工具,再讓同一群研究對象作答,比較兩份測驗結果的一致程度。
(二)、翻譯:兩份不同版本但等值的工具,測量結果是否相近?
(三)、基本過程:同一群人→接受A版本測量→接受B版本測量→比較兩個版本的結果。(其中A版本和B版本的難度差不多)
(四)、限制:
1.很難編製兩份真正等值的工具。
2.如果其中一份比較容易,兩份測量結果的差異可能來自題目難度,而不是研究對象本身。
四、折半信度
(一)、定義:將同一份測量工具的題目分成性質相近的兩半,再比較兩半題目所得分數的一致程度。
(二)、翻譯:將同一份工具分成兩半,看看兩半的測量結果是否一致。
(三)、常見分法:
1.奇數題與偶數題。
2.隨機分成兩半。
3.依題目內容及難度配對後分成兩半。
(四)、限制:
1.不同的分題方式可能得到不同的信度結果。
2.兩半題目的內容及難度必須相近。
(五)、折半信度是檢驗內部一致性的一種方法,因為它是利用同一次施測,檢查量表不同題目之間的一致程度。
五、內部一致性信度
(一)、內部一致性信度是指同一測量工具中,用來測量相同概念的各個題目,彼此之間是否具有一致性。
(二)、翻譯:同一份量表中的題目,是否都在測量相同或密切相關的內容?
(三)、例如:「學習投入量表」中的題目包括:
1.上課時,我能專心聽講。
2.我會按照計畫完成學習任務。
3.遇到不懂的內容,我會主動尋找資料。
4.如果學生在這些題目上的作答具有合理的關聯性,表示量表具有良好的內部一致性。
(四)、常用折半信度法檢驗
六、評分者信度
(一)、評分者間信度:不同評分者的結果是否一致。翻譯:換一個人評分,結果會不會差很多?
(二)、評分者內信度:同一名評分者在不同時間重複評分相同研究對象或資料,結果是否一致。翻譯:同一個人在不同時間評分相同考卷,結果會不會差很多?
七、增加信度的方法
(一)、概念:清楚界定要測量的內容。
(二)、題目:題意清楚,題數適當。
(三)、人員:讓研究對象認真作答,評分者接受一致的訓練。
(四)、情境:減少環境干擾。
(五)、程序:所有人依照相同方法接受測量。
(六)、資料:正確輸入、編碼及計分。
(七)、預試:正式研究前進行預試及項目分析,修改不清楚或表現不佳的題目。
八、注意:
增加樣本數可以讓信度係數的估計更加精確,但不會自動提高測量工具本身的信度。