一、信度分析
信度(Reliability)即可靠性,是指採用同一方法對同一物件進行調查時,問卷調查結果的穩定性和一致性,即測量工具(問卷或量表)能否穩定地測量所測的事物或變數。信度指標多以相關係數表示,具體評價方法大致可分為三類:穩定係數(跨時間的一致性),等值係數(跨形式的一致性)和內在一致性係數(跨專案的一致性)。信度分析的方法主要有以下四種:
1、重測信度法
同樣的問卷,對同一組訪問物件在儘可能相同的情況下,在不同時間進行兩次測量。兩次測量相距一般在兩到四周之內。用兩次測量結果間的相關分析或差異的顯著性檢驗方法,評價量表信度的高低。
2、折半法。折半法是將上述兩份問卷合成一份問卷(通常要求這兩份問卷的問題數目相等),每一份作為一部分,然後考察這兩個部分的測量結果之間的相關性。
3、折半信度法
折半信度法是將調查專案分為兩半,計算兩半得分的相關係數,進而估計整個量表的信度。折半信度屬於內在一致性係數,測量的是兩半題項得分間的一致性。這種方法一般不適用於事實式問卷(如年齡與性別無法相比),常用於態度、意見式問卷的信度分析。在問卷調查中,態度測量最常見的形式是5級李克特(Likert)量表。進行折半信度分析時,如果量表中含有反意題項,應先將反意題項的得分作逆向處理,以保證各題項得分方向的一致性,然後將全部題項按奇偶或前後分為儘可能相等的兩半,計算二者的相關係數(rhh,即半個量表的信度係數),最後用斯皮爾曼-布朗(Spearman-Brown)公式:
求出整個量表的信度係數(ru)。
4、α信度係數法
Cronbach α信度係數是目前最常用的信度係數,其公式為:
其中,K為量表中題項的總數, 為第i題得分的題內方差,為全部題項總得分的方差。從公式中可以看出,α係數評價的是量表中各題項得分間的一致性,屬於內在一致性係數。這種方法適用於態度、意見式問卷(量表)的信度分析。
二、效度分析
效度(Validity)即有效性,它是指測量工具或手段能夠準確測出所需測量的事物的程度。效度分為三種類型:內容效度、準則效度和結構效度。效度分析有多種方法,其測量結果反映效度的不同方面。常用於調查問卷效度分析的方法主要有以下幾種。
1、單項與總和相關效度分析
表面效度(Face Validity)。也稱為內容效度或邏輯效度,指的是測量的內容與測量目標之間是否適合,也可以說是指測量所選擇的專案是否“看起來”符合測量的目的和要求。主要依據調查設計人員的主觀判斷。
這種方法用於測量量表的內容效度。內容效度又稱表面效度或邏輯效度,它是指所設計的題項能否代表所要測量的內容或主題。對內容效度常採用邏輯分析與統計分析相結合的方法進行評價。邏輯分析一般由研究者或專家評判所選題項是否“看上去”符合測量的目的和要求。統計分析主要採用單項與總和相關分析法獲得評價結果,即計算每個題項得分與題項總分的相關係數,根據相關是否顯著判斷是否有效。若量表中有反意題項,應將其逆向處理後再計算總分。
2、準則效度分析
準則效度(Criterion Validity)。又稱為效標效度或預測效度。準則效度是指量表所得到的資料和其他被選擇的變數(準則變數)的值相比是否有意義。根據時間跨度的不同,準則效度可分為同時效度和預測效度。準則效度分析是根據已經得到確定的某種理論,選擇一種指標或測量工具作為準則(效標),分析問卷題項與準則的聯絡,若二者相關顯著,或者問卷題項對準則的不同取值、特性表現出顯著差異,則為有效的題項。評價準則效度的方法是相關分析或差異顯著性檢驗。在調查問卷的效度分析中,選擇一個合適的準則往往十分困難,使這種方法的應用受到一定限制。
3、結構效度分析
建構效度(Construct Validity)。是指測量結果體現出來的某種結構與測值之間的對應程度。結構效度分析所採用的方法是因子分析。最關心的問題是:量表實際測量的是哪些特徵?在評價建構效度時,調研人員要試圖解釋“量表為什麼有效”這一理論問題以及考慮從這一理論問題中能得出什麼推論。建構效度包括同質效度、異質效度和語意邏輯效度。有的學者認為,效度分析最理想的方法是利用因子分析測量量表或整個問卷的結構效度。因子分析的主要功能是從量表全部變數(題項)中提取一些公因子,各公因子分別與某一群特定變數高度關聯,這些公因子即代表了量表的基本結構。透過因子分析可以考察問卷是否能夠測量出研究者設計問卷時假設的某種結構。在因子分析的結果中,用於評價結構效度的主要指標有累積貢獻率、共同度和因子負荷。累積貢獻率反映公因子對量表或問卷的累積有效程度,共同度反映由公因子解釋原變數的有效程度,因子負荷反映原變數與某個公因子的相關程度。
一、信度分析
信度(Reliability)即可靠性,是指採用同一方法對同一物件進行調查時,問卷調查結果的穩定性和一致性,即測量工具(問卷或量表)能否穩定地測量所測的事物或變數。信度指標多以相關係數表示,具體評價方法大致可分為三類:穩定係數(跨時間的一致性),等值係數(跨形式的一致性)和內在一致性係數(跨專案的一致性)。信度分析的方法主要有以下四種:
1、重測信度法
同樣的問卷,對同一組訪問物件在儘可能相同的情況下,在不同時間進行兩次測量。兩次測量相距一般在兩到四周之內。用兩次測量結果間的相關分析或差異的顯著性檢驗方法,評價量表信度的高低。
2、折半法。折半法是將上述兩份問卷合成一份問卷(通常要求這兩份問卷的問題數目相等),每一份作為一部分,然後考察這兩個部分的測量結果之間的相關性。
3、折半信度法
折半信度法是將調查專案分為兩半,計算兩半得分的相關係數,進而估計整個量表的信度。折半信度屬於內在一致性係數,測量的是兩半題項得分間的一致性。這種方法一般不適用於事實式問卷(如年齡與性別無法相比),常用於態度、意見式問卷的信度分析。在問卷調查中,態度測量最常見的形式是5級李克特(Likert)量表。進行折半信度分析時,如果量表中含有反意題項,應先將反意題項的得分作逆向處理,以保證各題項得分方向的一致性,然後將全部題項按奇偶或前後分為儘可能相等的兩半,計算二者的相關係數(rhh,即半個量表的信度係數),最後用斯皮爾曼-布朗(Spearman-Brown)公式:
求出整個量表的信度係數(ru)。
4、α信度係數法
Cronbach α信度係數是目前最常用的信度係數,其公式為:
其中,K為量表中題項的總數, 為第i題得分的題內方差,為全部題項總得分的方差。從公式中可以看出,α係數評價的是量表中各題項得分間的一致性,屬於內在一致性係數。這種方法適用於態度、意見式問卷(量表)的信度分析。
二、效度分析
效度(Validity)即有效性,它是指測量工具或手段能夠準確測出所需測量的事物的程度。效度分為三種類型:內容效度、準則效度和結構效度。效度分析有多種方法,其測量結果反映效度的不同方面。常用於調查問卷效度分析的方法主要有以下幾種。
1、單項與總和相關效度分析
表面效度(Face Validity)。也稱為內容效度或邏輯效度,指的是測量的內容與測量目標之間是否適合,也可以說是指測量所選擇的專案是否“看起來”符合測量的目的和要求。主要依據調查設計人員的主觀判斷。
這種方法用於測量量表的內容效度。內容效度又稱表面效度或邏輯效度,它是指所設計的題項能否代表所要測量的內容或主題。對內容效度常採用邏輯分析與統計分析相結合的方法進行評價。邏輯分析一般由研究者或專家評判所選題項是否“看上去”符合測量的目的和要求。統計分析主要採用單項與總和相關分析法獲得評價結果,即計算每個題項得分與題項總分的相關係數,根據相關是否顯著判斷是否有效。若量表中有反意題項,應將其逆向處理後再計算總分。
2、準則效度分析
準則效度(Criterion Validity)。又稱為效標效度或預測效度。準則效度是指量表所得到的資料和其他被選擇的變數(準則變數)的值相比是否有意義。根據時間跨度的不同,準則效度可分為同時效度和預測效度。準則效度分析是根據已經得到確定的某種理論,選擇一種指標或測量工具作為準則(效標),分析問卷題項與準則的聯絡,若二者相關顯著,或者問卷題項對準則的不同取值、特性表現出顯著差異,則為有效的題項。評價準則效度的方法是相關分析或差異顯著性檢驗。在調查問卷的效度分析中,選擇一個合適的準則往往十分困難,使這種方法的應用受到一定限制。
3、結構效度分析
建構效度(Construct Validity)。是指測量結果體現出來的某種結構與測值之間的對應程度。結構效度分析所採用的方法是因子分析。最關心的問題是:量表實際測量的是哪些特徵?在評價建構效度時,調研人員要試圖解釋“量表為什麼有效”這一理論問題以及考慮從這一理論問題中能得出什麼推論。建構效度包括同質效度、異質效度和語意邏輯效度。有的學者認為,效度分析最理想的方法是利用因子分析測量量表或整個問卷的結構效度。因子分析的主要功能是從量表全部變數(題項)中提取一些公因子,各公因子分別與某一群特定變數高度關聯,這些公因子即代表了量表的基本結構。透過因子分析可以考察問卷是否能夠測量出研究者設計問卷時假設的某種結構。在因子分析的結果中,用於評價結構效度的主要指標有累積貢獻率、共同度和因子負荷。累積貢獻率反映公因子對量表或問卷的累積有效程度,共同度反映由公因子解釋原變數的有效程度,因子負荷反映原變數與某個公因子的相關程度。