調查問卷的信度效度分析方法

2021-03-03 20:43:02 字數 4385 閱讀 3891

問卷調查法是教育研究中廣泛採用的一種調查方法,根據調查目的設計的調查問卷是問卷調查法獲取訊息的工具,其質量高低對調查結果的真實性、適用性等具有決定性的作用。為了保證問卷具有較高的可靠性和有效性,在形成正式問卷之前,應當對問卷進行試測,並對試測結果進行信度和效度分析,根據分析結果篩選問卷題項,調整問卷架構,從而提公升問卷的信度和效度。信度和效度分析的方法包括邏輯分析和統計分析,本文主要討論後者。

一、信度分析信度(reliability)即可靠性,它是指採用同樣的方法對同一物件重複測量時所得結果的一致性程度。信度指標多以相關係數來表示:大致可分為三類:

穩定係數(跨時間的一致性)、等值係數(跨形式的一致性)和內在一致性係數(跨專案的一致性)。

若以信度係數來表示信度的大小。信度係數越大,表示測量的可信程度越大。究竟信度係數要多少才算有高的信度。

學者devellis(1991)認為,0.60~0.65(最好不要);0.

65~0.70(最小可接受值);0.70~0.

80(相當好);0.80~0.90(非常好)。

由此,乙份信度係數好的量表或問卷,最好在0.80以上,0.70至0.

80之間還算是可以接受的範圍;分量表最好在0.70以上,0.60至0.

70之間可以接受。若分量表的內部一致性係數在0.60以下或者總量表的信度係數在0.

80以下,應考慮重新修訂量表或增刪題項。

信度分析的方法主要有以下四種︰

1、重測信度法這一方法是用同樣的問卷對同一組被調查者間隔一定時間重複施測,計算兩次施測結果的相關係數。顯然,重測信度屬於穩定係數。重測信度法特別適用於事實式問卷,如性別、出生年月等在兩次施測中不應有任何差異,大多數被調查者的興趣、愛好、習慣等在短時間內也不會有十分明顯的變化。

如果沒有突發事件導致被調查者的態度、意見突變,這種方法也適用於態度、意見式問卷。由於重測信度法需要對同一樣本試測兩次,被調查者容易受到各種事件、活動和他人的影響,而且間隔時間長短也有一定限制,因此在實施中有一定困難。

2、複本信度法複本信度法是讓同一組被調查者一次填答兩份問卷複本,計算兩個複本的相關係數。複本信度屬於等值係數。複本信度法要求兩個複本除表述模式不同外,在內容、格式、難度和對應題項的提問方向等方面要完全一致,而在實際調查中,很難使調查問卷達到這種要求,因此採用這種方法者較少。

3、折半信度法折半信度法是將調查專案分為兩半,計算兩半得分的相關係數,進而估計整個量表的信度。折半信度屬於內在一致性係數,測量的是兩半題項得分間的一致性。這種方法一般不適用於事實式問卷(如年齡與性別無法相比),常用於態度、意見式問卷的信度分析。

在問卷調查中,態度測量最常見的形式是5級李克特(likert)量表。進行折半信度分析時,如果量表中含有反意題項,應先將反意題項的得分作逆向處理,以確保各題項得分方向的一致性,然後將全部題項按奇偶或前後分為盡可能相等的兩半,計算二者的相關係數(rhh,即半個量表的信度係數),最後用斯皮爾曼-布朗(spearman-brown)公式︰ru=2rhh/(1+rhh)求出整個量表的信度係數(ru)。

4、α信度係數法 cronbachα信度係數是目前最常用的信度係數,其公式為︰

α=(n/n-1)*(1-(∑si2)/st2)

其中,n為量表中題項的總數,si2 為第i題得分的題內方差,st2為全部題項總得分的方差。從公式中可以看出,α係數評價的是量表中各題項得分間的一致性,屬於內在一致性係數。這種方法適用於態度、意見式問卷(量表)的信度分析。

二、效度分析效度(validity)即有效性,它是指測量工具或手段能夠準確測出所需測量的事物的程度。效度分為三種型別︰內容效度(face validity)、準則效度(criterion validity)和架構效度construct validity)。效度分析有多種方法,其測量結果反映效度的不同方面。

常用於調查問卷效度分析的方法主要有以下幾種。

1、單項與總和相關效度分析這種方法用於測量量表的內容效度。內容效度又稱表面效度或邏輯效度,它是指所設計的題項能否代表所要測量的內容或主題。對內容效度常採用邏輯分析與統計分析相結合的方法進行評價。

邏輯分析一般由研究者或專家評判所選題項是否「看上去」符合測量的目的和要求。統計分析主要採用單項與總和相關分析法獲得評價結果,即計算每個題項得分與題項總分的相關係數,根據相關是否顯著判斷是否有效。若量表中有反意題項,應將其逆向處理後再計算總分。

2、準則效度分析準則效度又稱為效標效度或**效度。準則效度分析是根據已經得到確定的某種理論,選擇一種指標或測量工具作為準則(效標),分析問卷題項與準則的聯絡,若二者相關顯著,或者問卷題項對準則的不同取值、特性表現出顯著差異,則為有效的題項。評價準則效度的方法是相關分析或差異顯著性檢驗。

在調查問卷的效度分析中,選擇乙個合適的準則往往十分困難,使這種方法的應用受到一定限制。

3、結構效度分析結構效度是指測量結果體現出來的某種結構與測值之間的對應程度。架構效度分析所採用的方法是因子分析。有的學者認為,效度分析最理想的方法是利用因子分析測量量表或整個問卷的架構效度。

因子分析的主要功能是從量表全部變數(題項)中提取一些公因子,各公因子分別與某一群特定變數高度關聯,這些公因子即代表了量表的基本架構。透過因子分析可以考察問卷是否能夠測量出研究者設計問卷時假設的某種架構。在因子分析的結果中,用於評價架構效度的主要指標有累積貢獻率、共同度和因子負荷。

累積貢獻率反映公因子對量表或問卷的累積有效程度,共同度反映由公因子解釋原變數的有效程度,因子負荷反映原變數與某個公因子的相關程度。為了提公升調查問卷的質量,進而提公升整個研究的價值,問卷的信度和效度分析絕非贅疣蛇足,而是研究過程中必不可少的重要環節。

cronbachα係數

柯隆巴哈(cronbach 1951)提出計算乙個測量系統(問卷或測驗)的信度稱為cronbachα係數(簡稱α係數),是目前社會科會研究最常使用的信度。當乙個研究主題(或構面)由很多專案組合,每個問項都與主題相關,由總分的變異數與問項的變異數做為評量信度的指標即為α係數。

01. cronbach α係數的定義

利用各問項變異數之和與整份量表分數的變異數的比值,可用來估計乙份量表的信度,柯隆巴哈(cronbach)提出α係數為:

此式為最常作為信度指標,其中s2i表示第i個問項xi的變異數,s2h 表所有問項總和(h= x1+x2+ ...+xn)的變異數(即整份測驗分數的變異數),n是問項個數。

02. cronbach α係數的實施技巧

要做信度分析需先檢查每個問項是否都是同方向的(即都是正面問法,也就是題間的相關係數都是正的),如有一題與其它題相關係數都是負的,應考慮將此題先「變號」或「刪除」後再進行計算α係數。如有受測者亂答,可將它的資料刪除後再算α值。

對問卷調查當有題目與其它題目是負相關時須注意是否反向問法。如是,則應先將得分反向,再計算α信度或是刪除該題。若為測驗,則不能做反向處理,只能做刪除題目。

03.標準化 cronbach α係數的定義

若乙份量表有n題,題間的平均相關係數為r,則此量表的標準化α係數為

04. 利用spss進行信度分析

在spss中,專門用來進行測驗信度分析的模組為scale下的reliability analysis;使用data reduction之下的factor模組。

reliability analysis模組主要功能是檢驗測驗的信度,主要用來檢驗折半信度、庫李及a係數以及hoyt信度系數值。至於重測信度和複本信度,只需將樣本在二次(份)測驗的分數的資料合併到同一資料檔案之後,利用correlate之下的bivariate求其相關係數,即為重測或複本信度;而評分者信度則使用的spearman等級相關及kendall和諧係數。

表1 reliability analysis模組的model選項的引數術語

表2 reliability analysis模組的statistics部分選項的引數術語

建議進行因素分析之樣本數宜大於330份。

**:a first course in factor analysis

出處:new york: academic press, 1973.

作者:***rey, a. l.

在因素分析前先以「kmo抽樣適合性衡量」 (kaiser meyer olkin)和「巴列特球型檢定」(bartlett』s test of sphericity) ,當kmo值愈大時,表示變項間的共同因素愈多,愈適合進行因素分析,根據學者kaiser(1974)觀點,如果kmo的值小於0.5時,較不宜進行因素分析

kaiser, h. f. 「an index of factorial simplicity,」 psychometrika (39), 1974, pp. 31-36.

kmo是做主成分分析的效度檢驗指標之一,以前的文獻中寫說,kmo在0.9以上,非常適合做因子分析;在0.8-0.

9之間,很適合;在0.7-0.8之間,適合;在0.

6-0.7之間,尚可;在0.5-0.

6之間,表示很差;在0.5以下應該放棄.

量表題之處理

量表題的運用,通常是因為用一題無法完整測量某乙個變數,因而需要使用數道題目來表示乙個變數,然而這些題目真的能有效並一致地指涉同乙個變項嗎?這時我們便需要透過因素分析與信度分析來檢視量表的信、效度。

因素分析

調查問卷的信度效度分析方法

問卷調查法是教育研究中廣泛採用的一種調查方法,根據調查目的設計的調查問卷是問卷調查法獲取訊息的工具,其質量高低對調查結果的真實性 適用性等具有決定性的作用。為了保證問卷具有較高的可靠性和有效性,在形成正式問卷之前,應當對問卷進行試測,並對試測結果進行信度和效度分析,根據分析結果篩選問卷題項,調整問卷...

調查問卷和信度效度檢驗問卷

留學生教育服務質量調查問卷 中文版 尊敬的先生 女士 您好!這是乙份學術性碩士 的問卷,目的在於了解越南留學生對於廣西高校提供的教育服務質量的滿意程度以及留學感知。本問卷調查採用不記名方式,您所填答的內容資料僅供學術之用,絕不對外公開,因此請您放心並仔細填答每一道題目。非常感謝您熱心的協助與支援。填...

調查表的的信度與效度評價方法

問卷調查法是教育研究中廣泛採用的一種調查方法,根據調查目的設計的調查問卷是問卷調查法獲取資訊的工具,其質量高低對調查結果的真實性 適用性等具有決定性的作用。為了保證問卷具有較高的可靠性和有效性,在形成正式問卷之前,應當對問卷進行試測,並對試測結果進行信度和效度分析,根據分析結果篩選問卷題項,調整問卷...