在做調查問卷時,最看重的是調查問卷的科學性和有效性,
如果一個問卷設計出來無法有效地考察問卷中所涉及的各個因素,那么我們為調查問卷所作的抽樣、調查、分析、結論等一系列的工作也就白做了。那么,我們如何來檢驗設計好的調查問卷是否有效呢?信度分析是評價調查問卷是否具有穩定性和可靠性的有效的分析方法。
二、信度分析的提出及分析方法
信度,又叫可靠性,是指問卷的可信程度。它主要表現檢驗結果的一貫性、一致性、再現性和穩定性。一個好的測量工具,對同一事物反復多次測量,其結果應該始終保持不變才可信[1]。例如,我們用一把尺子測量一張桌子的高度,今天測量得高度與明天測量的高度不同,那么我們就會對這把尺子產生懷疑。因此,一張設計合理的調查問卷應該具有它的可靠性和穩定性。
調查問卷的評價體系是以量表形式來體現的,編制的合理性決定著評價結果的可用性和可信性。問卷的信度分析包括內在信度分析和外在信度分析。內在信度重在考察一組評價項目是否測量同一個概念,這些項目之間是否具有較高的內在一致性。一致性程度越高,評價項目就越有意義,其評價結果的可信度就越強。外在信度是指在不同時間對同批被調查者實施重復調查時,評價結果是否具有一致性。如果兩次評價結果相關性較強,說明項目的概念和內容是清晰的,因而評價的結果是可信的。信度分析的方法有多種,有Alpha信度和分半信度等,都是通過不同的方法來計算信度系數,再對信度系數進行分析[2]。
目前最常用的是Alpha信度系數法,一般情況下我們主要考慮量表的內在信度——項目之間是否具有較高的內在一致性。通常認為,信度系數應該在0~1之間,如果量表的信度系數在0.9以上,表示量表的信度很好;如果量表的信度系數在0.8~0.9之間,表示量表的信度可以接受;如果量表的信度系數在0.7~0.8之間,表示量表有些項目需要修訂;如果量表的信度系數在 0.7以下,表示量表有些項目需要拋棄。我們可以通過目前比較流行的SPSS軟件對調查問卷進行信度分析,這樣我們就可以判斷一個調查問卷是否具有穩定性和可靠性。
三、利用SPSS軟件進行信度分析
下面就以兵團廣播電視大學“人才培養模式改革和開放教育試點”畢業生追蹤調查[3]中《電大教學效果評價》(畢業生用)這一調查量表進行分析。量表見下圖。
(一)對量表進行緯度劃分,將量表分為知識、能力、業績三個緯度。其中,第1~4題劃分到知識緯度,第5~12題劃分到能力緯度;第13~15題劃分到業績緯度。通過每一緯度的Alpha系數來考察每一項得分間的一致性。
1、打開SPSS軟件,調入930條記錄的數據文件,進入SPSS主界面。
2、在知識緯度中,對項目(1)專業知識的掌握;(2)所學知識與工作崗位的實際需要;(3)知識面的拓寬;(4)專業水平的提高;進行內部一致性分析。
①單擊“分析”菜單中的“尺度分析”,再在“尺度分析”的子菜單中點擊“可靠性”分析,打開“可靠性分析”的主對話框。
②在左側的源變量框中選擇上述四個項目所對應的變量c1,c2,c3,c4加入到對話框右邊的“項目”中,作為分析變量,再在對話框下面的“模型”中選擇“Alpha”,進行Alpha信度分析。
③點擊對話框中的“統計量”按鈕,打開相應的對話框,選擇要輸出的統計量、變量描述、方差分析,總結等。在這個例題中為了看的清楚,我們用默認方式,即只輸出樣本個數、項目個數和信度系數。
④點擊“繼續”按鈕,回到“可靠性分析”的主對話框,勾選“列出項目標簽”,再單擊“確定”按鈕,這樣軟件系統就會自動進行四個項目的分析。
3、由分析結果可知,量表中第1~4題之間的Alpha信度系數
為0.7387,可見這四項的信度系數在0.7~0.8之間,表明有些項目需要修訂。我們可以將“知識面的拓寬”與“所學知識與工作崗位的實際需要”進行相關分析,再將 “知識面的拓寬”和“專業水平的提高”進行相關分析,發現它們之間的相關系數都很低,所以我們可以適當修改“知識面的拓寬”這個項目,限定它的范圍,提高它的精確程度。
(二)利用上述方法可以對知識、能力這兩個緯度進行內部一致性的分析,得出三個緯度的Alpha系數分別是:0.7387、 0.8412、0.7510。由此可見,第一個和第三個的信度系數均在0.7~0.8之間,說明知識和業績這兩個緯度中有些項目描述不夠精確,需要進一步調整和修改。能力緯度的信度系數在0.8~0.9之間,說明信度可以接受,不需要進行修訂。
(三)再利用上述方法對整個量表的所有項目進行內部一致性分析,得出問卷總的內部一致性信度系數為0.9001,說明量表的信度非常好,整體上不需要進行修改,每個項目都可以保留。
通過這一實例我們可以看出,用SPSS軟件進行調查問卷的可靠性分析非常方便,不僅能考察項目間的一致性,還能夠檢驗出需要修改或刪除的項目,提高了調查問卷的質量。
(四)小結
利用SPSS軟件進行Alpha信度分析,使我們的研究建立在定量分析的基礎之上,科學有效地對問卷進行了信度分析,減少了復雜繁瑣的計算,方便了我們工作和研究,這樣我們的調查問卷才能得出比較客觀的綜合評價