使用調查分析法(Survey)時,為了獲得樣本,並利用統計方法以利用樣本推估母體,我們常需要使用到問卷調查。然而,並非只要找到人填問卷就是一份「好」的問卷,其統計結果也並非是正確的。
評估一個樣本的好壞主要可以從效度(validity)和信度(reliability)兩方面著手。
首先是效度,何謂效度?效度指的是一份樣本是否能夠準確地反映我們所要調查的母體參數。會影響效度的主要原因為取樣是有著偏頗,如樣本並非所謂代表性樣本,有可能是因為發放問卷時沒有考量到隨機性,過度集中於某個區塊發放,或蒐集方式容易使得相同想法的人接觸,簡言之,就是發放問卷時,每個樣本取樣到的機率不相同,即為非隨機抽樣,此樣本並非代表性樣本,故影響了效度。
信度指的是我們的樣本能不能保持著所謂穩定性和一致性,有時候縱使使用隨機抽樣,但次與次之間常發生著結果不一的狀況,十分不穩定,會造成的現象除了每次結果不一外,也可能使樣本過度分散不集中。要解決信度不足的問題則可以使樣本數增加,或者增加抽樣次數等,便可使信度上升,以尋得更為準確的統計結果。
高中時期,為了小論文或學習歷程的撰寫,高中生最喜歡利用Google表單製作網路問卷,並利用網路社群平台投放問卷,當時並不瞭解如此進行會有什麼樣的問題,現在,我們便可以利用效度和信度來分析網路問卷會有什麼問題。
首先最大的問題我想在於效度。網路問卷本質上就已經是一種非隨機抽樣了,除了交友圈及同溫層的限制,「使用網路」本身就是一層篩選了,網路問卷並無法使不使用網路或不常使用社群平台人士觸及到,故此方法有抽樣偏頗的問題,影響效度;再來就是信度也常有不少問題,礙於交友圈及平台的不足,常也會導致樣本數蒐集不足的問題,此外,網路問卷也並無法確保受測者的回覆是能有效反映其真實情況,受測者可能基於各種原因隨便填寫問卷,使每份問卷品質參差不齊。
因此,現在來看,網路問卷有著效度和信度上的大問題,恐會使研究結果大不相同,身為大學生的我們應極力避免使用。