標(biāo)準(zhǔn)化的調(diào)查訪問(ppt)
綜合能力考核表詳細(xì)內(nèi)容
標(biāo)準(zhǔn)化的調(diào)查訪問(ppt)
何謂標(biāo)準(zhǔn)化訪問
前 言
目的:
為改進(jìn)調(diào)查數(shù)據(jù)的質(zhì)量
調(diào)查:
指設(shè)計(jì)來對(duì)某些母群體獲取量化資料的調(diào)查
本書探討重點(diǎn):
大多數(shù)靠訪員詢問問題并記錄答案的調(diào)查形式
如何將訪員引起的誤差減到最低
訪問的本質(zhì)
訪問:
帶有目的的會(huì)談(Kahn & Cannell,1958)
兩大部分:
訪問會(huì)談的主體主要由問題及回答所組成
參與會(huì)談的角色清楚界定—一提問題(訪員)、一答問題(受訪者)
抽樣調(diào)查的特征:
個(gè)別受訪者會(huì)成為研究對(duì)象,是因他們是被描述母體的一部份,所提供答案有助于研究者描述其所代表的母群體
調(diào)查結(jié)果呈現(xiàn)是對(duì)母體定量或數(shù)學(xué)性的描述
測(cè)量所得結(jié)果、用來分析的資料,都是根據(jù)受訪者回答而來。
成功調(diào)查的標(biāo)準(zhǔn):所得資料是否能測(cè)量到研究者所欲描述母群體的真實(shí)面貌,及得到正確的數(shù)據(jù)。
調(diào)查中誤差的來源
抽樣方面誤差:
◎當(dāng)樣本并未包含所有母體所描述的特性時(shí),就會(huì)有某類別樣本被遺漏
◎樣本比例未充分反應(yīng)母體比例
◎部分樣本拒絕參與調(diào)查,拒絕提供答案,或拒答部分敏感性問題
問卷方面誤差:
◎當(dāng)題目被誤解
◎當(dāng)題目不能表達(dá)研究者真正想得到的信息
◎受訪者不愿正確回答題目
訪員方面的誤差:
◎當(dāng)訪員沒有逐字念出題目
◎當(dāng)訪員作引導(dǎo)性追問
◎當(dāng)訪員對(duì)受訪者答案加入自己的偏見
◎當(dāng)訪員記錄不正確
資料削減的誤差:
◎當(dāng)過錄員使用不一致的過錄原則,或?qū)λ居玫倪^錄碼判斷錯(cuò)誤
◎數(shù)據(jù)鍵入錯(cuò)誤
訪員的角色
忠實(shí)呈現(xiàn)問題
避免訪問過程中對(duì)受訪者的影響力
遵循標(biāo)準(zhǔn)化的流程
調(diào)查 測(cè)量 「標(biāo)準(zhǔn)化」是必須的
測(cè)量---在一個(gè)標(biāo)準(zhǔn)之下,找出或估計(jì)出任何事物的程度、面向等
(韋氏大字典,Guralk,1976)
調(diào)查中,標(biāo)準(zhǔn)化測(cè)量的程序是訪員提出問題后,訪員記錄受訪者答案的測(cè)量程序
標(biāo)準(zhǔn)化目的就在使每一受訪者都經(jīng)歷相同的答題經(jīng)驗(yàn),每項(xiàng)答案被紀(jì)錄的方式也相同,答案中所顯現(xiàn)的差異可被正確解釋為受訪者之間的差異,而非因資料搜集過程的差異
舉例:「您對(duì)于您最大孩子所上的學(xué)校評(píng)價(jià)如何?」
標(biāo)準(zhǔn)化訪問與晚間脫口秀訪問及醫(yī)生對(duì)病患醫(yī)療史訪問的比較
﹡都符合訪問的定義,但都不是標(biāo)準(zhǔn)化訪問
﹡脫口秀目的是娛樂,有時(shí)主持人基于制造娛樂效果,反而削減
受訪者在意見交流中的用心
﹡醫(yī)生詢問醫(yī)療史目的在對(duì)特殊病例作詳細(xì)了解,而非概推到其
他病患,因此訪問方式、語句可能會(huì)隨病患而不同;醫(yī)生也引
導(dǎo)病人說出真正的感覺
調(diào)查 測(cè)量 「標(biāo)準(zhǔn)化」是必須的(續(xù))
標(biāo)準(zhǔn)化訪問的關(guān)鍵爭論---當(dāng)受訪者有問題時(shí),訪員該如何作?
【思考】:如果訪員發(fā)現(xiàn)受訪者對(duì)題意不確定或有疑惑,而
自行改變或修正題目-----可能導(dǎo)致有些受訪者被
問了這個(gè)問題,而另外一些則被問了另一個(gè)問題,
會(huì)導(dǎo)致資料分析時(shí)嚴(yán)重困擾
【結(jié)論】:當(dāng)研究目標(biāo)是要取得量化資料時(shí),標(biāo)準(zhǔn)化、非引
導(dǎo)式的訪問是必須的
「標(biāo)準(zhǔn)化訪問」非適用于所有搜集資料的過程
探索性研究:在研究的探索階段,目的是要找出該問的
問題
個(gè)案研究:研究者只需將問題涵蓋范圍界定清楚,后續(xù)
則由受訪者自由發(fā)揮。訪問不被視為一種測(cè)
量,而是資料搜集過程
何謂訪員相關(guān)誤差
前 言
誤差:調(diào)查所得答案與研究者所要測(cè)量的「真實(shí)數(shù)據(jù)」
之間的差異。
訪員相關(guān)誤差:所得答案中的變異與訪問的人有所關(guān)
聯(lián)
與訪員無關(guān)的誤差來源:
﹡題目的用字遣詞會(huì)影響到回答
﹡和所預(yù)測(cè)量無關(guān)的受訪者特質(zhì)會(huì)影響回答
﹡訪問所進(jìn)行的環(huán)境也會(huì)影響回答
﹡問題在訪問中出現(xiàn)的時(shí)機(jī)也會(huì)影響回答
﹡受訪者自行填答和訪員在訪問現(xiàn)場(chǎng)會(huì)影響回答
訪員效應(yīng)分析
從心理測(cè)定的研究(psychometric approach)觀點(diǎn)
* 信度:重復(fù)測(cè)量相同特征和狀況產(chǎn)生一致結(jié)果的程度。
當(dāng)訪員之間對(duì)不同受訪者會(huì)造成某種程度的影響,
則結(jié)果就會(huì)不一致
* 效度:一個(gè)測(cè)量能與研究者所欲測(cè)量者相符的程度。
可以用調(diào)查所得答案和另一個(gè)測(cè)量相同或相似現(xiàn)象
測(cè)量結(jié)果之間的相關(guān)程度,來作為評(píng)定標(biāo)準(zhǔn)
(Cronbach &Meehl,1955)
1. 真實(shí)答案+訪員誤差+其它反應(yīng)的誤差
=記錄下來的答案
2. 信度=1-(√誤差變異 / √觀察到的變異)
3. 效度(y)=「y」和標(biāo)準(zhǔn)「x」之相關(guān)
* 訪員所造成誤差會(huì)降低一個(gè)測(cè)量的信度,進(jìn)而限制了其反應(yīng)有效相關(guān)性的能力
訪員效應(yīng)分析(續(xù))
從抽樣統(tǒng)計(jì)的觀點(diǎn)
* 偏差(bias):所有訪問結(jié)果的平均值和母群體真正數(shù)據(jù)的差異程
度。
* 精確度:根據(jù)調(diào)查所得的推估值,如平均數(shù)百分比,和假設(shè)從同一
母體重復(fù)所做的調(diào)查結(jié)果,或沒有抽樣的情形所得結(jié)果的
相似程度
-------統(tǒng)計(jì)學(xué)家稱此推估的精準(zhǔn)度為「標(biāo)準(zhǔn)誤」
* 非標(biāo)準(zhǔn)化訪談的重要意義在其對(duì)于推估值標(biāo)準(zhǔn)誤的增加
訪員效應(yīng)分析(續(xù))
層內(nèi)相關(guān)系數(shù)(intraclass correlation)----Kish,1962
rho的概念就是訪員所造成的變異占一個(gè)估計(jì)值其總變異的比例
因此,可反應(yīng)某個(gè)推估值的變異量跟訪員關(guān)系有多少
Rho=訪員變異量/( 抽樣變異量+訪員變異量)
Rho的顯著值在.01--.02之間,表示有1?--2?的變異量是歸因于訪員,當(dāng)訪員所訪問的受訪者愈多時(shí),對(duì)數(shù)據(jù)的影響愈可觀
在將訪員視為隨機(jī)變量而作出來的變異數(shù)分析中,rho可以利用
「模式的平均變異」、「誤差項(xiàng)的平均變異」及「每個(gè)訪員的平均
訪問次數(shù)」計(jì)算出來
Rho= (模式的平均變異-誤差項(xiàng)的平均變異)
模式的平均變異+(訪問數(shù)-1)(誤差項(xiàng)的平均變異)
訪員效應(yīng)分析(續(xù))
DEFT(the square root of the 「design effect」,設(shè)計(jì)效應(yīng)的平方根)是在對(duì)母體抽樣所造成的標(biāo)準(zhǔn)誤之外的膨脹效應(yīng),其導(dǎo)因于訪員對(duì)答案造成影響的事實(shí)。它決定于Rho的大小及每個(gè)訪員的平均訪問次數(shù)
√設(shè)計(jì)的效應(yīng)=√1+(訪員數(shù)-1)(Rho)
訪員相關(guān)誤差顯著性上,還可加上依標(biāo)準(zhǔn)化訪問程序的重要價(jià)值:可復(fù)制性。極少有研究者設(shè)計(jì)研究來估計(jì)其資料中的訪員效應(yīng),然而,提高訪員搜集資料的標(biāo)準(zhǔn)化程度及其一致性非常重要,如此,也才能提供他人重復(fù)研究結(jié)果的基礎(chǔ)
偵查訪員的誤差
結(jié) 論
研究機(jī)構(gòu)或研究者很容易忽略訪員相關(guān)的誤差。
相對(duì)于其它減少誤差的策略,如增加樣本數(shù),減低訪員相關(guān)誤差顯然成本低多了。
標(biāo)準(zhǔn)化訪問技巧
以標(biāo)準(zhǔn)化方式處理問答過程的程序
逐字念出題目
受訪者對(duì)原始題目的回答不完整或不恰當(dāng),繼續(xù)以非引導(dǎo)式的方式追問
不以訪員判斷記錄答案,答案只能記錄受訪者所陳述的
訪員對(duì)訪問所涵蓋主題不應(yīng)提出自己私人的意見,以影射個(gè)人特別價(jià)值觀及好惡;也不應(yīng)對(duì)受訪者回答內(nèi)容表示正反意見
標(biāo)準(zhǔn)化訪問的困難
不適當(dāng)?shù)恼{(diào)查工具—如設(shè)計(jì)不良的問卷
受訪者不清楚自己該扮演的角色
訪員無法達(dá)到標(biāo)準(zhǔn)化的原因
正確性的目標(biāo)與標(biāo)準(zhǔn)化的目標(biāo)不一致
與受訪者保持融洽關(guān)系與標(biāo)準(zhǔn)化的要求沖突
逐字念出題目
研究發(fā)現(xiàn),訪員變更用自比例在20?--40?之間,且這些研究都是由很嚴(yán)謹(jǐn)?shù)难芯繖C(jī)構(gòu)所執(zhí)行的(Bradburn & Sudman,1979;Cannell,F(xiàn)owler & Marquis,1968;Fowler & Mangione,1986;Cannell & Oksenberg,1988)
訪員變更題目的原因
1.題目念起來很拗口
2.訪員希望營造一種會(huì)話式、非正式的互動(dòng)
--在題目中加入個(gè)人的提示
--有經(jīng)驗(yàn)的訪員較新訪員在讀題時(shí),容易采取非正式的方式
檢驗(yàn)題目字句更動(dòng)是否影響測(cè)量質(zhì)量
1.以層內(nèi)關(guān)系來測(cè)量最易被訪員誤讀的題目,是否產(chǎn)生巨大的訪員效應(yīng)
【結(jié)果:×】
2.看那些特別會(huì)用非正式方法讀題的訪員,會(huì)不會(huì)導(dǎo)致特別偏差的數(shù)據(jù)
【結(jié)果:△】相關(guān)程度不顯著,且只肯定,被評(píng)為有較佳訪問技巧的訪員,
其所得資料較無偏誤
3.檢視有關(guān)題目字句的研究(Schuman & Presser,1981)
【結(jié)果:▲、?】
例:Q1:是不是應(yīng)該禁止共產(chǎn)黨員在美國的公開場(chǎng)合演說?
Q2:是不是應(yīng)該不允許共產(chǎn)黨員在美國的公開場(chǎng)合演說?
【結(jié)果:不允許:50?;禁止:20?,說服訪員中時(shí)讀題的好例子】
例:省略沒有意見的選項(xiàng)v.s 忠實(shí)讀出所有選項(xiàng)
【結(jié)果:69?v.s 90?】
例:妊娠終止 v.s 墮胎
【結(jié)果:×】
追問不適當(dāng)?shù)幕卮?---非引導(dǎo)式的追問
運(yùn)用時(shí)機(jī)及解決方式
追問方法
關(guān)于追問誤差
追問是訪員技巧中最難學(xué)的部分
追問是問答過程中無法完全被標(biāo)準(zhǔn)化的一部份
調(diào)查測(cè)量中,追問是一項(xiàng)重要的誤差來源(Hyman;Groves & Magilavy,1980)
開放性問題的訪員追問誤差更明顯
訪員最常犯的追問誤差:引導(dǎo)性追問、該追問而未追問
追問時(shí)特別容易有訪員差異的三種情況:
1.訪員的期望會(huì)影響其追問的行為(Hyman,1954)
2.對(duì)于可能有多重答案的題目,訪員差異可能導(dǎo)致答案數(shù)
量上的差別
3.在處理「不知道」或同類問題時(shí),訪員差異會(huì)使結(jié)果有
差異
解決追問誤差最有效的方法:改進(jìn)題目質(zhì)量,使訪員追問機(jī)率減少
記錄答案
訪員的任務(wù)
立場(chǎng)保持中立
需包含之重要因素:
訪員不應(yīng)該主動(dòng)提供受訪者有關(guān)個(gè)人對(duì)于生活狀況、觀感、或價(jià)值的訊息
【原因】
主動(dòng)提供訊息可能破壞以搜集數(shù)據(jù)為先的專業(yè)性
談?wù)搨€(gè)人觀感只會(huì)使其差距加大
有關(guān)個(gè)人觀感和背景的信息可能會(huì)直接影響答案
在提供給受訪者的回饋中,應(yīng)避免對(duì)受訪者答案提供評(píng)估和判斷
【原因】大多數(shù)受訪者在意訪員如何看待其答案
訓(xùn)練受訪者
方法
訪問開始時(shí),作一些開場(chǎng)的介紹
【用意】
跟受訪者說明,這是一種特殊的互動(dòng),有其特別的游戲規(guī)則
讓訪問易于進(jìn)行
增加訪員自身遵守標(biāo)準(zhǔn)化的規(guī)范
訪問過程中遇到問題時(shí),再解釋標(biāo)準(zhǔn)化訪問的特色
【例如】
受訪者已提及下一問題的答案時(shí)
受訪者覺得題目中有含糊或定義不清楚的名詞時(shí)
在封閉式的題目中,受訪者不想選出答案選項(xiàng)中的一項(xiàng)
受訪者給的答案不明確,因?yàn)榭赡苤皇且粋€(gè)估計(jì)或預(yù)測(cè)
受訪者講得太快,訪員無法逐字記錄下來時(shí)
當(dāng)受訪者的家人想要幫忙答復(fù)意見性的題目
當(dāng)受訪者在訪問中詢問訪員意見
建立標(biāo)準(zhǔn)化訪問的脈絡(luò)
許牧民
要執(zhí)行標(biāo)準(zhǔn)化訪問的一個(gè)先決條件是要建立起一種關(guān)系,使受訪者有其意愿,訪員有其能力,可以使其個(gè)別角色在測(cè)量過程中得以發(fā)揮。
Charles Cannell指出:訪員在建立訪問為一種測(cè)量經(jīng)驗(yàn)中扮演著重要的角色。訪員所建立的訪問互動(dòng)模式,與受訪者發(fā)生問答過程的關(guān)系,也對(duì)資料結(jié)果扮演關(guān)鍵性的角色。根據(jù)發(fā)現(xiàn),這也是訪員的做法最不一致的工作。
建立訪員與受訪者互動(dòng)的三個(gè)重點(diǎn):
一、解釋訪問的目的及原因
二、建立訪員與受訪者之間關(guān)系的良好趨勢(shì)
三、傳遞訪問的目標(biāo)和要使用的規(guī)則
Kelman 的訪員類型說
要思考受訪者對(duì)訪員的定位問題,Kelman指出有三種產(chǎn)生影響關(guān)系之類型。
順從性(compliance):其特色是在該關(guān)系中,影響的管控是按行為來進(jìn)行獎(jiǎng)懲操控。如受訪者要避免訪問中不愉快的互動(dòng),獲得訪員的贊賞、愉悅,但結(jié)果不一定理想。
角色認(rèn)同(identification):這類的影響根源于一個(gè)人在該關(guān)系中對(duì)其角色的接受,因此,所表現(xiàn)出來的就如同該角色所預(yù)期的一樣。如,調(diào)查中探討所謂好市民,就以社會(huì)所認(rèn)知、期待的好市民角色來響應(yīng)問題,事實(shí)上,對(duì)研究結(jié)果無益。
內(nèi)化性(internalization):影響之所以發(fā)生是因?yàn)槟撤N行為和一個(gè)人的自我價(jià)值產(chǎn)生連結(jié)。如,受訪者是訪問為一種達(dá)成個(gè)人目標(biāo)的方式,或是學(xué)習(xí)更多重要的社會(huì)議題,和角色認(rèn)同有些接近。
受訪者對(duì)于訪問的定位
要評(píng)估Kelman的三種類型是否對(duì)訪問有幫助,則應(yīng)先知道有關(guān)受訪者對(duì)訪問的定位,有兩大法則。
法則一:受訪者對(duì)調(diào)查信息了解的多寡有很大的差異有很多人士在對(duì)調(diào)查資助者極其目的了解有限的情況下參與調(diào)查。
法則二:在受訪者的生活中,訪問工作不是件很重要的事件。因此,常輕忽調(diào)查者所給予的相關(guān)資料。
受訪者是否感覺到、想到或知道訪問對(duì)數(shù)據(jù)質(zhì)量會(huì)造成任何差異?關(guān)鍵在于,受訪者對(duì)扮演其角色最好的方式,就是對(duì)作正確的報(bào)告有較清楚的認(rèn)識(shí)。
訪員與受訪者的關(guān)系
在信息程度不均的情況下,大部分受訪者對(duì)調(diào)查的背景和目的的了解有差別,而對(duì)訪員的反應(yīng)大概是絕大多數(shù)的受訪者接受訪問意愿最重要的關(guān)鍵。除此之外,和訪員的關(guān)系也會(huì)對(duì)他在測(cè)量過程的表現(xiàn)上有主要的效應(yīng)。
* 訪員和受訪者理想的角色關(guān)系有很多不同,如信任、尊敬、專業(yè)、權(quán)威甚至是對(duì)立。
* 對(duì)很多受訪者而言訪員是他們參與訪問最重要的原因。
* 訪員和受訪者間的互動(dòng),基本上應(yīng)該還是一種專業(yè)型態(tài)。主要的焦點(diǎn)放在訪問工作,而且受訪者對(duì)人際吸引的關(guān)心應(yīng)減到最低。
* 歸納起來,較希望的是和善、專業(yè)的關(guān)系,訪員在此關(guān)系中受到信任與尊敬,卻也是能夠接受而不加批判的專業(yè)性(有心理治療師或諮商人員的影像)。
為受訪者設(shè)定標(biāo)準(zhǔn)
※ 證據(jù)顯示,訪員對(duì)受訪者傳達(dá)他們?cè)撊绾卧谠L問中表現(xiàn)的標(biāo)準(zhǔn),對(duì)訪問所得的數(shù)據(jù)有主要的影響。
※ 受訪者表現(xiàn)的標(biāo)準(zhǔn)也是個(gè)問題,是嚴(yán)肅的測(cè)量過程?還是只簡單填個(gè)問卷?要精確的答案?還是一般的想法?是一般談話?還是嚴(yán)謹(jǐn)?shù)纳鐣?huì)科學(xué)研究,講求精準(zhǔn)?
※ 若訪員表現(xiàn)出要求「確切的答案」,則調(diào)查質(zhì)量較「一般的想法」為佳。
※ 訪問過程中訪員進(jìn)行的速度的快慢,會(huì)影響受訪者提供「確切的答案」。
Cannell四種改善報(bào)告質(zhì)量的策略
增強(qiáng):如,答的理想,訪員說正面、鼓勵(lì)的話。反之,訪員就不予以積極的響應(yīng)。經(jīng)過設(shè)定的增強(qiáng)程序,比訪員自行的增強(qiáng)行為佳。
模型示范(modeling):Hensen(1973)認(rèn)為要向受訪者傳達(dá)他們被期望的表現(xiàn)方式,最好的方法就是做一個(gè)示范。如,以錄音帶「告訴受訪者,一個(gè)希望達(dá)成的訪問是什么樣子」。
標(biāo)準(zhǔn)化指導(dǎo)(standardized unstruction):讓訪員在訪問之前先對(duì)受訪者念一份指導(dǎo)說明,這大概是最直接的方法,來確定訪員對(duì)所有受訪者設(shè)定了同等的高標(biāo)準(zhǔn),這對(duì)教育程度較高者特別有用。
承諾(commitment):訪員要求受訪者給一個(gè)承諾,若不,訪問就結(jié)束。事實(shí)上不承諾者少,且回答質(zhì)量提高。
結(jié) 論
最直接可幫助訪員設(shè)定標(biāo)準(zhǔn)的三個(gè)方法
一、 標(biāo)準(zhǔn)化的指導(dǎo)說明
二、 要求口頭承諾
三、 堅(jiān)持訪員要放慢速度訪問
標(biāo)準(zhǔn)化訪問中
題目設(shè)計(jì)的角色
一個(gè)研究者若要確保標(biāo)準(zhǔn)化的訪問,最重要的方法之一,就是給訪員容易問也容易答的題目。
訪問的明細(xì)做的越好,訪問的工作也就會(huì)越好。
最會(huì)產(chǎn)生訪員效應(yīng)的題目,就是那些必須由訪員辨識(shí)、判斷才會(huì)得到適當(dāng)答案的題目。
題目內(nèi)容
影響訪員的題目內(nèi)容有兩類
一、題目的敏感性
二、題目是詢問態(tài)度、意見或是事實(shí)性的答案
* Kish(1962):態(tài)度或意見性的題目,比事實(shí)性的題目較容易受訪員的影響。因事實(shí)性的題目(可以被獨(dú)立檢驗(yàn)的過去事件或是現(xiàn)在的狀況)是根源于某種客觀的現(xiàn)實(shí),相對(duì)的,有關(guān)態(tài)度和意見的題目,除了受訪者之外,沒人可以去驗(yàn)證或觀察到。
* 意見性的題目較難回答,是因受訪者對(duì)該主題較不可能有已發(fā)展成熟的意見,結(jié)果就會(huì)顯著受到訪員的影響。
題目型式
題目型式最明顯的差別是在受訪者是否給于一組答案,從中挑選(封閉式或固定響應(yīng)題目),或是要求用自己的話來回答(開放式題目)。后者較可能產(chǎn)生訪員效應(yīng)。
提問-答題的過程
八種與測(cè)量過程有關(guān)聯(lián)的行為
一、 題目是否逐字被念出
二、 訪員是否正確的追問以獲得適當(dāng)?shù)拇鸢?
三、 訪員是否引導(dǎo)追問的方向
四、 當(dāng)需要去追問適當(dāng)?shù)拇鸢笗r(shí)訪員是否沒有去做追問
五、 (只針對(duì)開放式題目)訪員是否逐字紀(jì)錄答案
六、 訪員是否對(duì)受訪者的答案給予不當(dāng)?shù)幕貞?yīng)
七、 訪員是否涉及不妥當(dāng)?shù)慕浑H行為
八、 在問答的過程中是否有談笑
訪員特定行為之發(fā)生與Rho間之影響關(guān)系排序
一、 沒有去追問
二、 沒有完整或正確的逐字紀(jì)錄開放性問題
三、 正確的追問
四、 引導(dǎo)性的追問
* 另一影響原因是訪員紀(jì)錄誤差的可能性
追問的相關(guān)因素
開放性題目比封閉式題目更需要追問
意見性的題目比事實(shí)性的題目更需要追問
困難度高的題目及意見性的題目易引起引導(dǎo)性的追問
標(biāo)準(zhǔn)化測(cè)量的特定威脅
一、 所涉及的要點(diǎn)數(shù)目:較易發(fā)生在開放性題目。例,從您的觀點(diǎn)看,住在這附近您最喜歡的「一些」事情是什么。具多重回答性。
二、 隱藏性篩選題目:例,您去年讀過最好的一本書是什么?至少含兩個(gè)題目。
三、 在題目中不清楚的名詞:在題目中含有定義不清的名詞,特別容易產(chǎn)生訪員效應(yīng)。
四、 不清楚的響應(yīng)期望:題目的措詞中,無法確定什么是構(gòu)成適當(dāng)響應(yīng)的內(nèi)容。例,「您從什么來源得到最主要的健康信息」。何謂來源?交談、閱讀、電視?若是閱讀,是哪一類書?雜志、書籍、報(bào)紙.....。
五、 田野中過錄的答案:也就是題目用開放的型式來詢問,但是訪員被要求用過錄碼來作紀(jì)錄。真正的問題在于,受訪者不知道訪員判別的標(biāo)準(zhǔn)是什么?訪員也未被給予標(biāo)準(zhǔn)化的策略來提供受訪者一些答題的線索。目前對(duì)此法采較保守的態(tài)度。
設(shè)計(jì)調(diào)查工具以減低訪員效應(yīng)
要降低訪員效應(yīng),可將受訪者答題所需要知道的放到題目里,也就是在擬寫題目時(shí),提供訪員完整的腳本。
四個(gè)指導(dǎo)方針:
一、 一個(gè)好的題目設(shè)計(jì),對(duì)關(guān)鍵名詞要確示其定義
二、 對(duì)于隱藏性篩選題目,要特別留意,使之更明確,將會(huì)有更標(biāo)準(zhǔn)更好的測(cè)量。
三、 研究者擬寫題目時(shí)將對(duì)答案的期望更明確表示出來,以減低訪員相關(guān)的誤差。
四、 在回答開放性問題時(shí),訪員和受訪者在所涉及的重點(diǎn)數(shù)目上的變異性應(yīng)該要控制,也就是明示答案需要幾個(gè)重點(diǎn)。
指認(rèn)題目問題的策略
一、 焦點(diǎn)討論團(tuán)體(focused discussion groups):最古老、也是最好的方法之一。藉由小組討論的過程在調(diào)查涵蓋的范圍內(nèi),討論每個(gè)人的經(jīng)驗(yàn)或意見。
二、 認(rèn)知研究技術(shù)(cognitive research techniques):受訪者在調(diào)查的前測(cè)版本中,被要求將其思考過程大聲的講出來。研究者從人們對(duì)其題目的理解及思考方式中,可以確認(rèn)一些題意不清或在回答上會(huì)遭遇困難之處。另一方式是進(jìn)行兩次,比較兩次之差異。
三、 使用前測(cè)訪問(use of pretest interviews):給訪員更多的訓(xùn)練,目標(biāo)是培養(yǎng)他們對(duì)題目的敏感度,包括不容易逐字念出的題目,以及通常需要追問、澄清題意,以取得適當(dāng)答案的題目。
四、 錄音紀(jì)錄并過錄(tape recording and coding):將至少25次(以取得測(cè)量的穩(wěn)定性)的前測(cè)錄音,尋求訪談過程與追問之關(guān)聯(lián)行為。
結(jié) 論
Bradburn 和Sudman(1979):要減低訪員效應(yīng),最好的方法就是寫更好的題目。寫更好題目的關(guān)鍵步驟,就是要小心仔細(xì)、醞釀完全后在調(diào)查之前并先預(yù)試所有的程序。
訪員的選擇與
訪員的相關(guān)誤差
訪員的特性應(yīng)從三方面思考:
一、 有些訪員會(huì)比其它人更勝任問答的過程
二、 某些特定的訪員特性可能會(huì)改變題目的意義或脈絡(luò)
三、 訪員特性可能會(huì)影響訪員與受訪者關(guān)系的質(zhì)量
訪員特性及其表現(xiàn)
* 一個(gè)良好的訪員,有些特性是必要的
* 起碼要有良好的讀寫能力
* 具專業(yè)領(lǐng)域知識(shí)的訪員未必是最恰當(dāng),因一個(gè)普通的訪員,不必去維持專業(yè)之能的假象,可以盡量去做非引導(dǎo)性的追問,直到答案清楚為止。
訪員特性及訪問脈絡(luò)
* 訪員特性:年齡、性別、種族、教育程度、社會(huì)階級(jí)、族群及宗教背景
* 較有影響者:宗教信仰或族群,種族
訪員與受訪者的關(guān)系
* 比受訪者社會(huì)地位與教育程度較高的訪員,會(huì)有較好的報(bào)告品質(zhì)。
* Weiss的研究中,兩項(xiàng)重要的結(jié)論:
一、 人口特征的相似性,對(duì)測(cè)量質(zhì)量并非是一個(gè)正數(shù)。
二、 人際關(guān)系與人際吸引也未必是正數(shù),對(duì)調(diào)查資料反而可能會(huì)有負(fù)面的影響。
訪員的年齡
目前數(shù)據(jù)顯示,沒有影響。
訪員的性別
* 普遍對(duì)女性訪員的評(píng)價(jià)較高(但目前男性訪員較少,會(huì)影響統(tǒng)計(jì))。
* 但無證據(jù)顯示女性訪員的報(bào)告較好或資料較不一樣。
結(jié) 論
訪員特性和訪員相關(guān)誤差之間的關(guān)系,很少能建立起來。但是,如果調(diào)查的主題是直接和訪員的某些特性是相關(guān)的,可能會(huì)導(dǎo)致受訪者會(huì)顧慮到某些答案的選項(xiàng)對(duì)訪員會(huì)是一種直接的侮辱,侵犯或令之尷尬。那研究者就要認(rèn)真的考慮要控制這些特性。
關(guān)心如何減低訪員的相關(guān)誤差,與其把重心放在訪員的選擇,不如將重點(diǎn)放在訪員的訓(xùn)練和督導(dǎo)上面。
訪員的訓(xùn)練
程馥慧
訓(xùn)練的選擇
所有在做第一次正式訪問之前的指導(dǎo)活動(dòng)都算是訓(xùn)練
訓(xùn)練時(shí)間的長短-和訓(xùn)練的內(nèi)容、技巧、成本有關(guān)
訓(xùn)練方式對(duì)訪問工作的影響:
1. 訪員對(duì)其工作的認(rèn)知
2. 訪員的技能
3. 訪員與受訪者的關(guān)系、受訪者對(duì)訪員的反應(yīng)
4. 所搜集數(shù)據(jù)的質(zhì)量
對(duì)訓(xùn)練訪員價(jià)值的研究
研究案例
研究對(duì)象:招募五十七名沒有專業(yè)訪問經(jīng)驗(yàn)的訪員,分別安排在四場(chǎng)訓(xùn)練小組( 為期一天、二天、五天、十天)
研究條件:訓(xùn)練前皆先給予手冊(cè)自行研讀,每場(chǎng)所教導(dǎo)的訪問技巧一致、傳遞的訊息一致,差別在訪問程序的練習(xí)、對(duì)程序背景的了解程度,隨天數(shù)增加而更廣泛
研究目標(biāo):檢視是否較長、較密集的訓(xùn)練經(jīng)驗(yàn)有其價(jià)值
訓(xùn)練在訪員對(duì)其工作認(rèn)識(shí)上的效果
研究結(jié)果:
訪員對(duì)訓(xùn)練經(jīng)驗(yàn)的感想--
*訓(xùn)練時(shí)間越長-訪員越會(huì)將訓(xùn)練評(píng)定為重要訊息來源
*訓(xùn)練時(shí)間越短-訪員越會(huì)將訪問手冊(cè)評(píng)定為重要訊息來源
訪員自覺準(zhǔn)備充分的程度--
*受訓(xùn)練最少的訪員,自己感覺準(zhǔn)備程度和他人相同
*受訓(xùn)練最少的訪員,最困擾的是如何去追問
訪員對(duì)處理事情優(yōu)先級(jí)的認(rèn)知--
*各組皆認(rèn)為得到正確、完整的答案是最優(yōu)先的原則;但接受長時(shí)間訓(xùn)練者比訓(xùn)練時(shí)間短者,將標(biāo)準(zhǔn)化的優(yōu)先程度評(píng)定的更高
*接受二天訓(xùn)練者,最不愿當(dāng)訪員
訪問技巧
可由以下的方式去了解訪員的訪問的技巧:
1. 要求訪員回答受訪者可能會(huì)問的問題
2. 和受訪者的訪談
3. 在訓(xùn)練完成后所做訪問練習(xí)的錄音記錄
受訪者對(duì)訪員的感覺
訪員對(duì)工作越熟練,訪問時(shí)就越有自信,表現(xiàn)上亦越被評(píng)為專業(yè)
訪員訓(xùn)練強(qiáng)調(diào)工作取向(避免與受訪者產(chǎn)生私人性關(guān)系,而導(dǎo)致偏差)
受訪者對(duì)訓(xùn)練時(shí)間不同的訪員(一、二、五、十天)的評(píng)分:
1. 訪員要求確切的答案
2. 訪員有杰出的工作表現(xiàn)
*評(píng)分上無顯著差異→受訪者對(duì)于訪員的行為并不敏感
訓(xùn)練對(duì)數(shù)據(jù)質(zhì)量的影響
在此研究中對(duì)于數(shù)據(jù)質(zhì)量有兩方面的測(cè)量-
(1) 層內(nèi)相關(guān)系數(shù) (測(cè)量訪員和所得數(shù)據(jù)的相關(guān)程度,即訪員標(biāo)準(zhǔn)化程度)
(2) 偏誤測(cè)量 (訪員受訓(xùn)程度和所得答案偏誤多寡的相關(guān)程度)
*在標(biāo)準(zhǔn)化方面-最標(biāo)準(zhǔn)化的是二天訓(xùn)練,一天和十天訓(xùn)練者比起二天和五天者差→十天的訓(xùn)練并不能改進(jìn)訪員標(biāo)準(zhǔn)化程度
*在偏誤改進(jìn)方面-訓(xùn)練十天者偏誤最少,一天和五天者相同→關(guān)聯(lián)性難下定論
結(jié) 論
訪員對(duì)一般訪問技巧有模擬練習(xí),才能成為可勝任的訪員。
處理人際互動(dòng):訪員訓(xùn)練時(shí)間的長短,對(duì)人際互動(dòng)上沒有很大差異
處理問答過程上:訓(xùn)練短者自覺準(zhǔn)備不充分
追問技巧上:訓(xùn)練短者在追問技巧上表現(xiàn)不佳
標(biāo)準(zhǔn)化無偏誤:以接受二天訓(xùn)練表現(xiàn)最佳
結(jié) 論(續(xù))
以此研究案例而言,接受二天訓(xùn)練的訪員,自認(rèn)為準(zhǔn)備不夠,對(duì)訪問工作的喜愛程度最低(自信心不足)。接受十天訓(xùn)練的訪員,搜集資料上比二天、五天者更不標(biāo)準(zhǔn)化,訪問質(zhì)量也較差(長時(shí)間導(dǎo)致疲乏、反效果)。
訪問訓(xùn)練最佳時(shí)間長度,應(yīng)視其小組大小、研究計(jì)劃類型的復(fù)雜度、訓(xùn)練后所接受的督導(dǎo)類型而決定。
對(duì)訪員的督導(dǎo)
調(diào)查機(jī)構(gòu)對(duì)訪員工作進(jìn)行督導(dǎo)的事項(xiàng)
1. 工作量
2. 工作時(shí)數(shù)
3. 得到的回答率(成功完成訪問的百分比)
4. 完成訪問的質(zhì)量
5. 處理訪問過程的方式
6. 與受訪者互動(dòng)情形
督導(dǎo)的信息
監(jiān)督訪員的效果之研究
督導(dǎo)效應(yīng):
訪員對(duì)工作的認(rèn)識(shí)
受訪者的效應(yīng)
訪問的技巧
所得數(shù)據(jù)的質(zhì)量
訪員對(duì)工作的認(rèn)識(shí)
究竟訪員是否會(huì)注意到他們?cè)诓煌碳?jí)的督導(dǎo)下,所收到的回饋內(nèi)容是否會(huì)有差別呢?答案是有差別的,接受第一級(jí)督導(dǎo)的訪員對(duì)督導(dǎo)回饋的評(píng)定較不重要。
訪員接受不同回饋程度,會(huì)影響他們對(duì)研究機(jī)構(gòu)所在意事項(xiàng)的認(rèn)知。
錄音對(duì)受訪者的效應(yīng)
假設(shè)1.受訪者不喜歡被錄音,錄音會(huì)對(duì)受訪經(jīng)驗(yàn)產(chǎn)生負(fù)面影響
假設(shè)2.錄音會(huì)影響訪員的行為
*從受訪者的訪談中,沒有證據(jù)顯示錄音會(huì)產(chǎn)生負(fù)面影響;唯一有顯著差異的是,受訪者認(rèn)為:接受訓(xùn)練時(shí)間短、及被錄音的訪員 表現(xiàn)較為緊張。
*錄音對(duì)于訪員質(zhì)量的控制是可行的。
對(duì)訪員技巧監(jiān)督的效應(yīng)
監(jiān)督和回饋并不能改善訪問的技巧,訪員在訓(xùn)練結(jié)束時(shí)所表現(xiàn)的能力水平就是他們的最佳狀況。
監(jiān)督僅能確認(rèn)技巧有被使用--JUST KEEP IT (NOT CHANGE IT)
對(duì)數(shù)據(jù)質(zhì)量監(jiān)督的效應(yīng)
P 值
p值(p值小于0.05)的意義:有顯著差異研究設(shè)立成立
主任在討論區(qū)中對(duì)p值的解釋:
話說在計(jì)算機(jī)的報(bào)表中常會(huì)出現(xiàn)〔p值〕這個(gè)〔統(tǒng)計(jì)考驗(yàn)量數(shù)〕,它指的是虛無假設(shè)(null hypothesis,常以H0表示)被接受(或說〔為真〕)的情況下,所得到的一個(gè)不小于此統(tǒng)計(jì)數(shù)值的機(jī)率值。若檢定結(jié)果接受虛無假設(shè)(p值>顯著水平),則推翻原本真正要檢定的研究假設(shè)(research hypothesis,常以H1表示)﹔而如果經(jīng)檢定是拒絕虛無假設(shè)的話(p值=<顯著水平),則原本的研究假設(shè)得以成立。
注:在統(tǒng)計(jì)學(xué)理上有一個(gè)叫做〔顯著水平〕(level of significance)的,在統(tǒng)計(jì)分析的報(bào)表上往往以Significance或Sign.呈現(xiàn),此意義就是研究者拒絕虛無假設(shè)得最大機(jī)率值,一般學(xué)者間約定成俗的習(xí)慣是采0.05或0.01作為假設(shè)考驗(yàn)的顯著水平值。
測(cè)量方式
(1) 層內(nèi)相關(guān)系數(shù)(rho):
訪員對(duì)數(shù)據(jù)的影響程度(某個(gè)推估值之變異量和訪員的關(guān)系程度),如果rho系數(shù)很小,那表示變異量并非由訪員所引起,此時(shí)訪員的質(zhì)量便獲得證實(shí)。
rho(層內(nèi)相關(guān)系數(shù))在三個(gè)督導(dǎo)層級(jí)分別是 0.012/0.010/0.008,且經(jīng)檢定后發(fā)現(xiàn) p值小于0.05,所以各層級(jí)間存在差異,亦即依層級(jí)的改變,訪員效應(yīng)有顯著減少現(xiàn)象這個(gè)命題是可成立的,故可得出
〔督導(dǎo)級(jí)數(shù)越高/越嚴(yán)謹(jǐn)/越細(xì)致/執(zhí)行考慮因素越多,則訪員效應(yīng)/引發(fā)對(duì)數(shù)據(jù)正確性之影響就越小,亦即rho會(huì)隨督導(dǎo)層級(jí)而逐漸改善〕
測(cè)量方式(續(xù))
(2) 偏誤測(cè)量:
訪員受訓(xùn)程度和所得答案偏誤多寡的相關(guān)程度。
密集式的問卷檢閱和訪問錄音效果對(duì)于所有訓(xùn)練類組上的影響是代表下方提及的〔t=1.0 ,第三級(jí)vs.第一,第二,p值不顯著〕可判斷在各督導(dǎo)層級(jí)間并未有明顯差異。
在〔標(biāo)準(zhǔn)分?jǐn)?shù)(不包括訓(xùn)練天數(shù)少于一天的)〕這個(gè)項(xiàng)目,可參見表下方提及的〔t=1.8 ,第三級(jí)或第一,第二,p值小于0.04 〕可判斷在各督導(dǎo)層級(jí)間有明顯差異,且是較大值表偏誤小,亦即訪員的偏誤大都來自〔接受訓(xùn)練少于一天但被錄音者──去除訓(xùn)練少于一天者為34→所有訓(xùn)練小組的20,34→20,偏誤變大〕,故可說明:若排除此類訪員,則錄音的價(jià)值在降低偏誤上是有顯著的正面影響。
結(jié) 論
督導(dǎo)能影響訪員表現(xiàn)的好壞,但不能改善訪員訪問的技巧
密集式的督導(dǎo)并不能彌補(bǔ)不當(dāng)?shù)挠?xùn)練→反效果
當(dāng)訪員對(duì)自己的技巧越有信心,越偏離標(biāo)準(zhǔn)化→隨心所欲的訪問
電話督導(dǎo)→確立標(biāo)準(zhǔn)化訪問、立即的回饋
錄音督導(dǎo)→受訪者多半不介意、對(duì)訪員影響亦不大,在面訪時(shí)錄音督導(dǎo)有其價(jià)值
在調(diào)查中如何減低訪員
相關(guān)的誤差
雷碧秀
有六個(gè)方式會(huì)影響訪問的一致性
訪員所要詢問的題目字句;
所給予訪員有關(guān)如何處理問題和答題過程的詳細(xì)指示或守則;
所給予訪員有關(guān)如何建立和維持與受訪者關(guān)系的指導(dǎo)與程序;
訪員的選擇;
訪員的訓(xùn)練;
在數(shù)據(jù)搜集過程中訪員被督導(dǎo)的方式。
題目設(shè)計(jì)
為了使題目成為可信賴的測(cè)量工具,須達(dá)到三個(gè)標(biāo)準(zhǔn)
1. 題目必須編寫完全,以便讓受訪者得以提供答案;
2. 題目對(duì)每一位受訪者代表的意義是相同的,
3. 對(duì)所有的受訪者清楚的傳達(dá)出什么樣的答案是對(duì)題目的適當(dāng)回答。
訪問的程序
四個(gè)標(biāo)準(zhǔn)原則
1. 確實(shí)按照題目字句讀題;
2. 避免間接追問不適當(dāng)?shù)拇鸢福?
3. 記錄答案時(shí)不可加入訪員自身的臆測(cè);
4. 訪員須與受訪者保持關(guān)系間的中立,不帶個(gè)人主見的看法。
訪者與受訪者間的關(guān)系
關(guān)于訪員的親切又專業(yè)的形象將是使調(diào)查結(jié)果之誤差值減至最低,Cannell列出五種訪員可以一致的標(biāo)準(zhǔn)傳達(dá)給受訪者:
1. 訪問的速度;
2. 提供受訪一個(gè)模式;
3. 無論是在訪問之前或訪問當(dāng)中,都能提供給受訪者對(duì)其期望保持一致性的指示;
4. 對(duì)所欲的行為予以模式化的強(qiáng)化;
5. 要求受訪者承諾其表現(xiàn)要在某一水平以上。
減少估計(jì)標(biāo)準(zhǔn)誤差的五種方式
總 結(jié)
標(biāo)準(zhǔn)化的調(diào)查訪問,其依賴封閉式和固定式答案的問題,它的減少誤差關(guān)鍵在于受訪者對(duì)題目有疑問時(shí),訪員該怎么做才對(duì)。訪員的特征與行為將影響調(diào)查數(shù)據(jù)的質(zhì)量,在這里所提出可供研究生所用的策略,以便減低訪員相關(guān)的誤差。
END
標(biāo)準(zhǔn)化的調(diào)查訪問(ppt)
何謂標(biāo)準(zhǔn)化訪問
前 言
目的:
為改進(jìn)調(diào)查數(shù)據(jù)的質(zhì)量
調(diào)查:
指設(shè)計(jì)來對(duì)某些母群體獲取量化資料的調(diào)查
本書探討重點(diǎn):
大多數(shù)靠訪員詢問問題并記錄答案的調(diào)查形式
如何將訪員引起的誤差減到最低
訪問的本質(zhì)
訪問:
帶有目的的會(huì)談(Kahn & Cannell,1958)
兩大部分:
訪問會(huì)談的主體主要由問題及回答所組成
參與會(huì)談的角色清楚界定—一提問題(訪員)、一答問題(受訪者)
抽樣調(diào)查的特征:
個(gè)別受訪者會(huì)成為研究對(duì)象,是因他們是被描述母體的一部份,所提供答案有助于研究者描述其所代表的母群體
調(diào)查結(jié)果呈現(xiàn)是對(duì)母體定量或數(shù)學(xué)性的描述
測(cè)量所得結(jié)果、用來分析的資料,都是根據(jù)受訪者回答而來。
成功調(diào)查的標(biāo)準(zhǔn):所得資料是否能測(cè)量到研究者所欲描述母群體的真實(shí)面貌,及得到正確的數(shù)據(jù)。
調(diào)查中誤差的來源
抽樣方面誤差:
◎當(dāng)樣本并未包含所有母體所描述的特性時(shí),就會(huì)有某類別樣本被遺漏
◎樣本比例未充分反應(yīng)母體比例
◎部分樣本拒絕參與調(diào)查,拒絕提供答案,或拒答部分敏感性問題
問卷方面誤差:
◎當(dāng)題目被誤解
◎當(dāng)題目不能表達(dá)研究者真正想得到的信息
◎受訪者不愿正確回答題目
訪員方面的誤差:
◎當(dāng)訪員沒有逐字念出題目
◎當(dāng)訪員作引導(dǎo)性追問
◎當(dāng)訪員對(duì)受訪者答案加入自己的偏見
◎當(dāng)訪員記錄不正確
資料削減的誤差:
◎當(dāng)過錄員使用不一致的過錄原則,或?qū)λ居玫倪^錄碼判斷錯(cuò)誤
◎數(shù)據(jù)鍵入錯(cuò)誤
訪員的角色
忠實(shí)呈現(xiàn)問題
避免訪問過程中對(duì)受訪者的影響力
遵循標(biāo)準(zhǔn)化的流程
調(diào)查 測(cè)量 「標(biāo)準(zhǔn)化」是必須的
測(cè)量---在一個(gè)標(biāo)準(zhǔn)之下,找出或估計(jì)出任何事物的程度、面向等
(韋氏大字典,Guralk,1976)
調(diào)查中,標(biāo)準(zhǔn)化測(cè)量的程序是訪員提出問題后,訪員記錄受訪者答案的測(cè)量程序
標(biāo)準(zhǔn)化目的就在使每一受訪者都經(jīng)歷相同的答題經(jīng)驗(yàn),每項(xiàng)答案被紀(jì)錄的方式也相同,答案中所顯現(xiàn)的差異可被正確解釋為受訪者之間的差異,而非因資料搜集過程的差異
舉例:「您對(duì)于您最大孩子所上的學(xué)校評(píng)價(jià)如何?」
標(biāo)準(zhǔn)化訪問與晚間脫口秀訪問及醫(yī)生對(duì)病患醫(yī)療史訪問的比較
﹡都符合訪問的定義,但都不是標(biāo)準(zhǔn)化訪問
﹡脫口秀目的是娛樂,有時(shí)主持人基于制造娛樂效果,反而削減
受訪者在意見交流中的用心
﹡醫(yī)生詢問醫(yī)療史目的在對(duì)特殊病例作詳細(xì)了解,而非概推到其
他病患,因此訪問方式、語句可能會(huì)隨病患而不同;醫(yī)生也引
導(dǎo)病人說出真正的感覺
調(diào)查 測(cè)量 「標(biāo)準(zhǔn)化」是必須的(續(xù))
標(biāo)準(zhǔn)化訪問的關(guān)鍵爭論---當(dāng)受訪者有問題時(shí),訪員該如何作?
【思考】:如果訪員發(fā)現(xiàn)受訪者對(duì)題意不確定或有疑惑,而
自行改變或修正題目-----可能導(dǎo)致有些受訪者被
問了這個(gè)問題,而另外一些則被問了另一個(gè)問題,
會(huì)導(dǎo)致資料分析時(shí)嚴(yán)重困擾
【結(jié)論】:當(dāng)研究目標(biāo)是要取得量化資料時(shí),標(biāo)準(zhǔn)化、非引
導(dǎo)式的訪問是必須的
「標(biāo)準(zhǔn)化訪問」非適用于所有搜集資料的過程
探索性研究:在研究的探索階段,目的是要找出該問的
問題
個(gè)案研究:研究者只需將問題涵蓋范圍界定清楚,后續(xù)
則由受訪者自由發(fā)揮。訪問不被視為一種測(cè)
量,而是資料搜集過程
何謂訪員相關(guān)誤差
前 言
誤差:調(diào)查所得答案與研究者所要測(cè)量的「真實(shí)數(shù)據(jù)」
之間的差異。
訪員相關(guān)誤差:所得答案中的變異與訪問的人有所關(guān)
聯(lián)
與訪員無關(guān)的誤差來源:
﹡題目的用字遣詞會(huì)影響到回答
﹡和所預(yù)測(cè)量無關(guān)的受訪者特質(zhì)會(huì)影響回答
﹡訪問所進(jìn)行的環(huán)境也會(huì)影響回答
﹡問題在訪問中出現(xiàn)的時(shí)機(jī)也會(huì)影響回答
﹡受訪者自行填答和訪員在訪問現(xiàn)場(chǎng)會(huì)影響回答
訪員效應(yīng)分析
從心理測(cè)定的研究(psychometric approach)觀點(diǎn)
* 信度:重復(fù)測(cè)量相同特征和狀況產(chǎn)生一致結(jié)果的程度。
當(dāng)訪員之間對(duì)不同受訪者會(huì)造成某種程度的影響,
則結(jié)果就會(huì)不一致
* 效度:一個(gè)測(cè)量能與研究者所欲測(cè)量者相符的程度。
可以用調(diào)查所得答案和另一個(gè)測(cè)量相同或相似現(xiàn)象
測(cè)量結(jié)果之間的相關(guān)程度,來作為評(píng)定標(biāo)準(zhǔn)
(Cronbach &Meehl,1955)
1. 真實(shí)答案+訪員誤差+其它反應(yīng)的誤差
=記錄下來的答案
2. 信度=1-(√誤差變異 / √觀察到的變異)
3. 效度(y)=「y」和標(biāo)準(zhǔn)「x」之相關(guān)
* 訪員所造成誤差會(huì)降低一個(gè)測(cè)量的信度,進(jìn)而限制了其反應(yīng)有效相關(guān)性的能力
訪員效應(yīng)分析(續(xù))
從抽樣統(tǒng)計(jì)的觀點(diǎn)
* 偏差(bias):所有訪問結(jié)果的平均值和母群體真正數(shù)據(jù)的差異程
度。
* 精確度:根據(jù)調(diào)查所得的推估值,如平均數(shù)百分比,和假設(shè)從同一
母體重復(fù)所做的調(diào)查結(jié)果,或沒有抽樣的情形所得結(jié)果的
相似程度
-------統(tǒng)計(jì)學(xué)家稱此推估的精準(zhǔn)度為「標(biāo)準(zhǔn)誤」
* 非標(biāo)準(zhǔn)化訪談的重要意義在其對(duì)于推估值標(biāo)準(zhǔn)誤的增加
訪員效應(yīng)分析(續(xù))
層內(nèi)相關(guān)系數(shù)(intraclass correlation)----Kish,1962
rho的概念就是訪員所造成的變異占一個(gè)估計(jì)值其總變異的比例
因此,可反應(yīng)某個(gè)推估值的變異量跟訪員關(guān)系有多少
Rho=訪員變異量/( 抽樣變異量+訪員變異量)
Rho的顯著值在.01--.02之間,表示有1?--2?的變異量是歸因于訪員,當(dāng)訪員所訪問的受訪者愈多時(shí),對(duì)數(shù)據(jù)的影響愈可觀
在將訪員視為隨機(jī)變量而作出來的變異數(shù)分析中,rho可以利用
「模式的平均變異」、「誤差項(xiàng)的平均變異」及「每個(gè)訪員的平均
訪問次數(shù)」計(jì)算出來
Rho= (模式的平均變異-誤差項(xiàng)的平均變異)
模式的平均變異+(訪問數(shù)-1)(誤差項(xiàng)的平均變異)
訪員效應(yīng)分析(續(xù))
DEFT(the square root of the 「design effect」,設(shè)計(jì)效應(yīng)的平方根)是在對(duì)母體抽樣所造成的標(biāo)準(zhǔn)誤之外的膨脹效應(yīng),其導(dǎo)因于訪員對(duì)答案造成影響的事實(shí)。它決定于Rho的大小及每個(gè)訪員的平均訪問次數(shù)
√設(shè)計(jì)的效應(yīng)=√1+(訪員數(shù)-1)(Rho)
訪員相關(guān)誤差顯著性上,還可加上依標(biāo)準(zhǔn)化訪問程序的重要價(jià)值:可復(fù)制性。極少有研究者設(shè)計(jì)研究來估計(jì)其資料中的訪員效應(yīng),然而,提高訪員搜集資料的標(biāo)準(zhǔn)化程度及其一致性非常重要,如此,也才能提供他人重復(fù)研究結(jié)果的基礎(chǔ)
偵查訪員的誤差
結(jié) 論
研究機(jī)構(gòu)或研究者很容易忽略訪員相關(guān)的誤差。
相對(duì)于其它減少誤差的策略,如增加樣本數(shù),減低訪員相關(guān)誤差顯然成本低多了。
標(biāo)準(zhǔn)化訪問技巧
以標(biāo)準(zhǔn)化方式處理問答過程的程序
逐字念出題目
受訪者對(duì)原始題目的回答不完整或不恰當(dāng),繼續(xù)以非引導(dǎo)式的方式追問
不以訪員判斷記錄答案,答案只能記錄受訪者所陳述的
訪員對(duì)訪問所涵蓋主題不應(yīng)提出自己私人的意見,以影射個(gè)人特別價(jià)值觀及好惡;也不應(yīng)對(duì)受訪者回答內(nèi)容表示正反意見
標(biāo)準(zhǔn)化訪問的困難
不適當(dāng)?shù)恼{(diào)查工具—如設(shè)計(jì)不良的問卷
受訪者不清楚自己該扮演的角色
訪員無法達(dá)到標(biāo)準(zhǔn)化的原因
正確性的目標(biāo)與標(biāo)準(zhǔn)化的目標(biāo)不一致
與受訪者保持融洽關(guān)系與標(biāo)準(zhǔn)化的要求沖突
逐字念出題目
研究發(fā)現(xiàn),訪員變更用自比例在20?--40?之間,且這些研究都是由很嚴(yán)謹(jǐn)?shù)难芯繖C(jī)構(gòu)所執(zhí)行的(Bradburn & Sudman,1979;Cannell,F(xiàn)owler & Marquis,1968;Fowler & Mangione,1986;Cannell & Oksenberg,1988)
訪員變更題目的原因
1.題目念起來很拗口
2.訪員希望營造一種會(huì)話式、非正式的互動(dòng)
--在題目中加入個(gè)人的提示
--有經(jīng)驗(yàn)的訪員較新訪員在讀題時(shí),容易采取非正式的方式
檢驗(yàn)題目字句更動(dòng)是否影響測(cè)量質(zhì)量
1.以層內(nèi)關(guān)系來測(cè)量最易被訪員誤讀的題目,是否產(chǎn)生巨大的訪員效應(yīng)
【結(jié)果:×】
2.看那些特別會(huì)用非正式方法讀題的訪員,會(huì)不會(huì)導(dǎo)致特別偏差的數(shù)據(jù)
【結(jié)果:△】相關(guān)程度不顯著,且只肯定,被評(píng)為有較佳訪問技巧的訪員,
其所得資料較無偏誤
3.檢視有關(guān)題目字句的研究(Schuman & Presser,1981)
【結(jié)果:▲、?】
例:Q1:是不是應(yīng)該禁止共產(chǎn)黨員在美國的公開場(chǎng)合演說?
Q2:是不是應(yīng)該不允許共產(chǎn)黨員在美國的公開場(chǎng)合演說?
【結(jié)果:不允許:50?;禁止:20?,說服訪員中時(shí)讀題的好例子】
例:省略沒有意見的選項(xiàng)v.s 忠實(shí)讀出所有選項(xiàng)
【結(jié)果:69?v.s 90?】
例:妊娠終止 v.s 墮胎
【結(jié)果:×】
追問不適當(dāng)?shù)幕卮?---非引導(dǎo)式的追問
運(yùn)用時(shí)機(jī)及解決方式
追問方法
關(guān)于追問誤差
追問是訪員技巧中最難學(xué)的部分
追問是問答過程中無法完全被標(biāo)準(zhǔn)化的一部份
調(diào)查測(cè)量中,追問是一項(xiàng)重要的誤差來源(Hyman;Groves & Magilavy,1980)
開放性問題的訪員追問誤差更明顯
訪員最常犯的追問誤差:引導(dǎo)性追問、該追問而未追問
追問時(shí)特別容易有訪員差異的三種情況:
1.訪員的期望會(huì)影響其追問的行為(Hyman,1954)
2.對(duì)于可能有多重答案的題目,訪員差異可能導(dǎo)致答案數(shù)
量上的差別
3.在處理「不知道」或同類問題時(shí),訪員差異會(huì)使結(jié)果有
差異
解決追問誤差最有效的方法:改進(jìn)題目質(zhì)量,使訪員追問機(jī)率減少
記錄答案
訪員的任務(wù)
立場(chǎng)保持中立
需包含之重要因素:
訪員不應(yīng)該主動(dòng)提供受訪者有關(guān)個(gè)人對(duì)于生活狀況、觀感、或價(jià)值的訊息
【原因】
主動(dòng)提供訊息可能破壞以搜集數(shù)據(jù)為先的專業(yè)性
談?wù)搨€(gè)人觀感只會(huì)使其差距加大
有關(guān)個(gè)人觀感和背景的信息可能會(huì)直接影響答案
在提供給受訪者的回饋中,應(yīng)避免對(duì)受訪者答案提供評(píng)估和判斷
【原因】大多數(shù)受訪者在意訪員如何看待其答案
訓(xùn)練受訪者
方法
訪問開始時(shí),作一些開場(chǎng)的介紹
【用意】
跟受訪者說明,這是一種特殊的互動(dòng),有其特別的游戲規(guī)則
讓訪問易于進(jìn)行
增加訪員自身遵守標(biāo)準(zhǔn)化的規(guī)范
訪問過程中遇到問題時(shí),再解釋標(biāo)準(zhǔn)化訪問的特色
【例如】
受訪者已提及下一問題的答案時(shí)
受訪者覺得題目中有含糊或定義不清楚的名詞時(shí)
在封閉式的題目中,受訪者不想選出答案選項(xiàng)中的一項(xiàng)
受訪者給的答案不明確,因?yàn)榭赡苤皇且粋€(gè)估計(jì)或預(yù)測(cè)
受訪者講得太快,訪員無法逐字記錄下來時(shí)
當(dāng)受訪者的家人想要幫忙答復(fù)意見性的題目
當(dāng)受訪者在訪問中詢問訪員意見
建立標(biāo)準(zhǔn)化訪問的脈絡(luò)
許牧民
要執(zhí)行標(biāo)準(zhǔn)化訪問的一個(gè)先決條件是要建立起一種關(guān)系,使受訪者有其意愿,訪員有其能力,可以使其個(gè)別角色在測(cè)量過程中得以發(fā)揮。
Charles Cannell指出:訪員在建立訪問為一種測(cè)量經(jīng)驗(yàn)中扮演著重要的角色。訪員所建立的訪問互動(dòng)模式,與受訪者發(fā)生問答過程的關(guān)系,也對(duì)資料結(jié)果扮演關(guān)鍵性的角色。根據(jù)發(fā)現(xiàn),這也是訪員的做法最不一致的工作。
建立訪員與受訪者互動(dòng)的三個(gè)重點(diǎn):
一、解釋訪問的目的及原因
二、建立訪員與受訪者之間關(guān)系的良好趨勢(shì)
三、傳遞訪問的目標(biāo)和要使用的規(guī)則
Kelman 的訪員類型說
要思考受訪者對(duì)訪員的定位問題,Kelman指出有三種產(chǎn)生影響關(guān)系之類型。
順從性(compliance):其特色是在該關(guān)系中,影響的管控是按行為來進(jìn)行獎(jiǎng)懲操控。如受訪者要避免訪問中不愉快的互動(dòng),獲得訪員的贊賞、愉悅,但結(jié)果不一定理想。
角色認(rèn)同(identification):這類的影響根源于一個(gè)人在該關(guān)系中對(duì)其角色的接受,因此,所表現(xiàn)出來的就如同該角色所預(yù)期的一樣。如,調(diào)查中探討所謂好市民,就以社會(huì)所認(rèn)知、期待的好市民角色來響應(yīng)問題,事實(shí)上,對(duì)研究結(jié)果無益。
內(nèi)化性(internalization):影響之所以發(fā)生是因?yàn)槟撤N行為和一個(gè)人的自我價(jià)值產(chǎn)生連結(jié)。如,受訪者是訪問為一種達(dá)成個(gè)人目標(biāo)的方式,或是學(xué)習(xí)更多重要的社會(huì)議題,和角色認(rèn)同有些接近。
受訪者對(duì)于訪問的定位
要評(píng)估Kelman的三種類型是否對(duì)訪問有幫助,則應(yīng)先知道有關(guān)受訪者對(duì)訪問的定位,有兩大法則。
法則一:受訪者對(duì)調(diào)查信息了解的多寡有很大的差異有很多人士在對(duì)調(diào)查資助者極其目的了解有限的情況下參與調(diào)查。
法則二:在受訪者的生活中,訪問工作不是件很重要的事件。因此,常輕忽調(diào)查者所給予的相關(guān)資料。
受訪者是否感覺到、想到或知道訪問對(duì)數(shù)據(jù)質(zhì)量會(huì)造成任何差異?關(guān)鍵在于,受訪者對(duì)扮演其角色最好的方式,就是對(duì)作正確的報(bào)告有較清楚的認(rèn)識(shí)。
訪員與受訪者的關(guān)系
在信息程度不均的情況下,大部分受訪者對(duì)調(diào)查的背景和目的的了解有差別,而對(duì)訪員的反應(yīng)大概是絕大多數(shù)的受訪者接受訪問意愿最重要的關(guān)鍵。除此之外,和訪員的關(guān)系也會(huì)對(duì)他在測(cè)量過程的表現(xiàn)上有主要的效應(yīng)。
* 訪員和受訪者理想的角色關(guān)系有很多不同,如信任、尊敬、專業(yè)、權(quán)威甚至是對(duì)立。
* 對(duì)很多受訪者而言訪員是他們參與訪問最重要的原因。
* 訪員和受訪者間的互動(dòng),基本上應(yīng)該還是一種專業(yè)型態(tài)。主要的焦點(diǎn)放在訪問工作,而且受訪者對(duì)人際吸引的關(guān)心應(yīng)減到最低。
* 歸納起來,較希望的是和善、專業(yè)的關(guān)系,訪員在此關(guān)系中受到信任與尊敬,卻也是能夠接受而不加批判的專業(yè)性(有心理治療師或諮商人員的影像)。
為受訪者設(shè)定標(biāo)準(zhǔn)
※ 證據(jù)顯示,訪員對(duì)受訪者傳達(dá)他們?cè)撊绾卧谠L問中表現(xiàn)的標(biāo)準(zhǔn),對(duì)訪問所得的數(shù)據(jù)有主要的影響。
※ 受訪者表現(xiàn)的標(biāo)準(zhǔn)也是個(gè)問題,是嚴(yán)肅的測(cè)量過程?還是只簡單填個(gè)問卷?要精確的答案?還是一般的想法?是一般談話?還是嚴(yán)謹(jǐn)?shù)纳鐣?huì)科學(xué)研究,講求精準(zhǔn)?
※ 若訪員表現(xiàn)出要求「確切的答案」,則調(diào)查質(zhì)量較「一般的想法」為佳。
※ 訪問過程中訪員進(jìn)行的速度的快慢,會(huì)影響受訪者提供「確切的答案」。
Cannell四種改善報(bào)告質(zhì)量的策略
增強(qiáng):如,答的理想,訪員說正面、鼓勵(lì)的話。反之,訪員就不予以積極的響應(yīng)。經(jīng)過設(shè)定的增強(qiáng)程序,比訪員自行的增強(qiáng)行為佳。
模型示范(modeling):Hensen(1973)認(rèn)為要向受訪者傳達(dá)他們被期望的表現(xiàn)方式,最好的方法就是做一個(gè)示范。如,以錄音帶「告訴受訪者,一個(gè)希望達(dá)成的訪問是什么樣子」。
標(biāo)準(zhǔn)化指導(dǎo)(standardized unstruction):讓訪員在訪問之前先對(duì)受訪者念一份指導(dǎo)說明,這大概是最直接的方法,來確定訪員對(duì)所有受訪者設(shè)定了同等的高標(biāo)準(zhǔn),這對(duì)教育程度較高者特別有用。
承諾(commitment):訪員要求受訪者給一個(gè)承諾,若不,訪問就結(jié)束。事實(shí)上不承諾者少,且回答質(zhì)量提高。
結(jié) 論
最直接可幫助訪員設(shè)定標(biāo)準(zhǔn)的三個(gè)方法
一、 標(biāo)準(zhǔn)化的指導(dǎo)說明
二、 要求口頭承諾
三、 堅(jiān)持訪員要放慢速度訪問
標(biāo)準(zhǔn)化訪問中
題目設(shè)計(jì)的角色
一個(gè)研究者若要確保標(biāo)準(zhǔn)化的訪問,最重要的方法之一,就是給訪員容易問也容易答的題目。
訪問的明細(xì)做的越好,訪問的工作也就會(huì)越好。
最會(huì)產(chǎn)生訪員效應(yīng)的題目,就是那些必須由訪員辨識(shí)、判斷才會(huì)得到適當(dāng)答案的題目。
題目內(nèi)容
影響訪員的題目內(nèi)容有兩類
一、題目的敏感性
二、題目是詢問態(tài)度、意見或是事實(shí)性的答案
* Kish(1962):態(tài)度或意見性的題目,比事實(shí)性的題目較容易受訪員的影響。因事實(shí)性的題目(可以被獨(dú)立檢驗(yàn)的過去事件或是現(xiàn)在的狀況)是根源于某種客觀的現(xiàn)實(shí),相對(duì)的,有關(guān)態(tài)度和意見的題目,除了受訪者之外,沒人可以去驗(yàn)證或觀察到。
* 意見性的題目較難回答,是因受訪者對(duì)該主題較不可能有已發(fā)展成熟的意見,結(jié)果就會(huì)顯著受到訪員的影響。
題目型式
題目型式最明顯的差別是在受訪者是否給于一組答案,從中挑選(封閉式或固定響應(yīng)題目),或是要求用自己的話來回答(開放式題目)。后者較可能產(chǎn)生訪員效應(yīng)。
提問-答題的過程
八種與測(cè)量過程有關(guān)聯(lián)的行為
一、 題目是否逐字被念出
二、 訪員是否正確的追問以獲得適當(dāng)?shù)拇鸢?
三、 訪員是否引導(dǎo)追問的方向
四、 當(dāng)需要去追問適當(dāng)?shù)拇鸢笗r(shí)訪員是否沒有去做追問
五、 (只針對(duì)開放式題目)訪員是否逐字紀(jì)錄答案
六、 訪員是否對(duì)受訪者的答案給予不當(dāng)?shù)幕貞?yīng)
七、 訪員是否涉及不妥當(dāng)?shù)慕浑H行為
八、 在問答的過程中是否有談笑
訪員特定行為之發(fā)生與Rho間之影響關(guān)系排序
一、 沒有去追問
二、 沒有完整或正確的逐字紀(jì)錄開放性問題
三、 正確的追問
四、 引導(dǎo)性的追問
* 另一影響原因是訪員紀(jì)錄誤差的可能性
追問的相關(guān)因素
開放性題目比封閉式題目更需要追問
意見性的題目比事實(shí)性的題目更需要追問
困難度高的題目及意見性的題目易引起引導(dǎo)性的追問
標(biāo)準(zhǔn)化測(cè)量的特定威脅
一、 所涉及的要點(diǎn)數(shù)目:較易發(fā)生在開放性題目。例,從您的觀點(diǎn)看,住在這附近您最喜歡的「一些」事情是什么。具多重回答性。
二、 隱藏性篩選題目:例,您去年讀過最好的一本書是什么?至少含兩個(gè)題目。
三、 在題目中不清楚的名詞:在題目中含有定義不清的名詞,特別容易產(chǎn)生訪員效應(yīng)。
四、 不清楚的響應(yīng)期望:題目的措詞中,無法確定什么是構(gòu)成適當(dāng)響應(yīng)的內(nèi)容。例,「您從什么來源得到最主要的健康信息」。何謂來源?交談、閱讀、電視?若是閱讀,是哪一類書?雜志、書籍、報(bào)紙.....。
五、 田野中過錄的答案:也就是題目用開放的型式來詢問,但是訪員被要求用過錄碼來作紀(jì)錄。真正的問題在于,受訪者不知道訪員判別的標(biāo)準(zhǔn)是什么?訪員也未被給予標(biāo)準(zhǔn)化的策略來提供受訪者一些答題的線索。目前對(duì)此法采較保守的態(tài)度。
設(shè)計(jì)調(diào)查工具以減低訪員效應(yīng)
要降低訪員效應(yīng),可將受訪者答題所需要知道的放到題目里,也就是在擬寫題目時(shí),提供訪員完整的腳本。
四個(gè)指導(dǎo)方針:
一、 一個(gè)好的題目設(shè)計(jì),對(duì)關(guān)鍵名詞要確示其定義
二、 對(duì)于隱藏性篩選題目,要特別留意,使之更明確,將會(huì)有更標(biāo)準(zhǔn)更好的測(cè)量。
三、 研究者擬寫題目時(shí)將對(duì)答案的期望更明確表示出來,以減低訪員相關(guān)的誤差。
四、 在回答開放性問題時(shí),訪員和受訪者在所涉及的重點(diǎn)數(shù)目上的變異性應(yīng)該要控制,也就是明示答案需要幾個(gè)重點(diǎn)。
指認(rèn)題目問題的策略
一、 焦點(diǎn)討論團(tuán)體(focused discussion groups):最古老、也是最好的方法之一。藉由小組討論的過程在調(diào)查涵蓋的范圍內(nèi),討論每個(gè)人的經(jīng)驗(yàn)或意見。
二、 認(rèn)知研究技術(shù)(cognitive research techniques):受訪者在調(diào)查的前測(cè)版本中,被要求將其思考過程大聲的講出來。研究者從人們對(duì)其題目的理解及思考方式中,可以確認(rèn)一些題意不清或在回答上會(huì)遭遇困難之處。另一方式是進(jìn)行兩次,比較兩次之差異。
三、 使用前測(cè)訪問(use of pretest interviews):給訪員更多的訓(xùn)練,目標(biāo)是培養(yǎng)他們對(duì)題目的敏感度,包括不容易逐字念出的題目,以及通常需要追問、澄清題意,以取得適當(dāng)答案的題目。
四、 錄音紀(jì)錄并過錄(tape recording and coding):將至少25次(以取得測(cè)量的穩(wěn)定性)的前測(cè)錄音,尋求訪談過程與追問之關(guān)聯(lián)行為。
結(jié) 論
Bradburn 和Sudman(1979):要減低訪員效應(yīng),最好的方法就是寫更好的題目。寫更好題目的關(guān)鍵步驟,就是要小心仔細(xì)、醞釀完全后在調(diào)查之前并先預(yù)試所有的程序。
訪員的選擇與
訪員的相關(guān)誤差
訪員的特性應(yīng)從三方面思考:
一、 有些訪員會(huì)比其它人更勝任問答的過程
二、 某些特定的訪員特性可能會(huì)改變題目的意義或脈絡(luò)
三、 訪員特性可能會(huì)影響訪員與受訪者關(guān)系的質(zhì)量
訪員特性及其表現(xiàn)
* 一個(gè)良好的訪員,有些特性是必要的
* 起碼要有良好的讀寫能力
* 具專業(yè)領(lǐng)域知識(shí)的訪員未必是最恰當(dāng),因一個(gè)普通的訪員,不必去維持專業(yè)之能的假象,可以盡量去做非引導(dǎo)性的追問,直到答案清楚為止。
訪員特性及訪問脈絡(luò)
* 訪員特性:年齡、性別、種族、教育程度、社會(huì)階級(jí)、族群及宗教背景
* 較有影響者:宗教信仰或族群,種族
訪員與受訪者的關(guān)系
* 比受訪者社會(huì)地位與教育程度較高的訪員,會(huì)有較好的報(bào)告品質(zhì)。
* Weiss的研究中,兩項(xiàng)重要的結(jié)論:
一、 人口特征的相似性,對(duì)測(cè)量質(zhì)量并非是一個(gè)正數(shù)。
二、 人際關(guān)系與人際吸引也未必是正數(shù),對(duì)調(diào)查資料反而可能會(huì)有負(fù)面的影響。
訪員的年齡
目前數(shù)據(jù)顯示,沒有影響。
訪員的性別
* 普遍對(duì)女性訪員的評(píng)價(jià)較高(但目前男性訪員較少,會(huì)影響統(tǒng)計(jì))。
* 但無證據(jù)顯示女性訪員的報(bào)告較好或資料較不一樣。
結(jié) 論
訪員特性和訪員相關(guān)誤差之間的關(guān)系,很少能建立起來。但是,如果調(diào)查的主題是直接和訪員的某些特性是相關(guān)的,可能會(huì)導(dǎo)致受訪者會(huì)顧慮到某些答案的選項(xiàng)對(duì)訪員會(huì)是一種直接的侮辱,侵犯或令之尷尬。那研究者就要認(rèn)真的考慮要控制這些特性。
關(guān)心如何減低訪員的相關(guān)誤差,與其把重心放在訪員的選擇,不如將重點(diǎn)放在訪員的訓(xùn)練和督導(dǎo)上面。
訪員的訓(xùn)練
程馥慧
訓(xùn)練的選擇
所有在做第一次正式訪問之前的指導(dǎo)活動(dòng)都算是訓(xùn)練
訓(xùn)練時(shí)間的長短-和訓(xùn)練的內(nèi)容、技巧、成本有關(guān)
訓(xùn)練方式對(duì)訪問工作的影響:
1. 訪員對(duì)其工作的認(rèn)知
2. 訪員的技能
3. 訪員與受訪者的關(guān)系、受訪者對(duì)訪員的反應(yīng)
4. 所搜集數(shù)據(jù)的質(zhì)量
對(duì)訓(xùn)練訪員價(jià)值的研究
研究案例
研究對(duì)象:招募五十七名沒有專業(yè)訪問經(jīng)驗(yàn)的訪員,分別安排在四場(chǎng)訓(xùn)練小組( 為期一天、二天、五天、十天)
研究條件:訓(xùn)練前皆先給予手冊(cè)自行研讀,每場(chǎng)所教導(dǎo)的訪問技巧一致、傳遞的訊息一致,差別在訪問程序的練習(xí)、對(duì)程序背景的了解程度,隨天數(shù)增加而更廣泛
研究目標(biāo):檢視是否較長、較密集的訓(xùn)練經(jīng)驗(yàn)有其價(jià)值
訓(xùn)練在訪員對(duì)其工作認(rèn)識(shí)上的效果
研究結(jié)果:
訪員對(duì)訓(xùn)練經(jīng)驗(yàn)的感想--
*訓(xùn)練時(shí)間越長-訪員越會(huì)將訓(xùn)練評(píng)定為重要訊息來源
*訓(xùn)練時(shí)間越短-訪員越會(huì)將訪問手冊(cè)評(píng)定為重要訊息來源
訪員自覺準(zhǔn)備充分的程度--
*受訓(xùn)練最少的訪員,自己感覺準(zhǔn)備程度和他人相同
*受訓(xùn)練最少的訪員,最困擾的是如何去追問
訪員對(duì)處理事情優(yōu)先級(jí)的認(rèn)知--
*各組皆認(rèn)為得到正確、完整的答案是最優(yōu)先的原則;但接受長時(shí)間訓(xùn)練者比訓(xùn)練時(shí)間短者,將標(biāo)準(zhǔn)化的優(yōu)先程度評(píng)定的更高
*接受二天訓(xùn)練者,最不愿當(dāng)訪員
訪問技巧
可由以下的方式去了解訪員的訪問的技巧:
1. 要求訪員回答受訪者可能會(huì)問的問題
2. 和受訪者的訪談
3. 在訓(xùn)練完成后所做訪問練習(xí)的錄音記錄
受訪者對(duì)訪員的感覺
訪員對(duì)工作越熟練,訪問時(shí)就越有自信,表現(xiàn)上亦越被評(píng)為專業(yè)
訪員訓(xùn)練強(qiáng)調(diào)工作取向(避免與受訪者產(chǎn)生私人性關(guān)系,而導(dǎo)致偏差)
受訪者對(duì)訓(xùn)練時(shí)間不同的訪員(一、二、五、十天)的評(píng)分:
1. 訪員要求確切的答案
2. 訪員有杰出的工作表現(xiàn)
*評(píng)分上無顯著差異→受訪者對(duì)于訪員的行為并不敏感
訓(xùn)練對(duì)數(shù)據(jù)質(zhì)量的影響
在此研究中對(duì)于數(shù)據(jù)質(zhì)量有兩方面的測(cè)量-
(1) 層內(nèi)相關(guān)系數(shù) (測(cè)量訪員和所得數(shù)據(jù)的相關(guān)程度,即訪員標(biāo)準(zhǔn)化程度)
(2) 偏誤測(cè)量 (訪員受訓(xùn)程度和所得答案偏誤多寡的相關(guān)程度)
*在標(biāo)準(zhǔn)化方面-最標(biāo)準(zhǔn)化的是二天訓(xùn)練,一天和十天訓(xùn)練者比起二天和五天者差→十天的訓(xùn)練并不能改進(jìn)訪員標(biāo)準(zhǔn)化程度
*在偏誤改進(jìn)方面-訓(xùn)練十天者偏誤最少,一天和五天者相同→關(guān)聯(lián)性難下定論
結(jié) 論
訪員對(duì)一般訪問技巧有模擬練習(xí),才能成為可勝任的訪員。
處理人際互動(dòng):訪員訓(xùn)練時(shí)間的長短,對(duì)人際互動(dòng)上沒有很大差異
處理問答過程上:訓(xùn)練短者自覺準(zhǔn)備不充分
追問技巧上:訓(xùn)練短者在追問技巧上表現(xiàn)不佳
標(biāo)準(zhǔn)化無偏誤:以接受二天訓(xùn)練表現(xiàn)最佳
結(jié) 論(續(xù))
以此研究案例而言,接受二天訓(xùn)練的訪員,自認(rèn)為準(zhǔn)備不夠,對(duì)訪問工作的喜愛程度最低(自信心不足)。接受十天訓(xùn)練的訪員,搜集資料上比二天、五天者更不標(biāo)準(zhǔn)化,訪問質(zhì)量也較差(長時(shí)間導(dǎo)致疲乏、反效果)。
訪問訓(xùn)練最佳時(shí)間長度,應(yīng)視其小組大小、研究計(jì)劃類型的復(fù)雜度、訓(xùn)練后所接受的督導(dǎo)類型而決定。
對(duì)訪員的督導(dǎo)
調(diào)查機(jī)構(gòu)對(duì)訪員工作進(jìn)行督導(dǎo)的事項(xiàng)
1. 工作量
2. 工作時(shí)數(shù)
3. 得到的回答率(成功完成訪問的百分比)
4. 完成訪問的質(zhì)量
5. 處理訪問過程的方式
6. 與受訪者互動(dòng)情形
督導(dǎo)的信息
監(jiān)督訪員的效果之研究
督導(dǎo)效應(yīng):
訪員對(duì)工作的認(rèn)識(shí)
受訪者的效應(yīng)
訪問的技巧
所得數(shù)據(jù)的質(zhì)量
訪員對(duì)工作的認(rèn)識(shí)
究竟訪員是否會(huì)注意到他們?cè)诓煌碳?jí)的督導(dǎo)下,所收到的回饋內(nèi)容是否會(huì)有差別呢?答案是有差別的,接受第一級(jí)督導(dǎo)的訪員對(duì)督導(dǎo)回饋的評(píng)定較不重要。
訪員接受不同回饋程度,會(huì)影響他們對(duì)研究機(jī)構(gòu)所在意事項(xiàng)的認(rèn)知。
錄音對(duì)受訪者的效應(yīng)
假設(shè)1.受訪者不喜歡被錄音,錄音會(huì)對(duì)受訪經(jīng)驗(yàn)產(chǎn)生負(fù)面影響
假設(shè)2.錄音會(huì)影響訪員的行為
*從受訪者的訪談中,沒有證據(jù)顯示錄音會(huì)產(chǎn)生負(fù)面影響;唯一有顯著差異的是,受訪者認(rèn)為:接受訓(xùn)練時(shí)間短、及被錄音的訪員 表現(xiàn)較為緊張。
*錄音對(duì)于訪員質(zhì)量的控制是可行的。
對(duì)訪員技巧監(jiān)督的效應(yīng)
監(jiān)督和回饋并不能改善訪問的技巧,訪員在訓(xùn)練結(jié)束時(shí)所表現(xiàn)的能力水平就是他們的最佳狀況。
監(jiān)督僅能確認(rèn)技巧有被使用--JUST KEEP IT (NOT CHANGE IT)
對(duì)數(shù)據(jù)質(zhì)量監(jiān)督的效應(yīng)
P 值
p值(p值小于0.05)的意義:有顯著差異研究設(shè)立成立
主任在討論區(qū)中對(duì)p值的解釋:
話說在計(jì)算機(jī)的報(bào)表中常會(huì)出現(xiàn)〔p值〕這個(gè)〔統(tǒng)計(jì)考驗(yàn)量數(shù)〕,它指的是虛無假設(shè)(null hypothesis,常以H0表示)被接受(或說〔為真〕)的情況下,所得到的一個(gè)不小于此統(tǒng)計(jì)數(shù)值的機(jī)率值。若檢定結(jié)果接受虛無假設(shè)(p值>顯著水平),則推翻原本真正要檢定的研究假設(shè)(research hypothesis,常以H1表示)﹔而如果經(jīng)檢定是拒絕虛無假設(shè)的話(p值=<顯著水平),則原本的研究假設(shè)得以成立。
注:在統(tǒng)計(jì)學(xué)理上有一個(gè)叫做〔顯著水平〕(level of significance)的,在統(tǒng)計(jì)分析的報(bào)表上往往以Significance或Sign.呈現(xiàn),此意義就是研究者拒絕虛無假設(shè)得最大機(jī)率值,一般學(xué)者間約定成俗的習(xí)慣是采0.05或0.01作為假設(shè)考驗(yàn)的顯著水平值。
測(cè)量方式
(1) 層內(nèi)相關(guān)系數(shù)(rho):
訪員對(duì)數(shù)據(jù)的影響程度(某個(gè)推估值之變異量和訪員的關(guān)系程度),如果rho系數(shù)很小,那表示變異量并非由訪員所引起,此時(shí)訪員的質(zhì)量便獲得證實(shí)。
rho(層內(nèi)相關(guān)系數(shù))在三個(gè)督導(dǎo)層級(jí)分別是 0.012/0.010/0.008,且經(jīng)檢定后發(fā)現(xiàn) p值小于0.05,所以各層級(jí)間存在差異,亦即依層級(jí)的改變,訪員效應(yīng)有顯著減少現(xiàn)象這個(gè)命題是可成立的,故可得出
〔督導(dǎo)級(jí)數(shù)越高/越嚴(yán)謹(jǐn)/越細(xì)致/執(zhí)行考慮因素越多,則訪員效應(yīng)/引發(fā)對(duì)數(shù)據(jù)正確性之影響就越小,亦即rho會(huì)隨督導(dǎo)層級(jí)而逐漸改善〕
測(cè)量方式(續(xù))
(2) 偏誤測(cè)量:
訪員受訓(xùn)程度和所得答案偏誤多寡的相關(guān)程度。
密集式的問卷檢閱和訪問錄音效果對(duì)于所有訓(xùn)練類組上的影響是代表下方提及的〔t=1.0 ,第三級(jí)vs.第一,第二,p值不顯著〕可判斷在各督導(dǎo)層級(jí)間并未有明顯差異。
在〔標(biāo)準(zhǔn)分?jǐn)?shù)(不包括訓(xùn)練天數(shù)少于一天的)〕這個(gè)項(xiàng)目,可參見表下方提及的〔t=1.8 ,第三級(jí)或第一,第二,p值小于0.04 〕可判斷在各督導(dǎo)層級(jí)間有明顯差異,且是較大值表偏誤小,亦即訪員的偏誤大都來自〔接受訓(xùn)練少于一天但被錄音者──去除訓(xùn)練少于一天者為34→所有訓(xùn)練小組的20,34→20,偏誤變大〕,故可說明:若排除此類訪員,則錄音的價(jià)值在降低偏誤上是有顯著的正面影響。
結(jié) 論
督導(dǎo)能影響訪員表現(xiàn)的好壞,但不能改善訪員訪問的技巧
密集式的督導(dǎo)并不能彌補(bǔ)不當(dāng)?shù)挠?xùn)練→反效果
當(dāng)訪員對(duì)自己的技巧越有信心,越偏離標(biāo)準(zhǔn)化→隨心所欲的訪問
電話督導(dǎo)→確立標(biāo)準(zhǔn)化訪問、立即的回饋
錄音督導(dǎo)→受訪者多半不介意、對(duì)訪員影響亦不大,在面訪時(shí)錄音督導(dǎo)有其價(jià)值
在調(diào)查中如何減低訪員
相關(guān)的誤差
雷碧秀
有六個(gè)方式會(huì)影響訪問的一致性
訪員所要詢問的題目字句;
所給予訪員有關(guān)如何處理問題和答題過程的詳細(xì)指示或守則;
所給予訪員有關(guān)如何建立和維持與受訪者關(guān)系的指導(dǎo)與程序;
訪員的選擇;
訪員的訓(xùn)練;
在數(shù)據(jù)搜集過程中訪員被督導(dǎo)的方式。
題目設(shè)計(jì)
為了使題目成為可信賴的測(cè)量工具,須達(dá)到三個(gè)標(biāo)準(zhǔn)
1. 題目必須編寫完全,以便讓受訪者得以提供答案;
2. 題目對(duì)每一位受訪者代表的意義是相同的,
3. 對(duì)所有的受訪者清楚的傳達(dá)出什么樣的答案是對(duì)題目的適當(dāng)回答。
訪問的程序
四個(gè)標(biāo)準(zhǔn)原則
1. 確實(shí)按照題目字句讀題;
2. 避免間接追問不適當(dāng)?shù)拇鸢福?
3. 記錄答案時(shí)不可加入訪員自身的臆測(cè);
4. 訪員須與受訪者保持關(guān)系間的中立,不帶個(gè)人主見的看法。
訪者與受訪者間的關(guān)系
關(guān)于訪員的親切又專業(yè)的形象將是使調(diào)查結(jié)果之誤差值減至最低,Cannell列出五種訪員可以一致的標(biāo)準(zhǔn)傳達(dá)給受訪者:
1. 訪問的速度;
2. 提供受訪一個(gè)模式;
3. 無論是在訪問之前或訪問當(dāng)中,都能提供給受訪者對(duì)其期望保持一致性的指示;
4. 對(duì)所欲的行為予以模式化的強(qiáng)化;
5. 要求受訪者承諾其表現(xiàn)要在某一水平以上。
減少估計(jì)標(biāo)準(zhǔn)誤差的五種方式
總 結(jié)
標(biāo)準(zhǔn)化的調(diào)查訪問,其依賴封閉式和固定式答案的問題,它的減少誤差關(guān)鍵在于受訪者對(duì)題目有疑問時(shí),訪員該怎么做才對(duì)。訪員的特征與行為將影響調(diào)查數(shù)據(jù)的質(zhì)量,在這里所提出可供研究生所用的策略,以便減低訪員相關(guān)的誤差。
END
標(biāo)準(zhǔn)化的調(diào)查訪問(ppt)
[下載聲明]
1.本站的所有資料均為資料作者提供和網(wǎng)友推薦收集整理而來,僅供學(xué)習(xí)和研究交流使用。如有侵犯到您版權(quán)的,請(qǐng)來電指出,本站將立即改正。電話:010-82593357。
2、訪問管理資源網(wǎng)的用戶必須明白,本站對(duì)提供下載的學(xué)習(xí)資料等不擁有任何權(quán)利,版權(quán)歸該下載資源的合法擁有者所有。
3、本站保證站內(nèi)提供的所有可下載資源都是按“原樣”提供,本站未做過任何改動(dòng);但本網(wǎng)站不保證本站提供的下載資源的準(zhǔn)確性、安全性和完整性;同時(shí)本網(wǎng)站也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的損失或傷害。
4、未經(jīng)本網(wǎng)站的明確許可,任何人不得大量鏈接本站下載資源;不得復(fù)制或仿造本網(wǎng)站。本網(wǎng)站對(duì)其自行開發(fā)的或和他人共同開發(fā)的所有內(nèi)容、技術(shù)手段和服務(wù)擁有全部知識(shí)產(chǎn)權(quán),任何人不得侵害或破壞,也不得擅自使用。
我要上傳資料,請(qǐng)點(diǎn)我!
管理工具分類
ISO認(rèn)證課程講義管理表格合同大全法規(guī)條例營銷資料方案報(bào)告說明標(biāo)準(zhǔn)管理戰(zhàn)略商業(yè)計(jì)劃書市場(chǎng)分析戰(zhàn)略經(jīng)營策劃方案培訓(xùn)講義企業(yè)上市采購物流電子商務(wù)質(zhì)量管理企業(yè)名錄生產(chǎn)管理金融知識(shí)電子書客戶管理企業(yè)文化報(bào)告論文項(xiàng)目管理財(cái)務(wù)資料固定資產(chǎn)人力資源管理制度工作分析績效考核資料面試招聘人才測(cè)評(píng)崗位管理職業(yè)規(guī)劃KPI績效指標(biāo)勞資關(guān)系薪酬激勵(lì)人力資源案例人事表格考勤管理人事制度薪資表格薪資制度招聘面試表格崗位分析員工管理薪酬管理績效管理入職指引薪酬設(shè)計(jì)績效管理績效管理培訓(xùn)績效管理方案平衡計(jì)分卡績效評(píng)估績效考核表格人力資源規(guī)劃安全管理制度經(jīng)營管理制度組織機(jī)構(gòu)管理辦公總務(wù)管理財(cái)務(wù)管理制度質(zhì)量管理制度會(huì)計(jì)管理制度代理連鎖制度銷售管理制度倉庫管理制度CI管理制度廣告策劃制度工程管理制度采購管理制度生產(chǎn)管理制度進(jìn)出口制度考勤管理制度人事管理制度員工福利制度咨詢?cè)\斷制度信息管理制度員工培訓(xùn)制度辦公室制度人力資源管理企業(yè)培訓(xùn)績效考核其它
精品推薦
下載排行
- 1社會(huì)保障基礎(chǔ)知識(shí)(ppt) 16695
- 2安全生產(chǎn)事故案例分析(ppt 16695
- 3行政專員崗位職責(zé) 16695
- 4品管部崗位職責(zé)與任職要求 16695
- 5員工守則 16695
- 6軟件驗(yàn)收?qǐng)?bào)告 16695
- 7問卷調(diào)查表(范例) 16695
- 8工資發(fā)放明細(xì)表 16695
- 9文件簽收單 16695
- 10跟我學(xué)禮儀 16695