3.3.2 Measurement

Ang pagsukod kabahin sa pagsabut sa unsay gihunahuna ug gibuhat sa imong mga gisulti gikan sa unsay ilang gisulti.

Gawas pa sa mga problema sa representasyon, ang total nga kasayuran sa balak nga sayop nagpakita nga ang ikaduha nga mayor nga tinubdan sa mga sayup mao ang pagsukod : kung giunsa nato paghimo ang mga pagsabut gikan sa mga tubag nga gihatag sa mga respondente sa atong mga pangutana. Kini nga mga tubag nga atong nadawat, ug busa ang mga kasayuran nga atong nahimo, masaligon nga masaligon-ug sa usahay makapakurat nga mga pamaagi-sa eksakto kon unsa ang atong gipangayo. Tingali walay nag-ilustrar niining importante nga punto nga mas maayo kay sa usa ka joke sa nindot nga libro nga Nangutana nga mga Pangutana ni Norman Bradburn, Seymour Sudman, ug Brian Wansink (2004) :

Duha ka mga pari, usa ka Dominican ug usa ka Jesuit, ang paghisgot kon kini mao ang usa ka sala nga manigarilyo ug mag-ampo sa mao nga panahon. Human mapakyas sa pagkab-ot sa usa ka konklusyon, ang matag usa moadto sa sa pagsusi sa iyang tagsa-tagsa nga labaw. Ang Dominican nag-ingon, "Unsa ang gibuhat sa inyong labaw nga moingon?"

Ang Jesuit mitubag, "Siya miingon nga kini mao ang matarong."

"Mao kana funny" sa Dominican mitubag, "Ang akong supervisor miingon nga kini mao ang usa ka sala."

Ang Jesuit miingon, "Unsa man ang mangutana ninyo siya?" Ang Dominican motubag, "nangutana ko kaniya kon kini ra manigarilyo samtang nag-ampo." "Oh" miingon ang Heswita, "nangutana ko kon OK ra sa pag-ampo samtang ang pagpanigarilyo."

Gawas niining piho nga joke, ang mga tigdukiduki sa surbey nakarekord sa daghang sistematikong mga paagi nga ang imong nakat-onan nagadepende sa imong pangayoon. Sa pagkatinuod, ang isyu mismo sa joke adunay usa ka pangalan sa survey research community: pangutana nga porma nga epekto (Kalton and Schuman 1982) . Aron mahibal-an kon sa unsang paagi ang pangutana nga epekto sa porma mahimong maka-epekto sa tinuod nga mga survey, tagda kining duha ka susama nga mga pananglitan nga mga pangutana sa survey:

  • "Unsa ka dako ang mouyon ka sa mosunod nga pamahayag: indibidwal mas ang mabasol kay sa sosyal nga mga kahimtang alang sa krimen ug kalapasan sa niini nga nasud."
  • "Sa unsang paagi nga sa daghan nga mouyon kaninyo uban sa mga mosunod nga pamahayag: Social kahimtang sa mga labaw pa sa mabasol kay sa mga indibidwal alang sa krimen ug kalapasan sa niini nga nasud."

Bisan tuod ang duha nga mga pangutana daw sa pagsukod sa sama nga butang, sila naghimo sa nagkalainlain nga mga resulta sa usa ka tinuod nga eksperimento sa pagsusi (Schuman and Presser 1996) . Sa gipangutana sa usa ka paagi, mga 60% sa mga respondent nagtahu nga ang mga indibidwal labaw pa nga mabasol sa krimen, apan sa dihang gipangutana sa laing paagi, mga 60% ang nagtahu nga ang mga kondisyon sa katilingban mas hinungdanon (numero 3.3). Sa laing pagkasulti, ang gamay nga kalainan tali niining duha ka mga pangutana mahimong modala sa mga tigdukiduki sa lain nga konklusyon.

Figure 3.3: Mga resulta gikan sa usa ka eksperimento sa surbey nga nagpakita nga ang mga tigdukiduki mahimo nga magkalainlain nga mga tubag depende kung unsa gayud ang ilang gipangutana. Ang kadaghanan sa mga gisaligan miuyon nga ang mga indibidwal labi ka mabasol kaysa kahimtang sa katilingban alang sa krimen ug kalapasan. Ug kadaghanan sa mga gisaligan miuyon sa kasukwahi: nga ang kahimtang sa katilingban mas responsable kay sa indibidwal. Gikuha gikan sa Schuman ug Presser (1996), lamesa 8.1.

Figure 3.3: Mga resulta gikan sa usa ka eksperimento sa surbey nga nagpakita nga ang mga tigdukiduki mahimo nga magkalainlain nga mga tubag depende kung unsa gayud ang ilang gipangutana. Ang kadaghanan sa mga gisaligan miuyon nga ang mga indibidwal labi ka mabasol kaysa kahimtang sa katilingban alang sa krimen ug kalapasan. Ug kadaghanan sa mga gisaligan miuyon sa kasukwahi: nga ang kahimtang sa katilingban mas responsable kay sa indibidwal. Gikuha gikan sa Schuman and Presser (1996) , lamesa 8.1.

Gawas pa sa istruktura sa pangutana, ang mga respondent mahimo usab nga maghatag sa nagkalainlain nga mga tubag, depende sa espesipikong mga pulong nga gigamit. Pananglitan, aron masusi ang mga opinyon bahin sa mga prayoridad sa gobyerno, ang mga gisurbi gibasa ang mosunod:

"Kita nag-atubang sa daghang mga problema sa niini nga nasud, walay bisan kinsa nga mahimong masulbad dali o inexpensively. Ko sa paghingalan sa pipila sa mga problema, ug alang sa matag usa nga gusto ko kaninyo aron sa pagsulti kanako kon sa imong hunahuna kita sa paggahin usab sa daghan nga salapi sa ibabaw niini, gamay kaayo nga salapi, o mahitungod sa husto nga kantidad. "

Dugang pa, ang katunga sa mga gipangutana gipangutana mahitungod sa "kaayohan" ug ang katunga gipangutana mahitungod sa "tabang alang sa mga kabus." Samtang kini daw sama sa duha ka nagkalainlain nga hugpong sa mga pulong alang sa samang butang, sila adunay lainlain nga resulta (numero 3.4); Ang mga Amerikano nagreport nga mas suportado sa "tabang ngadto sa mga kabus" kay sa "kaayohan" (Smith 1987; Rasinski 1989; Huber and Paris 2013) .

Figure 3.4: Mga resulta gikan sa usa ka eksperimento sa surbey nga nagpakita nga ang mga respondent mas suportado sa tabang ngadto sa mga kabus kaysa sa kaayohan. Kini usa ka pananglitan sa usa ka pangutana nga pulong sa epekto kung diin ang mga tubag nga nadawat sa mga tigdukiduki nagdepende sa eksakto nga mga pulong nga ilang gigamit sa ilang mga pangutana. Gikuha gikan sa Huber ug Paris (2013), lamesa A1.

Figure 3.4: Mga resulta gikan sa mga eksperimento sa surbey nga nagpakita nga ang mga respondent mas suportado sa "tabang ngadto sa mga kabus" kay sa "kaayohan." Kini usa ka pananglitan sa usa ka pangutana nga pulong nga epekto diin ang mga tubag nga nadawat sa mga tigdukiduki nagdepende gayud sa mga pulong nga ilang gigamit sa ang ilang mga pangutana. Gikuha gikan sa Huber and Paris (2013) , lamesa A1.

Samtang kini nga mga panig-ingnan mahitungod sa mga porma sa mga pangutana nga porma sa mga epekto ug mga pulong sa mga pulong nagpakita, ang mga tubag nga nadawat sa mga tigdukiduki mahimo nga maimpluwensya sa paagi nga sila mangutana sa ilang Kini nga mga pananglitan usahay magdala sa mga tigdukiduki sa paghunahuna mahitungod sa "husto" nga paagi aron sa pagpangutana sa ilang mga pangutana sa surbi Samtang nagtuo ko nga adunay pipila ka klaro nga sayop nga mga paagi sa pagpangutana, wala ko maghunahuna nga adunay usa ra ka husto nga paagi. Nga mao, dili mas maayo nga mangutana mahitungod sa "kaayohan" o "tabang alang sa mga kabus"; kini duha ka lainlaing mga pangutana nga nagsukod sa duha ka nagkalainlain nga mga butang mahitungod sa mga pangutana sa mga tubag. Usahay kini nga mga pananglitan magdala sa mga tigdukiduki sa pagtapos nga ang mga survey dili angay gamiton. Ikasubo, usahay walay kapilian. Hinuon, sa akong hunahuna ang husto nga pagtulon-an nga makuha gikan niini nga mga panig-ingnan mao nga kinahanglan natong tukuron ang atong mga pangutana nga maampingon ug dili kita angay nga modawat sa mga tubag nga walay pagdaut.

Labaw sa konkreto, kini nagpasabot nga kung imong pag-analisar ang datos sa survey nga nakolekta sa laing tawo, siguroha nga imong nabasa ang aktwal nga pangutana. Ug kon ikaw nagmugna sa imong kaugalingon nga mga pangutana, ako adunay upat ka sugyot. Una, nagsugyot ako nga magbasa ka og dugang mahitungod sa design questionnaire (pananglitan, Bradburn, Sudman, and Wansink (2004) ); adunay labaw pa niini kay sa akong gihulagway dinhi. Ikaduha, akong gisugyot nga ikaw nga kopya-pulong alang sa pulong-mga pangutana gikan sa taas nga kalidad nga surbey. Pananglitan, kon gusto nimo nga pangutan-on ang mga mitubag sa ilang lahi / etnisidad, mahimo nimong kopyahon ang mga pangutana nga gigamit sa mga dagkong survey sa gobyerno, sama sa sensus. Bisan kini daw sama sa plagiarism, ang mga pangutana sa pagkopya giawhag diha sa pagsiksik sa survey (basta imong gihunahuna ang orihinal nga survey). Kon imong kopyahon ang mga pangutana gikan sa mga tag-as nga mga survey, makaseguro ka nga sila gisulayan, ug mahimo nimo itandi ang mga tubag sa imong survey sa mga tubag gikan sa ubang mga survey. Ikatulo, kung sa imong hunahuna ang imong questionnaire mahimo nga adunay importante nga pangutana sa mga pulong nga mga epekto o mga pangutana nga porma nga mga epekto, mahimo ka magpadagan sa usa ka eksperimento sa pagtuon diin ang katunga sa mga respondent nakadawat sa usa ka bersyon sa pangutana ug ang katunga nakadawat sa laing bersyon (Krosnick 2011) . Sa katapusan, akong gisugyot nga ikaw piloto-sulayi ang imong mga pangutana uban sa pipila ka mga tawo gikan sa imong populasyon; Ang survey nga tigdukiduki nagtawag niini nga proseso nga pre-testing (Presser et al. 2004) . Ang akong kasinatian mao nga ang pre-testing sa surbi makatabang kaayo.