3.3.2 Măsurarea

Măsurarea se face despre concluzii din ceea ce spun respondenții la ce cred respondenții și de a face.

A doua categorie a cadrului total de eroare de sondaj este de măsurare; se ocupă cu modul în care putem face deducții din răspunsurile pe care respondenții dau la întrebările noastre. Se dovedește că răspunsurile pe care le primim, și, prin urmare, consecințele pe care le facem, poate depinde moduri pe critic și în uneori surprinzătoare exact cum o cerem. Poate că nimic nu ilustrează acest punct important mai bine decât o glumă în minunata carte de Norman Adresarea de întrebări Bradburn, Seymour Sudman, și Brian Wansink (2004) :

Doi preoți, dominican și un iezuit, se discută dacă acesta este un păcat să fumeze și să se roage în același timp. Dupa ce nu a ajunge la o concluzie, fiecare se stinge să se consulte superiorul ierarhic respectiv. Dominican spune: ": Ce a spus superiorul?"

Iezuitul răspunde: "El a spus că a fost bine."

"E amuzant", răspunde dominican, "supraveghetorul meu a spus că a fost un păcat."

Iezuitul a spus: "Ce i-ai întrebat?", Răspunde Dominican, "l-am întrebat dacă era bine să fumeze în timp ce se ruga." "Oh", a spus iezuitul, "l-am întrebat dacă era în regulă să se roage în timp ce fumatul."

Există mai multe exemple de anomalii, cum ar fi cea experimentată de cei doi preoți. De fapt, chiar problema la rădăcina acestei glumă are un nume în comunitatea de cercetare sondaj: efecte de formă întrebare (Kalton and Schuman 1982) . Pentru a vedea modul în care efectele de formă întrebare ar putea avea impact anchete reale, ia în considerare aceste două întrebări foarte asemănătoare sondajului cu aspect:

  • "Cât de mult sunteți de acord cu următoarea afirmație: Indivizii sunt mai vinovați decât condițiile sociale pentru crimă și fărădelege în această țară."
  • "Cât de mult sunteți de acord cu următoarea declarație: Condițiile sociale sunt mai vinovați decât indivizii pentru crimă și fărădelege în această țară."

Cu toate că ambele întrebări par să măsoare același lucru, au produs rezultate diferite într - un experiment sondaj reale (Schuman and Presser 1996) . Când a fost întrebat într - un fel, aproximativ 60% dintre respondenți au raportat că indivizii au fost mai vina pentru crima, dar atunci când a cerut un alt mod de aproximativ 60% au raportat că condițiile sociale au fost mai vina (Figura 3.2). Cu alte cuvinte, diferența mică dintre cele două întrebări ar putea conduce cercetători la o concluzie diferită.

Figura 3.2: Rezultatele dintr-un experiment de studiu, Tabelul 8.1 (Schuman și Presser 1996, Tabelul 8.1). Cercetatorii pot primi raspunsuri diferite, in functie de exact modul în care a pus întrebarea. Acesta este un exemplu de efect sub formă de întrebare (Kalton și Schuman 1982).

Figura 3.2: Rezultatele dintr - un experiment de studiu (Schuman and Presser 1996, Table 8.1) . Cercetatorii pot primi raspunsuri diferite, in functie de exact modul în care a pus întrebarea. Acesta este un exemplu de efect de formă întrebare (Kalton and Schuman 1982) .

În plus față de structura întrebării, respondenții, de asemenea, pot da răspunsuri diferite, pe baza cuvintelor specifice utilizate. De exemplu, pentru a măsura opinii prioritățile guvernamentale, respondenții au citit următorul prompt:

"Ne confruntăm cu multe probleme în această țară, niciunul dintre acestea nu pot fi rezolvate cu ușurință sau cu costuri reduse. Voi menționa câteva dintre aceste probleme, iar pentru fiecare aș vrea să-mi spui dacă crezi că cheltuim prea mulți bani pe el, prea puțini bani, sau cu privire la suma corectă. "

". Ajutor pentru cei săraci" În continuare, jumătate dintre respondenți au fost întrebați despre "bunăstare" și jumătate au fost întrebați despre În timp ce acestea s-ar putea părea ca două expresii diferite pentru același lucru, ei au provocat rezultate foarte diferite (Figura 3.3); Americani raport fiind mult mai de sustinere a "ajutor pentru săraci" decât "bunăstarea" (Smith 1987; Rasinski 1989; Huber and Paris 2013) , (Smith 1987; Rasinski 1989; Huber and Paris 2013) . In timp ce cercetatorii considera sondaj aceste efecte de formulare pentru a fi anomalii, acestea ar putea lua în considerare, de asemenea, să le rezultatele cercetării. Asta este, am învățat ceva despre opinia publică din acest rezultat.

Figura 3.3: Rezultatele de la Huber și Paris (2013). Respondenți sunt mult mai de susținere a ajutoarelor pentru săraci decât bunăstarea. Acesta este un exemplu de efect de formulare întrebare prin care răspunsurile care primesc cercetători depind exact care cuvintele pe care le utilizează în întrebările lor.

Figura 3.3: Rezultatele de la Huber and Paris (2013) . Respondenți sunt mult mai de sustinere a "ajutor pentru săraci" decât "bunăstare". Acesta este un exemplu de efect de întrebare formulare prin care răspunsurile care primesc cercetători depind exact care cuvintele pe care le utilizează în întrebările lor.

Dat fiind că aceste exemple cu privire la efectele de formă de întrebare și efectele de formulare arată, răspunsurile care primesc cercetătorii pot fi influențate în moduri subtile, bazate pe modul în care acestea își pune întrebări. Acest lucru nu înseamnă că nu ar trebui să fie utilizate anchete; de multe ori nu există nici o alegere. Mai degrabă, exemplele ilustrează faptul că ar trebui să ne construim cu atenție întrebările noastre și nu ar trebui să accepte răspunsurile necritic.

Cele mai concret, acest lucru înseamnă că, dacă analiza datele sondajului colectate de către altcineva, asigurați-vă că ați citit chestionarul real. Și, dacă creați propriul chestionar, am trei sugestii. În primul rând, vă sugerez să citiți mai multe despre design - chestionar ( de exemplu, Bradburn, Sudman, and Wansink (2004) ); există mai mult decât am fost în stare să descrie aici. În al doilea rând, vă sugerez să copiați cuvânt pentru cuvânt-întrebări din sondaje de înaltă calitate. Cu toate că acest lucru sună ca plagiat, întrebări de copiere este încurajată în cercetarea anchetă (atâta timp cât citează sondajul original). Dacă copiați întrebări din sondaje de înaltă calitate, puteți fi siguri că acestea au fost testate și puteți compara răspunsurile la sondaj la răspunsurile de la un alt studiu. În cele din urmă, vă sugerez să pre-testați întrebările cu unele persoane din populatia cadrului (Presser et al. 2004) ; experiența mea este că pre-testare dezvăluie întotdeauna probleme surprinzătoare.