3.3.2 Medición

A medición trata de inferir o que os seus entrevistados pensan e fan do que din.

Ademais dos problemas de representación, o cadro de erro da enquisa mostra que a segunda gran fonte de erros é a medición : como podemos facer inferencias das respostas que responden ás nosas preguntas. Resulta que as respostas que recibimos e, polo tanto, as inferencias que facemos, poden depender de xeito crítico e, en ocasións sorprendente, exactamente como o pedimos. Quizais nada ilustre este punto importante mellor que unha broma no maravilloso libro Preguntas por Norman Bradburn, Seymour Sudman e Brian Wansink (2004) :

Dous padres, un dominicano e un xesuíta, están discutindo si é un pecado para fumar e orar á vez. Despois de non conseguir chegar a unha conclusión, cada un vai a consultar o seu respectivo superior. O dominicano di: "O que fixo a súa opinión superior?"

O xesuíta responde: "El dixo que estaba ben."

"Isto é divertido" o dominicano responde: "O meu supervisor dixo que era un pecado."

O xesuíta dixo: "O que preguntar a el?" O Dominicana responde: "Pregunteille se estaba ben a fumar mentres oraba." "Ah", dixo o xesuíta, "Eu preguntei se era Aceptar para rezar, mentres fumar."

Máis aló deste broma específico, os investigadores encuestados documentaron moitas formas sistemáticas que o que aprendeu depende de como lle pregunte. De feito, o tema na raíz desta broma ten un nome na comunidade investigadora de enquisas: efectos de forma de pregunta (Kalton and Schuman 1982) . Para ver como os efectos da forma de pregunta poden afectar estratexias reais, considere estas dúas preguntas de busca semellantes:

  • "Canto de acordo coa seguinte afirmación: Individuos son máis culpables do que as condicións sociais para o crime e ilegalidade neste país."
  • "Canto de acordo coa seguinte afirmación: As condicións sociais son máis culpables do que os individuos para o crime e ilegalidade neste país."

Aínda que ambas cuestións parecen medir o mesmo, producían resultados diferentes nun experimento de enquisa real (Schuman and Presser 1996) . Cando se lle preguntou dun xeito, preto do 60% dos entrevistados informou que os individuos eran máis culpables do delito, pero cando se lle pregunte por outro lado, preto do 60% informaron que as condicións sociais eran máis culpables (figura 3.3). Noutras palabras, a pequena diferenza entre estas dúas preguntas podería levar aos investigadores a unha conclusión diferente.

Figura 3.3: Resultados dun experimento de enquisas que mostra que os investigadores poden obter respostas diferentes dependendo exactamente de como fixeron a pregunta. A maioría dos entrevistados acordou que os individuos son máis culpables que as condicións sociais para o crime e a ilegalidade. E a maioría dos entrevistados aceptou o contrario: que as condicións sociais son máis responsables que as persoas. Adaptado de Schuman e Presser (1996), táboa 8.1.

Figura 3.3: Resultados dun experimento de enquisas que mostra que os investigadores poden obter respostas diferentes dependendo exactamente de como fixeron a pregunta. A maioría dos entrevistados acordou que os individuos son máis culpables que as condicións sociais para o crime e a ilegalidade. E a maioría dos entrevistados acordou o contrario: que as condicións sociais son máis responsables que as persoas. Adaptado de Schuman and Presser (1996) , táboa 8.1.

Ademais da estrutura da pregunta, os entrevistados tamén poden dar respostas diferentes, dependendo das palabras específicas utilizadas. Por exemplo, para medir opinións sobre as prioridades gobernamentais, os enquisados ​​foron lidos o seguinte aviso:

"Estamos confrontados con moitos problemas neste país, ningún dos cales poden ser resoltos facilmente ou barata. Vou citar algúns destes problemas, e para cada un que me gustaría que me diga se pensas que está gastan moito diñeiro con iso, moi pouco diñeiro, ou sobre a cantidade correcta. "

A continuación, preguntamos á metade dos entrevistados sobre o "benestar" e se preguntaban á metade sobre "axuda aos pobres". Aínda que estes puidesen parecer dúas frases diferentes para o mesmo, provocaron resultados moi distintos (figura 3.4); Os estadounidenses afirman ser moito máis solidarios coa "axuda aos pobres" que o "benestar" (Smith 1987; Rasinski 1989; Huber and Paris 2013) .

Figura 3.4: Os resultados obtidos por unha enquisa demostran que os enquisados ​​son moito máis propensos á axuda aos pobres que ao benestar. Este é un exemplo dun efecto de redacción de preguntas polo que as respostas que reciben os investigadores dependen exactamente de que palabras usan nas súas preguntas. Adaptado de Huber e París (2013), táboa A1.

Figura 3.4: Os resultados obtidos por unha enquisa realizan experimentos que mostran que os enquisados ​​son moito máis propensos á "axuda aos pobres" que ao "benestar". Este é un exemplo dun efecto de redacción de preguntas polo que as respostas que reciben os investigadores dependen exactamente de que palabras usan en as súas preguntas. Adaptado de Huber and Paris (2013) , táboa A1.

Como aparecen estes exemplos sobre os efectos da forma de pregunta e os efectos de redacción, as respostas que reciben os investigadores poden verse influenciadas pola forma en que fan as súas preguntas. Estes exemplos ás veces levan aos investigadores a preguntarse sobre a forma "correcta" de facer as preguntas da súa enquisa. Mentres creo que hai algunhas formas claramente equivocadas de facer unha pregunta, non creo que sempre haxa un camiño correcto. É dicir, non é obviamente mellor preguntar sobre "benestar" ou "axuda aos pobres"; Estas son dúas cuestións distintas que miden dúas cousas distintas sobre as actitudes dos entrevistados. Estes exemplos ás veces tamén levan aos investigadores a concluír que as enquisas non se deben empregar. Desafortunadamente, por veces non hai opción. En vez diso, creo que a lección correcta a partir destes exemplos é que deberiamos construír as nosas preguntas con atención e non debemos aceptar respostas de xeito crítico.

Máis concretamente, isto significa que se está analizando os datos de enquisas recollidos por outra persoa, asegúrese de ler o cuestionario real. E se está creando o seu propio cuestionario, teño catro suxestións. En primeiro lugar, suxiro que lea máis sobre o deseño do cuestionario (por exemplo, Bradburn, Sudman, and Wansink (2004) ); hai moito máis do que puiden describir aquí. En segundo lugar, suxiro que copy-word para palabras-preguntas de enquisas de alta calidade. Por exemplo, se queres preguntar aos entrevistados sobre a súa raza / etnia, podes copiar as preguntas que se usan nas enquisas gobernamentais a gran escala, como o censo. Aínda que isto poida parecer plaxio, foméntase a copia de preguntas na investigación de enquisas (sempre que cite a enquisa orixinal). Se copias preguntas de enquisas de alta calidade, podes estar seguro de que foron probadas e podes comparar as respostas da túa enquisa coas respostas dalgunhas outras enquisas. En terceiro lugar, se pensas que o teu cuestionario pode conter efectos de formulación de preguntas importantes ou de forma de pregunta, podes executar un experimento de enquisas onde a metade dos entrevistados reciben unha versión da pregunta e a metade recibe a outra versión (Krosnick 2011) . Para rematar, suxeríoche que probes as probas con algunhas persoas da túa cadea de poboación; Os investigadores encuestados chaman a pre-proba deste proceso (Presser et al. 2004) . A miña experiencia é que a ensaio pre-proba é moi útil.