3.3.3 Kostnad

Undersökningar är inte gratis, och detta är en verklig begränsning.

Hittills har jag kortfattat den totala ramen undersökning fel, som själv är föremål för boken längd behandlingar (Weisberg 2005; Groves et al. 2009) . Även denna ram är omfattande, orsakar det vanligen forskare att utelämna en viktig faktor: kostnaden. Även kostnads ​​som kan mätas genom antingen tid eller pengar är sällan explicit diskuteras av akademiska forskare, är det en verklig begränsning som vi ignorerar på egen risk. I själva verket är orsaken forskare intervju prover av människor snarare än hela befolkningen för att spara pengar. Således är kostnaden grundläggande för processen för undersökning forskning (Groves 2004) . En målmedveten hängivenhet till att minimera fel när fullständigt ignorerar kostnader är inte alltid i vårt bästa intresse.

Begränsningarna i en besatthet med att minska fel illustreras av banbrytande studie av Scott Keeter och kollegor (2000) om effekterna av dyra fältverksamhet för att minska bortfallet i telefonundersökningar. Keeter och kollegor körde två samtidiga undersökningar, dels med "Standard" förfaranden och en med hjälp av "rigorösa" förfaranden. Även om "rigorösa" förfaranden gjorde producera en lägre bortfall, uppskattningar från båda proverna var i stort sett densamma. Men de "rigorösa" förfaranden kostar ungefär dubbelt så mycket och tog 8 gånger så lång tid. Är vi bättre med 2 rimliga undersökningar eller en ren undersökning? Vad sägs om 10 rimliga undersökningar eller en ren undersökning? Vad sägs om 100 rimliga undersökningar eller en ren undersökning? Vid något tillfälle kostnadsfördelar skall uppväga vaga, ospecifika oro kvalitet.

Många av de möjligheter som den digitala eran är inte om att skapa uppskattningar som uppenbarligen har lägre fel. Snarare dessa möjligheter handlar om att skapa uppskattningar billigare och snabbare, men kanske med fel som för närvarande högre eller svårare att mäta. Eftersom många av exemplen i detta kapitel kommer att visa, forskare som insisterar på en målmedveten besatthet minimera fel på bekostnad av andra dimensioner av kvalitet kommer att gå miste om spännande möjligheter. Mot denna bakgrund om den totala ramen undersökning fel, kommer vi nu att vända sig till tre huvudområden i tredje era av opinionsundersökningar: nya ansatser för att representation (avsnitt 3.4), nya metoder för att mätningen (avsnitt 3.5), och nya strategier för att kombinera undersökningar med digitala spår (avsnitt 3.6).