3.5.2 Уики проучвания

Уики проучвания дават възможност на нови хибриди на затворени и отворени въпроси.

В допълнение към задаването на въпроси в по-естествено време и в по-естествен контекст, новите технологии също ни позволяват да променим формата на въпросите. Повечето въпроси от проучването са затворени, като респондентите избират от фиксиран набор от възможности, написани от изследователи. Това е процес, който един изтъкнат изследовател на изследването нарича "поставяне на думи в устата на хората". Например, тук е затворен въпросът за проучването:

"Този следващ въпрос е свързан с работата. Искате ли да погледнете тази карта и да ми кажете кое от изброените по -горе неща бихте предпочели по време на работа?

  1. Висок доход
  2. Няма опасност да бъде уволнен
  3. Работното време е кратко, много свободно време
  4. Шансове за напредък
  5. Работата е важна и дава усещане за постижение. "

Но това ли са единствените възможни отговори? Могат ли изследователите да изгубят нещо важно, като ограничат отговорите на тези пет? Алтернативата на затворените въпроси е отворен въпрос за проучване. Ето един въпрос, зададен в отворена форма:

"Това следващия въпрос е относно предмета на работа. за различни неща в работа Хората изглеждат. Какво най-много бихте предпочели в работа? "

Въпреки че тези два въпроса изглеждат сходни, изследването на Хауърд Шуман и Стенли Прайър (1979) разкрива, че те могат да доведат до много различни резултати: близо 60% от отговорите на отворения въпрос не са включени в петте отговора, създадени от изследователите фигура 3.9).

Фигура 3.9: Резултатите от експеримент, показващ, че отговорите могат да зависят от това дали въпросът е зададен в затворена или отворена форма. Адаптирано от Schuman и Presser (1979), таблица 1.

Фигура 3.9: Резултатите от експеримент, показващ, че отговорите могат да зависят от това дали въпросът е зададен в затворена или отворена форма. Адаптирано от Schuman and Presser (1979) , таблица 1.

Въпреки че отворените и затворените въпроси могат да донесат доста различна информация и двете бяха популярни в ранните дни на изследването, затворените въпроси дойдоха да доминират на полето. Това господство не се дължи на факта, че затворените въпроси са доказали, че осигуряват по-добро измерване, а по-скоро защото те са много по-лесни за използване; процесът на анализиране на отворените въпроси е податлив на грешки и скъпо. Преминаването от отворените въпроси е жалко, защото точно информацията, която изследователите не са знаели преди време, може да бъде най-ценната.

Преходът от изследванията, адресирани към хора към компютри, обаче, предполага нов начин за излизане от този стар проблем. Ами ако сега имаме въпроси, които съчетават най-добрите черти на отворените и затворените въпроси? Тоест, какво би станало, ако можехме да направим проучване, че и двете са отворени за нова информация и произвеждат лесни за анализ отговори? Точно това се опитвахме да създадем с Карин Леви и аз (2015) .

По-конкретно, с Карен и аз смятахме, че уебсайтовете, които събират и обработват генерирано от потребителите съдържание, могат да бъдат в състояние да информират за разработването на нови видове изследвания. Ние бяхме особено вдъхновени от Уикипедия - чудесен пример за отворена, динамична система, задвижвана от съдържание, генерирано от потребители - затова нарекохме новото ни проучване за уики . Точно както Wikipedia развива с времето на базата на идеите на участниците в нея, ние си представи такова проучване, което се развива с течение на времето се основава на идеите на участниците в нея. Карън и аз разработихме три свойства, които трябва да удовлетворяват изследванията на уики: те трябва да са алчни, съвместни и адаптивни. След това, с екип от уеб програмисти, създадохме уебсайт, който може да стартира wiki surveys_: www.allourideas.org .

Процесът на събиране на данни в проучване на wiki е илюстриран от проект, който направихме с кабинета на кмета на Ню Йорк, за да интегрираме идеите на жителите в плана за устойчивост на планетата в Ню Йорк PlaNYC 2030. За да започне този процес, кметството е съставило списък от 25 идеи, основаващи се на предишното им разпространение (напр. "Изисквайте всички големи сгради да направят някои подобрения на енергийната ефективност" и "Научете децата за зелените въпроси като част от учебната програма"). Използвайки тези 25 идеи като семена, Кметството постави въпроса "Коя според вас е по-добра идея за създаване на по-зелен, по-голям Ню Йорк?" На респондентите бяха представени два идеи (напр. "Отвори училищата в целия град като обществени детски площадки "и" Увеличаване на целевите насаждения на дървета в квартали с високи нива на астма ") и бяха помолени да избират между тях (фигура 3.10). След избора респондентите незабавно бяха представени с още една случайно избрана двойка идеи. Те можаха да продължат да дават информация за своите предпочитания толкова дълго, колкото си пожелаха или като гласуват, или като изберат "Не мога да реша". От решаващо значение във всеки един момент респондентите са могли да допринесат със собствените си идеи, които - кметството - се превърна в част от идеите, които трябва да бъдат представени на другите. По този начин въпросите, които участниците получиха, бяха едновременно отворени и затворени.

Фигура 3.10: Интерфейс за проучване на уики. Панелът (a) показва екрана за реакция и панелът (b) показва екрана с резултатите. Възпроизведено с разрешение от Salganik and Levy (2015), фигура 2.

Фигура 3.10: Интерфейс за проучване на уики. Панелът (a) показва екрана за реакция и панелът (b) показва екрана с резултатите. Възпроизведено с разрешение от Salganik and Levy (2015) , фигура 2.

Кметството стартира проучването си за уикита през октомври 2010 г. във връзка с редица срещи на общността, за да получи обратна връзка от местните власти. За около четири месеца 1436 анкетирани са дали 31,893 отговора и 464 нови идеи. Критично, 8 от 10-те най-добри идеи за оценяване бяха качени от участниците, вместо да са част от серията идеи за семена от кметството. И както описваме в нашата статия, същият модел, с качени идеи, които са по-добри от идеите за семена, се случва в много проучвания на wiki. С други думи, като са отворени към нова информация, изследователите могат да научат неща, които биха били пропуснати, използвайки по-затворени подходи.

Освен резултатите от тези конкретни проучвания, нашият проект за проучване на wiki също така илюстрира как структурата на разходите на цифровите изследвания означава, че изследователите вече могат да се ангажират със света по някакви различни начини. Академичните изследователи вече могат да изграждат реални системи, които могат да бъдат използвани от много хора: проведохме повече от 10 000 проучвания на уики и сме събрали повече от 15 милиона отговора. Тази способност да се създаде нещо, което може да се използва в мащаб, идва от факта, че след като уебсайтът бъде построен, няма да има нищо, което да го направи свободно достъпно за всички в света (разбира се, това нямаше да е вярно, ако имахме човешки - администрирани интервюта). Освен това тази скала позволява различни видове изследвания. Например тези 15 милиона отговора, както и нашият поток от участници, осигуряват ценно изпитателно легло за бъдещи методически изследвания. Ще опиша повече за други възможности за научни изследвания, създадени от структури на разходите за цифрова възраст - особено нулеви данни за променливите разходи - когато обсъждам експерименти в глава 4.