3.5.2 Wiki опитування

Вікі дослідження дозволяють нові гібриди закритих і відкритих питань.

На додаток до питань, що постають у природні часи та в більш природних умовах, нові технології також дозволяють змінити форму запитань. Більшість опитувальних питань закриті, респонденти вибирають із фіксованого набору варіантів, написаних дослідниками. Це процес, який один видатний дослідник дослідження називає "вкладанням слів у рот людей". Наприклад, ось закритий запит опитування:

"Наступне питання стосується теми роботи. Ви б, будь ласка, подивіться на цю карту та скажіть мені, яка річ у цьому списку ви найбільше віддаєте перевагу на роботі?

  1. Високий дохід
  2. Ніякої небезпеки звільнення
  3. Робочі години короткі, багато вільного часу
  4. Шанси на просування
  5. Робота важлива, і дає відчуття досконалості ".

Але чи є ці єдині можливі відповіді? Чи можуть дослідники втратити щось важливе, обмежуючи відповіді на ці п'ять? Альтернативою закритому питанню є питання відкритого опитування. Ось те саме запитання, яке задано відкритою формою:

"Це наступне питання по темі роботи. Люди шукають різні речі в роботі. Що б ви найбільше віддаєте перевагу в роботі? "

Хоча ці два запитання виглядають досить подібними, дослідницький експеримент Говарда Шумана та Стенлі Презер (1979) Stanley Presser, (1979) показав, що вони можуть давати дуже різні результати: майже 60% відповідей на відкрите запитання не входять до п'яти досліджень, створених відповідями ( малюнок 3.9).

Малюнок 3.9: Результати експерименту, що показує, що відповіді можуть залежати від того, чи задане запитання в закритій або відкритій формі. Адаптований з Schuman і Presser (1979), таблиця 1.

Малюнок 3.9: Результати експерименту, що показує, що відповіді можуть залежати від того, чи задане запитання в закритій або відкритій формі. Адаптований з Schuman and Presser (1979) , таблиця 1.

Хоча відкриті та закриті запитання можуть давати зовсім іншу інформацію, і обидва були популярними в перші дні опитування, закриті питання прийшли до домінування у цій галузі. Це домінування не тому, що закриті питання були доведені для забезпечення кращого вимірювання, а скоріше тому, що їх набагато простіше використовувати; процес аналізу відкритих питань є помилковим і дорогим. Перехід від відкритих питань є невдалим, оскільки саме інформація, яку дослідники не знали заздалегідь, це може бути найціннішим.

Проте перехід від обстежень, проведених людьми до комп'ютера, дозволяє запропонувати новий вихід із цієї старої проблеми. Що робити, якщо ми могли б зараз провести опитування, які поєднують найкращі характеристики відкритих та закритих запитань? Тобто, що, якщо ми зможемо провести опитування, яке обидва відкриває нову інформацію та створює прості для аналізу відповіді? Це саме те, що спробували створити Карен Леві та I (2015) .

Зокрема, Карен і я вважали, що веб-сайти, які збирають та обробляють вміст, створений користувачами, можуть інформувати про дизайн нових видів опитувань. Нас особливо надихнули Вікіпедія - чудовий приклад відкритої динамічної системи, керованої користувальницьким контентом, тому ми зателефонували нашому новому опитуванню вікі-опитуванням . Подібно до того, як Вікіпедія розвивається з часом на основі ідей її учасників, ми уявили собі опитування, яке з часом розвивається на основі ідей її учасників. Карен і я розробили три властивості, які повинні відповідати вікі-опитування: вони повинні бути жадібними, спільними та адаптивними. Потім, разом із командою веб-розробників, ми створили веб-сайт, на якому можуть працювати вікі-опитування_: www.allourideas.org .

Процес збору даних в опитуванні вікі ілюструється проектом, який ми зробили з мерією Нью-Йорка, щоб об'єднати ідеї жителів у PlaNYC 2030, Нью-Йоркський загальнодержавний план сталого розвитку. Щоб почати процес, офіс міської ради створив список із 25 ідей, що базуються на їхній попередній інформаційній підтримці (наприклад, "Вимагати всім великим будівлям зробити певні оновлення енергоефективності" та "Навчати дітей про зелені питання як частина шкільного навчального плану"). Використовуючи ці 25 ідей як насіння, офіс мерії поставив запитання: "Що ви думаєте, це краща ідея для створення більш зеленого, великого міста Нью-Йорка?" Респондентам було представлено пару ідей (наприклад, "Відкриті шкільні двори по місту" як громадські ігрові майданчики "та" Підвищення цільових посадок дерев у сусідніх районах з високими показниками астми "), і їм було запропоновано вибрати між ними (рис. 3.10). Після вибору респондентам негайно було представлено іншу випадково вибрану пару ідей. Вони мали змогу продовжувати надавати інформацію про свої переваги настільки, наскільки вони хотіли або шляхом голосування, або ж вибравши «Я не можу вирішити». Важливо, що в будь-який момент респонденти змогли внести свої власні ідеї, які, до схвалення офіс мерії - став частиною пулу ідей, який буде представлений іншим. Таким чином, питання, які отримали учасники, були одночасно відкритими та закритими.

Малюнок 3.10: Інтерфейс для обстеження вікі. Панель (а) показує екран відповіді та панель (б) показує екран результату. Відтворення за дозволом від Salganik and Levy (2015), рис. 2.

Малюнок 3.10: Інтерфейс для обстеження вікі. Панель (а) показує екран відповіді та панель (б) показує екран результату. Відтворення за дозволом від Salganik and Levy (2015) , рис. 2.

Мерське відділення розпочало своє вікі опитування в жовтні 2010 р. Разом із низкою зустрічей громад для отримання респондентських відгуків. Близько чотирьох місяців 1436 респондентів надали 31 893 відповіді та 464 нові ідеї. Критично, 8 із десяти найкращих ідей, що були оцінені, були завантажені учасниками, а не стали частиною набору ідей щодо насіння з мерії. І, як ми описали в нашій роботі, така сама картина, з завантаженими ідеями, які краще за все, ніж ідеї щодо насіння, трапляється в багатьох вікі-опитуваннях. Іншими словами, будучи відкритими до нової інформації, дослідники можуть вивчати речі, які могли б бути втрачені, використовуючи більш закриті підходи.

Окрім результатів цих специфічних досліджень, наш огляд проекту вікі також показує, як структура витрат цифрових досліджень означає, що дослідники тепер можуть поєднуватись із світом дещо по-іншому. Академічні дослідники тепер можуть створювати реальні системи, які можуть використовуватися багатьма людьми: ми провели більше 10 000 вікі-опитувань і зібрали більше 15 мільйонів відповідей. Ця здатність створювати те, що можна використовувати в масштабі, виходить з того факту, що після того, як веб-сайт буде побудований, він коштує в основному нічого, щоб зробити його вільним для всіх у світі (звичайно, це не буде правдою, якщо б ми мали людину - адміністративні інтерв'ю). Крім того, цей масштаб дозволяє проводити різні види досліджень. Наприклад, ці 15 мільйонів відповідей, а також наш потік учасників, стануть цінним тестом для майбутніх методологічних досліджень. Я опишу більше про інші можливості досліджень, які створюються за структурою вартості цифрового віку, особливо нульові дані змінної вартості, коли я обговорюю експерименти у главі 4.