3.5.2維基調查

調查維基啟用封閉式和開放式問題的新的混合動力汽車。

除了在更自然的時間和更自然的環境中提問,新技術還允許我們改變問題的形式。大多數調查問題都是關閉的,受訪者從研究人員編寫的一組固定選擇中進行選擇。這是一個著名調查研究人員稱之為“在人們口中說話”的過程。例如,這是一個封閉的調查問題:

“接下來的問題是關於工作的問題。請你看一下這張卡片,然後告訴我你喜歡哪份工作?

  1. 高收入
  2. 沒有被解僱的危險
  3. 工作時間短,有很多空閒時間
  4. 晉升的機會
  5. 這項工作很重要,給人一種成就感。“

但這些是唯一可能的答案嗎?研究人員可能會通過限制對這五種反應的反應而遺漏一些重要內容嗎封閉式問題的替代方案是一個開放式的調查問題。這是以開放形式提出的相同問題:

“這接下來的問題是工作的主題。人們期待在工作中得到不同的東西。你會在大多數工作更喜歡?“

儘管這兩個問題看起來非常相似,但Howard Schuman和Stanley Presser (1979)一項調查實驗表明,它們可以產生截然不同的結果:對開放性問題的答案中有近60%未包含在五個研究人員創建的答案中(圖3.9)。

圖3.9:調查實驗的結果顯示,答案可能取決於是以封閉形式還是開放形式提出問題。改編自Schuman和Presser(1979),表1。

圖3.9:調查實驗的結果顯示,答案可能取決於是以封閉形式還是開放形式提出問題。改編自Schuman and Presser (1979) ,表1。

雖然開放和封閉的問題可以產生完全不同的信息,並且兩者在調查研究的早期都很受歡迎,但封閉式問題已成為該領域的主導。這種支配並不是因為已經證明封閉式問題可以提供更好的測量,而是因為它們更容易使用;分析開放式問題的過程容易出錯並且成本高昂。擺脫懸而未決的問題是不幸的,因為正是研究人員提前不知道的信息才是最有價值的。

然而,從人工管理到計算機管理調查的過渡表明了解決這一老問題的新方法。如果我們現在可以將調查問題與開放和封閉問題的最佳特徵結合起來怎麼辦?也就是說,如果我們可以進行調查,既可以接受新信息又可以產生易於分析的響應呢?這正是Karen Levy和我(2015)試圖創造的。

特別是,Karen和我認為收集和管理用戶生成內容的網站可能能夠為新類型的調查設計提供信息。我們特別受到維基百科的啟發 - 這是一個由用戶生成的內容驅動的開放,動態系統的一個很好的例子 - 所以我們稱我們的新調查為維基調查 。正如維基百科基於其參與者的想法隨著時間的推移而發展,我們想像一項基於參與者的想法隨著時間的推移而發展的調查。 Karen和我開發了wiki調查應該滿足的三個屬性:它們應該是貪婪的,協作的和適應性的。然後,我們與一個Web開發團隊一起創建了一個可以運行wiki survey_的網站: www.allourideas.org

維基調查中的數據收集過程通過我們與紐約市市長辦公室合作的項目來說明,以便將居民的想法融入紐約全市可持續發展計劃PlanYC 2030。為了開始這個過程,市長辦公室根據他們之前的外展(例如,“要求所有大型建築物進行某些能效升級”和“教育孩子們將綠色問題作為學校課程的一部分”)生成了25個想法的清單。使用這25個想法作為種子,市長辦公室問了一個問題“你認為哪個更好的想法可以創造一個更環保,更大的紐約市?”受訪者被提出了一對想法(例如,“城市中的公開校園”)作為公共遊樂場“和”增加哮喘發病率高的社區的目標樹種“,並被要求在它們之間做出選擇(圖3.10)。選擇後,受訪者立即被提出另一個隨機選擇的想法。只要他們希望通過投票或選擇“我無法做出決定”,他們就可以繼續提供有關他們偏好的信息。至關重要的是,在任何時候,受訪者都能夠提出他們自己的想法,這些想法正在等待批准。市長辦公室 - 成為向他人展示的思想庫的一部分。因此,參與者收到的問題同時是開放的和封閉的。

圖3.10:維基調查的界面。面板(a)顯示響應屏幕,面板(b)顯示結果屏幕。經Salganik和Levy(2015)許可轉載,見圖2。

圖3.10:維基調查的界面。面板(a)顯示響應屏幕,面板(b)顯示結果屏幕。經Salganik and Levy (2015)許可轉載,見圖2。

市長辦公室於2010年10月與一系列社區會議一起啟動了維基調查,以獲得居民反饋。在大約四個月的時間裡,有1,436名受訪者提供了31,893份回復和464份新想法。至關重要的是,前10名得分想法中有8項是由參與者上傳的,而不是市長辦公室提出的種子想法的一部分。而且,正如我們在論文中所描述的那樣,在許多維基調查中,同樣的模式,上傳的創意得分比種子創意更好。換句話說,通過對新信息持開放態度,研究人員能夠學習使用更封閉的方法而錯過的東西。

除了這些特定調查的結果之外,我們的維基調查項目還說明了數字研究的成本結構如何意味著研究人員現在可以以不同的方式與世界接觸。學術研究人員現在能夠構建可供許多人使用的真實係統:我們已經舉辦了超過10,000次維基調查,並收集了超過1500萬份回复。這種創造可以大規模使用的東西的能力來自於這樣一個事實:一旦網站建成,世界上每個人都可以免費使用它(當然,如果我們擁有人類,那就不是真的。 - 管理的訪談)。此外,這種規模可以進行不同類型的研究。例如,這1500萬份答復以及我們的參與者流為未來的方法學研究提供了寶貴的試驗平台。當我在第4章討論實驗時,我將更多地描述由數字時代成本結構創建的其他研究機會 - 特別是零可變成本數據。