4.5.2 Ngawangun percobaan sorangan

Ngawangun percobaan Anjeun sorangan bisa jadi ongkosna mahal, tapi bakal ngaktifkeun Anjeun pikeun nyieun percobaan nu Anjeun hoyong.

Salian overlaying percobaan dina luhureun lingkungan nu aya, Anjeun ogé bisa ngawangun percobaan anjeun sorangan. Kauntungan utama tina pendekatan ieu kontrol; lamun aya gedong percobaan, Anjeun bisa nyieun lingkungan jeung perlakuan anu rék. Ieu lingkung eksperimen bespoke bisa nyieun kasempetan pikeun nguji téori anu teu mungkin pikeun nguji dina lingkungan kajadian sacara alami. The drawbacks utama gedong percobaan sorangan anu anu bisa mahal sarta yén lingkungan nu bisa nyieun bisa henteu boga realisme tina sistem kajadian sacara alami. Peneliti gedong percobaan sorangan ogé kudu boga strategi pikeun recruiting pamilon. Lamun digawé di sistem nu aya, peneliti anu dasarna bringing percobaan pikeun pamilon maranéhanana. Tapi, nalika peneliti ngawangun percobaan sorangan, maranéhna kudu mawa pamilon kana eta. Untungna, jasa kayaning Amazon Mechanical Turk (MTurk) bisa nyadiakeun peneliti kalayan cara merenah pikeun mawa pamilon pikeun percobaan maranéhanana.

Hiji conto nu illustrates nu virtues tina lingkungan bespoke pikeun nguji téori abstrak teh lab percobaan digital ku Gregory Huber, Seth Hill, sarta Jibril Lenz (2012) . percobaan Ieu explores hiji watesan praktis mungkin ka fungsi tina governance demokratis. studi non-eksperimen saméméhna Pilkada sabenerna ngusulkeun yen pamilih henteu bisa akurat assess kinerja politikus incumbent. Dina sababaraha hal, pamilih némbongan sangsara tina tilu biases: (1) maranehna fokus kana panganyarna tinimbang kinerja kumulatif; (2) aranjeunna bisa dimanipulasi ku retorika, framing, sarta pamasaran; jeung (3) aranjeunna bisa dipangaruhan ku acara hubungan kinerja incumbent, kayaning kasuksésan tim olahraga lokal jeung cuaca. Dina ieu studi saméméhna kitu, nya éta hésé ngasingkeun salah sahiji faktor ieu ti kabeh barang séjén anu kajadian di, pamilu pabalatak nyata. Ku alatan éta, Huber sareng kolega Anjeun dijieun lingkungan voting kacida disederhanakeun guna ngasingkeun, lajeng sacara ékspériméntal diajar, unggal tilu biases ieu mungkin.

Salaku I nerangkeun eksperimen set-up di handap, eta anu bade disada pisan jieunan, tapi inget yen realisme sanes tujuan dina percobaan lab-gaya. Rada, hasil ahir tina ieu jelas ngasingkeun prosés nu nyoba diajar, sarta isolasi kedap ieu kadang teu mungkin dina studi kalawan leuwih realisme (Falk and Heckman 2009) . Salajengna, bisi tinangtu ieu, panalungtik pamadegan yén lamun pamilih moal bisa efektif evaluate kinerja di setting kacida saderhana ieu, lajeng maranéhna teu bade tiasa ngalakukeun hal eta dina, setting leuwih kompleks langkung realistis.

Huber sareng kolega Anjeun dipaké MTurk mun recruit pamilon. Sakali pamilon hiji disadiakeun informed idin jeung ngaluluskeun hiji test pondok, manéhna ieu ngawartoskeun yén Aisyah ieu milu dina kaulinan 32-buleud earn tokens nu bisa dirobah jadi duit nyata. Dina awal patandingan, unggal pamilon ieu ngawartoskeun yen manehna geus ditugaskeun hiji "allocator" anu bakal masihan dirina tokens bébas unggal babak na nu sababaraha allocators leuwih berehan ti batur. Salajengna, unggal pamilon ieu ogé ngawartoskeun yen manehna bakal boga kasempetan pikeun boh tetep allocator dirina atawa jadi ditugaskeun nu anyar sanggeus 16 rounds game. Dibikeun kumaha anjeun terang ngeunaan Huber jeung tujuan ieu panalungtikan kolega ', anjeun tiasa ningali yen allocator nu ngagambarkeun pamaréntah sarta pilihan ieu ngagambarkeun hiji pemilu, tapi pamilon éta teu sadar tujuan umum tina hasil panalungtikan. Dina total, Huber sareng kolega Anjeun direkrut ngeunaan 4.000 peserta anu dibayar ngeunaan $ 1,25 pikeun tugas nu ngawasa ngeunaan dalapan menit.

Ngelingan yen salah sahiji papanggihan tina ieu panalungtikan saméméhna éta yén pamilih ganjaran jeung ngahukum incumbents pikeun hasil anu jelas saluareun kontrol maranéhanana, kayaning kasuksésan tim olahraga lokal jeung cuaca. Pikeun assess naha kaputusan pamilon voting bisa dipangaruhan ku acara murni acak dina setting maranéhanana, Huber sareng kolega Anjeun ditambahkeun lotre pikeun sistem eksperimen maranéhanana. Di boh 8 buleud atawa babak 16 (ie, katuhu saméméh kasempetan pikeun ngaganti allocator nu) Pamilon anu acak ditempatkeun dina lotre dimana sababaraha meunang 5,000 titik, sababaraha meunang 0 titik, sarta sababaraha leungit 5,000 titik. lotre ieu dimaksudkeun pikeun meniru warta hadé atawa goréng anu geus bebas tina kinerja politikus nu. Sanajan peserta anu kuduna ngawartoskeun yen lotre ieu aya hubungan jeung kinerja allocator maranéhanana, hasil tina lotre di kénéh impacted kaputusan pamilon '. Pamilon anu benefited ti lotre nya éta leuwih gampang tetep allocator, sarta pangaruh ieu kuat nalika lotre kajantenan di babak 16-katuhu saméméh ngagantian putusan-ti nalika kajadian di babak 8 (inohong 4.15). Hasil ieu, babarengan jeung pamadegan sababaraha percobaan sejenna dina kertas, dipingpin Huber sareng kolega Anjeun pikeun disimpulkeun yen sanajan dina setting saderhana, pamilih boga kasusah nyieun kaputusan wijaksana, hasil nu impacted panalungtikan kahareup ngeunaan pembuatan kaputusan voter (Healy and Malhotra 2013) . The percobaan tina Huber sareng kolega Anjeun nunjukeun yen MTurk bisa dipaké pikeun recruit pamilon pikeun percobaan lab-gaya guna tepat nguji téori pisan husus. Ogé nembongkeun nilai ngawangun lingkungan eksperimen sorangan: éta hésé ngabayangkeun kumaha ieu prosés sarua bisa geus papisah jadi bersih dina setting séjén nanaon.

Gambar 4,15: Hasil tina Huber, Hill, sarta Lenz (2012). Pamilon anu benefited ti lotre nya éta leuwih gampang nahan allocator, sarta pangaruh ieu kuat nalika lotre kajantenan di babak 16-katuhu saméméh ngagantian putusan-ti nalika kajadian di babak 8. Adaptasi tina Huber, Hill, sarta Lenz ( 2012), inohong 5.

Gambar 4,15: Hasil tina Huber, Hill, and Lenz (2012) . Pamilon anu benefited ti lotre nya éta leuwih gampang nahan allocator, sarta pangaruh ieu kuat nalika lotre kajantenan di babak 16-katuhu saméméh ngagantian putusan-ti nalika kajadian di babak 8. Adaptasi tina Huber, Hill, and Lenz (2012) , inohong 5.

Salian ngawangun percobaan lab-kawas, peneliti ogé bisa ngawangun percobaan anu leuwih widang-kawas. Contona, Centola (2010) diwangun percobaan widang digital pikeun diajar pangaruh struktur jaringan sosial dina sumebarna kabiasaan. Patarosan panalungtikan nya diperlukeun anjeunna pikeun niténan paripolah sami nyebarkeun dina populasi nu tadi struktur jaringan sosial béda tapi éta disebutkeun ngalelep teu bisa dibédakeun. Hiji-hijina jalan pikeun ngalakukeun ieu ku bespoke, percobaan custom-diwangun. Dina hal ieu, Centola diwangun komunitas kaséhatan basis web.

Centola direkrut ngeunaan 1.500 peserta ngaliwatan iklan dina situs web kaséhatan. Nalika pamilon anjog di komunitas-mana online ieu disebut Otong Sehat Network-maranéhna disadiakeun idin informed kukituna lajeng ditugaskeun "buddies kaséhatan." Ku ayana cara Centola ditugaskeun buddies kaséhatan ieu, anjeunna tiasa knit struktur jaringan sosial babarengan béda dina grup béda. Sababaraha grup anu diwangun pikeun mibanda jaringan acak (dimana sadaya jelema éta sarua gampang disambungkeun), bari grup lianna anu diwangun pikeun mibanda jaringan dimaksud (dimana sambungan anu leuwih lokal padet). Lajeng, Centola ngawanohkeun kabiasaan anyar kana tiap jaringan: kasempetan pikeun ngadaptar pikeun ramatloka anyar kalayan informasi kaséhatan tambahan. Iraha saha ditandatanganan up for ramatloka anyar ieu, sakabéh buddies kaséhatan dirina narima hiji email announcing kabiasaan ieu. Centola kapanggih yén ieu kabiasaan-Signing nepi keur ramatloka-nyebarkeun salajengna jeung gancang dina jaringan dimaksud ti dina jaringan acak, a Pananjung anu bertentangan jeung sababaraha téori aya nu anyar.

Gemblengna, gedong percobaan sorangan méré Anjeun leuwih kontrol; eta nyandak anjeun nyusunna lingkungan mungkin nu pangalusna mun ngasingkeun naon rék diajar. Éta hésé ngabayangkeun kumaha dua percobaan nu kuring kakarék digambarkeun bisa geus dipigawé dina lingkungan geus aya. Salajengna, ngawangun sistem sorangan nurun masalah etika sabudeureun experimenting dina sistim nu aya. Lamun anjeun ngawangun percobaan sorangan, kumaha oge, Anjeun ngajalankeun kana loba masalah nu encountered dina percobaan lab: recruiting pamilon sarta kasalempang realisme. A downside ahir éta gedong percobaan sorangan tiasa ongkosna mahal sarta waktu-consuming, sanajan, sakumaha conto ieu nunjukkeun, anu percobaan bisa dibasajankeun lingkung kawilang basajan (kayaning ulikan voting ku Huber, Hill, and Lenz (2012) ) mun lingkungan kawilang pajeulit (kayaning ulikan ngeunaan jaringan sareng contagion ku Centola (2010) ).