4.5.2 Izradite vlastiti eksperiment

Izgradnja vlastiti eksperiment može biti skupo, ali to će vam omogućiti da stvorite eksperiment koji želite.

Uz prekrivanje eksperimenata na vrhu postojećih okruženja, možete izraditi i vlastiti eksperiment. Glavna prednost ovog pristupa je kontrola; ako gradite eksperiment, možete stvoriti okruženje i tretmane koji želite. Ta prilagođena eksperimentalna okruženja mogu stvoriti prilike za testiranje teorija koje se nemoguće testirati u prirodnim okolinama. Glavni nedostaci izgradnje vlastitog eksperimenta su da to može biti skupo i da okoliš koji možete stvoriti možda neće imati realizma prirodnog sustava. Istraživači koji grade vlastiti eksperiment moraju također imati strategiju za regrutiranje sudionika. Kada rade u postojećim sustavima, istraživači su u osnovi doveli eksperimente svojim sudionicima. No, kada istraživači izgrade svoj vlastiti eksperiment, trebaju ih donijeti sudionicima. Srećom, usluge kao što je Amazon Mechanical Turk (MTurk) mogu istraživačima omogućiti prikladan način da sudionike dovedu u svoje eksperimente.

Jedan primjer koji ilustrira vrline prilagođenih okruženja za testiranje apstraktnih teorija jest digitalni laboratorijski eksperiment Gregory Huber, Seth Hill i Gabriel Lenz (2012) . Ovaj eksperiment istražuje moguća praktična ograničenja funkcioniranja demokratskog upravljanja. Ranija ne-eksperimentalna istraživanja stvarnih izbora sugeriraju da birači nisu u stanju točno procijeniti učinkovitost sadašnjih političara. Konkretno, glasači se pate od tri predrasuda: (1) usredotočeni su na nedavne, a ne na kumulativne rezultate; (2) mogu se manipulirati retorikom, kadriranjem i marketingom; i (3) na njih mogu utjecati događaji koji nisu povezani s postojećim performansama, poput uspjeha lokalnih sportskih timova i vremena. Međutim, u ovim ranijim istraživanjima bilo je teško izdvojiti bilo koji od ovih čimbenika iz svih ostalih stvari koje se događaju na stvarnim, neurednim izborima. Stoga, Huber i njegovi kolege stvorili su vrlo pojednostavljeno okruženje za glasovanje kako bi izolirali, a potom eksperimentalno proučavali svaku od ovih tri moguća predrasuda.

Dok opisujem eksperimentalni set u nastavku, zvuči vrlo umjetno, ali ne zaboravite da realizam nije cilj u laboratorijskim eksperimentima. Umjesto toga, cilj je jasno izolirati proces koji pokušavate proučavati, a ta je čvrsta izolacija ponekad nemoguća u studijama s više realizma (Falk and Heckman 2009) . Nadalje, u ovom konkretnom slučaju, istraživači su tvrdili da ako birači ne mogu učinkovito procijeniti izvedbu u ovom vrlo pojednostavljenom okruženju, onda to neće moći učiniti u realističnom, složenijem okruženju.

Huber i njegovi kolege koristili su MTurk za regrutiranje sudionika. Nakon što je sudionik davao pristanak za informaciju i prošao kratki test, rekli su mu da sudjeluje u igri u 32 kruga kako bi zaradio tokene koji bi se mogli pretvoriti u pravi novac. Na početku igre svakom sudioniku je rekli da joj je dodijeljen "dodjeljivač" koji bi joj dao besplatne oznake za svaku rundu i da su neki dodjeljivači bili velikodušniji od drugih. Nadalje, svaki sudionik je rekao da će imati priliku ili zadržati svoj algator ili biti dodijeljen novi nakon 16 krugova igre. S obzirom na ono što znate o Huberu i kolegijskim istraživačkim ciljevima, možete vidjeti da alokator predstavlja vladu, a taj izbor predstavlja izbore, ali sudionici nisu bili svjesni općih ciljeva istraživanja. Ukupno, Huber i njegovi kolege regrutirali su oko 4.000 sudionika koji su bili plaćeni oko 1,25 dolara za zadatak koji je trajao oko osam minuta.

Podsjetimo da je jedan od nalaza ranijih istraživanja bio da birači nagrađuju i kažnjavaju obveznike za rezultate koji su jasno izvan njihove kontrole, poput uspjeha lokalnih sportskih timova i vremena. Da bi se procijenilo mogu li se sudionici odluka o glasovanju utjecati na čisto slučajne događaje u svom okruženju, Huber i kolege su dodali lutriju u svoj eksperimentalni sustav. Na 8. ili 16. krugu (tj. Neposredno prije prilike za zamjenu alokacije) sudionici su slučajno postavljeni u lutriju gdje su neki osvojili 5.000 bodova, neki su osvojili 0 bodova, a neki su izgubili 5.000 bodova. Ova lutrija namjeravala je oponašati dobre ili loše vijesti koje su neovisne o izvedbi političara. Iako su sudionicima izričito rečeno da lutrija nije povezana s izvedbom svog alokirača, ishod lutrije i dalje utječe na odluke sudionika. Sudionici koji su koristili lutrija imali su veću vjerojatnost da zadrže svoj algator, a taj je učinak bio jači kada se lutrija dogodila u krugu 16 - neposredno prije zamjenske odluke - nego kad se to dogodilo u 8. krugu (slika 4.15). Ovi rezultati, zajedno s onima iz nekoliko drugih eksperimenata u radu, vodili su Hubera i suradnike zaključiti da čak iu pojednostavljenom okruženju birači imaju poteškoća u donošenju mudrih odluka, što je utjecalo na buduća istraživanja o odlučivanju birača (Healy and Malhotra 2013) , Eksperiment Hubera i suradnika pokazuje da se MTurk može koristiti za regrutiranje sudionika za laboratorijske eksperimente kako bi se precizno ispitale vrlo specifične teorije. Ona također pokazuje vrijednost izgradnje vlastitog eksperimentalnog okruženja: teško je zamisliti kako su ti isti procesi mogli biti izolirani tako čisto u bilo kojem drugom okruženju.

Slika 4.15: Rezultati Huber, Hill i Lenz (2012). Sudionici koji su koristili lutrija imali su veću vjerojatnost da zadrže svoje alokacije, a taj je učinak bio jači kada se lutrija dogodila u rundi 16 - neposredno prije zamjenske odluke - nego kad se to dogodilo u 8. krugu. Prilagođeno Huberu, Hillu i Lenzu ( 2012), slika 5.

Slika 4.15: Rezultati Huber, Hill, and Lenz (2012) . Sudionici koji su koristili lutrija imali su veću vjerojatnost da zadrže svoje alokacije, a taj je učinak bio jači kada se lutrija dogodila u rundi 16 - neposredno prije zamjenske odluke - nego kad se to dogodilo u 8. krugu. Prilagođeno Huber, Hill, and Lenz (2012) , slika 5.

Uz izgradnju laboratorijskih eksperimenata, istraživači mogu također izraditi eksperimente koji su više slični terenu. Na primjer, Centola (2010) izradio je eksperiment digitalnog polja kako bi proučio utjecaj strukture društvenih mreža na širenje ponašanja. Njegovo je istraživačko pitanje zahtijevalo da promatra isto ponašanje koje se širi u populacijama koje su imale različite strukture društvenih mreža, ali koje inače nisu bile prepoznatljive. Jedini način da to napravite bio je prilagođeni, prilagođeni eksperiment. U ovom slučaju Centola je izgradio zdravstvenu zajednicu temeljenu na webu.

Centola zapošljava oko 1.500 sudionika kroz oglašavanje na zdravstvenim web stranicama. Kada su sudionici stigli u mrežnu zajednicu - koja je zvala Healthy Lifestyle Network - pružili su informirani pristanak i bili dodijeljeni "zdravstvenim prijateljima". Zbog načina na koji je Centola dodijelio te prijatelje, mogao je povezati različite strukture društvenih mreža različite skupine. Neke su skupine izgrađene tako da su imale slučajne mreže (gdje su svi bili jednako vjerojatno povezani), dok su druge skupine izgrađene tako da imaju grupirane mreže (gdje su veze više lokalno gusto). Tada je Centola uvedena novo ponašanje u svakoj mreži: prilika za registraciju za novu web stranicu s dodatnim zdravstvenim informacijama. Kad god se netko prijavio za ovu novu web lokaciju, svi njezini zdravstveni prijatelji primili su e-poruku koja najavljuje ovo ponašanje. Centola je utvrdio da se ovo ponašanje - prijava za novu web stranicu - proširilo i brže u klasteriranoj mreži nego u slučajnoj mreži, što je bilo suprotno nekim postojećim teorijama.

Sveukupno, izgradnja vlastitog eksperimenta daje vam mnogo veću kontrolu; omogućuje vam da izgradite najbolje moguće okružje kako biste izolirali ono što želite studirati. Teško je zamisliti kako su dva eksperimenta koja sam upravo opisala mogla biti izvedena u već postojećem okruženju. Nadalje, izgradnja vlastitog sustava smanjuje etičke probleme oko eksperimentiranja postojećih sustava. Međutim, kada izradite vlastiti eksperiment, nailazite na mnoge probleme koji se susreću u laboratorijskim eksperimentima: regrutiranje sudionika i zabrinutost zbog realizma. Konačni nedostatak je da izgradnja vlastitog eksperimenta može biti skupo i dugotrajno, iako, kako pokazuju primjeri, eksperimenti mogu biti u rasponu od relativno jednostavnih okolina (kao što je istraživanje o glasovanju Huber, Hill, and Lenz (2012) ) na relativno složena okruženja (kao što je istraživanje mreža i zaraza Centola (2010) ).