4.5.2 Buuin ang iyong sariling eksperimento

Building ng iyong sariling eksperimento ay maaaring maging mahal, ngunit ito daan sa iyo upang lumikha ng mga eksperimento na gusto mo.

Bilang karagdagan sa overlaying mga eksperimento sa itaas ng mga umiiral na kapaligiran, maaari mo ring bumuo ng iyong sariling eksperimento. Ang pangunahing bentahe ng diskarteng ito ay kontrolado; kung ikaw ay nagtatayo ng eksperimento, maaari kang lumikha ng kapaligiran at paggagamot na gusto mo. Ang mga pasadyang mga pang-eksperimentong kapaligiran ay maaaring lumikha ng mga pagkakataon upang subukan ang mga teorya na imposible upang subukan sa natural na nagaganap na mga kapaligiran. Ang mga pangunahing kakulangan ng pagtatayo ng iyong sariling eksperimento ay maaari itong magastos at ang kapaligiran na iyong nilikha ay maaaring hindi magkaroon ng pagiging totoo ng isang natural na nagaganap na sistema. Ang mga mananaliksik na nagtatayo ng kanilang sariling eksperimento ay dapat ding magkaroon ng isang diskarte para sa pagrerekrut ng mga kalahok. Kapag nagtatrabaho sa mga umiiral na sistema, ang mga mananaliksik ay mahalagang nagdadala ng mga eksperimento sa kanilang mga kalahok. Subalit, kapag nagtatayo ang mga mananaliksik ng kanilang sariling eksperimento, kailangan nilang dalhin ang mga kalahok dito. Sa kabutihang palad, ang mga serbisyo tulad ng Amazon Mechanical Turk (MTurk) ay maaaring magbigay ng mga mananaliksik sa isang maginhawang paraan upang magdala ng mga kalahok sa kanilang mga eksperimento.

Ang isang halimbawa na nagpapakita ng mga birtud ng mga pasadyang kapaligiran para sa pagsubok ng mga abstract theories ay ang digital lab eksperimento ni Gregory Huber, Seth Hill, at Gabriel Lenz (2012) . Sinusuri ng eksperimentong ito ang posibleng praktikal na limitasyon sa paggana ng demokratikong pamamahala. Ang mga naunang hindi pang-eksperimentong mga pag-aaral ng aktwal na halalan ay nagpapahiwatig na ang mga botante ay hindi maaaring tumpak na masuri ang pagganap ng mga kasalukuyang mga pulitiko. Sa partikular, ang mga botante ay lumilitaw na magdusa mula sa tatlong biases: (1) sila ay nakatutok sa mga kamakailang sa halip na pinagsama-samang pagganap; (2) maaari silang manipulahin ng retorika, pag-frame, at pagmemerkado; at (3) maimpluwensyahan sila ng mga pangyayari na hindi nauugnay sa kasalukuyang pagganap, tulad ng tagumpay ng mga lokal na sports team at ng panahon. Gayunman, sa mga naunang pag-aaral na ito, mahirap paghiwalayin ang alinman sa mga salik na ito mula sa lahat ng iba pang mga bagay na nangyayari sa totoong, magulo na halalan. Samakatuwid, ang Huber at mga kasamahan ay lumikha ng isang napaka-pinasimple na kapaligiran sa pagboto upang ihiwalay, at pagkatapos ay pag-aaral ng pag-aaral, ang bawat isa sa mga tatlong posibleng biases.

Tulad ng ilarawan ko ang pang-eksperimentong set-up sa ibaba, ito ay magiging tunog na artipisyal, ngunit tandaan na ang pagiging totoo ay hindi isang layunin sa mga eksperimento ng lab-style. Sa halip, ang layunin ay upang malinaw na ihiwalay ang proseso na sinusubukan mong pag-aralan, at ang masikip na paghihiwalay na ito ay kung minsan ay hindi posible sa mga pag-aaral na may mas realismo (Falk and Heckman 2009) . Dagdag dito, sa partikular na kaso, pinagtatalunan ng mga mananaliksik na kung ang mga botante ay hindi maaaring epektibong suriin ang pagganap sa napakasimple na setting na ito, kung gayon hindi nila magagawang gawin ito sa mas makatotohanang, mas kumplikadong setting.

Ginamit ng Huber at mga kasamahan ang MTurk upang mag-recruit ng mga kalahok. Kapag ang isang kalahok ay nagbigay ng kaalamang pahintulot at nagpasa ng maikling pagsusulit, sinabi sa kanya na nakikilahok siya sa isang 32-round na laro upang makakuha ng mga token na maaaring ma-convert sa tunay na pera. Sa simula ng laro, sinabi ng bawat kalahok na siya ay naitalaga ng isang "tagapagkaloob" na magbibigay sa kanya ng libreng mga token sa bawat pag-ikot at ang ilang mga tagapagkaloob ay mas mapagbigay kaysa sa iba. Dagdag dito, ang bawat kalahok ay sinabihan din na magkakaroon siya ng pagkakataong mapanatili ang kanyang tagapagkaloob o italaga sa bago bago ang 16 na round ng laro. Given kung ano ang alam mo tungkol sa mga layunin ng pananaliksik ni Huber at mga kasamahan, maaari mong makita na ang tagapagkaloob ay kumakatawan sa isang pamahalaan at ang pagpipiliang ito ay kumakatawan sa isang halalan, ngunit ang mga kalahok ay hindi alam ang pangkalahatang mga layunin ng pananaliksik. Sa kabuuan, hinikayat ni Huber at mga kasamahan ang tungkol sa 4,000 na kalahok na binayaran ng mga $ 1.25 para sa isang gawain na umabot ng mga walong minuto.

Alalahanin na ang isa sa mga natuklasan mula sa naunang pananaliksik ay ang gantimpala ng mga botante at parusahan ang mga incumbent para sa mga resulta na malinaw na lampas sa kanilang kontrol, tulad ng tagumpay ng mga lokal na sports team at ng panahon. Upang masuri kung ang mga kalahok na mga desisyon sa pagboto ay maaaring maimpluwensyahan ng mga ganap na random na mga kaganapan sa kanilang setting, Huber at mga kasamahan ay nagdagdag ng isang loterya sa kanilang pang-eksperimentong sistema. Sa alinmang ika-8 na round o ika-16 na round (ibig sabihin, bago ang pagkakataon na palitan ang allocator) ang mga kalahok ay random na inilagay sa isang loterya kung saan ang ilan ay nanalo ng 5,000 puntos, ang ilan ay nanalo ng 0 puntos, at ang ilan ay nawala ng 5,000 puntos. Ang loterya na ito ay inilaan upang gayahin ang mabuti o masamang balita na independiyente sa pagganap ng pulitiko. Kahit na ang mga kalahok ay malinaw na sinabi na ang loterya ay walang kaugnayan sa pagganap ng kanilang tagapagkaloob, ang resulta ng loterya ay nakakaapekto pa rin sa mga desisyon ng mga kalahok. Ang mga kalahok na nakinabang sa loterya ay mas malamang na panatilihin ang kanilang tagapagkaloob, at ang epekto na ito ay mas malakas kapag ang loterya ay nangyari sa ika-16 na round bago ang kapalit na desisyon-kaysa sa nangyari ito sa ikalawang round (figure 4.15). Ang mga resulta, kasama ang ilan sa iba pang mga eksperimento sa papel, ay humantong kay Huber at mga kasamahan upang tapusin na kahit na sa isang pinasimple na setting, ang mga botante ay nahihirapang gumawa ng matalinong mga desisyon, isang resulta na nakakaapekto sa hinaharap na pananaliksik tungkol sa paggawa ng desisyon ng botante (Healy and Malhotra 2013) . Ang eksperimento ng Huber at mga kasamahan ay nagpapakita na ang MTurk ay maaaring magamit upang kumalap ng mga kalahok para sa mga eksperimento sa lab na estilo upang eksaktong subukan ang mga partikular na teoriya. Ipinapakita rin nito ang halaga ng pagtatayo ng iyong sariling pang-eksperimentong kapaligiran: mahirap isipin kung paano maaaring ihiwalay nang malinis ang parehong mga prosesong ito sa anumang iba pang setting.

Figure 4.15: Mga resulta mula sa Huber, Hill, at Lenz (2012). Ang mga kalahok na nakinabang mula sa loterya ay mas malamang na panatilihin ang kanilang tagapagkaloob, at ang epekto na ito ay mas malakas nang ang lottery ay nangyari sa round 16-bago ang kapalit na desisyon-kaysa sa nangyari ito sa ika-8 round. Ipinagkaloob mula kay Huber, Hill, at Lenz ( 2012), tayahin 5.

Figure 4.15: Mga resulta mula sa Huber, Hill, and Lenz (2012) . Ang mga kalahok na nakinabang mula sa loterya ay mas malamang na panatilihin ang kanilang tagapagkaloob, at ang epekto na ito ay mas malakas nang ang lottery ay nangyari sa round 16-bago ang kapalit na desisyon-kaysa sa nangyari ito sa ika-8 round. Ipinagkaloob mula kay Huber, Hill, and Lenz (2012) , tayahin 5.

Bilang karagdagan sa pagtatayo ng mga eksperimento tulad ng lab, ang mga mananaliksik ay maaari ring magtayo ng mga eksperimento na mas parang field. Halimbawa, itinayo ng Centola (2010) isang digital na eksperimento sa field upang pag-aralan ang epekto ng istraktura ng panlipunang network sa pagkalat ng pag-uugali. Ang kanyang pananaliksik na tanong ay nangangailangan sa kanya upang obserbahan ang parehong pag-uugali ng pagkalat sa mga populasyon na may iba't ibang mga social network na mga istraktura ngunit kung hindi man ay hindi makilala. Ang tanging paraan upang gawin ito ay sa isang pasadya, custom-built na eksperimento. Sa kasong ito, itinayo ng Centola ang isang komunidad na nakabatay sa kalusugan ng web.

Kinuha ng Centola ang halos 1,500 kalahok sa pamamagitan ng advertising sa mga website ng kalusugan. Nang ang mga kalahok ay dumating sa online na komunidad-na tinatawag na Healthy Lifestyle Network-nagbigay sila ng pahintulot na may pahintulot at pagkatapos ay itinalaga na "mga budhi sa kalusugan." Dahil sa paraan ng pagtatalaga ng mga kaibigan sa kalusugan ng Centola, nakapagsama siya ng iba't ibang mga estrukturang panlipunan sa network iba't ibang mga grupo. Ang ilang mga grupo ay binuo upang magkaroon ng mga random na network (kung saan ang lahat ay pantay-pantay na malamang na konektado), habang ang iba pang mga grupo ay binuo upang magkaroon ng mga clustered network (kung saan ang mga koneksyon ay mas lokal na siksik). Pagkatapos, ipinakilala ng Centola ang isang bagong pag-uugali sa bawat network: ang pagkakataong magparehistro para sa isang bagong website na may karagdagang impormasyon sa kalusugan. Sa tuwing may naka-sign up para sa bagong website, lahat ng kanyang mga kaibigan sa kalusugan ay nakatanggap ng isang email na nagpapahayag ng pag-uugali na ito. Natagpuan ng Centola na ang pag-uugali na ito-pag-sign up para sa bagong website-ay kumakalat nang mas mabilis at mas mabilis sa clustered network kaysa sa random na network, isang paghahanap na salungat sa ilang mga umiiral na theories.

Sa pangkalahatan, ang pagbuo ng iyong sariling eksperimento ay nagbibigay sa iyo ng higit na kontrol; ito ay nagbibigay-daan sa iyo upang bumuo ng pinakamahusay na posibleng kapaligiran upang ihiwalay ang nais mong pag-aralan. Mahirap isipin kung paano maaaring isagawa ang dalawang eksperimento na inilarawan ko sa umiiral nang kapaligiran. Dagdag dito, ang paggawa ng iyong sariling sistema ay bumababa ng mga etikal na alalahanin sa paligid ng pag-eksperimento sa mga umiiral na system. Kapag nagtatayo ka ng iyong sariling eksperimento, gayunpaman, nakatagpo ka sa maraming mga problema na nakatagpo sa mga eksperimento sa lab: Pag-recruit ng mga kalahok at mga alalahanin tungkol sa pagiging totoo. Ang pangwakas na downside ay ang paggawa ng iyong sariling eksperimento ay maaaring magastos at magugol sa oras, bagaman, tulad ng mga halimbawa na ito ay nagpapakita, ang mga eksperimento ay maaaring mula sa medyo simpleng mga kapaligiran (tulad ng pag-aaral ng pagboto sa pamamagitan ng Huber, Hill, and Lenz (2012) ) sa relatibong masalimuot na mga kapaligiran (tulad ng pag-aaral ng mga network at paglaganap ng Centola (2010) ).