4.4.3 Mehanizmi

Eksperimenti mjeriti ono što se dogodilo. Mehanizmi objasniti zašto i kako se to dogodilo.

Treća ključna ideja za prelazak van jednostavnih eksperimenata su mehanizmi . Mehanizmi nam govore zašto ili kako tretman prouzrokuje efekat. Proces traženja mehanizama se ponekad naziva i traženjem internih varijabli ili posredovanjem varijabli . Iako su eksperimenti dobri za procjenu uzročnih efekata, oni često nisu dizajnirani da otkrivaju mehanizme. Digitalni eksperimenti mogu da nam pomognu da identifikujemo mehanizme na dva načina: (1) omogućavaju nam da sakupimo više podataka o procesu i (2) omogućavaju nam testiranje mnogih povezanih tretmana.

Budući da su mehanizmi čudni da se formalno definišu (Hedström and Ylikoski 2010) , (Hedström and Ylikoski 2010) sa jednostavnim primjerom: limes and cirrus (Gerber and Green 2012) . U osamnaestom veku, doktori su imali prilično dobar osjećaj da kada su jedriličari jeli limes, nisu imali skorvata. Skurvy je strašna bolest, pa je to bila moćna informacija. Ali ovi ljekari nisu znali zašto je limuzina sprečila skorbu. Tek 1932. godine, gotovo 200 godina kasnije, naučnici su pouzdano pokazali da je vitamin C razlog što je kreč sprečio skorbu (Carpenter 1988, 191) . U ovom slučaju, vitamin C je mehanizam pomoću koga limes sprečava skorbu (slika 4.10). Naravno, identifikovanje mehanizma je takođe veoma važno naučno - mnogo nauke govori o tome zašto se stvari događaju. Mehanizmi identifikacije su takođe veoma važni praktično. Jednom kada shvatimo zašto lečenje funkcioniše, potencijalno možemo razviti nove tretmane koji rade još bolje.

Slika 4.10: Limes sprečava skorbu i mehanizam je vitamin C.

Slika 4.10: Limes sprečava skorbu i mehanizam je vitamin C.

Nažalost, izolacioni mehanizmi su veoma teški. Za razliku od limesa i skorba, u mnogim društvenim okolnostima, tretmani verovatno rade kroz mnoge međusobno povezane puteve. Međutim, u slučaju društvenih normi i upotrebe energije, istraživači su pokušali izolovati mehanizme sakupljanjem podataka o procesu i tretmanima vezanim za testiranje.

Jedan od načina za testiranje mogućih mehanizama je sakupljanje podataka o procesu kako je tretman uticao na moguće mehanizme. Na primjer, podsjetimo da je Allcott (2011) pokazao da su izvještaji o Allcott (2011) energijama prouzrokovali smanjenje potrošnje električne energije. Ali kako su ovi izveštaji smanjili potrošnju električne energije? Koji su bili mehanizmi? U Allcott and Rogers (2014) studiji, Allcott and Rogers (2014) udružili sa energetskom kompanijom koja je kroz program popusta dobila informacije o tome koje su potrošače nadogradile svoje uređaje sa energetski efikasnijim modelima. Allcott and Rogers (2014) otkrili da je malo više ljudi koji su primili Home Energy Reports nadograđivali svoje uređaje. Ali ova razlika je bila toliko mala da bi ona mogla predstavljati samo 2% smanjenja potrošnje energije u tretiranim domaćinstvima. Drugim rečima, nadogradnje aparata nisu dominantan mehanizam kroz koji je Izvještaj o kućnoj energiji smanjio potrošnju električne energije.

Drugi način za proučavanje mehanizama je pokretanje eksperimenata sa malo različite verzije tretmana. Na primjer, u eksperimentu Schultz et al. (2007) i sve naredne eksperimente za Home Energy Report, učesnicima je obezbeđen tretman koji je imao dva glavna dela (1) savjete o uštedama energije i (2) informacije o njihovoj upotrebi energije u odnosu na njihove vršnjake (slika 4.6). Stoga je moguće da su saveti o uštedama energije izazvali promenu, a ne informacije o vršnjacima. Da bi procenili mogućnost da su sami saveti bili dovoljni, Ferraro, Miranda, and Price (2011) udružili sa kompanijom za vodu u blizini Atlante, Džordžija, i vodili srodni eksperiment o očuvanju vode oko 100.000 domaćinstava. Postojalo je četiri uslova:

  • grupa koja je dobila savjete o uštedi vode
  • grupa koja je dobila savjete o uštedi vode plus moralnu privlačnost za uštedu vode
  • grupa koja je dobila savjete o uštedi vode plus moralnu privlačnost za uštedu vode plus informacije o njihovoj upotrebi vode u odnosu na njihove vršnjake
  • kontrolna grupa

Istraživači su otkrili da lečenje lečenjem nije imalo efekta na korišćenje vode u kratkom (jednu godinu), srednjem (dve godine) i dugom (tri godine) terminu. Saveti i žalbeni tretman su uzrokovali učesnike da smanjuju upotrebu vode, ali samo u kratkom roku. Na kraju, saveti i apel plus plus tretman sa kolegama doveli su do smanjene upotrebe na kraćem, srednjem i dugoročnom nivou (slika 4.11). Ovakve eksperimente sa razdvojenim tretmanima su dobar način da saznate koji deo tretmana - ili koji delovi zajedno - one koji uzrokuju efekat (Gerber and Green 2012, sec. 10.6) . Na primjer, eksperiment Ferraroa i kolega pokazuje nam da savjeti za uštedu vode nisu dovoljni da se smanji korištenje vode.

Slika 4.11: Rezultati Ferraro, Miranda i Price (2011). Tretmani su poslati 21. maja 2007. godine, a efekti su mereni tokom leta 2007., 2008. i 2009. godine. Razdvajanjem terapije, istraživači su se nadali da će razviti bolje osjećaj mehanizama. Tretman lečenja nije imao efekta kratko (jedna godina), srednje (dve godine) i dugog (tri godine) termina. Saveti i žalbena obrada doveli su do toga da učesnici smanjuju upotrebu vode, ali samo u kratkom roku. Savet plus apel plus plus tretman sa vršnjacima je prouzrokovao učesnike da smanjuju upotrebu vode na kratko, srednje i dugoročno. Vertikalne šipke su procijenjeni intervali povjerenja. Pogledajte Bernedo, Ferraro i Price (2014) za stvarne studijske materijale. Prilagođeno od Ferraro, Miranda i Price (2011), tabela 1.

Slika 4.11: Rezultati Ferraro, Miranda, and Price (2011) . Tretmani su poslati 21. maja 2007. godine, a efekti su mereni tokom leta 2007., 2008. i 2009. godine. Razdvajanjem terapije, istraživači su se nadali da će razviti bolje osjećaj mehanizama. Tretman lečenja nije imao efekta kratko (jedna godina), srednje (dve godine) i dugog (tri godine) termina. Saveti i žalbena obrada doveli su do toga da učesnici smanjuju upotrebu vode, ali samo u kratkom roku. Savet plus apel plus plus tretman sa vršnjacima je prouzrokovao učesnike da smanjuju upotrebu vode na kratko, srednje i dugoročno. Vertikalne šipke su procijenjeni intervali povjerenja. Pogledajte Bernedo, Ferraro, and Price (2014) za stvarne studijske materijale. Prilagođeno od Ferraro, Miranda, and Price (2011) , tabela 1.

Idealno bi bilo da se krećemo izvan slojeva komponenti (savjeti, saveti i apel, savjeti i apel plus plus informacije) do potpunog faktičkog dizajna - koji se ponekad naziva i faktorijskim dizajnom \(2^k\) - gdje svaka moguća kombinacija testirana su tri elementa (tabela 4.1). Ispitivanjem svake moguće kombinacije komponenti, istraživači mogu u potpunosti procijeniti efekat svake komponente u izolaciji iu kombinaciji. Na primjer, eksperiment Ferraroa i kolega ne otkriva da li bi upoređivanje vršnjaka bilo dovoljno da dovede do dugoročnih promjena ponašanja. U prošlosti, ovi puni faktorijski dizajni su bili teški za pokretanje jer zahtijevaju veliki broj učesnika i zahtijevaju od istraživača da budu u mogućnosti precizno kontrolirati i pružiti veliki broj tretmana. Ali, u nekim situacijama, digitalno doba uklanja ove logističke ograničenja.

Tabela 4.1: Primer tretmana u potpunosti faktorijalnom dizajnu sa tri elementa: saveti, žalbe i informacije o vršnjacima
Tretman Karakteristike
1 Kontrola
2 Savjeti
3 Žalba
4 Informacije o vršnjacima
5 Saveti + žalba
6 Savjeti + informacije o kolegi
7 Žalba + informacije o vršnjacima
8 Savjeti + žalbe + informacije o kolegi

Ukratko, mehanizmi - putevi kroz koje tretman ima efekat - su izuzetno važni. Eksperimenti digitalnog doba mogu pomoći istraživačima da saznaju o mehanizmima (1) prikupljanjem podataka o procesu i (2) omogućavanjem potpunog faktičkog dizajna. Mehanizmi koji su predloženi ovim pristupima mogu se direktno testirati eksperimentima koji su posebno dizajnirani za testiranje mehanizama (Ludwig, Kling, and Mullainathan 2011; Imai, Tingley, and Yamamoto 2013; Pirlott and MacKinnon 2016) .

Ukupno, ova tri koncepta - validnost, heterogenost efekata tretmana i mehanizmi - pružaju moćan skup ideja za dizajniranje i tumačenje eksperimenata. Ovi koncepti pomažu istraživačima da izađu izvan jednostavnih eksperimenata o tome šta "radi" bogatijim eksperimentima koji imaju strožiju vezu sa teorijom, koji otkrivaju gdje i zašto rade tretmani, a koji čak mogu pomoći istraživačima da dizajniraju efikasnije tretmane. S obzirom na ovu konceptualnu pozadinu o eksperimentima, sada ću se okrenuti tome kako možete zapravo učiniti svoje eksperimente.