4.5.1.1 naudoti esamus aplinkos

Galite paleisti eksperimentus esamomis aplinkoje, dažnai be jokio kodavimo ar partnerystę.

Logistikos, lengviausias būdas tai padaryti skaitmeninių eksperimentų perdangos eksperimentą ant esamo aplinkos, leidžia jums paleisti skaitmeninį lauko eksperimentą. Šie eksperimentai gali būti paleisti pagrįstai didelio masto ir nereikalauja partnerystę su įmonės ar didelę programinės įrangos kūrimas.

Pavyzdžiui, Jennifer Doleac ir Luko Stein (2013) pasinaudojo interneto rinkoje (pvz Craigslist) paleisti eksperimentą, kad matuojant su rasine diskriminacija. Doleac Stein reklamuojami tūkstančius iPod ir sistemingai keičiant pardavėjo savybes, jie galėjo studijuoti lenktynių dėl ekonominių sandorių poveikį. Be to, Doleac Stein naudojamas svarstykles savo eksperimentą apskaičiuoti, kai poveikis yra didesnis (heterogeniškumas gydymo poveikių) ir pasiūlyti keletą idėjų apie tai, kodėl gali atsirasti poveikis (mechanizmus).

Prieš Doleac Stein tyrimo, ten buvo du pagrindiniai požiūriai į eksperimentiškai išmatuoti diskriminacija. Susirašinėjimas studijos tyrėjai sukurti vėl tariamų žmonių skirtingų rasių ir naudoti šiuos aprašymai, pavyzdžiui, taikomos skirtingų darbo vietų. Bertrandas ir Mullainathan anketa (2004) popierius su įsimintina antraštinę dalį "Emily Gregas daugiau galimybių įsidarbinti nei Lakisha ir Jamal? Lauko bandymuose diskriminaciją darbo rinkoje "yra puikus pavyzdys, korespondencija tyrimas. Susirašinėjimas tyrimai turi santykinai mažą kainą už pastabą, kuri leidžia vieną tyrėjui surinkti tūkstančius stebėjimų tipiškas tyrimas. Bet, korespondencija tyrimai rasinės diskriminacijos buvo apklaustas, nes pavadinimai gali signalizuoti daug dalykų be pareiškėjo lenktynėse. Tai yra, pavadinimus, tokius kaip Greg, Emily, Lakisha ir Jamal gali reikšti socialinę klasę be lenktynėse. Taigi, bet koks skirtingas ir vėl iš Gregas "ir Jamalas s gali būti dėl daugiau nei preziumuojama lenktynių skirtumų pareiškėjams. Audito tyrimai, kita vertus, apima nuomą veikėjai skirtingų rasių taikyti asmeniui dėl darbo. Nors audito tyrimai teikia aiškų signalą lenktynių paraišką, jie yra labai brangūs už pastabą, o tai reiškia, kad jie paprastai turi tik šimtus pastabų.

Be jų skaitmeninio lauko eksperimento Doleac Stein galėjome sukurti patrauklią hibridas. Jie galėjo rinkti duomenis palyginti mažomis sąnaudomis per stebėjimo-todėl tūkstančiai pastabas (kaip ir korespondencijos tyrimą) -ir jie galėtų signalizuoti lenktynes ​​naudojant fotografijas-todėl aiškaus uncounfounded signalo rasės (kaip audito tyrimo ). Taigi, naudojantis interneto aplinka kartais leidžia mokslininkams kurti naujus gydymo metodus, kurie turi savybių, kurios yra sunku statyti kitaip.

IPod skelbimai Doleac Stein skyrėsi trimis pagrindiniais matmenimis. Pirma, jie skyrėsi pardavėjo, kuris buvo gaunamas už rankos fotografuotas ūkyje iPod [balta, juoda, balta su tatuiruote] (4.12 pav) charakteristikos. Antra, jie skyrėsi prašoma kaina [$ 90, $ 110, $ 130]. Trečia, jie skyrėsi iš skelbimo teksto [aukštos kokybės ir žemos kokybės (pvz kapitalizacijos klaidas ir spelin klaidos)] kokybę. Taigi, autoriai turėjo 3 x 3 x 2 dizainą, kuris buvo dislokuotas visoje daugiau nei 300 vietinių rinkų, pradedant nuo miestų (pvz Kokomo, ir North Platte, NE) į megapolių (pvz, Niujorko ir Los Angeles).

4.12: Rankos naudojami gaminant Doleac Stein (2013) eksperimente. iPod buvo parduota pardavėjų su skirtingomis charakteristikomis matuoti diskriminaciją internetinė prekyvietė.

4.12: Rankos naudojami eksperimento Doleac and Stein (2013) . iPod buvo parduota pardavėjų su skirtingomis charakteristikomis matuoti diskriminaciją internetinė prekyvietė.

Vidutiniškai visose sąlygoms, siekiniai būtų geriau balto pardavėjui nei juoda pardavėjui, su tatuiruotėmis pardavėjas turi tarpinius rezultatus. Pavyzdžiui, balta pardavėjai gavo daugiau pasiūlymų ir turėjo didesnes galutinio pardavimo kainas. Be šių vidutinis poveikis, Doleac Stein įvertino poveikį įvairiapusiškumą. Pavyzdžiui, vienas prognozavimas nuo ankstesnės teorijos, kad diskriminacija būtų mažiau tose rinkose, kurios yra labiau konkurencinga. Naudojant gautų kaip konkurencijos rinkoje proxy pasiūla skaičių, autoriai nustatė, kad juoda pardavėjai iš tiesų gauna prastesnius pasiūlymus rinkose su mažu laipsniu konkurencijos. Be to, lyginant rezultatus už skelbimų su aukštos kokybės ir žemos kokybės tekstą, Doleac Stein nustatė, kad reklamos kokybę neturi įtakos nepalanki juodos ir tatuiruotėmis pardavėjų. Galiausiai, pasinaudojant tuo, kad reklama buvo dedamas į daugiau nei 300 rinkų, autoriai mano, kad juoda pardavėjai daugiau nepalankioje padėtyje miestuose su aukšto nusikalstamumo lygis ir didelis gyvenamasis segregaciją. Nė vienas iš šių rezultatų mums tiksliai suprasti tiksliai, kodėl juodosios pardavėjai turėjo prastesnius rezultatus, tačiau, kai ji derinama su kitų tyrimų rezultatais, jie gali pradėti informuoti teorijas apie rasinę diskriminaciją skirtingų tipų ekonominių sandorių priežastis.

Kitas pavyzdys, kuris rodo mokslininkų gebėjimą vykdyti skaitmeninių lauko eksperimentus esamų sistemų yra iki Arnout van de Rijt tyrimai ir kolegos (2014) nuo raktas į sėkmę. Daugelyje gyvenimo aspektų, iš pažiūros panašūs žmonės galų gale su labai skirtingų rezultatų. Vienas iš galimų paaiškinimų šio modelio yra tai, kad mažos ir iš esmės atsitiktinių privalumai galite užrakinti ir už augti, laikui bėgant, procesas, kad mokslininkai vadina kaupiamąjį pranašumą. Siekiant nustatyti, ar mažos pradinės pasisekimas užrakinti-arba išnyks, van de Rijt ir kolegos (2014) įsikišo į keturias skirtingas sistemas suteikdami sėkmės atsitiktinai atrinktų dalyvių, o tada išmatavo ilgalaikį poveikį šio savavališko sėkmę.

Tiksliau, van de Rijt ir kolegos 1) įkeisti pinigus atsitiktinai atrinkti projektus kickstarter.com A masinio finansavimo svetainėje; 2) teigiamai įvertino atsitiktinai pasirinktas Nuomonės svetainėje Epinions ; 3) apdovanojo atsitiktinai pasirinktus prisidedančias Vikipedijos ; ir 4) pasirašė atsitiktinai pasirinktas peticijų change.org . Mokslininkai nustatė, labai panašius rezultatus visose keturiose sistemose: kiekvienu atveju, dalyviai, kurie buvo atsitiktinai suteikta tam tikra anksti sėkmės išvyko turėti daugiau vėlesnis sėkmės nei jų kitaip visiškai nesiskiria bendraamžių (4.13 pav.) Tai, kad tas pats modelis pasirodė daugelyje sistemų padidina rezultatų išorinį iš šių rezultatų, nes ji sumažina tikimybę, kad šis modelis yra iš bet kurio konkretaus sistemos artefaktas.

4.13 pav Ilgalaikė poveikį atsitiktinai padovanotas sėkmės keturių skirtingų socialinių sistemų. Arnout van de Rijt ir kolegos (2014) 1) pažadėjo pinigus atsitiktinai atrinkti projektus kickstarter.com A masinio finansavimo svetainėje; 2) teigiamai įvertino atsitiktinai pasirinktas Nuomonės svetainėje Epinions; 3) apdovanojo atsitiktinai parinktų bendraautorių Vikipedijos; ir 4) pasirašė atsitiktinai pasirinktas peticijų change.org.

4.13 pav Ilgalaikė poveikį atsitiktinai padovanotas sėkmės keturių skirtingų socialinių sistemų. Arnout van de Rijt ir kolegos (2014) 1) pažadėjo pinigus atsitiktinai atrinkti projektus kickstarter.com A masinio finansavimo svetainėje; 2) teigiamai įvertino atsitiktinai pasirinktas Nuomonės svetainėje Epinions ; 3) apdovanojo atsitiktinai pasirinktus prisidedančias Vikipedijos ; ir 4) pasirašė atsitiktinai pasirinktas peticijų change.org .

Kartu šie du pavyzdžiai rodo, kad mokslininkai galėtų atlikti skaitmeninių eksperimentų nereikia partnerio su įmonėmis ar būtinybę sukurti sudėtingas skaitmenines sistemas. Be to, 4.2 lentelė suteikia dar daugiau pavyzdžių, kurie rodo, kad tai, kas yra įmanoma, kai tyrėjams naudotis esamų sistemų infrastruktūrą pristatyti gydymo ir / arba priemonė rezultatų spektrą. Šie eksperimentai yra palyginti pigi mokslininkų ir jie siūlo aukštą realizmo. Tačiau šie eksperimentai pasiūlyti mokslininkams ribotas kontroliuoti dalyvių, gydymo, ir rezultatus turi būti išmatuoti. Be to, eksperimentams, vykstančių tik vieną sistemą, mokslininkai turi būti susirūpinęs, kad poveikis gali būti varoma sistema konkrečios dinamiką (pvz, taip, kad Kickstarter gretas projektus arba taip, kad change.org reitinguoja peticijas; daugiau informacijos matyti diskusiją apie algoritminės komplikuota 2 skyriuje). Galiausiai, kai mokslininkai įsikišti darbo sistemas, Tricky etikos klausimus, atsiras apie galimos žalos dalyviams, ne dalyvių ir sistemų. Mes apsvarstysime šias etikos klausimą išsamiau 6 skyriuje, ir yra puikus jų aptarimas į van de Rijt priede (2014) . Kompromisus, kurie ateina su darbo esamos sistemos nėra idealus kiekvieno projekto, ir dėl šios priežasties kai kurie tyrinėtojai kurti savo eksperimentinę sistemą, kitą skyrių temą.

4.2 lentelė: pavyzdžiai eksperimentų esamomis sistemomis. Šie eksperimentai atrodo suskirstyti į tris pagrindines kategorijas, ir tai skirstymas gali padėti jums pastebėti papildomų galimybių savo tyrimus. Pirma, yra eksperimentai, susijusiai pardavimas arba pirkimas kažko (pvz Doleac and Stein (2013) ). Antra, yra eksperimentai, susijusiai užtikrinant gydymo konkretiems dalyviams (pvz Restivo and Rijt (2012) ). Galiausiai, yra eksperimentai, kuriuose dalyvauja gabenantiems gydymo į konkrečius objektus, pavyzdžiui, peticijų (pvz, Vaillant et al. (2015) ).
tema citata
Poveikis barnstars apie įmokas į Vikipediją Restivo and Rijt (2012) ; Restivo and Rijt (2014) ; Rijt et al. (2014)
Poveikis anti-priekabiavimo pranešimą apie rasistinius tweets Munger (2016)
Poveikis aukcione metodo, pardavimo kaina Lucking-Reiley (1999)
Poveikis reputacijos kaina interneto aukcionuose Resnick et al. (2006)
Poveikis lenktynių pardavėjui parduodant beisbolo korteles eBay Ayres, Banaji, and Jolls (2015)
Poveikis lenktynių pardavėjui parduodant iPod Doleac and Stein (2013)
Poveikis lenktynių svečias Airbnb nuoma Edelman, Luca, and Svirsky (2016)
Poveikis aukos dėl projektų sėkmės Kickstarter Rijt et al. (2014)
Efektas nuo rasės ir etninės būsto nuomos Hogan and Berry (2011)
Poveikis teigiamas įvertinimas ateities reitingus Epinions Rijt et al. (2014)
Poveikis parašų ant peticijų sėkmės Vaillant et al. (2015) ; Rijt et al. (2014)