4.5.1.1 A meglévő környezetbe

Kísérletek futtatásával belül meglévő környezetbe, gyakran anélkül, hogy bármilyen kódoló vagy partnerség.

Logisztikailag, a legegyszerűbb módja, hogy a digitális kísérletek overlay a kísérlet tetején egy meglévő környezet, amely lehetővé teszi, hogy fut a digitális területen kísérletet. Ezek a kísérletek is futtatható egy meglehetősen nagy méretű, és nem igényelnek partnerségben egy cég vagy kiterjedt szoftverfejlesztés.

Például, Jennifer Doleac és Luke Stein (2013) kihasználták egy internetes piactér (pl craigslist) kísérletet végezni, hogy a mért faji megkülönböztetés. Doleac és Stein hirdetett ezer iPod és szisztematikus változtatásával jellemzőit az eladó, tudták, hogy tanulmányozza a rassz hatását a gazdasági tranzakciókat. Továbbá Doleac és Stein használt méretüknek kísérlet megbecsülni, amikor a hatás nagyobb (heterogenitása kezelés hatása), és néhány hasznos ötlettel, hogy miért a hatás előfordulhat (mechanizmusok).

A vizsgálat megkezdése előtt a Doleac és Stein, volt két fő megközelítését kísérleti mérési megkülönböztetést. Levelező tanulmányok kutatók létre összefoglalóira kitalált emberek a különböző versenyeken és használja ezeket folytatódik, például, alkalmazni a különböző munkákhoz. Bertrand és Mullainathan által (2004) papírt az emlékezetes "címet Biztos Emily és Greg foglalkoztathatóságát mint Lakisha és Jamal? A szántóföldi kísérlet munkaerő-piaci diszkrimináció "egy csodálatos illusztrációja levelezés tanulmány. Levelezés tanulmányok viszonylag alacsony költség megfigyelés, amely lehetővé teszi egy kutató, hogy gyűjtsön több ezer megfigyelések egy tipikus tanulmány. De, levelezés tanulmányok faji megkülönböztetés megkérdőjelezték, mert neveket potenciálisan jel sok dolog mellett a versenyt a kérelmező. Ez azt jelenti, nevek, mint Greg, Emily, Lakisha, és Jamal jelezhet társadalmi osztály mellett versenyezni. Így, minden eltérő bánásmód folytatódik Greg és Jamal miatt lehet több, mint feltételezett faji különbségek a pályázók. Audit tanulmányok, másrészt, vonja bérbeadása szereplői a különböző versenyeken alkalmazni személyesen a munkahelyeket. Noha audit vizsgálatok célja, hogy egyértelmű jelzést kérelmező faj, rendkívül drágák per megfigyelés, ami azt jelenti, hogy általában csak több száz észrevételeket.

Ebben a digitális szántóföldi kísérletben Doleac és Stein volt képes létrehozni egy vonzó hibrid. Képesek voltak olyan adatok gyűjtésére, viszonylag alacsony költség megfigyelés-eredményez ezer megfigyelések (mint egy levelező tanulmány) -és tudták jelezni verseny segítségével fényképeket-, így tiszta uncounfounded jel faji (például egy audit vizsgálat ). Így az online környezet néha lehetővé teszi a kutatók, hogy új kezeléseket olyan tulajdonságokkal rendelkeznek, nehéz kialakítani másképp.

Az iPod reklámok Doleac és Stein mentén változhat három dimenzióban. Először is változatos jellemzőit az eladó, amit jelez a kezét fényképezett tartja az iPod [fehér, fekete, fehér, tetoválás] (4.12 ábra). Másodszor, változtatható a kért ár [$ 90, $ 110, $ 130]. Harmadszor, változtak a minősége a hirdetési szöveg [kiváló minőségű és gyenge minőségű (pl kapitalizáció hibák és spelin hibák)]. Így a szerzők volt egy 3 x 3 x 2 kialakítás, amely telepített szerte több mint 300 helyi piacokon kezdve a városokban (pl Kokomo, IN és North Platte, NE) a mega-városok (pl New York és Los Angeles).

4.12 ábra: Hands használt kísérlet Doleac and Stein (2013) . iPod által értékesített eladók különböző tulajdonságokkal mérésére diszkrimináció egy internetes piactér.

Átlagolva minden körülmények között, az eredmények jobbak voltak a fehér eladó, mint a fekete eladó, a tetovált eladó rendelkező köztes eredményeket. Például fehér eladók kapott több ajánlatot, és volt magasabb végső eladási árak. Ezeken túl az átlagos hatások, Doleac és Stein becsült heterogenitása hatásokat. Például egy előrejelzést a korábbi elmélet szerint a diszkrimináció kevésbé lenne azokon a piacokon, versenyképesebb. A beérkezett ajánlatok száma egy proxy a piaci verseny, a szerzők azt találták, hogy a fekete az eladók valóban kap rosszabb ajánlatok piacok alacsony fokú versenyt. Továbbá, összehasonlítva eredmények a hirdetések kiváló minőségű és gyenge minőségű szöveg, Doleac és Stein úgy találta, hogy a hirdetés minőségét nem befolyásolja az a hátránya, amelyekkel a fekete tetovált eladók. Végül, kihasználva azt a tényt, hogy a reklámok kerültek a több mint 300 piacon, a szerzők úgy találják, hogy a fekete az eladók inkább hátrányos a városokban a magas bűnözési ráta és a magas lakóhelyi szegregáció. Egyik ezek az eredmények adnak pontos megértése éppen ezért fekete eladók voltak rosszabb eredményeket, de ha együtt a többi vizsgálatok eredményei alapján, hogy megkezdhesse tájékoztatni elméletek okait faji megkülönböztetés különböző típusú gazdasági tranzakciókat.

Egy másik példa, amely bemutatja a kutatók azon képességére, hogy végezzen digitális szántóföldi kísérletek a meglévő rendszerek a kutatás Arnout van de Rijt és munkatársai (2014) a kulcs a sikerhez. Sok szempontból az élet, látszólag hasonló emberek a végén a nagyon eltérő eredményeket. Az egyik lehetséges magyarázat erre a minta, hogy a kis-és lényegében random-előnyök lock-in, és növekszik az idő múlásával, a folyamat, hogy a kutatók hívja halmozott előny. Annak megállapítása érdekében, hogy a kis kezdeti sikerek lock-in vagy elhalványulnak van de Rijt és munkatársai (2014) beavatkozott négy különböző rendszerek kapna sikert véletlenszerűen kiválasztott résztvevők, majd mérjük a hosszú távú hatásai a tetszőleges siker.

Pontosabban, van de Rijt és kollégái 1) ígéretet pénzt véletlenszerűen kiválasztott projektek kickstarter.com , a crowdfunding honlapján; 2) pozitívan értékelte véletlenszerűen kiválasztott véleménye a honlapon epinions ; 3) bringás, hogy véletlenszerűen kiválasztott közreműködők Wikipedia ; és 4) aláírt véletlenszerűen kiválasztott petíció change.org . A kutatók azt találták, nagyon hasonló eredményeket mind a négy rendszer: minden esetben a résztvevők, hogy véletlenszerűen adott némi korai siker folytatta, hogy több későbbi siker, mint az egyébként teljesen megkülönböztethetetlen társaik (4.13 ábra). Az a tény, hogy ugyanazt a mintát megjelent számos rendszer növeli a külső érvényességét Ezek az eredmények, mert csökkenti az esélyét, hogy ez a minta egy tárgy bármely konkrét rendszerben.

4.13 ábra: A hosszú távú hatásai véletlenszerűen adományozta siker négy különböző társadalmi rendszerek. Arnout van de Rijt és munkatársai (2014) 1) ígéretet pénzt véletlenszerűen kiválasztott projektek kickstarter.com , a crowdfunding honlapján; 2) pozitívan értékelte véletlenszerűen kiválasztott véleménye a honlapon epinions ; 3) bringás, hogy véletlenszerűen kiválasztott közreműködők Wikipedia ; és 4) aláírt véletlenszerűen kiválasztott petíció change.org .

Együtt a két példa mutatja, hogy a kutatók folytatnak digitális szabadföldi kísérletek szükségessége nélkül partner cégekkel, illetve ki kell építeni komplex digitális rendszerek. Továbbá, a 4.2 táblázat, mely még több példa igazolja a tartomány, ami lehetséges, amikor a kutatók infrastruktúráját használó meglévő rendszereket szállít kezelésére és / vagy intézkedés eredményeit. Ezek a kísérletek viszonylag olcsó a kutatók és az általuk kínált magas fokú realizmus. De ezek a kísérletek a kutatók korlátozott ellenőrzése alatt a résztvevők, kezelések, és az eredmények mérését. Továbbá, a kísérletek zajlanak csak egy rendszert, a kutatók problémát jelenthet, hogy a hatások által vezérelt rendszer-specifikus dinamika (pl az is, hogy a Kickstarter rangsorolja projektek vagy az is, hogy change.org rangsorolja petíciók, további információkat, lásd a beszélgetés algoritmikus zavaró a 2. fejezetben). Végül, amikor a kutatók beavatkozni munka rendszer, trükkös etikai kérdések merülnek a lehetséges károkat a résztvevők, nem résztvevők, és rendszereket. Figyelembe vesszük az etikai kérdést részletesebben a 6. fejezetben, és van egy kiváló vita őket függelékében van de Rijt (2014) . A kompromisszumok jönnek dolgozni egy meglévő rendszer nem ideális minden projekt, és ezért egyes kutatók építeni saját kísérleti rendszert, a téma a következő részben.