4.5.1.1 Използване на съществуващите среди

Можете да стартирате експерименти вътре съществуващи среди, често без никакво кодиране или партньорство.

Логистично, най-лесният начин да направите дигитални експерименти е да се насложи експеримента си на върха на съществуваща среда, която ви позволява да стартирате цифров поле експеримент. Тези експерименти могат да се движат на по-разумно голям мащаб и не изискват партньорство с фирма или обширна разработка на софтуер.

Например, Дженифър Doleac и Лука Stein (2013) се възползва от онлайн пазар (например, Craigslist) за провеждане на експеримент, който измерва расова дискриминация. Doleac и Stein рекламира хиляди айпод, и от систематично различна характеристиките на продавача, те са в състояние да се проучи ефекта на състезание на стопанските операции. Освен това, Doleac и Stein използва скалата на техния експеримент, за да се прецени, когато ефектът е по-голям (хетерогенност на лечебни ефекти) и да предложи някои идеи за това защо ефектът може да се случи (механизми).

Преди изследването на Doleac и Stein, че е имало два основни подхода за експериментално измервателни дискриминация. В кореспонденция проучвания изследователите създават автобиографии на измислени хора от различни раси и използват тези автобиографии, например, да се прилага за различни работни места. Бертран и Mullainathan му (2004) на хартия с запомнящо титлата "Are Емили и Грег Повече заетост Than Lakisha и Джамал? А полски опит на пазара на труда дискриминация "е една прекрасна илюстрация на проучване за кореспонденция. проучвания Кореспонденция имат сравнително ниска цена за наблюдение, което дава възможност за един единствен изследовател да се съберат хиляди наблюдения в едно типично проучване. Но, кореспонденция проучвания на расова дискриминация са били разпитани, защото имената на потенциално сигнализират много неща, в допълнение към състезанието на заявителя. Това означава, че имена като Грег, Емили, Lakisha, и Джамал може да е сигнал за социална класа в допълнение да се състезава. По този начин, всяка разлика в третирането на автобиографии на Грег и Джамал може да се дължи на повече от предполагаемите расови различия на кандидатите. Проучвания за одит, от друга страна, включват наемане на актьори от различни раси да се прилагат в лице за работни места. Въпреки че одитните изследвания предоставят ясен сигнал на раса кандидат, те са изключително скъпи за наблюдение, което означава, че те обикновено имат само стотици наблюдения.

В цифров своята област експеримент, Doleac и Stein са били в състояние да се създаде атрактивна хибрид. Те са били в състояние да се събират данни при сравнително ниска цена за наблюдение-в резултат на което хиляди наблюдения (както при проучване за кореспонденция); и те са били в състояние да сигнализира раса използване фотографии-в резултат на ясна uncounfounded сигнал на състезание (както в проучване одит ). По този начин, онлайн средата понякога дава възможност на учените да създадат нови методи за лечение, които имат свойства, които са трудно да се изгради по друг начин.

На зарядно устройство за реклами на Doleac и Stein варират в три основни измерения. Първо, те се променя характеристиките на продавача, който се сигнализира от страна снимана да държи на Ipod [бял, черен, бял, с татуировка] (Фигура 4.12). Второ, те варират прехвърляне на недвижим имот [$ 90, $ 110, $ 130]. Трето, те променя качеството на рекламен текст [високо качество и ниско качество (например, капитализация грешки и грешки spelin)]. По този начин, авторите са имали дизайн 3 X 3 X 2, която беше разположена в повече от 300 местни пазари, вариращи от градове (например, Kokomo, IN и North Platte, NE) до мега-градове (например, Ню Йорк и Лос Анджелис).

Фигура 4.12: Ръце, използвани в експеримента на Doleac и Stein (2013 г.). айпод са били продавани от продавачи с различни характеристики за измерване на дискриминацията в онлайн пазар.

Фигура 4.12: Ръце, използвани в експеримента на Doleac and Stein (2013) . айпод са били продавани от продавачи с различни характеристики за измерване на дискриминацията в онлайн пазар.

Средно за всички условия, резултатите са по-добри за бяла продавача от черната продавача, с татуирания продавача като междинни резултати. Например, бели продавачите са получили повече оферти и имат по-високи крайни продажни цени. Отвъд тези средни ефекти, Doleac и Stein оценява хетерогенността на ефекти. Например, едно предсказание от по-рано от теориите е, че дискриминация би било по-малко в пазари, които са по-конкурентоспособни. Използването на броя на получените оферти като заместител на пазарната конкуренция, авторите са установили, че черните продавачите наистина получават по-лоши оферти в пазари с ниска степен на конкуренция. Освен това, чрез сравняване на резултатите за рекламите с високо качество и ниско качество на текста, Doleac и Stein установихме, че рекламата на качеството, не оказват въздействие в ущърб сблъскват черни и татуираните продавачи. Накрая, като се възползва от факта, че рекламните съобщения са били поставени в повече от 300 пазари, авторите смятат, че черните продавачите са по-неблагоприятно положение в градовете с високи нива на престъпност и високата жилищна сегрегация. Нито един от тези резултати ни дават точно разбиране на точно защо черни продавачи са имали по-лоши резултати, но, когато се комбинира с резултатите от други проучвания, те могат да започнат да се информират теории за причините за расова дискриминация в различни видове стопански операции.

Друг пример, който показва способността на учените за провеждане на дигитални експерименти полеви в съществуващите системи е изследването от Arnout ван де Rijt и колеги (2014) на ключовете към успеха. В много аспекти на живота, на пръв поглед подобни хора в крайна сметка с много различни резултати. Едно от възможните обяснения за този модел е, че малките и по същество случаен предимства могат да заключат-в и расте с течение на времето, един процес, който учените наричат ​​кумулативното предимство. С цел да се определи дали малки първоначални успехи блокиране или изчезне, ван де Rijt и колеги (2014) встъпили в четири различни системи за връчване успех на произволно избрани участници, и след това се измерват дългосрочните последици от това произволно успех.

По-конкретно, ван де Rijt и колеги 1) обещаха пари за произволно избрани проекти по kickstarter.com , уебсайт на груповото финансиране; 2) положително оценени случайно избрани мнения на уебсайта Epinions ; 3) даде награди за случайно избрани участници да Wikipedia ; и 4), подписано избрани на случаен принцип петиции по change.org . Изследователите открили много сходни резултати във всички четири системи: за всеки отделен случай, участниците, които са били рандомизирани дадени някои ранен успех продължиха да имат по-следващ успех, отколкото техните по друг начин напълно неразличими връстници (Фигура 4.13). Фактът, че същия модел се появява в много системи увеличава външната валидността на тези резултати, тъй като това намалява вероятността, че този модел е артефакт на конкретна система.

Фигура 4.13: Дългосрочните ефекти на случаен принцип връчи успех в четири различни социални системи. Arnout ван де Rijt и колеги (2014) 1) обещаха пари за произволно избрани проекти по kickstarter.com, уебсайт на груповото финансиране; 2) положително оценени произволно избрани мненията за Epinions на сайта; 3) даде награди за случайно избрани участници да Wikipedia; и 4), подписано избрани на случаен принцип петиции по change.org.

Фигура 4.13: Дългосрочните ефекти на случаен принцип връчи успех в четири различни социални системи. Arnout ван де Rijt и колеги (2014) 1) обещаха пари за произволно избрани проекти по kickstarter.com , уебсайт на груповото финансиране; 2) положително оценени случайно избрани мнения на уебсайта Epinions ; 3) даде награди за случайно избрани участници да Wikipedia ; и 4), подписано избрани на случаен принцип петиции по change.org .

Взети заедно, тези два примера показват, че учените могат да извършват дигитални експерименти поле без да има нужда да си сътрудничим с фирми или необходимостта от изграждане на сложни цифрови системи. Освен това, Таблица 4.2 осигурява още повече примери, които показват границите на това, което е възможно, когато изследователите използват инфраструктурата на съществуващите системи за доставяне на лечение и / или измерване на резултатите. Тези експерименти са сравнително евтини за изследователите и те предлагат висока степен на реализъм. Но, тези експерименти предлагат изследователи ограничен контрол върху участниците, лечение, както и резултатите да бъдат измерени. Освен това, за експерименти, които се провеждат само в една система, изследователите трябва да са загрижени, че последиците може да се задвижва от динамиката на специфичните за системата (например, начинът, по който Kickstarter се нарежда на проекти или начинът, по който change.org нарежда петиции; за повече информация, виж дискусията за алгоритмична смущаващи в глава 2). И накрая, когато изследователите са встъпили в работни системи, трудни етични въпроси възникват около евентуална вреда към участниците, които не участват, както и системи. Ще разгледаме тези етичен въпрос по-подробно в Глава 6, и там е отличен дискусия от тях в приложението на ван де Rijt (2014) . Компромисите, които идват с работа в съществуваща система не са идеални за всеки проект, и по тази причина някои изследователи да изградят своя собствена експериментална система, темата на следващия раздел.

Таблица 4.2: Примери за експерименти в съществуващите системи. Тези експерименти изглежда да попадат в три основни категории, а тази категоризация може да ви помогне да забележите допълнителни възможности за собствено проучване. Първо, има експерименти, които включват продажба или закупуване на нещо (например, Doleac and Stein (2013) ). Второ, има опити, които включват доставят лечение на специфични участници (например, Restivo and Rijt (2012) ). И накрая, има експерименти, които включват доставят процедури за конкретни обекти, като например петиции (например, Vaillant et al. (2015) ).
тема цитат
Ефект на barnstars върху вноски в Wikipedia Restivo and Rijt (2012) ; Restivo and Rijt (2014) ; Rijt et al. (2014)
Влияние на анти-тормоза съобщение на расистки туитове Munger (2016)
Ефект на метод търг за продажба на цена Lucking-Reiley (1999)
Ефект на репутацията на цените в онлайн търгове Resnick et al. (2006)
Ефект на състезание на продавача за продажба на бейзболни картички на иБей Ayres, Banaji, and Jolls (2015)
Ефект на състезание на продавача за продажба на айпод Doleac and Stein (2013)
Ефект на състезание на гости на Airbnb наеми Edelman, Luca, and Svirsky (2016)
Ефект на дарения за успеха на проектите на Kickstarter Rijt et al. (2014)
Ефект на расова и етническа принадлежност на жилища под наем Hogan and Berry (2011)
Ефект на положителен рейтинг на бъдещите оценки за Epinions Rijt et al. (2014)
Ефект на подписи върху успеха на петиции Vaillant et al. (2015) ; Rijt et al. (2014)