4.5.1.1 Выкарыстанне існуючых асяроддзях

Вы можаце праводзіць эксперыменты ў існуючых умовах, часта без якога - небудзь кадавання або партнёрства.

Лагістыкі, самы просты спосаб зрабіць лічбавыя эксперыменты, каб накладваць эксперымент па-над існуючай асяроддзі, што дазваляе запусціць эксперымент лічбавага поля. Гэтыя эксперыменты могуць быць запушчаныя на досыць вялікіх маштабах і не патрабуюць партнёрства з кампаніяй або экстэнсіўнага развіцця праграмнага забеспячэння.

Напрыклад, Джэніфер Doleac і Люк Стэйн (2013) скарыстаўся онлайн - рынку (напрыклад, Craigslist) , каб правесці эксперымент, вымеранай з расавай дыскрымінацыяй. Doleac і Stein рэкламуемага тысячы плэерах, а таксама шляхам сістэматычнага змены характарыстык прадаўца, яны змаглі вывучыць уплыў гонкі на гаспадарчых аперацый. Акрамя таго, Doleac і Stein выкарыстоўвалі шкалу іх эксперыменту, каб ацаніць, калі эфект больш (гетэрагеннасць эфектаў лячэння) і прапанаваць некаторыя ідэі аб тым, чаму эфект можа прывесці да ўзнікнення (механізмаў).

Да вывучэння Doleac і Stein, было два асноўных падыходу да эксперыментальнага вымярэння дыскрымінацыі. У перапісцы даследавання навукоўцы ствараюць рэзюмэ выдуманых людзей розных рас і выкарыстоўваць гэтыя рэзюмэ, напрыклад, прымяняюцца для розных працоўных месцаў. Бертран і Mullainathan ў (2004) папера з памятным назвай "Эмілі і Грег больш магчымасцяў працаўладкавацца чым Lakisha і Джамала? Палявой эксперымент па рынку працы дыскрымінацыі "з'яўляецца выдатным ілюстрацыяй завочнага навучання. Даследаванні Перапіска маюць адносна нізкі кошт на назірання, што дазваляе аднаму даследніку сабраць тысячы назіранняў ў тыповым даследаванні. Але, перапіска даследаванні расавай дыскрымінацыі была пастаўлена пад сумнеў, таму што імёны патэнцыйна сігналу шмат рэчаў у дадатак да гонцы заяўніка. Гэта значыць, такія імёны, як Грег, Эмілі, Lakisha і Джамала можа сведчыць сацыяльны клас у дадатак да гонцы. Такім чынам, любое адрозненне ў звароце для рэзюмэ ад Грега і Джамала можа быць звязана з больш меркаваных расавых адрозненняў заяўнікаў. Даследаванні аўдыту, з другога боку, ўключаюць наём акцёраў розных рас , каб асабіста падаць заяву на працу. Нягледзячы на ​​тое, даследаванні аўдыту забяспечваюць выразны сігнал заяўніка расы, яны надзвычай дарогі за назірання, што азначае, што яны, як правіла, толькі сотні назіранняў.

У сваім лічбавым эксперыменце поле, Doleac і Stein змаглі стварыць прывабны гібрыд. Яны былі ў стане сабраць дадзеныя пры адносна нізкіх выдатках на назірання, у выніку чаго тысячы назіранняў (як у завочнага навучання) -і яны былі ў стане сігналу гонкі выкарыстоўваючы фатаграфіі-у выніку выразнага сігналу uncounfounded расы (як у даследаванні аўдыту ). Такім чынам, серада онлайн часам дазваляе даследчыкам ствараць новыя метады лячэння, якія маюць ўласцівасці, якія цяжка пабудаваць інакш.

Рэкламы IPOD з Doleac і Stein змяняўся ўздоўж трох асноўных памераў. Па-першае, яны вар'іравалі характарыстыкі прадаўца, які сігналізаваў рукой, сфатаграфаваў правядзенне IPOD [белы, чорны, белы з татуіроўкай] (мал 4.12). Па-другое, яны вар'іравалі запытаную цану [$ 90, $ 110, $ 130]. Па-трэцяе, яны змянялі якасць тэксту аб'явы [высокай якасці і нізкай якасці (напрыклад, памылкі капіталізацыяй і памылкі spelin)]. Такім чынам, аўтары мелі канструкцыю 3 X 3 X 2, які быў разгорнуты ў больш чым 300 мясцовых рынкаў, пачынаючы ад гарадоў (да прыкладу, Kokomo, IN і Норт-Плат, NE) у мегаполісах (напрыклад, Нью-Ёрк і Лос-Анджэлес).

Малюнак 4.12: Рукі, якія выкарыстоўваюцца ў эксперыменце Doleac і Stein (2013 года). плэерах былі прададзеныя прадаўцамі з рознымі характарыстыкамі для вымярэння дыскрымінацыі ў онлайн-рынку.

Малюнак 4.12: Рукі , якія выкарыстоўваюцца ў эксперыменце Doleac and Stein (2013) . плэерах былі прададзеныя прадаўцамі з рознымі характарыстыкамі для вымярэння дыскрымінацыі ў онлайн-рынку.

Асераднёныя ва ўсіх умовах, вынікі былі лепш белага прадаўца, чым чорны прадавец, з татуіраваныя прадавец, які мае прамежкавыя вынікі. Напрыклад, белыя прадаўцы атрымалі больш прапаноў і мелі больш высокія канчатковыя цэны продажу. Акрамя гэтых сярэдніх эфектаў, Doleac і Stein ацаніў гетэрагеннасць эфектаў. Напрыклад, адно прадказанне з больш ранняй тэорыі з'яўляецца тое, што дыскрымінацыя была б менш на рынках, якія з'яўляюцца больш канкурэнтаздольнымі. Выкарыстоўваючы шэраг прапаноў, атрыманых у якасці проксі для канкурэнцыі на рынку, аўтары выявілі, што чорныя прадаўцы сапраўды атрымліваюць горшыя прапановы на рынках з нізкай ступенню канкурэнцыі. Акрамя таго, параўноўваючы вынікі для аб'яваў з высокім якасцю і нізкай якасцю тэксту, Doleac і Штэйн выявіў, што якасць аб'яваў не ўплывае на той недахоп, з якімі сутыкаюцца чорнымі і Татуіраваныя прадаўцоў. І, нарэшце, скарыстаўшыся тым, што рэкламныя аб'явы былі размешчаны ў больш чым 300 рынках, аўтары лічаць, што чорныя прадаўцы ў больш неспрыяльным становішчы ў гарадах з высокім узроўнем злачыннасці і высокім жылы сегрэгацыі. Ні адзін з гэтых вынікаў не даюць нам дакладнае разуменне таго, чаму менавіта чорныя прадаўцы мелі горшыя вынікі, але, у спалучэнні з вынікамі іншых даследаванняў, яны могуць пачаць інфармаваць тэорый аб прычынах расавай дыскрымінацыі ў розных тыпах гаспадарчых аперацый.

Іншы прыклад , які паказвае здольнасць даследчыкаў праводзіць эксперыменты лічбавых палявых ў існуючых сістэмах з'яўляецца даследаванне Arnout ван дэ Rijt і яго калегі (2014) на ключоў да поспеху. У многіх аспектах жыцця, здавалася б, падобныя людзі ў канчатковым выніку з вельмі рознымі вынікамі. Адно з магчымых тлумачэнняў гэтай мадэлі з'яўляецца тое , што малыя і па сутнасці выпадковых перавагі могуць заблакаваць ў і расці з цягам часу, працэс , які даследчыкі называюць кумулятыўнае перавага. Для таго , каб вызначыць , з'яўляецца Ці блакіроўка ў невялікія першапачатковыя поспехі ці знікаюць, ван дэ Rijt і яго калегі (2014) ўмяшалася ў чатырох розных сістэм даруючы поспех на выпадкова выбраных удзельнікаў, а затым вымералі доўгатэрміновыя наступствы гэтага адвольнага поспеху.

Больш канкрэтна, ван дэ Rijt і яго калегі 1) Закладзеныя грошы выпадкова выбраных праектаў на Kickstarter.com , вэб - сайт Crowdfunding; 2) станоўча ацанілі выпадкова выбраных аглядаў на вэб - сайце Epinions ; 3) уручыў узнагароды выпадкова выбраных ўкладчыкаў ў Вікіпедыі ; і 4) Падпісана выпадкова выбраных хадайніцтва на change.org . Даследчыкі выявілі вельмі падобныя вынікі ва ўсіх чатырох сістэм: у кожным канкрэтным выпадку, удзельнікі, якія былі выпадковым чынам далі некаторыя ранні поспех пайшлі далей мець больш поспеху, чым наступнае іх зусім інакш неадметная аднагодкаў (мал 4.13). Той факт, што тая ж карціна ўзнікала ў многіх сістэмах павялічвае знешнюю валіднасць гэтых вынікаў, так як гэта памяншае верагоднасць таго, што гэтая мадэль з'яўляецца артэфактам якой-небудзь канкрэтнай сістэмы.

Малюнак 4.13: Доўгатэрміновыя эфекты выпадковым чынам падараванай поспеху ў чатырох розных сацыяльных сістэмах. Арнаутаў ван дэ Rijt і яго калегі (2014) 1) паабяцалі грошы на выпадкова выбраныя праекты па Kickstarter.com, вэб-сайт Crowdfunding; 2) станоўча ацанілі выпадкова выбраных гасцей на сайце Epinions; 3) уручыў узнагароды выпадкова выбраных ўкладчыкаў ў Вікіпедыі; і 4) Падпісана выпадкова выбраных хадайніцтва на change.org.

Малюнак 4.13: Доўгатэрміновыя эфекты выпадковым чынам падараванай поспеху ў чатырох розных сацыяльных сістэмах. Арнаутаў ван дэ Rijt і яго калегі (2014) 1) паабяцалі грошы на выпадкова выбраныя праекты па Kickstarter.com , вэб - сайт Crowdfunding; 2) станоўча ацанілі выпадкова выбраных аглядаў на вэб - сайце Epinions ; 3) уручыў узнагароды выпадкова выбраных ўкладчыкаў ў Вікіпедыі ; і 4) Падпісана выпадкова выбраных хадайніцтва на change.org .

Разам гэтыя два прыклады паказваюць, што даследчыкі могуць праводзіць эксперыменты лічбавыя поля без неабходнасці супрацоўнічаць з кампаніямі або неабходнасці стварэння складаных лічбавых сістэм. Акрамя таго, табліца 4.2 забяспечвае яшчэ больш прыкладаў, якія паказваюць дыяпазон таго, што магчыма, калі даследчыкі выкарыстоўваюць інфраструктуру існуючых сістэм для забеспячэння лячэння і / або ацэнкі вынікаў. Гэтыя эксперыменты з'яўляюцца адносна таннымі для даследчыкаў, і яны прапануюць высокую ступень рэалізму. Але гэтыя эксперыменты прапануюць даследчыкам абмежаваны кантроль над удзельнікамі, лячэння і вынікаў, якія павінны быць вымераныя. Акрамя таго, для эксперыментаў, якія адбываюцца толькі ў адной сістэме, даследчыкі павінны быць занепакоеныя тым, што наступствы могуць вызначацца дынамікай канкрэтнай сістэмы (напрыклад, спосаб, якім Kickstarter шэрагі праектаў або спосаб, якім change.org ранжыруе хадайніцтвы; для атрымання дадатковай інфармацыі, см абмеркаванне алгарытмічнай змяшэння ў чале 2). Нарэшце, калі даследчыкі ўмешваюцца ў працоўных сістэмах, складаныя этычныя пытанні ўзнікаюць з нагоды магчымага шкоды для ўдзельнікаў, якія не з'яўляюцца ўдзельнікамі, і сістэм. Мы будзем разглядаць гэтыя этычныя пытанні больш падрабязна ў главе 6, і ёсць выдатная іх абмеркаванне ў дадатку ван дэ Rijt (2014) . Кампрамісы, якія прыходзяць з працай у наяўнай сістэме не з'яўляюцца ідэальнымі для кожнага праекта, і па гэтай прычыне некаторыя даследчыкі будуюць сваю ўласную эксперыментальную сістэму, тэма наступнага падзелу.

Табліца 4.2: Прыклады эксперыментаў у існуючых сістэмах. Гэтыя эксперыменты, здаецца, дзеляцца на тры асноўныя катэгорыі, і гэтая катэгарызацыі можа дапамагчы вам заўважыць дадатковыя магчымасці для вашых уласных даследаванняў. Ва- першых, існуюць эксперыменты , якія залучаюць продажы або куплі што - то (напрыклад, Doleac and Stein (2013) ). Ва- другое, ёсць эксперыменты , якія залучаюць якiя прыносяць лячэнне канкрэтных удзельнікаў (напрыклад, Restivo and Rijt (2012) ). Нарэшце, існуюць эксперыменты , якія ўключаюць дастаўляюць лячэння для канкрэтных аб'ектаў , такіх як петыцыі (напрыклад, Vaillant et al. (2015) і Vaillant et al. (2015) ).
тэма цытаванне
Ўплыў barnstars на ўклады ў Вікіпедыі Restivo and Rijt (2012) ; Restivo and Rijt (2014) ; Rijt et al. (2014) і Rijt et al. (2014)
Ўплыў анты-дамаганнях паведамленні аб расісцкіх твітаў Munger (2016)
Ўплыў метаду аўкцыёну па продажы цане Lucking-Reiley (1999)
Ўплыў рэпутацыі на кошце ў інтэрнэт-аўкцыёнах Resnick et al. (2006)
Ўплыў расы прадаўца на продаж бейсбольных картак на eBay Ayres, Banaji, and Jolls (2015)
Ўплыў расы прадаўца на продаж плэерах Doleac and Stein (2013)
Ўплыў расы госця на Airbnb арэнды Edelman, Luca, and Svirsky (2016)
Ўплыў ахвяраванняў на поспех праектаў на Kickstarter Rijt et al. (2014)
Ўплыў расы і этнічнай прыналежнасці на жыллё ў арэнду Hogan and Berry (2011)
Ўплыў станоўчага рэйтынгу на будучыя рэйтынгі на Epinions Rijt et al. (2014)
Ўплыў подпісаў на поспех петыцый Vaillant et al. (2015) і Vaillant et al. (2015) ; Rijt et al. (2014) і Rijt et al. (2014)