4.3 эксперименттердин эки өлчөмдөрү: Лаборатория-талаа жана аналогдук-санариптик

Лабораториялык эксперименттер көзөмөл сунуш, тажрыйбалар реалдуулук менен сунуш жана санариптик тажрыйбалар масштабы боюнча көзөмөлдү жана реалдуулук менен айкалыштырган.

Эксперименттер ар кандай калыптарга жана өлчөмдөрдө келет. Бирок, бул ар түрдүүлүгүнө карабастан, изилдөөчүлөр пайдалуу лабораториялык тажрыйбаларды жана талаа тажрыйбаларды ортосунда үзгүлтүксүз бирге эксперименттерди уюштурууга байкашкан. Азыр болсо, изилдөөчүлөр да аналогдук тажрыйба жана санариптик тажрыйба ортосундагы континуум бирге эксперименттерди уюштуруу керек. Эки өлчөмдүү дизайн мейкиндик сен зор мүмкүнчүлүк ар түрдүү мамилелерге күчтүү жана алсыз жактарын, ошондой эле сунуш жерлерди (Figure 4.1) түшүнүүгө жардам берет.

Figure 4.1: тажрыйба жасоо үчүн долбоорлоо мейкиндигин БУУнун. Мурда, эксперименттер лабораториялык-талаа өлчөмү менен бирге ар түрдүү. Эми алар да аналог-санариптик өлчөмү боюнча ар түрдүү. Менин оюмча, улуу мүмкүнчүлүк аянты санариптик тажрыйбалар болуп эсептелет.

Figure 4.1: тажрыйба жасоо үчүн долбоорлоо мейкиндигин БУУнун. Мурда, эксперименттер лабораториялык-талаа өлчөмү менен бирге ар түрдүү. Эми алар да аналог-санариптик өлчөмү боюнча ар түрдүү. Менин оюмча, улуу мүмкүнчүлүк аянты санариптик тажрыйбалар болуп эсептелет.

Мурда изилдөөчүлөр тажрыйба уюштурулган негизги жол лаборатория-талаа өлчөмү менен бирге болду. Коомдук илимдер боюнча тажрыйбаларды көпчүлүк студенттер, албетте кредит үчүн лабораторияга башка милдеттерди аткарат лабораториялык эксперименттер бар. ал коомдук жүрүм-турум жөнүндө абдан белгилүү бир теорияны сынаш үчүн иштелип белгилүү дарылоонун түзүү изилдөөчүлөр берет, анткени, психология боюнча эксперимент бул түрү изилдөө басымдуулук кылат. белгилүү бир көйгөйлөр, анткени, бир нерсе, мисалы, өзгөчө жагдайда ушундай адаттан тыш милдеттерди жүзөгө ашырган сыяктуу адаттан тыш адамдардын адамдык жүрүм-туруму тууралуу күчтүү жыйынтыктарды жөнүндө бир аз кызыктай сезилет. Мындай кооптонуулар талаа тажрыйба карай жылышы алып келген. Тажрыйбалар көбүрөөк жаратылыш шарттарында, көп милдеттерди аткарууда, катышуучулардын өкүлдүк топтор менен клиникалык изилдөөлөр контролдоо эксперименттер күчтүү дизайнын бириктиребиз.

кээ бир адамдар лабораториялык жана талаа тажрыйбаларды ыкмаларын атаандаш деп ойлошот, бирок, ар кандай күчтүү жана алсыз жактарын менен кошумча ыкмаларын деп ойлойбуз жакшы. Мисалы, Correll, Benard, and Paik (2007) да, балалуу аялдарга караганда бир лабораториялык эксперимент жана Америка Кошмо Штаттарында «салам жаза.» Булактарын табуу аракетинде бир талаа эксперимент, энелер аз акча табуу да колдонгон сыяктуу иштерде иштешүүдө окшош тажрыйбасы бар аялдар салыштыруу. Бул үлгү боюнча мүмкүн болушунча баяндар бар, ал эми бир жумуш энелердин каршы жан болуп саналат. (Кызыктуусу, карама-каршы, ата-бабаларынын да тиешелүү болуп калды, алар салыштырмалуу бала эркектерге караганда көп табышат). Лабораторияда бир тармагында бири: энелердин каршы мүмкүн басым баа берүү максатында, Коррелл жана кесиптештер эки эксперименттер чуркап барды.

Биринчиден, лабораториялык эксперимент Коррелл жана кесиптештери колледж студенттери болгон катышуучулар, айтып, бир California негизделген баштапкы байланыш компаниясы өзүнүн жаңы East Coast маркетинг бөлүмү менен алып бир адам үчүн жумуш издөө өткөрө баштадым. Студенттер компания Ишке кабыл алууда жардам бергиси келген, алар бир нече болуучу талапкерлердин резюмелерин карап чыгуу үчүн, ошондой эле иш үчүн чалгындоо, чын ыкластуулук жана берилгендик сыяктуу өлчөмдөрү бир катар талапкерлерди баа сурады деп айтышты. Андан сырткары, студенттер өтүнмө жана алар баштап эмгек акы катары сунуш эмне Жумушка сунуш кылат суралды. студенттер үчүн укол Бирок, резюме, атайын бир нерсе башка окшош болуп курулган: жандана баштаган кээ бир энелик белги (бир ата-энелер жана мугалимдер бирикмесинин тиешеси тизмеленип) жана кээ бир эмес. Коррелл студенттер энелерге жумушка сунуш аз болгон жана аларга төмөнкү баштапкы айлык сунуш деп тапты. Андан ары, рейтинги жана жумушка байланыштуу чечимдерди да статистикалык талдоо жүргүзүү аркылуу, Коррелл энелердин кемчиликтери негизинен энелер компетенттүүлүгүн жана берилгендик көрсөтүү жагынан төмөн баа алышкан менен түшүндүрүлөт деп табылган. Башкача айтканда, Коррелл Ал сапаттардын энелер аз камсыз болгон аркылуу механизм бар деп ишенет. Ошентип, бул лабораториялык эксперимент себептик таасирин өлчөө жана бул үчүн мүмкүн болгон бир түшүндүрмө алып келүү үчүн Коррелл жана кесиптештерине берди.

Албетте, бүткүл АКШнын эмгек, балким, бир нече жүз Магистранттардын чечиминин негизинде рыногунда эч качан толук убакыт жумушта иштечү, жалгыз адамдарды жалдап берсин жөнүндө тыянакка санашкан болушу мүмкүн. Ошондуктан, Коррелл жана кесиптештери да кошумча талаа эксперимент жүргүзүлгөн. изилдөөчүлөр жасалма коштоочу кат жана ачып жөнөтүү менен рекламалоого жумуш тешиктери жүздөгөн жооп берди. Магистранттардын көрсөтүлгөн материалдарды сыяктуу, кээ бир Резюме энелик ишара жана кээ бир эмес. Коррелл жана кесиптештер энелер аз бирдей квалификациялуу балалуу аялдарга караганда маектешүү үчүн кайра чакырып алуу мүмкүн болгон эмес. Башкача айтканда, табигый жагдайда кыйыр чечимдерди кабыл алуу реалдуу иш берүүчүлөр көп Магистранттардын сыяктуу иш. Алар ошол себептен ушундай чечим кабыл алган эмес? Тилекке каршы, биз билбейбиз. изилдөөчүлөр талапкерлерди баалап же чечимди түшүндүрүп берүү үчүн иш берүүчүлөрдү суроо бере алышкан жок.

тажрыйбаларды бул жуп жалпы лабораториялык жана талаа эксперименттери жөнүндө көп нерсени билүүгө болот. Лабораториялык эксперимент катышуучулары чечим кабыл алган айлана-чөйрөгө жалпы көзөмөл жакын изилдөөчүлөр сунуш. Ошондуктан, мисалы, лабораториялык экспериментте, Коррелл бардык Резюме тынч жагдайда окуп жатканын камсыз кылууга жөндөмдүү болгон; талаа экспериментте, жандана баштаган кээ бир да окуп чыккан эмес. Андан ары, лабораториялык шартта катышуучулары, алар изилдеп жатканын билебиз, анткени изилдөөчүлөр көбүнчө катышуучулар чечим чыгарууга эмне үчүн кошумча маалыматтарды чогултуу, аларды түшүнүүгө жардам бере алат. Мисалы, Коррелл түрдүү өлчөмдөр боюнча талапкерлерди баа лабораториялык экспериментте катышуучуларын сурады. Технологиялык маалыматтарды бул изилдөөчүлөр катышуучулары резюме кандай айырмачылыктарга артында механизмдерин түшүнүүгө жардам берет.

Экинчи жагынан, мен жөн гана артыкчылыгы катары сүрөттөлгөн бул так ушундай эле мүнөздөмөсү да кээде терс жактары каралат. талаа эксперименттер артык изилдөөчүлөр, алар бири-бири менен тыгыз байкалып жаткан лабораториялык тажрыйбаларды катышуучулары такыр башкача иш-аракет деп эсептешет. Мисалы, лабораторияда эксперимент катышуучулары изилдөө максатын ойлогон жана жан пайда болгон эмес, ошондой эле, алардын жүрүм-турумун өзгөрткөн мүмкүн. Андан ары талаа эксперименттер жандана баштаган бул кичинекей айырмачылыктарды талашышы мүмкүн артык изилдөөчүлөр гана абдан таза, уруксуздукка лаборатория шарттарында туруштук бере алат, ошентип, лабораториялык эксперимент чыныгы жумушка чечимине эне күчүнө ашыкча баа берет. Акыр-аягы, талаа тажрыйба көптөгөн жактоочулары кызыктай катышуучуларынын боюнча лабораториялык эксперименттер таянуу сындаган: Батыш, Билимдүү, Өнөр, бай, негизинен студенттер, ошондой эле демократиялык өлкөлөрдө (Henrich, Heine, and Norenzayan 2010) . Коррелл жана кесиптештер менен тажрыйба (2007) лабораториялык-талаа континуум эки чектен көрсөтүп турат. Бул эки аша ортосунда ушундай лаборатория кирген эмес окуучуларды тартуу же талаага барып, бирок дагы деле катышуучулары өзгөчө тапшырманы аткара ээ гибриддик үлгүлөрүн, анын ичинде ыкмалардын ар түрдүү бар.

аналогдук-санариптик: Мурда бар лаборатория-талаа өлчөм тышкары, санариптик жаш изилдөөчүлөр азыр тажрыйба ар кандай мүмкүн болгон бирге экинчи ири өлчөм бар дегенди билдирет. таза лабораториялык тажрыйбалар, таза тажрыйбалар жана алардын ортосундагы гибриддерди түрдүү бар эле, таза аналогдук эксперименттер, таза санариптик эксперименттерге жана гибриддерди түрдүү бар. Бул өлчөм расмий аныктама сунуш татаал, бирок, бир пайдалуу иш аныктамасы толугу менен санариптик эксперимент, катышуучуларды тартуу randomize дарылоо сактап, жана натыйжаларды өлчөө үчүн санариптик объектилерин пайдаланууга эксперименттер болуп саналат. Мисалы, Restivo жана Van де Rijt болгон (2012) бул кадамдардын төрт үчүн санариптик системасын колдонгон, анткени barnstars жана Wikipedia бир толугу менен санариптик эксперименти изилдөө. Ошо сыяктуу эле, толугу менен аналогдук эксперименттер бул төрт кадам кайсы үчүн санариптик объектилерин пайдалануу үчүн эмес, тажрыйба бар. психология боюнча классикалык эксперименттердин көп аналогдук эксперименттер бар. Бул эки аша ортосунда төрт кадам аналогдук жана санариптик системасынын биргелешип бар жарым-жартылай санариптик эксперименттер бар.

Сын, мүмкүнчүлүк гана онлайн санариптик эксперимент эмес, аткаруу үчүн. Изилдөөчүлөр дарылоо жеткирүү же натыйжаларын өлчөө үчүн физикалык дүйнөдө санариптик аппараттарды колдонуу менен жарым-жартылай санариптик эксперименттер иштете аласыз. Мисалы, изилдөөчүлөр натыйжаларын өлчөө үчүн курулган чөйрөдө дарылоо же сенсордук куткара акылдуу уюлдук тийиши мүмкүн. Чынында, биз бул бөлүмдө кийин көрө турганыбыздай, изилдөөчүлөр коомдук нормаларды жана үй-8,5 млн тартуу энергия керектөө жөнүндө эксперименттерде натыйжаларын өлчөө үчүн буга чейин үй электр метр колдонгон (Allcott 2015) . санарип аппараттары сайын адамдардын өмүрүнүн жана сенсорлор курулган чөйрөгө аралаша болуп киргизилген болуп, бул мүмкүнчүлүктөрдү физикалык дүйнөдө жарым-жартылай санариптик эксперименттерди жүргүзүү үчүн кескин жогорулайт. Башка сөз менен айтканда, санариптик эксперименттер эле онлайн эксперименттер эмес.

Санариптик түйүндөрдө жерде лаборатория-талаа континуум бирге тажрыйба жасоо үчүн жаңы мүмкүнчүлүктөрдү түзөт. таза лабораториялык тажрыйбаларды, мисалы, изилдөөчүлөр катышуучуларынын жүрүм-кылдат өлчөө үчүн санариптик системаларын колдоно алышат; жакшыртылган өлчөө ушул типтеги бир мисал тигилип жайгашкан так жана туруктуу иш-чараларды камсыз көз-байкоо жабдуулары болуп саналат. санарип курагында онлайн лаборатория сыяктуу эксперименттерди жүргүзүү үчүн мүмкүнчүлүк түзөт. Мисалы, изилдөөчүлөр онлайн тажрыйба үчүн катышуучуларды (Figure 4.2) тартууга тез Amazon механикалык турк (MTurk) кабыл алышкан. MTurk акча ошол милдеттерди аткарууну каалайбыз «иш берүүчүлөр» «кызматташтары» менен аяктайт болушу керек милдеттерди бар туура. салттуу эмгек рынокторунда айырмаланып, бирок, аягына чейин Адатта, милдеттери гана бир нече мүнөт талап кылынат, ошондой эле иш берүүчүнүн жана кызматкердин ортосундагы бардык өз ара шарттуу болуп саналат. элди салттуу лабораториялык тажрыйбаларды-төлөөгө MTurk опокшош аспектилери, алар үчүн эмне кыла алмак эмес милдеттерди аткарууга, себеби эркин табигый эксперименттердин айрым түрлөрү үчүн ылайыкташтырылып жаратылган. Негизинен, MTurk катышуучулары-жалдоо бир көлмө башкаруу жана эл-жана изилдөөчүлөр катышуучуларынын дайыма жеткиликтүү көлмөгө таптап, ошол объектилерин өз кызыкчылыгыбызга колдонгон жокпуз төлөө үчүн объектилерди жараткан.

4.2-сүрөт: Papers Amazon механикалык түрк (MTurk) (Bohannon 2016) маалыматтарын пайдалануу менен жарыяланган. MTurk жана башка онлайн эмгек рыноктору изилдөөчүлөрдүн тажрыйба үчүн катышуучуларды тартуу үчүн ыңгайлуу жолун сунуштайт.

4.2-сүрөт: Papers Amazon механикалык түрк (MTurk) маалыматтарын пайдалануу менен жарыяланган (Bohannon 2016) . MTurk жана башка онлайн эмгек рыноктору изилдөөчүлөрдүн тажрыйба үчүн катышуучуларды тартуу үчүн ыңгайлуу жолун сунуштайт.

Санарип эксперименттер талаа сыяктуу эксперименттердин үчүн да көп мүмкүнчүлүктөрдү түзөт. Санарип тажрыйбалар мүмкүн механизмдерин (лабораториялык тажрыйбаларды сыяктуу) жана ар түрдүү катышуучулары табигый чөйрөнүн реалдуу чечимдерди кабыл алуу түшүнүү үчүн катуу көзөмөл жана технологиялык маалыматтарды сунуш кыла алат (талаа тажрыйба сыяктуу). мурунку тажрыйбаларга жакшы мүнөздөмөлөрү ушул айкалыштырып тышкары, санариптик тажрыйбалар, ошондой эле окшош лабораториялык жана талаа эксперимент татаал үч мүмкүнчүлүктөрдү сунуштайт.

Биринчиден, аналогдук лаборатория жана тажрыйбалар катышуучуларынын жүздөгөн бар, ал эми санариптик тажрыйбалар катышуучуларынын миллиондогон болушу мүмкүн. масштабда бул өзгөрүү санарип эксперименттер нөл өзгөрмө нарк боюнча маалыматтарды өндүрө алышат. Ошол изилдөөчүлөр адатта наркын көбөйтүү эмес, катышуучулардын санын көбөйтүү, эксперименталдык объектилерди түзгөн бир жолу болуп саналат. 100 же андан ашык бир себеп менен катышуучулардын санын көбөйтүү бир сандык өзгөрүүсү эмес, бул сапаттык өзгөрүү, анткени тажрыйба ар кандай нерселерди үйрөнүүгө изилдөөчүлөр (мисалы, дарылоо таасирин Микрогетероген) жана башка эксперименттик долбоорлорду чуркап мүмкүнчүлүк берет ( мисалы, чоң топ эксперименттер). Бул жагдай абдан маанилүү болгондуктан, мен санариптик эксперименттер түзүү жөнүндө сунуштар качан бөлүмдүн аягында ал кайтып келет.

Экинчиден, ал эми көпчүлүк аналогдук лаборатория жана тажрыйбалар катышуучулардын десек алигиге чейин санариптик тажрыйбалар көп изилдөө долбоорлоо жана талдоо этаптары катышуучулары жөнүндө маалыматтарды колдонуу мамиле. Алар толугу менен ченегенде, айлана-чөйрө менен ишке ашат, анткени бул кошумча маалыматты, алдын-ала дарылоо маалымат деп аталат, санариптик эксперименттерде көп болот. Мисалы, Facebook бир изилдөөчү Магистранттардын менен стандарттык лабораториялык эксперимент иштеп чыгууда илимий алда канча алдын алуу жөнүндө маалымат бар. Бул алдын-ала дарылоо маалымат катышуучулар катары десек алигиге мамиле тышкары кыймылдай изилдөөчүлөр берет. Тактап айтканда, алдын-ала дарылоо маалымат көбүрөөк натыйжалуу тажрыйбалык долбоорлорду сыяктуу бөгөт болуп берет (Higgins, Sävje, and Sekhon 2016) катышуучулардын жана максаттуу жалдоо (Eckles, Kizilcec, and Bakshy 2016) учун дагы кыраакы талдоо сыяктуу кошкондукту баалоо катары дарылоо таасирлерин (Athey and Imbens 2016a) жакшыртууга жана тактык үчүн covariate жөнгө салуу (Bloniarz et al. 2016) .

Үчүнчүдөн, көп аналогдук лаборатория жана тажрыйбалар убакыттын салыштырмалуу кысылган өлчөмүндө дарылоо жана чара натыйжаларга жетишүү, ал эми кээ бир санарип тажрыйбалар убакыт жана убакыттын өтүшү менен таасири да ченесе болот колуна салып берет дарылоо кирет. Мисалы, Restivo жана Van де Rijt эксперименти 90 күн бою күн сайын ченеп жыйынтыктарын жана тажрыйба бир мен силерге бөлүмдө жөнүндө кийин айтып берем элек (Ferraro, Miranda, and Price 2011) , негизинен, 3 жылдан ашуун жыйынтыктарын салат жок наркы. Бул үч мүмкүнчүлүктөр-көлөмү, алдын ала-дарылануу маалымат жана узунунан кеткен дарылоо жана жыйынтык абдан жалпы маалыматтар бар эксперименттер өлчөө системалары дайыма боюнча үстүнө чуркап жатышат (өлчөө системалары боюнча ар дайым боюнча көбүрөөк маалымат үчүн 2-бөлүмүн карагыла).

санарип тажрыйбалар көп мүмкүнчүлүктөрдү сунуш, ал эми ошондой эле, аналогдук лабораториялык тажрыйбалар менен кээ бир алсыз бөлүшүү. Мисалы, эксперимент өткөндү изилдөө үчүн пайдаланылышы мүмкүн эмес жана алар гана башкара алат дарылоо таасирин баалоого болот. Мындан тышкары, эксперимент, албетте, саясат туура жолго салуу үчүн пайдалуу болсо да, так-нускоочу көрсөтмөлөрдү, анткени алар ушундай экологиялык көз карандылык катары кыйындыгы бир аз чектелген, сактоо көйгөйлөрү жана салмактуулук таасири сунуш кыла алат (Banerjee and Duflo 2009; Deaton 2010) . Акыр-аягы, санариптик тажрыйбалар талаа эксперименттери менен түзүлгөн этикалык тынчсызданууларын коёт. кайтуу жана туш келди талаа тажрыйбаларды жактагандар жөндөмүн сурнай миллиондогон адамдар тарабынан кабыл алынган натыйжалардын чечимдерине кийлигишет. Мындай өзгөчөлүктөр кээ бир илимий артыкчылыктарды сунуш, бирок алар да тажрыйбалар этикалык татаал кылып (изилдөөчүлөр бир массалык масштабда «лабораториялык келемиштер» сыяктуу адамдарды дарылоо катары ал жөнүндө ойлонууга) болот. Андан тышкары, катышуучулардын мүмкүн кабылуу тышкары, санариптик тажрыйбалар, анткени алардын масштабдагы, ошондой эле коомдук системасын иштеп үзгүлтүккө жөнүндө тынчсыздандырган маселелерди козгой алышат (мисалы, Restivo жана дер Rijt өтө көп barnstars берген болсо, Уикипедиянын сыйлык системасын бузат байланыштуу тынчсыздануулар) .