4.4 Moviĝante preter simplaj eksperimentoj

Ni movi preter simplaj eksperimentoj. Tri konceptoj estas utila por riĉa eksperimentoj: valideco, heterogeneco de traktado efikoj kaj mekanismo.

Esploristoj kiuj estas novaj al eksperimentoj ofte enfokusigi tre specifa, mallarĝa demando: tion faras traktadon "verkon"? Ekzemple, faras alvokon de volontulo kuraĝigi iun voĉdoni? Faras ŝanĝanta retejon butono de bluo al verda kresko klako-tra indico? Bedaŭrinde, loza vortumo pri kio "funkcias" obskuras la fakton ke mallarĝe temigis eksperimentoj ne vere diras al vi ĉu traktado "laboras" en ĝenerala senco. Prefere, mallarĝe temigis eksperimentoj respondi multe pli specifa demando: kio estas la averaĝa efikon de tiu specifa traktado kun tiu specifa apliko por ĉi tiu loĝantaro de partoprenantoj en ĉi tiu epoko? Mi vokos eksperimentoj kiuj enfokusigas sur tiu mallarĝa demando simplaj eksperimentoj.

Simplaj eksperimentoj povas havigi valorajn informojn, sed maltrafas respondi multajn demandojn, kiuj estas ambaŭ grava kaj interesa kiel ekzemple: estas tie kelkaj personoj, por kiuj la traktado havis pli grandan aŭ malgrandan efikon ?; Estas tie alia traktado kiu estus pli efika ?; Kiel tiu eksperimento rilatas al pli larĝaj sociaj teorioj?

Por montri la valoron de movanta preter simplaj eksperimentoj, ni pripensu unu el miaj preferataj analoga kampo eksperimentoj, studo de P. Wesley Schultz kaj kolegoj sur la rilato inter sociaj normoj kaj energio konsumo (Schultz et al. 2007) . Schultz kaj kolegoj pendis doorhangers sur 300 domanaroj en San Marcos, Kalifornio, kaj tiuj doorhangers transdonis malsamajn mesaĝojn desegnita por kuraĝigi energio konservado. Tiam, Schultz kaj kolegoj mezuris la efikon de tiuj mesaĝoj sur elektro konsumado, ambaŭ post unu semajno kaj tri semajnojn; vidu Figuro 4.3 por pli detala priskribo de la eksperimenta dezajno.

Figuro 4.3: Skema de dezajno de Schultz et al. (2007). La kampo eksperimento implikis vizitante ĉirkaŭ 300 domanaroj en San Marcos, Kalifornio kvinfoje super ok semajno periodo. Sur ĉiu viziti la esploristoj permane prenis vocxlegu la domo potenco metro. Sur du el la vizitoj la esploristoj metis doorhangers sur la domo disponigante informojn pri ilia energio uzado. La esploro demando estis kiamaniere la enhavo de tiuj mesaĝoj devus efiki energio uzo.

Figuro 4.3: Skema de dezajno de Schultz et al. (2007) . La kampo eksperimento implikis vizitante ĉirkaŭ 300 domanaroj en San Marcos, Kalifornio kvinfoje super ok semajno periodo. Sur ĉiu viziti la esploristoj permane prenis vocxlegu la domo potenco metro. Sur du el la vizitoj la esploristoj metis doorhangers sur la domo disponigante informojn pri ilia energio uzado. La esploro demando estis kiamaniere la enhavo de tiuj mesaĝoj devus efiki energio uzo.

La eksperimento havis du kondiĉoj. En la unua kondiĉo, domanaroj ricevis ĝeneralan energio ŝparado konsiletoj (ekz, uzo ŝatantoj anstataŭ aero condicionantes) kaj informo pri ilia domanaro energio uzado kompare al la mezumo de la energio uzado en ilia najbareco. Schultz kaj kolegoj nomis tion la priskriba normativa kondiĉo pro la informo pri la energio uzita en ilia najbareco disponigis informojn pri tipa konduto (te priskriban normo). Kiam Schultz kaj kolegoj rigardis la rezulta energio uzado en tiu grupo, la traktado ŝajnis havi neniun efikon, ĉu en la mallongperspektiva aŭ longdaŭra; alivorte, la traktado ne ŝajnis "laboro" (Figuro 4.4).

Sed, feliĉe, Schultz et al. (2007) ne laŭigi ĉi simplisma analizo. Antaŭ la eksperimento komencis Ili rezonis ke pezaj uzantoj de elektro-popolo super la duona-povus redukti lian konsumon, kaj ke lumo uzantoj de elektro-popolo sub la duona-efektive povus pliigi lian konsumon. Kiam ili rigardis la datumoj, tio estas ĝuste kion ili trovis (Figuro 4.4). Tiel, kio aspektis kiel traktado kiu estis havanta neniun efikon estis efektive traktado kiu havis du kompensante efektoj. La esploristoj nomis tiun kontraŭcela kresko inter la lumo uzantoj bumerango efekton.

Figuro 4.4: Rezultoj de Schultz et al. (2007). La unua panelo montras ke la priskriba normo traktado havas laŭtaksan nulo mezumo traktado efekto. Tamen, la dua panelo montras ke tiu mezumo traktado efekto efektive konsistas el du kompensante efektoj. Cxar peza uzantoj, la traktado malpliigis uzado sed por lumo uzantoj, la traktado pliigis uzado. Fine, la tria panelo montras ke la dua kuracado, kiu uzis priskriba kaj prescriptiva normoj, havis proksimume la saman efikon sur pezaj uzantoj sed mildigita la bumerango efiko sur lumo uzantoj.

Figuro 4.4: Rezultoj de Schultz et al. (2007) . La unua panelo montras ke la priskriba normo traktado havas laŭtaksan nulo mezumo traktado efekto. Tamen, la dua panelo montras ke tiu mezumo traktado efekto efektive konsistas el du kompensante efektoj. Cxar peza uzantoj, la traktado malpliigis uzado sed por lumo uzantoj, la traktado pliigis uzado. Fine, la tria panelo montras ke la dua kuracado, kiu uzis priskriba kaj prescriptiva normoj, havis proksimume la saman efikon sur pezaj uzantoj sed mildigita la bumerango efiko sur lumo uzantoj.

Plui, Schultz kaj kolegoj anticipis tiun eblon, kaj en la dua kondiĉo ili deplojiĝis iomete malsaman traktadon, oni eksplicite dizajnita por forigi la bumerango efekton. La hejmoj en la dua kondiĉo ricevis la ĝusta sama traktado Ĝenerala energio ŝparado konsiletoj kaj informo pri ilia domanaro energio uzado kompare al la ilia najbareco-kun unu eta Krome: por homoj kun sub-mezumo ftizo la esploristoj aldonis :) kaj por personoj kun super-duonan konsumon aldonis :(. Tiuj miensimboloj estis dizajnitaj por funkciigi kion la esploristoj nomas prescriptiva normoj. prescriptiva normoj rilatas al perceptoj de kio estas kutime aprobita (kaj malaprobis) dum priskriba normoj rilatas al perceptoj de kio estas kutime farita (Reno, Cialdini, and Kallgren 1993) .

Aldonante ĉi tiu eta emoticon, la esploristoj draste reduktis la bumerango efiko (Figuro 4.4). Tiel, farante ĉi tiu simpla ŝanĝo-ŝanĝo kiu estis motivita de abstrakta socia psikologia teorio (Cialdini, Kallgren, and Reno 1991) -la esploristoj povis turni programon el kiu ne ŝajnas funkcii en kiu laboris, kaj, samtempe, ili povis kontribui al la ĝenerala kompreno de kiom sociaj normoj influas homan konduton.

Ĉe tiu punkto, tamen, vi eble rimarkos, ke io estas iom malsamaj pri tiu eksperimento. Aparte, la eksperimento de Schultz kaj kolegoj ne vere havas kontrolon grupo en la sama vojo ke randomigitaj kontrolitaj eksperimentoj fari. La komparo inter ĉi desegno kaj la dezajno de Restivo kaj van de Rijt ilustras la diferencojn inter du gravaj dezajnoj uzita de esploristoj. Intere-temoj dezajnoj, kiel ekzemple Restivo kaj van de Rijt, estas traktado grupo kaj kontrolgrupo, kaj en ene-temoj desegnas la konduton de partoprenantoj estas komparita antaŭ kaj post la traktado (Greenwald 1976; Charness, Gneezy, and Kuhn 2012) . En ene-temo eksperimento estas kvazaŭ ĉiu partoprenanto agas kiel ŝia propra kontrolgrupo. La forton de inter-subjektoj dezajnoj estas kiu havigas protekton kontraŭ confounders (kiel mi priskribis antaŭe), kaj la forto de ene-temoj eksperimentoj estas pliigita precizeco en taksoj. Kiam ĉiu partoprenanto agas kiel ilia propra kontrolo, inter-partoprenanto variado estas forigitaj (vidu Teknika Apendico). Por prefigurar al kiu venos poste, kiam mi proponas konsilojn pri dizajnado diĝita eksperimentoj, estas fina dezajno, nomita miksita dezajno, kiu kombinas la plibonigitan precizecon de ene-temoj dezajnoj kaj la protekto kontraŭ konfuzante de inter-subjektoj dezajnoj.

Figuro 4.5: Tri eksperimentaj dezajnoj. Norma randomigitaj kontrolitaj eksperimentoj uzas inter-subjektoj dezajnoj. Ekzemplo de inter-subjektoj dezajno estas Restivo kaj van de Rijt la (2012) eksperimento sur barnstars kaj kontribuoj al Vikipedio: esploristoj hazarde dividitaj partoprenantoj en traktado kaj kontrolo grupoj, donis partoprenantoj en la traktado grupo barnstar kaj kompari rezultojn por la du grupoj. Dua tipo de dezajno estas ene-temoj dezajno. La du eksperimentojn en Schultz kaj kolego (2007) studo sur sociaj normoj kaj energio uzo ilustri ene-temoj dezajno: investigadores komparis la elektro uzo de partoprenantoj antaŭ kaj post ricevi la traktadon. Ene-temoj dezajnoj proponi plibonigita statistika precizeco forigante inter subjekto varianco (vidu Teknika Apendico), sed ili estas malfermitaj al ebla confounders (ekz, ŝanĝoj en klimato inter la antaŭ-traktado kaj traktado periodo) (Greenwald 1976; Charness, Gneezy kaj Kuhn 2012). Ene-temoj dezajnoj estas ankaŭ iam nomata ripetis mezuroj dezajnoj. Fine, miksita dezajnoj kombinas la plibonigitan precizecon de ene-submetas dezajnoj kaj la protekto kontraŭ konfuzante de inter-subjektoj dezajnoj. En miksita dezajno, esploristo komparas la ŝanĝon en rezultoj por homoj en la traktado kaj kontrolo grupoj. Kiam esploristoj jam havas antaŭ-traktado informo, kiel estas la kazo en multaj diĝita eksperimentoj, miksita dezajnoj estas preferinda al inter-subjektoj dezajnoj pro gajnoj en precizeco (vidu Teknika Apendico).

Figuro 4.5: Tri eksperimentaj dezajnoj. Norma randomigitaj kontrolitaj eksperimentoj uzas inter-subjektoj dezajnoj. Ekzemplo de inter-subjektoj dezajno estas Restivo kaj van de Rijt la (2012) eksperimento sur barnstars kaj kontribuoj al Vikipedio: esploristoj hazarde dividitaj partoprenantoj en traktado kaj kontrolo grupoj, donis partoprenantoj en la traktado grupo barnstar kaj kompari rezultojn por la du grupoj. Dua tipo de dezajno estas ene-temoj dezajno. La du eksperimentojn en Schultz kaj kolego (2007) studo sur sociaj normoj kaj energio uzo ilustri ene-temoj dezajno: investigadores komparis la elektro uzo de partoprenantoj antaŭ kaj post ricevi la traktadon. Ene-temoj dezajnoj proponi plibonigita statistika precizeco forigante inter subjekto varianco (vidu Teknika Apendico), sed ili estas malfermitaj al ebla confounders (ekz, ŝanĝoj en klimato inter la antaŭ-traktado kaj traktado periodo) (Greenwald 1976; Charness, Gneezy, and Kuhn 2012) . Ene-temoj dezajnoj estas ankaŭ iam nomata ripetis mezuroj dezajnoj. Fine, miksita dezajnoj kombinas la plibonigitan precizecon de ene-submetas dezajnoj kaj la protekto kontraŭ konfuzante de inter-subjektoj dezajnoj. En miksita dezajno, esploristo komparas la ŝanĝon en rezultoj por homoj en la traktado kaj kontrolo grupoj. Kiam esploristoj jam havas antaŭ-traktado informo, kiel estas la kazo en multaj diĝita eksperimentoj, miksita dezajnoj estas preferinda al inter-subjektoj dezajnoj pro gajnoj en precizeco (vidu Teknika Apendico).

Entute, la dezajno kaj rezultoj de Schultz et al. (2007) montras la valoron de movanta preter simplaj eksperimentoj. Feliĉe, vi ne bezonas esti genio por krei eksperimentoj kiel tiu. Sociaj sciencistoj evoluigis tri konceptoj kiuj gvidos vin al riĉa kaj pli krea eksperimentojn: 1) valideco, 2) heterogeneco de traktado efektoj, kaj 3) mekanismoj. Tio estas, se vi tenas tiujn tri ideojn en menso dum vi desegni vian eksperimenton, Vi nature krei pli interesaj kaj utilaj eksperimentoj. Por ilustri ĉi tiujn tri konceptojn en ago, mi priskribi kelkajn sekvado parte diĝita kampo eksperimentoj konstruis la elegantan dezajnon kaj ekscita rezultoj en Schultz et al. (2007) . Kiel vi vidos, per pli zorgema dezajno, efektivigo, analizo kaj interpreto, vi ankaŭ povas moviĝi preter simplaj eksperimentoj.