4.6.1 Oħloq żero data tan-nefqiet varjabbli

Iċ-ċavetta għall-ħidma ta 'esperimenti kbar hija biex issuq l-ispiża varjabbli tiegħek għal żero. L-aħjar modi biex tagħmel dan huma l-awtomazzjoni u t-tfassil ta 'esperimenti pjaċevoli.

Esperimenti diġitali jista 'jkollhom strutturi ta' spejjeż drammatikament differenti, u dan jippermetti lir-riċerkaturi biex imexxu esperimenti li kienu impossibbli fil-passat. Mod wieħed biex wieħed jaħseb dwar din id-differenza huwa li wieħed jinnota li l-esperimenti ġeneralment għandhom żewġ tipi ta 'spejjeż: spejjeż fissi u spejjeż varjabbli. L-ispejjeż fissi huma spejjeż li jibqgħu l-istess, irrispettivament min-numru ta 'parteċipanti. Pereżempju, f'esperiment tal-laboratorju, l-ispejjeż fissi jistgħu jkunu l-ispejjeż tal-kiri tal-ispazju u tax-xiri tal-għamara. L-ispejjeż varjabbli , min-naħa l-oħra, jinbidlu skond in-numru ta 'parteċipanti. Pereżempju, f'esperiment tal-laboratorju, l-ispejjeż varjabbli jistgħu jkunu ġejjin mill-persunal u mill-parteċipanti tal-ħlas. B'mod ġenerali, l-esperimenti analogi għandhom spejjeż fissi baxxi u spejjeż varjabbli għolja, filwaqt li l-esperimenti diġitali għandhom spejjeż fissi għoljin u spejjeż varjabbli baxxi (figura 4.19). Anke jekk l-esperimenti diġitali għandhom spejjeż varjabbli baxxi, tista 'toħloq ħafna opportunitajiet eċċitanti meta ssuq l-ispiża varjabbli fit-triq kollha għal żero.

Figura 4.19: Skematika tal-istrutturi tal-ispejjeż f'esperimenti analogi u diġitali. B'mod ġenerali, l-esperimenti analogi għandhom spejjeż fissi baxxi u spejjeż varjabbli għolja filwaqt li l-esperimenti diġitali għandhom spejjeż fissi għoljin u spejjeż varjabbli baxxi. L-istrutturi ta 'spejjeż differenti jfissru li l-esperimenti diġitali jistgħu jimxu fuq skala li mhix possibbli b'esperimenti analogi.

Figura 4.19: Skematika tal-istrutturi tal-ispejjeż f'esperimenti analogi u diġitali. B'mod ġenerali, l-esperimenti analogi għandhom spejjeż fissi baxxi u spejjeż varjabbli għolja filwaqt li l-esperimenti diġitali għandhom spejjeż fissi għoljin u spejjeż varjabbli baxxi. L-istrutturi ta 'spejjeż differenti jfissru li l-esperimenti diġitali jistgħu jimxu fuq skala li mhix possibbli b'esperimenti analogi.

Hemm żewġ elementi ewlenin ta 'pagamenti ta' nfiq varjabbli għall-persunal u pagamenti lill-parteċipanti - u kull wieħed minn dawn jista 'jiġi xprunat għal żero bl-użu ta' strateġiji differenti. Il-pagamenti lill-persunal ġejjin miċ-xogħol li l-assistenti tar-riċerka jirreklutaw lill-parteċipanti, jagħtu trattamenti u jkejlu r-riżultati. Pereżempju, l-esperiment ta 'qasam analogu ta' Schultz u kollegi (2007) fuq l-użu tal-elettriku kien jeħtieġ assistenti tar-riċerka biex jivvjaġġaw lejn kull dar biex iwasslu t-trattament u aqra l-arloġġ tal-elettriku (figura 4.3). Dan l-isforz kollu mill-assistenti tar-riċerka fisser li ż-żieda ta 'dar ġdida għall-istudju kienet iżżid mal-ispiża. Min-naħa l-oħra, għall-esperiment tal-qasam diġitali ta 'Restivo u van de Rijt (2012) dwar l-effett ta' għotjiet fuq edituri tal-Wikipedija, ir-riċerkaturi jistgħu jżidu aktar parteċipanti fi kważi l-ebda spiża. Strateġija ġenerali biex jitnaqqsu l-ispejjeż amministrattivi varjabbli hija li tissostitwixxi x-xogħol tal-bniedem (li jiswa ħafna flus) b'xogħol tal-kompjuter (li huwa rħis). Bejn wieħed u ieħor, tista 'tistaqsik lilek innifsek: Tista' tagħmel dan l-esperiment waqt li kulħadd fit-tim tar-riċerka tiegħi qiegħed iddum? Jekk it-tweġiba hija iva, int ghamilt biċċa xogħol tajba ta 'awtomatizzazzjoni.

It-tieni tip ewlieni ta 'spiża varjabbli huwa l-ħlas lill-parteċipanti. Xi riċerkaturi użaw Amazon Mechanical Turk u swieq tax-xogħol onlajn oħrajn biex inaqqsu l-ħlasijiet li huma meħtieġa għall-parteċipanti. Sabiex issuq spejjeż varjabbli sa żero, madankollu, hemm bżonn ta 'approċċ differenti. Għal żmien twil, ir-riċerkaturi fasslu esperimenti li tant huma ħżiena li jħallsu lin-nies biex jipparteċipaw. Imma x'jiġri jekk tista 'toħloq esperiment li n-nies iridu jkunu fihom? Dan jista 'ħoss imfittex, iżda jien ser nagħtik eżempju hawn taħt mix-xogħol tiegħi stess, u hemm aktar eżempji fit-tabella 4.4. Innota li din l-idea tat-tfassil ta 'esperimenti pjaċevoli tirreferi għal xi wħud mit-temi fil-kapitolu 3 dwar it-tfassil ta' stħarriġ aktar pjaċevoli u fil-kapitolu 5 dwar id-disinn ta 'kollaborazzjoni tal-massa. Għalhekk, naħseb li t-tgawdija tal-parteċipant - dak li jista 'jissejjaħ ukoll l-esperjenza tal-utent - se jkun parti dejjem aktar importanti tad-disinn tar-riċerka fl-era diġitali.

Tabella 4.4: Eżempji ta 'Esperimenti bi Żero Spejjeż Varjabbli li l-Parteċipanti Kumpensati b'servizz Vvalutibbli jew esperjenza Pjaċevoli.
Kumpens Referenzi
Sit elettroniku b'informazzjoni tas-saħħa Centola (2010)
Programm ta 'eżerċizzju Centola (2011)
Mużika b'xejn Salganik, Dodds, and Watts (2006) ; Salganik and Watts (2008) ; Salganik and Watts (2009b)
Pjaċir logħba Kohli et al. (2012)
Rakkomandazzjonijiet tal-films Harper and Konstan (2015)

Jekk trid toħloq esperimenti b'data ta 'spejjeż varjabbli żero, ikollok bzonn li tiżgura li kollox huwa kompletament awtomatizzat u li l-parteċipanti ma jeħtieġu l-ebda ħlas. Sabiex turi kif dan huwa possibbli, ser niddeskrivi r-riċerka tad-dissertazzjoni tiegħi dwar is-suċċess u n-nuqqas ta 'prodotti kulturali.

Id-dissertazzjoni tiegħi kienet motivata min-natura ta 'suċċess ta' suċċess għall-prodotti kulturali. Il-kanzunetti tal-aqwa, il-kotba tal-aħjar bejgħ u l-films ta 'suċċess huma ħafna aktar ta' suċċess mill-medja. Minħabba dan, is-swieq għal dawn il-prodotti ħafna drabi jissejħu "rebbieħ-take-all" tas-swieq. Madankollu, fl-istess ħin, liema kanzunetta, ktieb jew film partikolari se tirnexxi hija oerhört imprevedibbli. L-iskwadra William Goldman (1989) qabdet b'mod eċċellenti ħafna riċerka akkademika billi qalet li meta niġu biex nipprevedu s-suċċess, "ħadd ma jaf xi ħaġa". L-imprevedibbiltà tas-swieq kollha li jieħdu r-rebbieħa għamluh nistaqsu kemm tas-suċċess huwa riżultat ta 'kwalità u kemm huwa biss xortih. Jew, espress b'mod kemmxejn differenti, jekk nistgħu noħolqu dinjiet paralleli u nagħmluhom kollha jevolvu b'mod indipendenti, l-istess kanzunetti jsiru popolari f'kull dinja? U, jekk le, x'jista 'jkun mekkaniżmu li jikkawża dawn id-differenzi?

Sabiex twieġeb dawn il-mistoqsijiet, aħna-Peter Dodds, Duncan Watts (konsulent tad-dissertazzjoni tiegħi), u jien għamilt sensiela ta 'esperimenti fuq l-internet fuq il-post. B'mod partikolari, aħna bnew websajt imsejħa MusicLab fejn in-nies jistgħu jiskopru mużika ġdida, u użajnaha għal serje ta 'esperimenti. Aħna rreklutaw parteċipanti billi wettqu banner ads fuq websajt ta 'interess għall-adolexxenti (figura 4.20) u permezz ta' indikazzjonijiet fil-midja. Il-parteċipanti li waslu fil-websajt tagħna pprovdew kunsens infurmat, komplut kwestjonarju qasir ta 'l-isfond, u ġew assenjati saltwarjament għal waħda minn żewġ kundizzjonijiet sperimentali - influwenza indipendenti u soċjali. Fil-kondizzjoni indipendenti, il-parteċipanti ħadu deċiżjonijiet dwar liema kanzunetti għandhom jisimgħu, minħabba biss l-ismijiet tal-meded u l-kanzunetti. Waqt li nisma kanzunetta, il-parteċipanti ntalbu jivvalutawh wara li kellhom l-opportunità (iżda mhux l-obbligu) li jniżżlu l-kanzunetta. Fil-kundizzjoni tal-influwenza soċjali, il-parteċipanti kellhom l-istess esperjenza, ħlief li setgħu jaraw kemm drabi kull kanzunetta kienet tniżżlet minn parteċipanti preċedenti. Barra minn hekk, il-parteċipanti fil-kundizzjoni tal-influwenza soċjali ġew assenjati saltwarjament lil wieħed mit-tmien dinji paralleli, li kull wieħed minnhom evolva b'mod indipendenti (figura 4.21). Permezz ta 'dan id-disinn, għamilna żewġ esperimenti relatati. Fl-ewwel, aħna ppreżentajna l-kanzunetti lill-parteċipanti f'qafas mhux magħżul, li jipprovdilhom sinjal dgħajjef ta 'popolarità. Fit-tieni esperiment, ippreżentajna l-kanzunetti f'lista kklassifikata, li pprovdiet sinjal ferm iktar b'saħħtu tal-popolarità (figura 4.22).

Figura 4.20: Eżempju ta 'banner ad li l-kollegi tiegħi u jien użajt biex ingaġġa parteċipanti għall-esperimenti MusicLab (Salganik, Dodds u Watts 2006). Riprodotta bil-permess minn Salganik (2007), figura 2.12.

Figura 4.20: Eżempju ta 'banner ad li l-kollegi tiegħi u jien użajt biex ingaġġa parteċipanti għall-esperimenti (Salganik, Dodds, and Watts 2006) . Riprodotta bil-permess minn Salganik (2007) , figura 2.12.

Figura 4.21: Disinn sperimentali għall-esperimenti MusicLab (Salganik, Dodds u Watts 2006). Il-parteċipanti ġew assenjati saltwarjament għal waħda minn żewġ kundizzjonijiet: influwenza indipendenti u soċjali. Il-parteċipanti fil-kundizzjoni indipendenti għamlu l-għażliet tagħhom mingħajr ebda informazzjoni dwar x'kienu għamlu nies oħra. Il-parteċipanti fil-kundizzjoni ta 'l-influwenza soċjali ġew assenjati saltwarjament lil wieħed mit-tmien dinji paralleli, fejn setgħu jaraw il-popolarità - kif imkejla minn downloads ta' parteċipanti preċedenti- ta 'kull kanzunetta fid-dinja tagħhom, iżda ma setgħux jaraw xi informazzjoni dwarhom, lanqas ma anke jafu dwar l-eżistenza ta ', kwalunkwe wieħed mid-dinja l-oħra. Adattat minn Salganik, Dodds u Watts (2006), figura s1.

Figura 4.21: Disinn sperimentali għall-esperimenti (Salganik, Dodds, and Watts 2006) . Il-parteċipanti ġew assenjati saltwarjament għal waħda minn żewġ kundizzjonijiet: influwenza indipendenti u soċjali. Il-parteċipanti fil-kundizzjoni indipendenti għamlu l-għażliet tagħhom mingħajr ebda informazzjoni dwar x'kienu għamlu nies oħra. Il-parteċipanti fil-kundizzjoni ta 'l-influwenza soċjali ġew assenjati saltwarjament lil waħda mit-tmien dinji paralleli, fejn setgħu jaraw il-popolarità - kif imkejla minn downloads ta' parteċipanti preċedenti- ta 'kull kanzunetta fid-dinja tagħhom, iżda ma setgħux jaraw xi informazzjoni dwarhom, lanqas ma anke jafu dwar l-eżistenza ta ', kwalunkwe wieħed mid-dinja l-oħra. Adattat minn Salganik, Dodds, and Watts (2006) , figura s1.

Sibna li l-popolarità tal-kanzunetti kienet differenti madwar id-dinja, u dan jissuġġerixxi li x-Xorti kellha rwol importanti fis-suċċess. Per eżempju, f'dinja waħda l-kanzunetta "Lockdown" minn 52Metro daħlet fl-ewwel minn 48 kanzunetta, filwaqt li f'pajjiż ieħor daħal fl-40. Dan kien eżattament l-istess kanzunetta li kienet qed tikkompeti kontra l-istess kanzunetti l-oħra kollha, imma f'dinja waħda rnexxielha xxurtjati u fl-oħrajn ma kinitx. Barra minn hekk, billi tqabbel ir-riżultati bejn iż-żewġ esperimenti, sibna li l-influwenza soċjali żżid in-natura rebbieħa ta 'dawn is-swieq, li forsi tissuġġerixxi l-importanza tal-ħiliet. Iżda, fid-dinja kollha (li ma tistax issir barra minn dan it-tip ta 'esperiment tad-dinja paralleli), sibna li l-influwenza soċjali fil-fatt żiedet l-importanza tax-xorti. Barra minn hekk, sorprendentement, kienu l-kanzunetti ta 'l-ogħla appell fejn xortih kienu iktar importanti (figura 4.23).

Figura 4.22: Screenshots mill-kundizzjonijiet tal-influwenza soċjali fl-esperimenti MusicLab (Salganik, Dodds u Watts 2006). Fil-kundizzjoni tal-influwenza soċjali fl-esperiment 1, il-kanzunetti, flimkien man-numru ta 'downloads preċedenti, ġew ippreżentati lill-parteċipanti rranġati f'gass 16 rettangolari ta' 16-il siegħa, fejn il-pożizzjonijiet tal-kanzunetti ġew assenjati saltwarjament għal kull parteċipant. Fl-esperiment 2, il-parteċipanti fil-kundizzjoni tal-influwenza soċjali kienu murija l-kanzunetti, b'għadd ta 'tniżżil, ippreżentat f'kolonna waħda f'ordni dixxendenti tal-popolarità attwali.

Figura 4.22: Screenshots mill-kundizzjonijiet tal-influwenza soċjali fl-esperimenti (Salganik, Dodds, and Watts 2006) . Fil-kundizzjoni ta 'l-influwenza soċjali fl-esperiment 1, il-kanzunetti, flimkien man-numru ta' downloads preċedenti, ġew ippreżentati lill-parteċipanti rranġati f'garaġġ rettangolari 16 \(\times\) 3, fejn il-pożizzjonijiet tal- parteċipant. Fl-esperiment 2, il-parteċipanti fil-kundizzjoni tal-influwenza soċjali kienu murija l-kanzunetti, b'għadd ta 'tniżżil, ippreżentat f'kolonna waħda f'ordni dixxendenti tal-popolarità attwali.

Figura 4.23: Riżultati mill-esperimenti MusicLab li juru r-relazzjoni bejn l-appell u s-suċċess (Salganik, Dodds u Watts 2006). L-assi x huwa s-sehem tas-suq tal-kanzunetta fid-dinja indipendenti, li jservi bħala miżura tal-appell tal-kanzunetta, u l-assi-y huwa s-sehem tas-suq tal-istess kanzunetta fit-tmien mewġ ta 'influwenza soċjali, li jservi bħala miżura tas-suċċess tal-kanzunetti. Sibna li ż-żieda fl-influwenza soċjali li l-parteċipanti esperjenzaw speċifikament, il-bidla fit-tqassim mill-esperiment 1 sa esperiment 2 (figura 4.22) - użajt is-suċċess biex issir aktar imprevedibbli, speċjalment għall-kanzunetti bl-ogħla appell. Adattat minn Salganik, Dodds u Watts (2006), figura 3.

Figura 4.23: Riżultati mill-esperimenti MusicLab li juru r-relazzjoni bejn l-appell u s-suċċess (Salganik, Dodds, and Watts 2006) . Il- \(x\) -axis hija s-sehem tas-suq tal-kanzunetta fid-dinja indipendenti, li sservi bħala miżura tal-appell tal-kanzunetta, u l- \(y\) -axis hija s-sehem tas-suq tal-istess kanzunetta it-tmien dinja ta 'influwenza soċjali, li sservi bħala miżura tas-suċċess tal-kanzunetti. Sibna li ż-żieda fl-influwenza soċjali li l-parteċipanti esperjenzaw speċifikament, il-bidla fit-tqassim mill-esperiment 1 sa esperiment 2 (figura 4.22) - użajt is-suċċess biex issir aktar imprevedibbli, speċjalment għall-kanzunetti bl-ogħla appell. Adattat minn Salganik, Dodds, and Watts (2006) , figura 3.

MusicLab kien kapaċi jmexxi essenzjalment l-ispiża varjabbli żero minħabba l-mod li kien iddisinjat. L-ewwelnett, kollox kien kompletament awtomatizzat u għalhekk kien kapaċi jiddekorri waqt li kont torqod. It-tieni nett, il-kumpens kien mużika libera, u għalhekk ma kien hemm l-ebda spiża ta 'kumpens għal parteċipanti varjabbli. L-użu tal-mużika bħala kumpens ukoll juri kif xi kultant ikun hemm kompromess bejn spejjeż fissi u varjabbli. L-użu tal-mużika żied l-ispejjeż fissi għax kelli nqatta 'ħin biex niżgura l-permess mill-meded u nipprepara rapporti dwar ir-reazzjoni tal-parteċipanti għall-mużika tagħhom. Iżda f'dan il-każ, iż-żieda fl-ispejjeż fissi sabiex jitnaqqsu l-ispejjeż varjabbli kienet ħaġa tajba; dak hu li ppermettilna li mmexxu esperiment li kien madwar 100 darba akbar minn esperiment ta 'laboratorju standard.

Barra minn hekk, l-esperimenti MusicLab juru li l-ispiża varjabbli żero m'għandhiex għalfejn tkun għan fih innifsu; Minflok, jista 'jkun mezz biex tmexxi tip ġdid ta' esperiment. Avviż li aħna ma użajt il-parteċipanti kollha tagħna biex immexxu esperiment ta 'l-influwenza soċjali standard ta' l-esperiment 100 darba. Minflok, għamilna xi ħaġa differenti, li tista 'taħseb bħala bidla minn esperiment psikoloġiku għal soċjoloġiku wieħed (Hedström 2006) . Minflok ma ffoka fuq it-teħid ta 'deċiżjonijiet individwali, iffokajna l-esperiment tagħna fuq il-popolarità, riżultat kollettiv. Dan il-bidla għal riżultat kollettiv fisser li aħna ħtieġu madwar 700 parteċipant biex jipproduċu punt ta 'dejta wieħed (kien hemm 700 persuna f'kull wieħed mill-missjonijiet paralleli). Dik l-iskala kienet possibbli biss minħabba l-istruttura tal-ispejjeż tal-esperiment. B'mod ġenerali, jekk ir-riċerkaturi jridu jistudjaw kif ir-riżultati kollettivi jirriżultaw minn deċiżjonijiet individwali, esperimenti tal-grupp bħal MusicLab huma eċċitanti ħafna. Fil-passat, kienu loġistikament diffiċli, iżda dawk id-diffikultajiet qed jiddewbu minħabba l-possibbiltà ta 'data ta' l-ispiża varjabbli żero.

Barra milli juri l-benefiċċji ta 'dejta ta' spejjeż varjabbli żero, l-esperimenti MusicLab juru wkoll sfida ma 'dan l-approċċ: spejjeż fissi għoljin. Fil-każ tiegħi, kont xortik tajba biex tkun tista 'taħdem ma' żviluppatur tal-web b'talent li jismu Peter Hausel għal madwar sitt xhur biex jibni l-esperiment. Dan kien possibbli biss minħabba li l-konsulent tiegħi, Duncan Watts, kien irċieva numru ta 'għotjiet biex isostni dan it-tip ta' riċerka. It-teknoloġija tjiebet peress li aħna bnew MusicLab fl-2004 għalhekk ikun iktar faċli li nibnu esperiment bħal dan issa. Iżda, strateġiji ta 'spejjeż fissi għoljin huma verament possibbli biss għar-riċerkaturi li jistgħu b'xi mod ikopru dawk l-ispejjeż.

Bħala konklużjoni, esperimenti diġitali jista 'jkollhom strutturi ta' spejjeż drammatikament differenti minn esperimenti analogi. Jekk trid taħdem esperimenti verament kbar, għandek tipprova tnaqqas l-ispiża varjabbli tiegħek kemm jista 'jkun u idealment it-triq kollha sa żero. Tista 'tagħmel dan billi awtomatizza l-mekkaniżmi ta' l-esperiment tiegħek (eż. Tissostitwixxi l-ħin tal-bniedem b'ħin tal-kompjuter) u tfassal esperimenti li n-nies iridu jkunu pulzieri Ir-riċerkaturi li jistgħu jiddisinjaw esperimenti b'dawn il-karatteristiċi jkunu jistgħu jmexxu tipi ġodda ta 'esperimenti li kienu mhux possibbli fil-passat. Madankollu, il-ħila li toħloq esperimenti b'varjazzjoni varjabbli żero tista 'tqajjem mistoqsijiet etiċi ġodda, is-suġġett li issa se nindirizza.