nga mga Kalihokan

  • degree sa kalisud: sayon sayon , medium medium , lisud lisud , lisud kaayo lisud kaayo
  • nagkinahanglan og matematika ( nagkinahanglan og matematika )
  • nagkinahanglan og coding ( nagkinahanglan og coding )
  • pagkolekta sa datos ( pagkolekta sa datos )
  • akong mga paborito ( akong paborito )
  1. [ medium , pagkolekta sa datos ] Si Berinsky ug mga kaubanan (2012) sa usa ka bahin sa MTurk pinaagi sa pagsundog sa tulo ka klasiko nga mga eksperimento. I-replika ang classic nga Disease framing nga eksperimento ni Tversky and Kahneman (1981) . Ang imo bang mga resulta nahiuyon sa Tversky ug Kahneman? Ang imo bang mga resulta nahiuyon sa mga Berinsky ug mga kaubanan? Unsa-kung unsa man-kini ba nagtudlo kanato mahitungod sa paggamit sa MTurk alang sa mga eksperimento sa pagsurbi?

  2. [ medium , akong paborito Sa usa ka gamay nga papel nga dunay dila nga giulohan og "We Have To Break Up," ang social psychologist nga si Robert Cialdini, usa sa mga awtor sa Schultz et al. (2007) , misulat nga siya nagretiro sayo sa iyang trabaho isip usa ka propesor, tungod sa mga hagit nga iyang giatubang sa paghimo sa mga eksperimento sa kapatagan sa usa ka disiplina (sikolohiya) nga nag-una nga nagpahigayon sa lab experiments (Cialdini 2009) . Basaha ang papel ni Cialdini, ug isulat kaniya ang usa ka email nga nag-awhag kaniya sa paghunahuna pag-usab sa iyang break-up tungod sa mga posibilidad sa digital nga mga eksperimento. Paggamit sa piho nga mga ehemplo sa panukiduki nga nagsulbad sa iyang mga problema

  3. [ medium ] Aron mahibal-an kon ang gamay nga inisyal nga kalampusan natago o nawala, ang van de Rijt ug ang mga kaubanan (2014) nangilabot sa upat ka nagkalain-laing mga sistema nga naghatag kalampusan sa mga pinili nga pinili nga mga partisipante, ug dayon gisukod ang dugay nga mga epekto sa kini nga arbitraryong kalampusan. Makahunahuna ka ba sa uban nga mga sistema diin ikaw makahimo sa sama nga mga eksperimento? Timbang-timbanga kini nga mga sistema sa mga isyu sa mga siyentipiko nga bili, algorithmic confounding (tan-awa sa kapitulo 2), ug ethics.

  4. [ medium , pagkolekta sa datos ] Ang mga resulta sa eksperimento mahimong magdepende sa mga partisipante. Paghimo og usa ka eksperimento ug dayon padaganon kini sa MTurk gamit ang duha ka lainlaing estratehiya sa rekrutment. Sulayi nga pilion ang estratehiya sa eksperimento ug recruitment aron ang mga resulta magkalahi kutob sa mahimo. Pananglitan, ang imong mga estratehiya sa pagrekluta mao ang pag-rekrut sa mga partisipante sa buntag ug sa gabii o aron sa pagpahulam sa mga partisipante nga adunay taas ug ubos nga suweldo. Kining mga matang sa mga kalainan sa estratehiya sa pagrekrut mahimong modala ngadto sa nagkalainlaing grupo sa mga partisipante ug nagkalainlain nga resulta sa eksperimento. Unsa ka lahi ang nahimo sa imong mga resulta? Unsa ang gipadayag niini mahitungod sa nagpadagan nga mga eksperimento sa MTurk?

  5. [ lisud kaayo , nagkinahanglan og matematika , nagkinahanglan og coding ] Hunahunaa nga nagplano ka sa eksperimento sa Emotional Contagion (Kramer, Guillory, and Hancock 2014) . Gamita ang mga resulta gikan sa una nga pagtuon sa obserbasyon ni Kramer (2012) aron paghukom sa gidaghanon sa mga partisipante sa matag kondisyon. Kining duha ka mga pagtuon wala magkatakdo sa hingpit mao nga segurado nga ilista ang tanan nga mga panghunahuna nga imong gihimo:

    1. Pagdumala sa usa ka simulation nga magdesisyon kung pila ka mga partisipante ang gikinahanglan aron makita ang usa ka epekto sama ka dako sa epekto sa Kramer (2012) sa \(\alpha = 0.05\) ug \(1 - \beta = 0.8\) .
    2. Analisar sa mao gihapong pagkalkulo.
    3. Tungod sa mga resulta gikan sa Kramer (2012) mao ang Emotional Contagion (Kramer, Guillory, and Hancock 2014) labaw nga gipadagan (ie, aduna ba'y daghan nga mga partisipante kaysa gikinahanglan)?
    4. Sa mga panghunahuna nga imong gihimo, nga adunay pinakadako nga epekto sa imong pagkalkulo?
  6. [ lisud kaayo , nagkinahanglan og matematika , nagkinahanglan og coding ] Kramer (2012) pag-usab ang nangaging pangutana, apan niining panahona imbes nga gamiton ang naunang pagtuon sa obserbasyon ni Kramer (2012) , gamita ang mga resulta gikan sa usa ka naunang natural nga eksperimento ni Lorenzo Coviello et al. (2014) .

  7. [ sayon ] Ang duha nga Margetts et al. (2011) ug van de Rijt et al. (2014) nagpahigayon og mga eksperimento nga nagtuon sa proseso sa mga tawo nga nagpirma sa usa ka petisyon. Itandi ug itandi ang mga laraw ug mga kaplag niini nga mga pagtuon.

  8. [ sayon ] Si Dwyer, Maki, and Rothman (2015) nagdumala sa duha ka mga eksperimento sa kapatagan sa relasyon tali sa mga kalagdaan sa panarbaho ug sa kinaiya nga adunay kalabutan sa kinaiyahan. Ania ang abstract sa ilang papel:

    "Sa unsa nga paagi ang sikolohikal nga siyensya magamit aron sa pagdasig sa kinaiyahan sa kinaiyahan? Sa duha ka pagtuon, ang mga interbensyon nga nagtumong sa pagpalambo sa pag-konserba sa pag-konserba sa enerhiya diha sa mga banyo sa publiko nagsusi sa mga impluwensya sa mga lagda sa paghubit ug personal nga responsibilidad. Diha sa Pagtuon 1, ang kahimtang sa kahayag (ie, on o off) gimaniobra sa wala'y tawo nga misulod sa usa ka walay labayanan nga kaligoanan sa publiko, nga nagpaila sa gihulagway nga lagda alang sa maong kahimtang. Ang mga partisipante adunay mas dako nga posibilidad nga ibalhin ang mga suga kon sila nahimo sa dihang misulod sila. Diha sa Pagtuon 2, usa ka dugang nga kondisyon ang gilakip diin ang kasagaran nga pagsalikway sa kahayag gipakita sa usa ka kaubanan, apan ang mga sumasalmot dili mao ang responsable sa pagpabalik niini. Ang personal nga responsibilidad nagpugong sa impluwensya sa sosyal nga mga lagda sa kinaiya; kon ang mga sumasalmot dili responsable sa pag-abli sa kahayag, ang impluwensya sa naandan naubsan. Gipakita niini nga mga resulta kon unsaon sa pagkontrol sa mga lagda ug personal nga responsibilidad ang pagka-epektibo sa mga intervention sa pagpatunhay sa kaluwasan. "

    Basaha ang ilang papel ug pagplano og replication sa pagtuon 1.

  9. [ medium , pagkolekta sa datos ] Pagtukod sa miaging pangutana, karon ipadayon ang imong desinyo.

    1. Sa unsang paagi itandi ang mga resulta?
    2. Unsa ang mahimong ipatin-aw niini nga mga kalainan?
  10. [ medium [] Adunay dako nga debate mahitungod sa mga eksperimento gamit ang mga partisipante nga girekrut gikan sa MTurk. Sa susama, aduna usab'y dakong debate mahitungod sa mga eksperimento gamit ang mga partisipante nga girekrut gikan sa mga undergraduate nga populasyon sa estudyante. Pagsulat og duha ka pahina nga memo nga nagkumpara ug nagpalahi sa mga Turkista ug mga undergraduates isip mga tigpaniid sa pagsiksik. Ang imong pagtandi kinahanglan maglakip sa usa ka paghisgot sa mga isyu sa siyensiya ug logistik.

  11. [ sayon Ang libro ni Jim Manzi nga Uncontrolled (2012) usa ka talagsaon nga pasiuna sa gahum sa eksperimento sa negosyo. Diha sa libro iyang gisaysay ang mosunod nga sugilanon:

    "Ako usa ka higayon nga nakigkita sa usa ka matuod nga negosyo nga genius, usa ka buok nga bilyunaryo nga adunay usa ka lawom, intuitive nga pagsabut sa gahum sa mga eksperimento. Ang iyang kompaniya migahin sa mahinungdanon nga mga kapanguhaan nga naningkamot sa pagmugna og dako nga tindahan nga nagpakita sa bintana nga makadani sa mga konsumante ug makapadugang sa halin, sumala sa giingon sa conventional nga kaalam. Ang mga eksperto gisusi pag-ayo sa disenyo human sa pagdesinyo, ug sa mga sesyon sa pagsusi sa us aka mga pagsulay sulod sa usa ka yugto sa katuigan wala magpakita nga walay hinungdan nga epekto sa matag bag-ong disenyo sa display sa mga halin. Ang senior marketing ug merchandising executives nakigtagbo sa CEO aron pagsusi sa mga resulta sa pagsulay sa kasaysayan sa toto. Human sa pagpresentar sa tanang mga eksperimento nga datos, sila mihinapos nga ang conventional nga kaalam sayop-nga ang pagpakita sa bintana dili makapamaligya. Ang ilang gisugyot nga aksyon mao ang pagpakunhod sa gasto ug paningkamot niining dapita. Gipakita niini ang abilidad sa eksperimento sa pagpukan sa naandan nga kaalam. Simple lang ang tubag sa CEO: 'Ang akong konklusyon mao nga ang imong mga tigdesinyo dili kaayo maayo.' Ang iyang kasulbaran mao ang pagdugang sa paningkamot sa pagtan-aw sa disenyo sa display, ug sa pagkuha sa bag-ong mga tawo aron sa pagbuhat niini. " (Manzi 2012, 158–9)

    Unsa nga matang sa balido ang kabalaka sa CEO?

  12. [ sayon ] Pagtukod sa naunang pangutana, hunahunaa nga anaa ka sa miting diin gihisgutan ang mga resulta sa mga eksperimento. Unsa ang upat ka mga pangutana nga mahimo nimo ipangutana-usa alang sa matag matang sa balido (statistical, construct, internal, ug external)?

  13. [ sayon Ang Bernedo, Ferraro, and Price (2014) nagtuon sa pito ka tuig nga epekto sa intervention nga makaluwas sa tubig nga gihulagway sa Ferraro, Miranda, and Price (2011) (tan-awa ang hulagway 4.11). Sa kini nga papel, ang Bernedo ug mga kaubanan usab naningkamot nga masabtan ang mekanismo nga nagpaluyo sa epekto pinaagi sa pagtandi sa kinaiya sa mga panimalay nga wala ug wala mabalhin pagkahuman sa pagtambal gihatag. Kana, sa tinagsa, gisulayan nila sa pagtan-aw kung ang pagtambal nakaapektar sa balay o sa tag-iya sa balay.

    1. Basaha ang papel, ihulagway ang ilang disenyo, ug i-summarize ang ilang mga nahibal-an.
    2. Ang ilang mga nahibal-an ba naka-epekto kon unsaon nimo pagtantiya ang epektibong gasto sa susamang mga interbensyon? Kon mao, ngano? Kung dili, nganong dili?
  14. [ sayon ] Sa usa ka follow-up sa Schultz et al. (2007) , si Schultz ug mga kaubanan nagpahigayon sa usa ka sunod-sunod nga tulo ka mga eksperimento sa epekto sa mga lagda sa deskriptibo ug injunctive sa usa ka lainlain nga kinaiya sa kalikopan (paggamit sa tualya) sa duha ka konteksto (usa ka hotel ug usa ka timeshare condominium) (Schultz, Khazian, and Zaleski 2008) .

    1. I-summarize ang desinyo ug mga resulta sa tulo ka mga eksperimento.
    2. Giunsa, kung sa tinuod, nag-usab kini sa imong paghubad sa Schultz et al. (2007) ?
  15. [ sayon ] Agig tubag kang Schultz et al. (2007) , Canfield, Bruin, and Wong-Parodi (2016) nagpahigayon og sunod-sunod nga eksperimento sama sa lab aron tun-an ang disenyo sa mga bayranan sa koryente. Ania kung giunsa nila paghulagway kini sa abstract:

    "Sa usa ka eksperimento nga nakabase sa survey, ang matag partisipante nakakita sa usa ka hypothetical bill sa elektrisidad alang sa usa ka pamilyang adunay taas nga paggamit sa elektrisidad, nga naglangkob sa kasayuran mahitungod sa (a) paggamit sa kasaysayan, (b) pagkumpara sa mga silingan, ug (c) paggamit sa kasaysayan sa pagguba sa appliance. Ang mga partisipante nakakita sa tanang mga matang sa impormasyon sa usa sa tulo ka mga format lakip ang (a) mga lamesa, (b) bar graphs, ug (c) graphs nga icon. Gitaho namon ang tulo ka pangunang mga kaplag. Una, nasabtan sa mga konsumante ang matag matang sa impormasyon nga gamiton sa elektrisidad kung kini gipresentar diha sa usa ka lamesa, tingali tungod kay ang mga lamesa nagdali sa simple nga pagbasa sa punto. Ikaduha, ang mga gusto ug katuyoan sa pagtipig sa elektrisidad mao ang pinakalig-on nga kasayuran sa paggamit sa kasaysayan, gawasnon sa format. Ikatulo, ang mga indibidwal nga adunay mas ubos nga enerhiya sa literacy mas nasabtan ang tanang impormasyon. "

    Dili sama sa ubang mga pag-follow-up nga mga pagtuon, ang nag-unang resulta sa interes sa Canfield, Bruin, and Wong-Parodi (2016) gitaho nga batasan, dili aktwal nga kinaiya. Unsa ang mga kalig-on ug mga kahuyang niini nga matang sa pagtuon sa usa ka mas lapad nga programa sa panukiduki nga nagpasiugda sa pagtipig sa enerhiya?

  16. [ medium , akong paborito Si Smith and Pell (2003) nagpresentar sa usa ka satirical meta-analysis sa mga pagtuon nga nagpakita sa pagka-epektibo sa mga parachute. Sila naghinakop:

    "Sama sa daghan nga mga interbensyon nga gitumong aron mapugngan ang dili maayo nga panglawas, ang pagka-epektibo sa mga parachute wala gipailalom sa estrikto nga pagsusi pinaagi sa paggamit sa nagkalain-lain nga kontrolado nga mga pagsulay. Ang mga tigpasiugda sa mga tambal nga nakabase sa ebidensya nagsaway sa pagsagop sa mga interbensiyon nga gibana-bana pinaagi sa paggamit lamang sa datos sa obserbasyon. Naghunahuna kami nga ang tanan mahimong makabaton og kaayohan kung ang labing radikal nga mga protagonista sa ebidensya nga nakabase sa ebidensya giorganisar ug miapil sa usa ka double blind, randomized, kontrolado nga placebo, crossover trial sa parachute. "

    Pagsulat og usa ka op-ed nga angay alang sa usa ka general-readership nga mantalaan, sama sa New York Times , nga nakiglantugi batok sa fetishization sa eksperimento nga ebidensya. Paghatag og piho, siguradong mga ehemplo. Timaan: Tan-awa usab Deaton (2010) ug Bothwell et al. (2016) .

  17. [ medium , nagkinahanglan og coding , akong paborito Ang mga nagkalain-laing mga tagana sa usa ka epekto sa pagpatambal mahimong mas tukma kay sa nagkadaiyang mga pagtan-aw. Pagsulat og usa ka memo ngadto sa usa ka engineer nga nagdumala sa A / B nga pagsulay sa usa ka start-up nga social media nga kompaniya nga nagpatin-aw sa bili sa nagkalain-laing pamaagi sa pagpadagan sa eksperimento sa online. Ang memo kinahanglan maglakip sa usa ka pahayag sa problema, ang uban nga intuition mahitungod sa mga kondisyon nga diin ang difference-in-difference estimator molabaw pa sa difference-in-mean estimator, ug usa ka simple nga pagtuon sa simulation.

  18. [ sayon , akong paborito Si Gary Loveman usa ka propesor sa Harvard Business School sa wala pa nahimong CEO sa Harrah, usa sa pinakadako nga kompanya sa casino sa kalibutan. Sa diha nga siya mibalhin ngadto sa Harrah's, si Loveman nag-usab sa kompaniya sa usa ka kanunay nga naglakaw nga sama nga programa sa pagkamaunongon nga nakakuha og daghan kaayong mga datos mahitungod sa kinaiya sa tawo. Sa ibabaw niining kanunay nga sistema sa pagsukod, ang kompanya nagsugod sa pagpadagan sa mga eksperimento. Pananglitan, mahimo silang mag-eksperimento aron mahibal-an ang epekto sa usa ka kupon alang sa usa ka libreng hotel night alang sa mga kustomer nga adunay usa ka sumbanan nga sugal. Ania kung giunsa gihulagway ni Loveman ang kamahinungdanon sa pag-eksperimento sa adlaw-adlaw nga mga praktikal nga negosyo sa Harrah:

    "Sama ra nga wala nimo gihasi ang mga kababayen-an, dili ka mangawat, ug kinahanglan nga adunay usa ka grupo sa pagkontrol. Usa kini sa mga butang nga mawad-an ka sa imong trabaho sa Harrah's-nga dili magpadagan sa usa ka grupo sa pagkontrol. " (Manzi 2012, 146)

    Pagsulat sa usa ka email ngadto sa usa ka bag-o nga empleyado nga nagpatin-aw ngano nga si Loveman naghunahuna nga kini mahinungdanon kaayo nga adunay usa ka grupo sa pagkontrol. Kinahanglan nimong sulayan nga ilakip ang usa ka pananglitan-tinuod o nahimo-aron ihulagway ang imong punto.

  19. [ lisud , nagkinahanglan og matematika ] Ang usa ka bag-ong eksperimento nagtumong sa pagtantiya sa epekto sa pagdawat sa mga pahinumdom sa text sa pagbakuna sa pagbakuna. Usa ka gatos ug kalim-an nga mga klinika, ang matag usa adunay 600 nga mga kwalipikado nga mga pasyente, andam nga moapil. Adunay usa ka tinong kantidad nga $ 100 alang sa matag klinika nga gusto nimo nga pagtrabaho, ug kini nagkantidad og $ 1 alang sa matag text message nga gusto nimo ipadala. Dugang pa, ang bisan unsang mga klinika nga imong gitrabahoan makasukod sa sangputanan (bisan ang usa nga nakadawat sa pagbakuna) libre. Hunahunaa nga adunay budget ka nga $ 1,000.

    1. Ubos sa unsa nga kondisyon nga mas maayo ang pag-focus sa imong mga kahinguhaan sa usa ka gamay nga gidaghanon sa mga klinika ug ubos sa unsa nga mga kondisyon nga mas maayo pa ang pagpakatap niini sa mas kaylap?
    2. Unsa nga mga butang ang motino sa kinagamyang epekto nga gidak-on nga masaligan nga makaila sa imong badyet?
    3. Pagsulat og usa ka memo nga nagpatin-aw niini nga mga pagbaligya ngadto sa usa ka potensyal nga funder.
  20. [ lisud , nagkinahanglan og matematika ] Ang usa ka dakong problema sa mga kurso sa online mao ang pag-atake: daghan nga mga estudyante nga nagsugod sa mga kurso nahuman na. Hunahunaa nga nagtrabaho ka sa usa ka online learning platform, ug ang usa ka designer sa plataporma nakamugna og usa ka visual progress bar nga iyang gihunahuna nga makatabang sa pagpugong sa mga estudyante sa pagtapos sa kurso. Gusto nimo nga sulayan ang epekto sa progress bar sa mga estudyante sa usa ka dako nga computational social science course. Human sa pagsulbad sa bisan unsang mga problema sa pamatasan nga mahimong motungha sa eksperimento, ikaw ug ang imong mga kaubanan nabalaka nga ang kurso mahimo nga walay igo nga mga estudyante nga makapangita pag-ayo sa mga epekto sa progress bar. Sa mosunod nga mga kalkulasyon, mahimo nimong hunahunaon nga katunga sa mga estudyante ang makadawat sa progress bar ug dili ang katunga. Dugang pa, mahimo nimong hunahunaon nga walay pagpanghilabot. Sa laing pagkasulti, mahimo nimong hunahunaon nga ang mga partisipante apektado lamang kon sila nakadawat sa pagtambal o pagpugong; kini dili maapektuhan kung ang ubang mga tawo nakadawat sa pagtambal o pagkontrol (alang sa mas pormal nga kahulugan, tan-awa ang kapitulo 8 sa Gerber and Green (2012) ). Susiha ang bisan unsa nga dugang nga mga panghunahuna nga imong gihimo.

    1. Hunahunaa nga ang progress bar gidahum nga magdugang sa gidaghanon sa mga estudyante nga makatapos sa klase sa usa ka porsyento nga punto; unsa ang sampol nga gidak-on nga gikinahanglan aron mahibal-an pag-ayo ang epekto?
    2. Pananglit ang progress bar gidahum nga makadugang sa gidaghanon sa mga estudyante nga makatapos sa klase sa 10 porsyento nga punto; unsa ang sampol nga gidak-on nga gikinahanglan aron mahibal-an pag-ayo ang epekto?
    3. Hunahunaa karon nga imong gipadagan ang eksperimento, ug ang mga estudyante nga nakatapos sa tanang mga kurso nga kurso nakuha na ang katapusan nga eksamin. Sa dihang imong itandi ang katapusang mga eksam sa eksamin sa mga estudyante nga nakadawat sa progress bar uban sa daghang mga wala, nahibaw-an ka, sa imong katingala, nga ang mga estudyante nga wala nakadawat sa progress bar nakatala nga mas taas. Nagpasabut ba kini nga ang pag-uswag sa bar nagpahinungdan sa pagtuon sa mga estudyante? Unsa ang imong makat-unan gikan sa datos sa resulta? (Timaan: Tan-awa ang kapitulo 7 sa Gerber and Green (2012) )
  21. [ lisud kaayo , nagkinahanglan og coding , akong paborito ] Hunahunaa nga nagtrabaho ka isip data nga siyentipiko sa usa ka kompanya sa tech. Ang usa ka tawo gikan sa departamento sa marketing naghangyo alang sa imong tabang sa pagtimbangtimbang sa usa ka eksperimento nga sila nagplano aron sa pagsukod sa return on investment (ROI) alang sa usa ka bag-ong kampanya sa ad sa online. Ang ROI gihubit isip net profit gikan sa kampanya nga gibahin sa gasto sa kampanya. Pananglitan, ang usa ka kampanya nga walay epekto sa mga pagpamaligya adunay ROI nga -100%; usa ka kampanya diin ang ganansya nga namugna parehas sa gasto adunay ROI nga 0; ug usa ka kampanya diin ang kita nga namugna doble ang kantidad nga adunay ROI nga 200%.

    Sa wala pa maglunsad sa eksperimento, ang departamento sa pamaligya naghatag kanimo sa mosunod nga kasayuran nga gibase sa ilang naunang pagsiksik (sa pagkatinuod, kini nga mga hiyas mga tipikal sa tinuod nga online nga kampanya sa ad nga gitaho sa Lewis ug Rao (2015) ):

    • Ang mean sales sa matag customer nagsunod sa usa ka log-normal nga pag-apud-apod nga adunay $ 7 ug usa ka standard deviation nga $ 75.
    • Ang kampanya gipaabot nga makadugang sa halin sa $ 0.35 kada customer, nga katumbas sa pagtaas sa kita nga $ 0.175 kada customer.
    • Ang giplanohan nga gidak-on sa eksperimento mao ang 200,000 ka mga tawo: katunga sa grupo sa pagtambal ug katunga sa control group.
    • Ang gasto sa kampanya mao ang $ 0.14 kada partisipante.
    • Ang gipaabot nga ROI alang sa kampanya mao ang 25% [ \((0.175 - 0.14)/0.14\) ]. Sa laing pagkasulti, ang departamento sa marketing nagtuo nga alang sa matag 100 dolyar nga gigahin sa pagbaligya, ang kompanya makaganansya og dugang nga $ 25 sa ganansya.

    Pagsulat og usa ka memo nga nagbana-bana sa giplanong eksperimento. Ang imong memo kinahanglan nga mogamit sa ebidensya gikan sa usa ka simulation nga imong gimugna, ug kini kinahanglan magsulbad sa duha ka dagkong mga isyu: (1) Imo bang rekomendar ang paglunsad niini nga eksperimento sumala sa giplano? Kon mao, ngano? Kung dili, nganong dili? Siguruha nga mahimong klaro ang mga criteria nga imong gigamit sa paghimo niini nga desisyon. (2) Unsang gidak-on nga sukod ang imong rekomend alang niini nga eksperimento? Pag-usab palihug siguroha nga klaro ang mga criteria nga imong gigamit sa paghimo niini nga desisyon.

    Ang usa ka maayong memo maghisgot niining piho nga kaso; ang usa ka mas maayo nga memo magamit sa usa ka paagi (pananglitan, ipakita kung giunsa nga ang desisyon nausab isip usa ka katungdanan sa gidak-on sa epekto sa kampanya); ug usa ka dakung memo ang mopakita sa usa ka hingpit nga kinatibuk-ang resulta. Ang imong memo kinahanglan nga gamiton ang mga graph aron makatabang sa paghulagway sa imong mga resulta.

    Ania ang duha ka pahibalo. Una, ang departamento sa marketing mahimo nga naghatag kanimo og pipila ka mga wala kinahanglana nga kasayuran, ug tingali napakyas sila sa paghatag kanimo sa pipila ka gikinahanglan nga kasayuran. Ikaduha, kon ikaw naggamit sa R, hibaloa nga ang function nga rlnorm () dili molihok sama sa gidahom sa daghang mga tawo.

    Kini nga kalihokan magahatag kanimo sa pagbansay uban ang pag-analisar sa gahum, paghimo og mga simula, ug pagsulti sa imong mga resulta sa mga pulong ug mga graph. Kini makatabang kanimo sa pagpahigayon sa pag-analisar sa kuryente alang sa bisan unsang matang sa eksperimento, dili lamang mga eksperimento nga gituyo sa pagtantiya sa ROI. Kini nga kalihokan nagdahum nga ikaw adunay pipila ka kasinatian sa statistical testing ug pag-analisar sa gahum. Kung dili ka pamilyar sa pag-analisar sa gahum, akong girekomenda nga imong basahon ang "A Power Primer" ni Cohen (1992) .

    Kini nga kalihokan giinspirar sa usa ka maanindot nga papel ni RA Lewis and Rao (2015) , nga tin-aw nga naghulagway sa sukaranang statistical limitasyon sa bisan daghan nga eksperimento. Ang ilang mga papel-nga sa sinugdanan adunay "provocative title" nga ang "Duol sa Imposible nga Pagsukod sa Pagbalik sa Pag-advertise" -pagpakita unsa ka lisud ang pagsukod sa pagbalik sa pagpamuhunan sa mga ad sa internet, bisan sa mga eksperimento sa digital nga naglambigit sa minilyon nga mga kustomer. Labaw sa kinatibuk-an, ang RA Lewis and Rao (2015) naghulagway sa sukaranang estatistikal nga kamatuoran nga labi ka hinungdanon alang sa mga eksperimento sa digital nga edad: lisud ang pagbanabana sa gagmay nga mga epekto sa pagtambal sa taliwala sa saba nga datos sa resulta.

  22. [ lisud kaayo , nagkinahanglan og matematika ] Buhata ang sama sa nangaging pangutana, apan, imbis nga kuno, kinahanglan nimo gamiton ang mga resulta sa pagsusi.

  23. [ lisud kaayo , nagkinahanglan og matematika , nagkinahanglan og coding ] Buhata ang sama sa nangagi nga pangutana, apan gamita ang simulasyun ug mga resulta sa pagsusi.

  24. [ lisud kaayo , nagkinahanglan og matematika , nagkinahanglan og coding ] Hunahunaa nga nakasulat ka sa memo nga gihulagway sa ibabaw, ug usa ka tawo gikan sa departamento sa marketing naghatag og usa ka piraso sa bag-ong impormasyon: nagpaabut sila og 0.4 correlation tali sa mga pagpamaligya sa wala pa ug human sa eksperimento. Giunsa kini pagbag-o sa mga rekomendasyon sa imong memo? (Timaan: tan-awa ang seksyon 4.6.2 alang sa dugang mahitungod sa kalainan-sa-paagi nga pagtan-aw ug panagkalahi sa mga kalainan.)

  25. [ lisud , nagkinahanglan og matematika ] Aron mahibal-an ang pagka-epektibo sa usa ka bag-ong web-based nga employment-assistance nga programa, ang usa ka unibersidad nagpahigayon og randomized control trial sa 10,000 nga mga estudyante nga misulod sa ilang katapusang tuig sa eskwelahan. Ang usa ka libre nga suskrisyon nga adunay talagsaong kasayuran sa log-in gipadala pinaagi sa usa ka exclusive invitation email ngadto sa 5,000 sa mga random nga piniling mga estudyante, samtang ang laing 5,000 nga estudyante anaa sa kontrol nga grupo ug walay subscription. Paglabay sa dose ka bulan, usa ka follow-up nga survey (nga walay dili responsibilidad) nagpakita nga sa mga grupo sa pagtambal ug pagkontrol, 70% sa mga estudyante ang nakabaton og full-time nga trabaho sa ilang piniling lugar (lamesa 4.6). Busa, ang serbisyo nga nakabase sa web walay epekto.

    Bisan pa, ang usa ka maalamon nga datos nga siyentipiko sa unibersidad nagtan-aw sa datos sa usa ka gamay pa ug nakit-an nga 20% lang sa mga estudyante sa grupong pagtratar nga nakasulod sa account human makadawat sa email. Dugang pa, ug ingon og kahibulongan, taliwala niadtong kinsa nag-log sa website, 60% lamang ang nakabaton og full-time nga trabaho sa ilang piniling uma, nga mas ubos kay sa gidaghanon alang sa mga tawo nga wala mosulod ug mas ubos kay sa rate sa mga tawo sa kondisyon sa kontrol (lamesa 4.7).

    1. Hatagi og usa ka katin-awan kung unsa ang mahitabo.
    2. Unsa ang duha ka magkalahi nga mga paagi sa pagkalkulo sa epekto sa pagtambal niini nga eksperimento?
    3. Tungod niini nga resulta, kinahanglan ba ang paghatag niini nga pag-alagad sa tanan nga mga estudyante? Aron mahimong klaro, kini dili usa ka pangutana uban sa yano nga tubag.
    4. Unsa ang sunod nga buhaton nila?

    Sugyot: Kini nga pangutana lapas sa materyal nga gikobrehan niini nga kapitulo, apan gipakigsultian ang mga isyu nga sagad sa mga eksperimento. Kini nga matang sa eksperimento nga plano usahay gitawag nga pagdasig sa pagdasig tungod ang mga partisipante gidasig sa paghimo sa pagtambal. Kini nga suliran usa ka pananglitan sa gitawag nga usa-nga-panig nga dili pagsunod (tan-awa ang kapitulo 5 sa Gerber and Green (2012) ).

  26. [ lisud ] Human sa dugang nga pagsusi, nahimo nga ang eksperimento nga gihulagway sa nangaging pangutana mas komplikado. Nahibal-an nga 10% sa mga tawo sa kontrol nga grupo ang nagbayad alang sa serbisyo, ug kini natapos nga adunay trabaho nga 65% (lamesa 4.8).

    1. Pagsulat sa usa ka email nga nagsumada sa unsay imong gihunahuna nga nahitabo ug morekomendar sa usa ka paagi sa paglihok.

    Sugyot: Kini nga pangutana lapas sa materyal nga gikobrehan niini nga kapitulo, apan gipakigsultian ang mga isyu nga sagad sa mga eksperimento. Kini nga suliran usa ka pananglitan sa gitawag nga duha-nga-panig nga dili kompleto (tan-awa ang kapitulo 6 sa Gerber and Green (2012) ).

Table 4.6: Simple View sa Data gikan sa Eksperimento sa Career Services
Grupo Size Rate sa pagpanarbaho
Gitugotan ang pag-access sa website 5,000 70%
Wala gihatag nga access sa website 5,000 70%
Table 4.7: Dugang Kompleto nga Pagtan-aw sa Data gikan sa Eksperimento sa Career Services
Grupo Size Rate sa pagpanarbaho
Mahatagan sa access sa website ug naka-login 1,000 60%
Gitugotan ang pag-access sa website ug dili gyud mag-login 4,000 72.5%
Wala gihatag nga access sa website 5,000 70%
Table 4.8: Full View of Data gikan sa Eksperimento sa Career Services
Grupo Size Rate sa pagpanarbaho
Mahatagan sa access sa website ug naka-login 1,000 60%
Gitugotan ang pag-access sa website ug dili gyud mag-login 4,000 72.5%
Wala gihatag nga access sa website ug gibayran kini 500 65%
Wala gihatagan og access sa website ug wala mobayad alang niini 4,500 70.56%