Տուրիզմ

Բանալի:

  • աստիճանը դժվարությամբ հեշտ հեշտ , միջին միջին , դժվար դժվար , շատ բարդ շատ բարդ
  • պահանջում է math ( պահանջում է math )
  • պահանջում է կոդավորման ( պահանջում է կոդավորման )
  • տվյալների հավաքագրումը ( տվյալների հավաքագրումը )
  • Իմ սիրելիները ( Իմ սիրելի )
  1. [ միջին , տվյալների հավաքագրումը ] Berinsky եւ գործընկերները (2012) գնահատում Mechanical Turk մասնակիորեն replicating երեք դասական փորձեր: Վերարտադրելու դասական Ասիական Հիվանդություն կադրավորման փորձ է Tversky and Kahneman (1981) : Արդյոք ձեր արդյունքները համընկնում Tversky եւ Քանեմանը ի. Արդյոք ձեր արդյունքները համընկնում Berinsky եւ գործընկերներին. Ինչ-եթե բան է սովորեցնում մեզ, օգտագործելով Mechanical Turk համար հետազոտության փորձերի.

  2. [ միջին , Իմ սիրելի ] Մի փոքր լեզուն է, ինքնավստահություն թղթի խորագրով «Մենք պետք է կոտրել Մինչեւ« սոցիալական հոգեբան Ռոբերտ Cialdini, մեկը հեղինակների Schultz et al. (2007) , Գրել է, որ նա կարիերան ավարտելու վաղ իր աշխատանքը որպես պրոֆեսոր, մասամբ այն պատճառով, որ այն մարտահրավերներին, որ նա ծառացած անում դաշտային փորձարկումներ է կարգապահության (հոգեբանություն), որը հիմնականում իրականացնում է լաբորատոր փորձարկումներ (Cialdini 2009) : Կարդալ Cialdini ի թուղթ, եւ գրել նրան մի նամակ `հորդորելով նրան վերանայել իր ընդմիջում-up լույսի ներքո հնարավորությունների թվային փորձերի: Օգտագործեք կոնկրետ օրինակներ հետազոտության, որ դիմելու է իր մտահոգությունները.

  3. [ միջին ] Որոշելու, թե արդյոք փոքր նախնական հաջողությունները lock-կամ անհետանում, վան դե Rijt եւ եւ գործընկերները (2014) միջամտեց չորս տարբեր համակարգերում շնորհելու հաջողություններ պատահական ընտրված մասնակիցների, եւ ապա չափվում երկարաժամկետ ազդեցությունները այս կամայական հաջողության. Կարող եք կարծում, այլ համակարգերի, որը դուք կարող եք առաջադրվելու նմանատիպ փորձեր. Գնահատելու այդ համակարգերի առումով հարցերում գիտական ​​արժեք, ալգորիթմական զարմանալի (տես, Գլուխ 2), եւ էթիկան:

  4. [ միջին , տվյալների հավաքագրումը ] Արդյունքները փորձի կարող է կախված մասնակիցների: Ստեղծել մի փորձարկմամբ, եւ ապա վազում այն ​​Amazon մեխանիկական թուրքի (MTurk), օգտագործելով երկու տարբեր հավաքագրման ռազմավարությունների. Փորձեք վերցնել փորձարկմամբ եւ հավաքագրման ռազմավարություններ, որպեսզի արդյունքները լինեն, քանի որ տարբեր են, որքան հնարավոր է. Օրինակ, ձեր հավաքագրման ռազմավարությունների կարող է լինել հավաքագրել մասնակիցներին առավոտյան եւ երեկոյան կամ փոխհատուցել մասնակիցներին բարձր եւ ցածր վարձատրությամբ: Այս տեսակի տարբերությունների հավաքագրման ռազմավարության կարող է հանգեցնել տարբեր լողավազաններ մասնակիցների եւ տարբեր փորձարարական արդյունքների: Ինչպես է տարբերվում չէր ձեր արդյունքները պարզվում: Ինչ է, որ բացահայտում վազում փորձեր է MTurk.

  5. [ շատ բարդ , պահանջում է math , պահանջում է կոդավորման , Իմ սիրելի ] Պատկերացրեք, որ դուք պատրաստվում են զգացմունքային վարակի ուսումնասիրությունը (Kramer, Guillory, and Hancock 2014) : Օգտագործեք արդյունքները ավելի վաղ դիտողական ուսումնասիրության Kramer (2012) Որպեսզի որոշեն, թե մասնակիցների թիվը յուրաքանչյուր վիճակում: Այս երկու ուսումնասիրությունները չեն համապատասխանում կատարելապես այդքան վստահ լինել բացահայտ թվարկել բոլոր այն ենթադրությունները, որ դուք կատարել:

    1. Run մի սիմուլյացիա, որը որոշելու, թե որքան մասնակիցներն կլիներ համար անհրաժեշտ է հայտնաբերել ազդեցություն, ինչպես մեծ, քանի որ ուժի մեջ Kramer (2012) հետ \ (\ alpha = 0.05 \) եւ \ (1 - \ beta = 0.8 \).
    2. Արդյոք նույն հաշվարկը վերլուծաբանորեն:
    3. Հաշվի առնելով արդյունքները Kramer (2012) Էր էմոցիոնալ Վարակում (Kramer, Guillory, and Hancock 2014) նկատմամբ, սնուցվում (այսինքն, է այն պետք է ավելի շատ էին, քան անհրաժեշտ է):
    4. Այն ենթադրությունների, որ դուք արել, որոնք ունեն ամենամեծ ազդեցություն ձեր հաշվարկման.
  6. [ շատ բարդ , պահանջում է math , պահանջում է կոդավորման , Իմ սիրելի ] Պատասխան հարցին վերեւում, այլ ոչ թե, օգտագործելով ավելի վաղ observational ուսումնասիրությունը առ Kramer (2012) օգտագործել արդյունքները ավելի վաղ բնական փորձարկմամբ է Coviello et al. (2014) :

  7. [ հեշտ ] Երկուսն էլ Rijt et al. (2014) եւ Margetts et al. (2011) երկուսն էլ կատարել փորձեր, որոնք կուսումնասիրեն գործընթացը մարդկանց կնքելու միջնորդությունը: Համեմատեք եւ հակադրեք նախագծման եւ եզրակացությունները այդ ուսումնասիրությունների:

  8. [ հեշտ ] Dwyer, Maki, and Rothman (2015) Անցկացվել է երկու դաշտային փորձարկումներ միջեւ հարաբերությունների սոցիալական նորմերի եւ proenvironmental վարքագծի. Ահա վերացական իրենց թղթի:

    «Ինչպես կարող է հոգեբանական գիտությունը է օգտագործվել է խրախուսել proenvironmental վարքագիծը. Երկու ուսումնասիրությունների, միջամտությունները ուղղված է խթանել էներգիայի խնայողությունը վարքը հասարակական Լոգարանի ուսումնասիրել ազդեցությունը նկարագրող նորմերի եւ անձնական պատասխանատվության: Ի ուսումնասիրության 1, թեթեւ կարգավիճակը (այսինքն, միացնելու կամ անջատելու), որը manipulated նախքան ինչ-որ մեկը մտել դատարկ հրապարակային բաղնիք, ազդանշանային նկարագրական նորման այդ նիստում. Մասնակցում էին զգալիորեն ավելի հավանական է, որ դիմել են լույսերը անջատելու, եթե նրանք դուրս, երբ նրանք մտել. Ի ուսումնասիրության 2 լրացուցիչ պայման ներառված էր, որի նորմը անջատելով լույսը էր ցույց է մեղսակից, բայց մասնակիցները չէին իրենք պատասխանատու դառնում այն. Անձնական պատասխանատվություն հսկվում է վարողի կողմից ազդեցությունը սոցիալական նորմերի վրա վարքագծի. երբ մասնակիցները պատասխանատու չեն վերածվում է լույսի, ազդեցությունը նորմայից թուլացավ: Այս արդյունքները ցույց են տալիս, թե ինչպես է նկարագրական նորմերը եւ անձնական պատասխանատվություն կարող է կանոնակարգել արդյունավետությունը proenvironmental միջամտությունների »:

    Կարդացեք իրենց թուղթ եւ նախագծել վերարտադրությունը ուսումնասիրության 1.

  9. [ միջին , տվյալների հավաքագրումը ] Հիմնվելով նախորդ հարցին, հիմա իրականացնել ձեր դիզայն.

    1. Ինչպես են արդյունքները համեմատել.
    2. Ինչը կարող է բացատրել, թե այդ տարբերությունները.
  10. [ միջին ] Եղել զգալի բանավեճը փորձերի մասնակիցներին հավաքագրված Սայլակ մեխանիկական թուրքի: Դրան զուգահեռ, կան նաեւ եղել զգալի բանավեճը փորձերի մասնակիցներին հավաքագրվում կուրսերում ուսանողական բնակչության. Գրեք երկու էջանոց փոխըմբռնման համեմատելով եւ հակապատկեր է Turkers եւ մագիստրոսներ հետազոտողները մասնակիցներին: Ձեր համեմատությունը պետք է ներառի քննարկում երկու գիտական ​​եւ նյութատեխնիկական հարցերի շուրջ:

  11. [ հեշտ ] Ջիմ Manzi գիրքը Անկառավարելի (2012) հանդիսանում է հիանալի ներդրում մեջ իշխանության փորձերի բիզնեսում. Ի գրքում նա relayed այս պատմությունը:

    «Ես եղել եմ մեկ անգամ հանդիպման հետ իսկական բիզնես հանճարի, մի ինքնուս միլիարդատեր, ովքեր ունեցել է խորը, ինտուիտիվ ընկալման իշխանության փորձերի: Նրա ընկերությունը ծախսել է զգալի ռեսուրսներ փորձում է ստեղծել մեծ խանութ պատուհանում դրսեւորումների, որոնք կարող են ներգրավել սպառողներին եւ մեծացնում վաճառքի, քանի որ պայմանական իմաստությունը ասել է, որ պետք է. Փորձագետները մանրակրկիտ փորձարկվել դիզայն հետո նախագծման, եւ առանձին փորձարկում վերանայել նիստերի ընթացքում տարիների պահվող ցույց տալով ոչ էական պատճառահետեւանքային ազդեցությունը յուրաքանչյուր նոր ցուցադրման դիզայնի վաճառքի. Ավագ մարքեթինգային եւ merchandising ղեկավարները հանդիպել է ԳԳՏ է վերանայել այդ պատմական քննության արդյունքները Տոտո: Ներկայացնելուց հետո բոլոր փորձարարական տվյալների, նրանք եզրակացրել է, որ պայմանական իմաստությունը սխալ էր, որ պատուհանների ցուցադրում չեն քշել վաճառքի. Նրանց խորհուրդ է տրվում ակցիան էր նվազեցնել ծախսերը եւ ջանք է այս ոլորտում: Այս կտրուկ ցույց տվեցին ունակությունը փորձերի է վերացնելու պայմանական իմաստություն: Գլխավոր գործադիր տնօրեն արձագանքը պարզ էր: «Իմ եզրակացությունն այն է, որ ձեր դիզայներները չեն, շատ լավ է»: Նրա լուծում էր մեծացնել ջանքերը խանութում ցուցադրման դիզայնի, եւ ստանալ նոր մարդիկ պետք է դա անել »: (Manzi 2012, 158–9)

    Որ տիպի վավերականության է մտահոգությունը գործադիր տնօրեն:

  12. [ հեշտ ] Հիմնվելով նախորդ հարցին, պատկերացրեք, որ դուք եղել հանդիպման ժամանակ, որտեղ արդյունքները փորձերի քննարկվեցին: Որոնք են չորս հարցեր, որ դուք կարող եք հարցնել, մեկը յուրաքանչյուր տեսակի համար վավերականության (վիճակագրական, կառուցել, ներքին, եւ արտաքին):

  13. [ հեշտ ] Bernedo, Ferraro, and Price (2014) ուսումնասիրում է յոթնամյա ազդեցությունը ջրային փրկարար միջամտության նկարագրված Ferraro, Miranda, and Price (2011) (տես Նկար 4.10): Այս թուղթ, Bernedo եւ գործընկերները նույնպես ձգտում է հասկանալ մեխանիզմը ետեւում ուժի համեմատելով պահվածքը տնային տնտեսությունների, որոնք ունեն եւ չեն տեղափոխվել այն բանից հետո, բուժման էր առաքվում: Այսինքն, կոպիտ, նրանք փորձում են տեսնել, թե արդյոք բուժումը ազդել է այն տունը, կամ տանտերը.

    1. Կարդացեք թուղթը, նկարագրել են իրենց դիզայնով, եւ ամփոփել են իրենց եզրակացությունները: բ) Ինչ դրանց արդյունքները ազդում է, թե ինչպես պետք է գնահատի այն ծախսերի արդյունավետությունը նմանատիպ միջամտությունների: Եթե ​​այդպես է, ապա ինչու: Եթե ​​ոչ, ապա ինչու ոչ:
  14. [ հեշտ ] Մի հետեւող Schultz et al. (2007) , Շուլցը եւ նրա գործընկերները կատարել մի շարք երեք փորձերի վրա ազդեցության նկարագրական եւ արգելադրման նորմերի վրա տարբեր բնապահպանական վարքագծի (սրբիչ reuse) երկու համատեքստերում (հյուրանոց եւ մի timeshare համատիրության) (Schultz, Khazian, and Zaleski 2008) ,

    1. Ամփոփել է նախագծման եւ եզրահանգումները այս երեք փորձերի:
    2. Ինչպես, եթե բոլորը, նրանք փոխել ձեր մեկնաբանման Schultz et al. (2007) :
  15. [ հեշտ ] Ի պատասխան Schultz et al. (2007) , Canfield, Bruin, and Wong-Parodi (2016) Վազեց մի շարք լաբորատոր նման փորձերի ուսումնասիրել նախագծման էլեկտրական օրինագծերի. Ահա թե ինչպես են նրանք նկարագրելու այն վերացական:

    «Մի հետազոտության վրա հիմնված փորձարկմամբ, յուրաքանչյուր մասնակից տեսավ մի հիպոթետիկ էլեկտրաէներգիայի օրինագիծը ընտանիքի համար համեմատաբար բարձր էլեկտրաէներգիայի օգտագործման, ընդգրկելով մասին տեղեկություններ (ա) պատմական օգտագործման, (բ) այդ համեմատությունները հարեւանների եւ (գ) պատմական օգտագործումը կիրառմամբ նկատում: Մասնակիցները տեսավ, բոլոր տեղեկատվական տեսակի մեկում երեք ձեւաչափերով, այդ թվում (ա) սեղանների, (բ) բար գրաֆիկները, եւ (գ) պատկերակը գրաֆիկները: Մենք զեկուցել է երեք հիմնական արդյունքների: Նախ, սպառողները հասկացան, յուրաքանչյուր տեսակի էլեկտրաէներգիայի օգտագործման տեղեկությունների առավել, երբ այն ներկայացվել է մի սեղանի շուրջ, թերեւս այն պատճառով, որ սեղանները հեշտացնել պարզ կետ ընթերցում: Երկրորդ, նախապատվությունները եւ մտադրությունները տնտեսել էլեկտրաէներգիան էին ամենաուժեղ համար պատմական օգտագործման տեղեկությունների, անկախ ձեւաչափից. Երրորդ, անհատներ ցածր էներգիայի գրագիտության հասկացան, բոլոր տեղեկությունները ավելի քիչ »:

    Ի տարբերություն մյուս հետագա ուսումնասիրությունների, հիմնական արդյունքը հետաքրքրության Canfield, Bruin, and Wong-Parodi (2016) , Հաղորդում վարքագիծ չի փաստացի վարքագիծը: Որոնք են ուժեղ եւ թույլ կողմերը: Այս տեսակի ուսումնասիրության ավելի լայն հետազոտական ​​ծրագրի նպաստելով էներգիայի խնայողությունների.

  16. [ միջին , Իմ սիրելի ] Smith and Pell (2003) Հանդիսանում է երգիծական meta-analysis ուսումնասիրությունների ցուցադրելով արդյունավետությունը parachutes. Նրանք կնքել:

    «Քանի որ շատ միջամտությունները ուղղված վատ առողջությունը, արդյունավետությունը parachutes չի ենթարկվել է խիստ գնահատականի օգտագործելով randomized վերահսկվող դատավարությունների: Փաստաբաններն ապացույցների հիման բժշկության քննադատել են ընդունումը միջամտությունների գնահատվում է օգտագործելով միայն observational տվյալները: Մենք կարծում ենք, որ բոլորն էլ կարող են օգտվել, եթե առավել արմատական ​​protagonists ապացույցների հիման բժշկության կազմակերպել եւ մասնակցել է կրկնակի կույր, randomized, Placebo վերահսկվող, crossover դատավարությունը պարաշյուտ. "

    Գրել op-խմբ հարմար է ընդհանուր ընթերցողական թերթի, ինչպես, օրինակ, The New York Times- ը, պնդելով դեմ fetishization փորձարարական ապացույցների: Տրամադրել կոնկրետ, կոնկրետ օրինակներ: Ակնարկ: Տես նաեւ, Bothwell et al. (2016) Եւ Deaton (2010)

  17. [ միջին , պահանջում է կոդավորման , Իմ սիրելի ] Տարբերությունը-ի տարբերությունների գնահատողների մի բուժման ազդեցություն կարող է լինել շատ ավելի ճշգրիտ, քան տարբերությունը-ի-Mean գնահատողների. Գրեք հուշագիր է որպես ինժեներ պատասխանատու A / B փորձարկման է սկսնակ եւ սոցիալական մեդիա ընկերության բացատրելով արժեքը տարբերությունը-ի տարբերությունների մոտեցման համար վազում օնլայն փորձարկմամբ: Հուշագրում պետք է ներառի հայտարարություն խնդրի, որոշ ինտուիցիան մասին պայմաններում, որոնցում տարբերությունը-ի տարբերության գնահատող պետք է outperform է տարբերությունը-ի միջինի գնահատող, եւ պարզ սիմուլյացիոն ուսումնասիրություն:

  18. [ հեշտ , Իմ սիրելի ] Gary Loveman էր պրոֆեսոր Հարվարդի բիզնես դպրոցում, նախքան դառնալու գործադիր տնօրեն Harrah ի, ամենախոշոր կազինո ընկերություններից է աշխարհում. Երբ նա տեղափոխվել է Harrah ի, Loveman փոխակերպվում ընկերությանը հետ հաճախակի թռչող միջատ նման հավատարմության ծրագիր, որը հավաքված հսկայական քանակությամբ տվյալների հաճախորդների վարքագծի. Գագաթին այս մշտապես Չափման համակարգ, ընկերությունը սկսել է վազում փորձարկումներ: Օրինակ, նրանք կարող են վազում փորձ գնահատելու ազդեցությունը Արժեկտրոնի համար ազատ հյուրանոցային գիշեր հաճախորդների հետ կոնկրետ Դրամախաղ օրինակին. Ահա թե ինչպես Loveman նկարագրեց կարեւորությունը փորձերի է HARRAH առօրյա բիզնես պրակտիկայի:

    «Դա նման դուք չեք անհանգստացնում կանանց, դուք չեք գողանում, եւ դու պետք է ունենա ստուգողական խումբ. Սա մեկն է այն բաների, որոնք դուք կարող եք կորցնել ձեր աշխատանքը, ժամը Harrah's ոչ թե վազում է վերահսկողության խումբ: » (Manzi 2012, 146)

    Գրեք նամակ գրել նոր աշխատակցի բացատրելով, թե ինչու Loveman կարծում է, որ դա այնքան կարեւոր է ունենալ վերահսկողության խումբ: Դուք պետք է փորձեք ներառում է, օրինակ 'կամ իրական կամ կատարել մինչեւ լուսաբանում են ձեր կետը.

  19. [ դժվար , պահանջում է math ] Նոր գիտափորձը, որի նպատակն է գնահատել ազդեցությունը ստանալու տեքստային հաղորդագրությամբ հիշեցումները պատվաստումների uptake: 150 կլինիկաներ, յուրաքանչյուրը 600 իրավասու հիվանդների, պատրաստ են մասնակցել: Կա մի ֆիքսված արժեքը 100 ԱՄՆ դոլար յուրաքանչյուր կլինիկա դուք ուզում եք աշխատել, եւ դա արժե 1 դոլար յուրաքանչյուր տեքստային հաղորդագրություն, որ դուք ուզում եք ուղարկել: Բացի այդ, ցանկացած կլինիկաներ, որ դուք աշխատում են կտա չափել արդյունքը (թե արդյոք ինչ - որ մեկը ստացել է պատվաստումների) անվճար. Ենթադրել, որ դուք ունեք մի բյուջեն 1000 դոլարով:

    1. Ինչ պայմաններում կարող է դա ավելի լավ է կենտրոնանալ ձեր ռեսուրսները մի փոքր շարք կլինիկաներում եւ ինչ պայմաններով կարող է դա ավելի լավ է տարածել դրանք ավելի լայնորեն.
    2. Ինչ գործոններ պետք է որոշել, թե ամենափոքր ազդեցություն չափը, որը դուք կկարողանաք հուսալիորեն հայտնաբերել ձեր բյուջեից.
    3. Գրեք հուշագիր, բացատրելով այդ առեւտրի խաղարկությանը պոտենցիալ ֆինանսավորողը:
  20. [ դժվար , պահանջում է math ] Խոշոր խնդիր առցանց դասընթացներ է attrition, շատ ուսանողներ, որոնք սկսել դասընթացներ մինչեւ վերջ հրաժարվելու դուրս. Պատկերացրեք, որ դուք աշխատում է առցանց ուսուցման հարթակ, եւ դիզայներ է հարթակ ստեղծել է մի տեսողական առաջընթաց բար, որ նա մտածում է, որը օգնում է կանխարգելել ուսանողներին հրաժարվելու դուրս, իհարկե. Դուք ցանկանում եք փորձարկել ազդեցությունը առաջընթացի բար վրա ուսանողների մի մեծ հաշվողական հասարակագիտության ընթացքում: Այն բանից հետո, դիմելով որեւէ բարոյական խնդիրները, որոնք կարող են առաջանալ փորձարկմամբ, դուք եւ ձեր գործընկերները անհանգստանալ, որ դասընթացը կարող է ունենալ բավարար ուսանողներին հուսալիորեն հայտնաբերելու հետեւանքները առաջընթացի բար. Ի հաշվարկների ստորեւ դուք կարող եք ենթադրել, որ կեսը ուսանողները կստանան առաջընթացի բար եւ կեսը `ոչ: Բացի այդ, դուք կարող եք ենթադրել, որ չկա միջամտություն: Այլ կերպ ասած, դուք կարող եք ենթադրել, որ մասնակիցները կարող են միայն ազդել են, թե արդյոք նրանք ստացել են բուժում, կամ վերահսկողության. նրանք չեն իրականացվում են, թե արդյոք այլ մարդիկ ստացել է բուժում, կամ վերահսկողության համար (ավելի պաշտոնական սահմանման, տես Gerber and Green (2012) , Ch. 8): Խնդրում ենք հետեւել որեւէ լրացուցիչ ենթադրությունների, որ դուք կատարել:

    1. Ենթադրենք, որ առաջընթաց բար, որը ակնկալվում է բարձրացնել համամասնությամբ ուսանողների, ովքեր ավարտել դասի 1 տոկոսային կետով, ինչ է ընտրանքի չափը անհրաժեշտ է հուսալիորեն հայտնաբերելու ազդեցությունը:
    2. Ենթադրենք, որ առաջընթաց բար, որը ակնկալվում է բարձրացնել համամասնությամբ ուսանողների, ովքեր ավարտել են դաս է 10 տոկոսային կետով, ինչ է ընտրանքի չափը անհրաժեշտ է հուսալիորեն հայտնաբերելու ազդեցությունը:
    3. Հիմա պատկերացրեք, որ դուք պետք է առաջադրվելու փորձ եւ ուսանողներին, ովքեր ավարտել է բոլոր դասընթացների նյութերը վերցրել վերջնական քննություն: Երբ դուք համեմատում է վերջնական քննության բազմաթիվ ուսանողների համար, ովքեր ստացել են առաջընթաց բար են, որ այդպես չէ, դուք կգտնեք, շատ բան ձեր անակնկալ, որ ուսանողները, ովքեր չեն ստանում առաջընթաց բար, ըստ էության, վաստակեց ավելի բարձր: Արդյոք սա նշանակում է, որ առաջընթաց բար առաջացրել ուսանողներին սովորել պակաս. Ինչ կարող եք իմանալ, թե այս արդյունքների տվյալները: (Ակնարկ: Տես Gerber and Green (2012) , Ch. 7)
  21. [ շատ բարդ , պահանջում է կոդավորման ] Հաճելի թղթի վրա, Lewis and Rao (2015) Ցայտուն ցույց են տալիս, հիմնարար վիճակագրական սահմանափակում նույնիսկ զանգվածային փորձերի: Թերթը, որը ի սկզբանե ուներ սադրիչ տիտղոսը »- ին մոտ անհնարինության չափման վերադառնում է Գովազդի մասին» -shows, թե որքան դժվար է չափել հասույթ ներդրումների առցանց գովազդ, նույնիսկ թվային փորձարկումները ընդգրկելով միլիոնավոր հաճախորդների. Ընդհանուր առմամբ, թերթը հստակ ցույց է տալիս, որ դա դժվար է գնահատել փոքր բուժման ազդեցությունը մեջտեղ աղմկոտ հանգուցալուծում տվյալները: Կամ հայտարարել է diffently, թերթը ցույց է տալիս, որ Հաշվարկված բուժման ազդեցությունները չի ունենա մեծ վստահության ընդմիջումներով, երբ ազդեցությունը-to-ստանդարտ շեղումը (\ (\ frac {\ Delta \ bar {y}} {\ Sigma} \)) հարաբերակցությունը փոքր է: Կարեւորն ընդհանրապես դասն այս թղթի այն է, որ արդյունքները փորձերի հետ փոքր ազդեցություն-to-ստանդարտ շեղումը հարաբերությամբ (օրինակ, ROI գովազդային արշավների) կլինի անբավարար: Ձեր մարտահրավերը կլինի գրել հուշագիր է մեկին մարկետինգի բաժնում Ձեր ընկերության evaluting պլանային գիտափորձը չափել ROI է գովազդային արշավի: Ձեր Memo պետք է աջակցություն գրաֆիկները արդյունքների համակարգչային սիմուլացիոն.

    Ահա որոշ տեղեկություններ, որ դուք կարող եք անհրաժեշտ. Բոլոր այս թվային արժեքների բնորոշ են իրական փորձերի հաղորդում է Lewis and Rao (2015) :

    • ROI, առանցքային մետրային առցանց գովազդային արշավների, սահմանվում է, որ զուտ շահույթը քարոզարշավի (համախառն շահույթի քարոզարշավը հանած արժեքով քարոզարշավի) բաժանված գնով քարոզարշավի: Օրինակ քարոզարշավը, որը չուներ ազդեցություն վաճառքի կլիներ ROI է -100% եւ քարոզարշավ, որտեղ առաջացած շահույթն հավասար լինեին ծախսերի կլիներ ունենալ ROI է, 0:

    • միջինը վաճառքները մեկ հաճախորդի $ 7 ստանդարտ շեղումը $ 75:

    • քարոզարշավը ակնկալվում է բարձրացնել վաճառքի է $ 0.35 մեկ հաճախորդի, որը համապատասխանում է աճի շահույթի $ 0,175 մեկ հաճախորդի. Այլ կերպ ասած, համախառն մարժա է 50%:

    • նախատեսվող չափը փորձի 200,000 մարդ, կեսը բուժման խմբի եւ կես է վերահսկման խմբի.

    • արժեքը քարոզարշավի $ 0.14 մեկ մասնակցի:

    Գրեք հուշագիր evaluting այս գիտափորձը. Ցանկանում եք խորհուրդ գործարկման այս փորձին, ինչպես նաեւ նախատեսվում է. Եթե ​​այդպես է, ապա ինչու: Եթե ​​ոչ, ինչ փոփոխություններ խորհուրդ կտաք?

    Լավ Memo կլինի անդրադառնալ այս կոնկրետ գործը, ավելի լավ փոխըմբռնման չի ընդհանրացնել այս դեպքում մի կերպ (օրինակ, ցույց են տալիս, թե ինչպես է որոշում փոփոխությունները որպես ֆունկցիա ազդեցության-to-ստանդարտ շեղումը հարաբերակցության); եւ մի մեծ հուշագիր կներկայացնի ամբողջովին ընդհանրացված արդյունք:

  22. [ շատ բարդ , պահանջում է math ] Արդյոք նույնը, ինչպես նախորդ հարցին, այլ ավելի շուտ, քան նմանակման դուք պետք է օգտագործել վերլուծական արդյունքները:

  23. [ շատ բարդ , պահանջում է math , պահանջում է կոդավորման ] Արդյոք նույնը, ինչպես նախորդ հարցին, սակայն օգտագործել այնպես էլ մոդելավորում եւ վերլուծական արդյունքները:

  24. [ շատ բարդ , պահանջում է math , պահանջում է կոդավորման ] Պատկերացրեք, որ դուք գրել փոխըմբռնման վերը նկարագրված օգտագործելով կամ սիմուլյացիա, վերլուծական արդյունքները, կամ երկուսն էլ, եւ ինչ - որ մեկին է մարկետինգի բաժնի խորհուրդ է տալիս օգտագործելով տարբերությունը-in-տարբերությունների գնահատող, այլ ոչ թե մի տարբերությամբ միջոցների գնահատման (տե'ս բաժին 4.6.2) , Գրեք նոր կարճ հուշագիր, բացատրելով, թե ինչպես է 0,4 փոխկապակցվածությունը վաճառքի առջեւ փորձարկմամբ եւ հետո վաճառքի փորձի կփոխի ձեր եզրակացությունը.

  25. [ դժվար , պահանջում է math ] Որպեսզի արդյունավետությունը գնահատելու նոր վեբ վրա հիմնված կարիերայի ծառայությունից, համալսարանի կարիերայի ծառայություններ գրասենյակը իրականացրել է randomized հսկողության դատավարությունը, որոնք առաջին շարքում 10,000 ընդունվածների իրենց վերջնական տարին դպրոց. Ազատ բաժանորդագրություն յուրահատուկ log-in-ին տեղեկություն է ուղարկվել միջոցով բացառիկ email հրավերով 5000-պատահականորեն ընտրված ուսանողներին, իսկ մյուս 5000 ուսանողները գտնվում են վերահսկողության խմբի եւ չունեք բաժանորդագրությունը. Տասներկու ամիս անց, մի հետեւել- up հետազոտությունը (առանց ոչ-պատասխան), ցույց է տալիս, որ երկու բուժման եւ վերահսկման խմբերի, 70% -ը ուսանողներ ապահովված լրիվ դրույքով աշխատանք իրենց ընտրած ոլորտում (Աղյուսակ 4.5): Այսպիսով, կարծես թե, վեբ վրա հիմնված ծառայություն չուներ ազդեցություն:

    Սակայն, մի խելացի տվյալները գիտնական համալսարանում նայեց տվյալները մի քիչ ավելի սերտորեն եւ պարզել, որ միայն 20% -ն է ուսանողների բուժման խմբի երբեւէ մուտք գործել հաշվին ստանալուց հետո նամակ. Բացի այդ, եւ ինչ - որ չափով զարմանալիորեն, նրանց շարքում, ովքեր մուտք են կայքում ընդամենը 60% էր ապահովված լրիվ դրույքով աշխատանք իրենց ընտրած ոլորտում, որը եղել է ավելի ցածր է, քան փոխարժեքի մարդկանց համար, որոնք չեն մտնել համակարգ եւ ցածր է փոխարժեքի մարդկանց համար վերահսկողությունը վիճակը (աղյուսակ 4.6):

    1. Տրամադրել է բացատրություն, թե ինչ կարող է տեղի ունենալ:
    2. Որոնք են երկու տարբեր եղանակներ է հաշվարկել ազդեցությունը բուժման այս գիտափորձի.
    3. Հաշվի առնելով այս արդյունքը, պետք է համալսարանի Կարիերայի ծառայությունը տրամադրել այս վեբ վրա հիմնված կարիերայի ծառայություն բոլոր ուսանողներին: Պարզապես պետք է լինեն հստակ, սա ոչ մի հարց հետ պարզ պատասխան.
    4. Ինչ պետք է նրանք անեն հաջորդ?

    Ակնարկ: Այս հարցը դուրս է գալիս նյութի ընդգրկված է սույն գլխում, բայց անդրադառնում ընդհանուր փորձերի. Այս տեսակի փորձարարական նախագծման երբեմն կոչվում է խրախուսական դիզայն, քանի որ մասնակիցները խրախուսվում են զբաղվել բուժման. Այս խնդիրը մի օրինակ է, թե ինչ կոչվում է միակողմանի անհամապատասխանությունը (տես Gerber and Green (2012) , Ch. 5)

  26. [ դժվար ] Հետագա քննության, ապա պարզվում է, որ փորձը նկարագրված է նախորդ հարցին էր, նույնիսկ ավելի բարդ է: Ստացվում է, որ 10% - ը մարդկանց կառավարման խմբի վճարել մատչելիության ծառայությանը, եւ նրանք ավարտվեց մինչեւ աշխատանքային փոխարժեքով 65% (Աղյուսակ 4.7):

    1. Գրել նամակ, ամփոփելով, թե ինչ եք կարծում, տեղի է ունենում, եւ խորհուրդ են տալիս մի ընթացքը գործողության.

    Ակնարկ: Այս հարցը դուրս է գալիս նյութի ընդգրկված է սույն գլխում, բայց անդրադառնում ընդհանուր փորձերի. Այս խնդիրը մի օրինակ է, թե ինչ կոչվում է երկկողմանի անհամապատասխանությունը (տես Gerber and Green (2012) , Ch. 6)

Աղյուսակ 4.5: Simple տեսակետը տվյալների Աշխատանք Ծառայություններ փորձարկմամբ:
խումբ չափ Զբաղվածության մակարդակը
Տեսակցել է կայքը 5000 70%
Չի տրվում մուտք գործել կայքը 5000 70%
Աղյուսակ 4.6. Ավելի ամբողջական տեսք տվյալների կարիերայի ծառայությունների փորձարկմամբ:
խումբ չափ Զբաղվածության մակարդակը
Տեսակցել կայքում եւ մուտք գործեք, 1,000 60%
Տեսակցել է կայքում եւ երբեք մուտք 4000 85%
Չի տրվում մուտք գործել կայքը 5000 70%
Աղյուսակ 4.7: Full տեսակետը տվյալների Աշխատանք Ծառայություններ փորձարկմամբ:
խումբ չափ Զբաղվածության մակարդակը
Տեսակցել կայքում եւ մուտք գործեք, 1,000 60%
Տեսակցել է կայքում եւ երբեք մուտք 4000 72.5%
Չի տրվում մուտք գործել կայքում եւ վճարել դրա համար 500 65%
Չի տրվում մուտք գործել կայքում, եւ չի վճարել դրա համար 4500 70,56%