үйл ажиллагаа

  • хүндрэлийн зэрэг: амархан хялбар , дунд дунд , хатуу хатуу , маш хэцүү маш хэцүү
  • математик шаарддаг ( математик шаарддаг )
  • код бичихийг шаарддаг код бичихийг шаарддаг )
  • Өгөгдөл цуглуулах ( Өгөгдөл цуглуулах )
  • миний дуртай ( Миний дуртай )
  1. [ дунд , Өгөгдөл цуглуулах ] Berinsky болон түүний хамтрагчид (2012) MTurk-ийг гурван сонгодог туршилтыг давтан хийснээр үнэлжээ. Tversky and Kahneman (1981) сонгодог Азийн өвчин эмгэгийн туршилтыг Tversky and Kahneman (1981) . Таны үр дүн Tversky болон Kahneman-тэй таарч байна уу? Таны үр дүн Бэринский ба хамт олонтой таарч байна уу? Хэрэв ямар нэг зүйл энэ судалгаанд зориулж MTurk-ийг ашиглах талаар бидэнд зааж өгдөг үү?

  2. [ дунд , Миний дуртай ] Schultz et al. (2007) Зохиолчдын нэг нийгмийн сэтгэл судлаач Роберт Киалдини "Бид эвдэрч унах ёстой" нэртэй хэл дээр цаасан дээр бичсэн Schultz et al. (2007) , тэрээр профессороор ажилд орохоосоо өмнө тэтгэвэрт гарчээ. Энэ нь гол төлөв лабораторийн туршилтыг (Cialdini 2009) явуулдаг сахилга бат (хагалгааны) талбарт туршилт хийхэд тулгардаг бэрхшээлүүд юм. Cialdini-ийн баримтыг уншиж, түүнд дижитал туршилт хийх боломжийг харгалзан завсарлага авахыг нь дахин авч үзэхийг уриалж байна. Өөрийн санаа зовоосон асуудлуудад чиглэсэн судалгааны тодорхой жишээг ашиглана уу.

  3. [ дунд ] Анхны амжилтыг бага хэмжээгээр түгжиж эсвэл алга болгосон эсэхийг тодорхойлохын тулд ван де Риж болон бусад хамт олон (2014) санамсаргүй байдлаар сонгон шалгаруулсан оролцогчид амжилтанд хүрэх дөрвөн өөр системд оролцож, энэхүү дур зоргоороо амжилтанд хүрсэн урт хугацааны үр нөлөөг хэмжсэн. Үүнтэй төстэй туршилтуудыг хийж болох бусад системүүдийн талаар та бодож үзсэн үү? Эдгээр тогтолцоог шинжлэх ухааны үнэ цэнэ, алгоритмын маргаантай асуудлуудыг үнэлэх (2-р бүлэгт үз), ёс зүйг үнэлэх.

  4. [ дунд , Өгөгдөл цуглуулах ] Туршилтын үр дүн нь оролцогчдоос хамаарна. Туршилт хийж, дараа нь MTurk дээр ажиллуулах хоёр янзын аргыг ашиглана. Туршилт, сонгон шалгаруулалтын стратегийг сонгохын тулд үр дүн аль болох ялгаатай байна. Жишээлбэл, танай ажилд авах стратеги нь оролцогчдод өглөө, оройн цагаар оролцогчдыг элсүүлэх эсвэл өндөр, бага цалинтай хүмүүсийг нөхөн олгох явдал юм. Ажилд авах стратегид эдгээр төрлийн ялгаатай байдал нь оролцогчдын янз бүрийн бүрэлдэхүүн хэсгүүд, янз бүрийн туршилтын үр дүнд хүргэж болно. Таны үр дүн яаж өөрчлөгдсөн бэ? MTurk дээр туршилтыг явуулж байгаа нь юу вэ?

  5. [ маш хэцүү , математик шаарддаг , код бичихийг шаарддаг ] Та Emotional Contagion туршилтыг (Kramer, Guillory, and Hancock 2014) төлөвлөж байсан гэж төсөөлөөд үз дээ. Үр дүн бүрт оролцогчдын тоог гаргахын тулд Kramer (2012) өмнөх судалгааны үр дүнг ашиглана. Эдгээр хоёр судалгаа төгс тохироогүй тул таны хийсэн бүх таамаглалыг тодорхой бичээрэй.

    1. Kramer (2012) үзүүлэх үр нөлөөг илрүүлэхэд хичнээн олон оролцогч хэрэгтэй болохоо шийдэхийн тулд \(\alpha = 0.05\) болон \(1 - \beta = 0.8\) хэрхэн нөлөөлөхийг шийднэ.
    2. Тооцооллын адил тооцоолол хийнэ үү.
    3. Kramer (2012) -ын үр дүнгээс харахад сэтгэл хөдлөлийн байдал (Kramer, Guillory, and Hancock 2014) илүү хүчтэй байсан (өөрөөр хэлбэл, илүү их оролцогчид хэрэгтэй байсан уу)?
    4. Таны хийсэн таамаглалаас таны тооцоонд хамгийн том нөлөө үзүүлж байна уу?
  6. [ маш хэцүү , математик шаарддаг , код бичихийг шаарддаг Өмнөх асуултанд дахин хариул. Гэхдээ энэ удаа Kramer (2012) хийсэн ажиглалтын судалгааг Kramer (2012) хийсэн үр дүнг өмнөх туршилтаас Lorenzo Coviello et al. (2014) мэтээр Lorenzo Coviello et al. (2014) .

  7. [ хялбар ] Margetts et al. (2011) , ван де Риж нар нар. (2014) өргөдөл гаргагчид гарын үсэг зурах үйл явцыг судалж үзсэн. Эдгээр судалгааны дизайн болон ололтыг харьцуулах, харьцуулах.

  8. [ хялбар ] Dwyer, Maki, and Rothman (2015) нийгмийн хэм хэмжээ, байгаль орчны чиг хандлагын харилцан хамаарлын талаархи хоёр туршилтыг явуулсан. Тэдний цаасны хураангуй:

    "Байгаль орчны зан үйлийг дэмжихийн тулд сэтгэл зүйн шинжлэх ухааныг хэрхэн ашиглаж болох вэ? Хоёр судалгаагаар олон нийтийн угаалгын өрөөнд эрчим хүчний хэмнэлтийн зан үйлийг хөгжүүлэхэд чиглэсэн үйл ажиллагаа нь тодорхой дүрмийн нөлөөлөл, хувийн хариуцлагын нөлөөллийг судлав. Хичээл 1-д хэн нэгэн хүн нийтийн ариун цэврийн өрөөнд орж ирэхээс өмнө гэрлийн байдал (өөрөөр хэлбэл, дээр эсвэл унтраах) -ийг удирдаж, тухайн нөхцөл байдалд зориулсан дүрмийн тайлбарыг дүрслэв. Оролцогчид орж ирэхэд гэрэл унтрааж асаах нь илүү их магадлалтай байв. Суралцах 2-д нэмэлт гэрэл зургийг гэрлээс татгалзах нисгэгчийн норм нормативыг оруулсан боловч оролцогчид үүнийг эргүүлэн өөрчлөх үүрэг хүлээдэггүй. Хувийн үүрэг хариуцлага зан үйлийн талаархи нийгмийн хэм хэмжээний нөлөөг багасгасан; Оролцогчид гэрлийг асаахад хариуцлага хүлээхгүй бол нормативын нөлөө багасна. Эдгээр үр дүнгүүд нь тодорхойлсон хэм хэмжээ, хувийн хариуцлага нь байгаль орчны арга хэмжээний үр нөлөөг хэрхэн зохицуулж болохыг харуулж байна. "

    Тэдний бичсэн номыг уншиж, судалгааны дvрслийг гаргах.

  9. [ дунд , Өгөгдөл цуглуулах ] Өмнөх асуултыг бүтээх нь одоо дизайныг хийдэг.

    1. Үр дүнг хэрхэн харьцуулдаг вэ?
    2. Эдгээр ялгааг тайлбарлаж болох уу?
  10. [ дунд ] MTurk-ээс элссэн оролцогчдыг ашиглан туршилтуудын талаар нэлээд маргаан гарсан. Үүний зэрэгцээ, бакалаврын оюутны популяциас оролцсон хүмүүсийг ашиглан туршилтуудын талаар нэлээд маргаан гарсан. Туркерүүд ба оюутнуудтай харьцуулахад хоѐр хуудас бичиг баримт бичихийг оролцогчдод тэмдэглэ. Таны харьцуулалтад шинжлэх ухааны болон логистик асуудлуудын талаар хэлэлцэх хэрэгтэй.

  11. [ хялбар ] Жим Мансигийн номонд Хяналтгүй (2012) нь бизнест туршилт хийх хүч чадлын гайхалтай танилцуулга юм. Номонд тэрээр дараах түүхийг дамжуулсан юм:

    "Би туршилт хийх хүчний талаар гүн гүнзгий, гүнзгий ойлгосон, жинхэнэ бизнес суугч, өөрийгөө бүтээгч тэрбумтантай уулзсан. Компани нь их хэмжээний нөөцөө зарцуулдаг байсан нь хэрэглэгчдийн анхаарлыг татахуйц агуулах цонхыг бий болгох оролдлого хийж, уламжлалт мэргэн ухааныг хэлэх ёстой. Шинжээчид загвар дизайныг сайтар туршиж үзсэний дараагаар нэг удаа туршилтын шинжилгээний үеэр борлуулалтын шинэ загварын дизайн тус бүрийн ач холбогдолгүй үр нөлөөг харуулсангүй. Ахлах маркетинг, бараа бүтээгдэхүүний борлуулалт хариуцсан захирлууд эдгээр түүхэн сорилтын үр дүнг toto -д танилцуулахаар Гүйцэтгэх захиралтай уулзжээ. Туршилтын бүх өгөгдлийг танилцуулсны дараа уламжлалт мэргэн ухаан буруу байсан гэж үздэг бөгөөд цонхны дэлгэц нь борлуулалтыг жолооддоггүй гэж дүгнэсэн. Тэдний санал болгосон үйл ажиллагаа нь энэ салбарт зардал, хүчин чармайлтыг бууруулахад оршиж байв. Энэ нь уламжлалт мэргэн ухааныг даван туулах туршилт хийх чадавхийг маш ихээр харуулсан юм. Гүйцэтгэх захирлын өгсөн хариулт энгийн байсан: Миний дүгнэлт бол таны дизайнерууд маш сайн биш гэж миний дүгнэлт юм. ' Түүний шийдэл нь дэлгүүрийн дэлгэцийн дизайн хийх хүчин чармайлтыг нэмэгдүүлэх, шинэ хүмүүст үүнийг хийх явдал байв " (Manzi 2012, 158–9)

    Гүйцэтгэх захирлын ямар төрлийн хүчинтэй байх вэ?

  12. [ хялбар ] Өмнөх асуултын хариулт дээр үндэслэн туршилтуудын үр дүнг хэлэлцсэн уулзалтанд байсан гэж төсөөлөөд үзээрэй. Таны асууж болох дөрвөн асуулт юу вэ (нэг нь статистик, бүтэц, дотоод, гадаад)?

  13. [ хялбар Ferraro, Miranda, and Price (2011) тайлбарласан усны хэмнэлттэй үйл ажиллагааны долоон жилийн үр нөлөөг судалсан Bernedo, Ferraro, and Price (2014) Ferraro, Miranda, and Price (2011) (4.11-р зургийг үзнэ үү). Энэ баримт бичигт Беремедо болон бусад хамт олон эмчилгээний үр дүнг ойлгохыг эрэлхийлж, эмчилгээг хүргэсний дараа нүүн шилжсэн, эмчилгээ хийлгээгүй өрхүүдийн зан үйлийг харьцуулан судалж үзжээ. Энэ нь тэд эмчилгээ нь гэр орон эсвэл гэрийн эзэд нөлөөлсөн эсэхийг харахыг оролдсон.

    1. Баримт бичгийг уншиж, загвараа тайлбарлаж, олсон үр дүнгээ нэгтгэн дүгнэх.
    2. Тэдгээр олдворууд нь ижил төстэй үйл ажиллагааны зардлын үр ашгийг үнэлэхэд хэрхэн нөлөөлөх вэ? Хэрэв тийм бол яагаад? Хэрэв үгүй ​​бол яагаад болохгүй гэж?
  14. [ хялбар ] Schultz et al. (2007) , Schultz болон хамтран ажиллагсад нь хоёр нөхцөл байдалд (жишээ нь зочид буудал, цаг (Schultz, Khazian, and Zaleski 2008) сууцны буудал) (байгаль орчны өөр зан үйлийн талаархи тайлбар, дүрэм журмын үр дүнг харуулсан гурван цуврал туршилтыг хийсэн) (Schultz, Khazian, and Zaleski 2008) .

    1. Эдгээр гурван туршилтын загвар, үр дүнг нэгтгэн дүгнэх.
    2. Хэрэв та бүхэн Schultz et al. (2007) тайлбарыг өөрчилөх юм бол яах вэ Schultz et al. (2007) ?
  15. [ хялбар ] Schultz et al. (2007) , Canfield, Bruin, and Wong-Parodi (2016) цахилгаан цэнэглэх загварыг судлах лабораторийн туршилтуудыг хийсэн. Тэд үүнийг хийсвэр тольд тайлбарлав:

    Судалгаанд суурилсан туршилтаар оролцогч бүр цахилгаан эрчим хүчний харьцангуй өндөр хэрэглээ бүхий гэр бүлийн хувьд төсөвлөсөн цахилгааны тооцоог харуулсан. Үүнд: (a) түүхэн хэрэглээ, (b) хөршүүдтэй харьцуулах, (в) багаж хэрэгслийн эвдрэлийн түүхэн хэрэглээ зэргийг харуулсан. Оролцогчид бүх мэдээллийн төрлийг (a) хүснэгт, (b) зураасан кодын аль нэгээр харж, (c) тэмдэгтийн график зэргийг харуулсан. Бид гурван үндсэн дүгнэлтийг гаргав. Нэгдүгээрт, хэрэглэгчид ширээн дээр танилцуулсан цахилгааны хэрэглээний төрөл тус бүрийг ойлгодог байсан нь магадгүй хүснэгтүүд энгийн цэг уншихад хялбар байдаг. Хоёрдугаарт цахилгаан эрчим хүч хэмнэх сонирхол, сонирхол нь түүхийн хэрэглээний түүхэн хэлбэрээс хамгийн хүчтэй байсан. Гуравдугаарт, эрчим хүчний бага боловсрол эзэмшсэн хүмүүс бүх мэдээлэл бага гэдгийг ойлгосон ".

    Бусад судалгаанаас ялгаатай нь Canfield, Bruin, and Wong-Parodi (2016) нарын сонирхлын гол үр дүн нь бодит зан авир биш зан авирыг мэдээлдэг. Энэ төрлийн судалгааны давуу болон сул тал нь эрчим хүчний хэмнэлтийн талаархи өргөн хүрээтэй судалгааны хөтөлбөрт ямар ач холбогдолтой вэ?

  16. [ дунд , Миний дуртай ] Smith and Pell (2003) нь шүхрийн үр нөлөөг харуулсан судалгаануудыг нэгтгэсэн мета-анализ хийжээ. Тэд дүгнэжээ:

    "Шүдний эрүүл мэндээс урьдчилан сэргийлэх зорилготой олон арга хэмжээний нэгэн адил шүхрийн үр нөлөөг санамсаргүй түүвэрлэсэн туршилтыг ашиглан нарийн үнэлгээнд хамрагдахгүй байна. Нотолгоонд суурилсан анагаах ухаанд өмгөөлөгч нар зөвхөн ажигласан мэдээллээ ашиглан үнэлэлт дүгнэлт өгөхийг шүүмжилж байна. Нотолгоонд суурилсан анагаах ухааны хамгийн хүчирхэг пролонтнууд зохион байгуулж, шүтээний хоёр сохор, санамсаргүй, плацебо хяналттай, шүтээний кроссоверын туршилтанд оролцсон тохиолдолд хүн бүр ашигтай байх болно гэж бид үздэг. "

    Нью-Йорк Таймс Таймс зэрэг уншигчдын сонин хэвлэлийн баримт нотолгооны эсрэг маргааныг эсэргүүцсэн маргааныг бичнэ үү. Тодорхой, тодорхой жишээг бий болгох. Зөвлөгөө: Deaton (2010) , Bothwell et al. (2016) .

  17. [ дунд , код бичихийг шаарддаг , Миний дуртай ] Эмчилгээний үр нөлөөний ялгааны тооцоологчдод ялгаа нь дундаж оноог тооцохоос илүү нарийн байж болно. Интернетийн туршилтыг явуулахад ялгаагүй ялгавартай аргын утгыг тайлбарласан нийгмийн хэвлэл мэдээллийн компанид A / B-ийн туршилт хариуцсан инженер рүү бичиж тэмдэглээрэй. Уг memo нь асуудлын тодорхойлолтыг агуулсан байх ёстой бөгөөд ялгаагүй тооцоологчдоос ялгагдах ялгаа нь дундаж ялгааны тооцоолуур, мөн энгийн симуляцийн судалгаанаас давах нөхцөл байдлын талаархи зарим мэдрэмжийг агуулсан байх ёстой.

  18. [ хялбар , Миний дуртай ] Гари Ловеман нь Харвардын Бизнесийн Сургуулийн профессор байсан бөгөөд дэлхийн шилдэг казино компаниудын нэг Harrah-ийн гүйцэтгэх захирал болжээ. Харраг руу нүүхэд Лофанал компани үйлчлүүлэгчийнхээ зан авирын талаарх асар их хэмжээний мэдээллийг цуглуулсан олон тооны байнгын үнэнч хөтөлбөрөөр компанийг өөрчилсөн. Энэхүү үргэлжлэн хэмжилтийн системээс гадна компани туршилтыг эхлүүлсэн. Жишээ нь тэд бооцоот тоглоомын хэлбэрээр үйлчлүүлэгчдэд үнэгүй зочид буудлын шөнө купоны нөлөөг үнэлэх зорилгоор туршилтыг явуулж болох юм. Харрагын өдөр тутмын бизнесийн туршлагуудыг туршиж үзэхийн чухлыг Лавантан хэрхэн тайлбарласан бэ:

    "Чи эмэгтэйчvvдийг зовоохгvй, хулгай хийдэггvй, хяналтын хороотой байх ёстой. Энэ бол Harrahs-д ажлын байраа алдах нэг зүйл бөгөөд хяналтын бүлэг ажиллуулахгүй " (Manzi 2012, 146)

    Шинэ ажилтан руу захиа бичнэ үү гэж Хорооноос яагаад хяналтын бүлэгтэй байх нь маш чухал гэж үздэг талаар тайлбарлана уу. Та үлгэр жишээг харуулахын тулд жишээлбэл бодит юмуу бүтэцтэй жишээг оруулахыг хичээх хэрэгтэй.

  19. [ хатуу , математик шаарддаг ] Шинэ туршилт нь вакцинжуулалтын талаарх текст мессеж сануулагчийн үр нөлөөг үнэлэх зорилготой. Зөвшөөрөгдсөн 600 өвчтөнтэй нэг зуун тавин эмнэлэг оролцохыг хүсч байна. Таны хүссэн эмнэлэг бүрт $ 100 тогтмол зардлыг төлдөг бөгөөд таны илгээхийг хүссэн текст мессеж бүрт $ 1 үнэтэй. Цаашилбал, таны ажиллаж буй аливаа эмнэлэг үр дүнг (хэн нэгэн вакцин хийлгэсэн эсэх) үнэ төлбөргүй хэмжих болно. Танд төсөвлөсөн $ 1,000 төсөвтэй гэж үзье.

    1. Ямар нөхцөлд цөөн тооны клиник дээр нөөцийг илүү анхаарч, ямар нөхцөлд илүү дэлгэрүүлэх вэ?
    2. Таны төсвийг найдвартай таньж чадах хамгийн бага үр дүнгийн хэмжээг ямар хүчин зүйлс тодорхойлох вэ?
    3. Эдгээр санах ойг тайлбарлаж болох санамж бичигт боломжит санхүүжүүлэгч рүү бичнэ үү.
  20. [ хатуу , математик шаарддаг ] Онлайн курсуудтай холбоотой гол бэрхшээл нь бэрхшээлийг даван туулах явдал юм: курс эхэлж буй оюутнууд олон удаа гарч ирдэг. Онлайн сургалтын платформ дээр ажиллаж байгаагаа төсөөлөн бодоод, платформ дээр ажиллаж байгаа дизайнер нь суралцагсад сургууль завсардалтаас урьдчилан сэргийлэхэд туслах болно. Та оюутнуудыг дэвшилтэт нийгмийн шинжлэх ухааны курсэд явуулж буй үйл ажиллагааны үр нөлөөг туршихыг хүсч байна. Туршилтанд гарч болзошгүй аливаа ёс зүйн асуудлуудыг шийдсэний дараа та курсууд нь дэвшлийн баазын үр нөлөөг найдвартай илрүүлэхэд хангалттай суралцагсад хангалтгүй байх болно гэдгийг та болон таны хамтрагчид санаарай. Дараах тооцоонд сурагчдын тал хувь нь ахицын талбарыг хүлээн аваад хагасыг нь хүлээж авна. Цаашилбал, та ямар ч хөндлөнгийн оролцоо байхгүй гэж таамаглаж болно. Өөрөөр хэлбэл, оролцогчид зөвхөн эмчилгээ, хяналтыг хүлээн авсан эсэхээс хамаарч нөлөөлж болно. Тэд бусад эмчилгээ, хяналтыг хүлээн авсан эсэх (илүү албан ёсны тодорхойлолтыг Gerber and Green (2012) -ийн 8-р бүлгээс үзнэ үү). Өөрийн хийсэн аливаа таамаглалыг дагах.

    1. Хичээлийн хажуугаар анги дэвшин суралцагчдын эзлэх хувь 1 хувиар өссөн гэж үзье; Үр дүнг найдвартай илрүүлэхэд шаардагдах түүврийн хэмжээ гэж юу вэ?
    2. Хичээлийн явцыг 10 хувиас дээш оноо авсан оюутнуудын эзлэх хувь нэмэгдэнэ гэж үзье. Үр дүнг найдвартай илрүүлэхэд шаардагдах түүврийн хэмжээ гэж юу вэ?
    3. Одоо туршилтаа явуулж байгаад төсөөлөөд үз дээ, бүх сургалтын материалыг бөглөсөн оюутнууд эцсийн шалгалт авлаа. Сурлагын төгсгөлийн шалгалтын дүнг сурагчдын оноо авсан оноогоор харьцуулж үзэхэд амжилтанд хүрээгүй оюутнууд илүү өндөр оноо авсан гэж та гайхаж байна. Энэ нь дэвшлийн баазыг суралцагсдад багаар сургахад хүргэсэн гэсэн үг үү? Энэ үр дүнгийн өгөгдлөөс юу сурч болох вэ? (Зөвлөгөө: Gerber and Green (2012) -ийн 7-р бүлгийг үзнэ үү)
  21. [ маш хэцүү , код бичихийг шаарддаг , Миний дуртай ] Та технологийн компанид мэдээллийн эрдэмтэнээр ажиллаж байгаа гэж төсөөлөөд үз дээ. Маркетингийн хэлтэсээс хэн нэг нь танай тусламжийг хөрөнгө оруулалтын өгөөж (ROI) шинэ онлайн зар сурталчилгааны кампанит ажилд зориулан хэмжихээр төлөвлөж буйгаа үнэлэхэд тань тусламж хүсдэг. ROI нь кампанит ажлын зардлыг хуваасан цэвэр ашиг гэж тодорхойлдог. Жишээлбэл, борлуулалтын үр дүнд нөлөөлөхгүй кампанит ажил нь -100% -ийн ROI байна; ашгаас олсон ашгаас зардлын тэнцүү байх зардлын хэмжээ нь ROI 0 байна; ашгийн хэмжээ хоёр дахин нэмэгдсэн зардлыг 200% ROI байлгах кампанит ажил.

    Туршилтыг хийхээс өмнө маркетингийн хэлтэс нь өмнөх судалгаан дээрээ үндэслэн дараахь мэдээллээр хангадаг (үнэндээ эдгээр үнэ цэнэ нь Льюис, Рао (2015) бодит онлайн зар сурталчилгааны кампанит ажлуудын ердийн зүйл юм.

    • Нэг хэрэглэгчдээс дундаж борлуулалт нь $ 7-ын дундажтай log-normal тархалт ба $ 75-ын стандарт хазайлттай байна.
    • Энэ кампанит ажил нь нэг хүнд ногдох борлуулалтыг $ 0.35-аар нэмэгдүүлэхээр төлөвлөж байгаа бөгөөд энэ нь үйлчлүүлэгчдэд ногдох ашгийн 0.175 ам.долларын ашигтай байна.
    • Туршилтын төлөвлөсөн хэмжээ нь 200,000 хүн байна. Эдгээр нь эмчилгээний бүлэгт хагас ба хяналтын бүлэгт хагас.
    • Ажилд авах зардал нь оролцогч бүрт 0.14 доллар байна.
    • Аяны төлөөх ROI нь 25% [ \((0.175 - 0.14)/0.14\) . Өөрөөр хэлбэл маркетингийн хэлтэс 100 доллар тутамд маркетингийн зардалд зарцуулсан гэж үзвэл компани 25 долларын нэмэлт орлого олох боломжтой гэж үзэж байна.

    Санал болгож буй туршилтыг үнэлэх дэвтэр бичих. Таны тэмдэглэл нь таны үүсгэсэн симуляцаас нотлох баримтыг ашиглах ёстой бөгөөд дараах хоёр үндсэн асуудлыг хөндөнө: (1) Та энэ туршилтыг төлөвлөсний дагуу эхлүүлэхийг зөвлөж байна уу? Хэрэв тийм бол яагаад? Хэрэв үгүй ​​бол яагаад болохгүй гэж? Энэ шийдвэрийг гаргахын тулд хэрэглэж буй шалгууруудын талаар тодорхой ойлголттой байх хэрэгтэй. (2) Энэ туршилтанд ямар хэмжээгээр санал болгож байсан бэ? Энэ шийдвэрийг гаргахын тулд ашиглаж буй шалгууруудын талаар дахин тодруулаарай.

    Сайн тэмдэглэл нь энэ онцгой асуудлыг шийдвэрлэх болно; Илүү сайн тэмдэглэл нь энэ тохиолдлыг ерөнхийд нь нэгтгэж (өөрөөр хэлбэл, шийдвэр нь компаний үйл ажиллагааны үр нөлөөний хэмжээ хэрхэн өөрчлөгдөж байгааг харуулах); агуу танилцуулга нь бүрэн нийтлэг үр дүнг үзүүлэх болно. Таны тэмдэглэл нь графикийг ашиглан үр дүнг тайлбарлахад туслах ёстой.

    Энд хоёр сануулга байна. Нэгдүгээрт, маркетингийн хэлтэс танд зарим нэг хэрэгцээ шаардлагагүй мэдээллээр хангаж байж магадгүй бөгөөд зарим нэг шаардлагатай мэдээллээр хангаж чадахгүй байж магадгүй юм. Хоёрдугаарт, хэрэв та R хэрэглэж байгаа бол rlnorm () функц олон хүмүүс хүлээж байгаа арга замыг ажиллахгүй гэдгийг мэдэж байх хэрэгтэй.

    Энэ үйл ажиллагаа нь танд эрчим хүчний дүн шинжилгээ хийх, симуляцийг бий болгох, үр дүнг үг, графикаар таниулахад дадлагажуулна. Энэ нь зөвхөн ROI-г тооцоолоход чиглэсэн туршилт биш төдийгүй ямар нэгэн туршилтын үр дүнд эрчим хүчний анализ хийхэд тусална. Энэ үйл ажиллагаа нь танд статистикийн туршилт, эрчим хүчний дүн шинжилгээ хийх туршлагатай гэж үздэг. Хэрэв та эрчим хүчний шинжилгээний талаар мэдэхгүй байгаа бол би "A Power Primer" хэмээх номыг уншихыг зөвлөж байна Cohen (1992) .

    Энэхүү үйл ажиллагаа RA Lewis and Rao (2015) нарын бичсэн сайхан цаасаар өдөөгдөж байсан бөгөөд энэ нь маш том туршилтуудын статистикийн үндсэн хязгаарлалтыг тод харуулсан юм. Тэдний "Урьдчилан зарлах зардлыг хэмжихэд ойрхон байх нь" нэртэй өдөөлт нэртэй байсан цаас юм - хэдэн сая хэрэглэгчийг хамарсан тоон туршилтууд ч интернетийн зар сурталчилгааны хөрөнгө оруулалтын өгөөжийг хэмжих нь хэцүү гэдгийг харуулсан. Ерөнхийдөө RA Lewis and Rao (2015) тоон туршилтын туршилтын хувьд чухал ач холбогдолтой статистикийн үндсэн баримтыг харуулсан: дуу чимээний үр дагаврын өгөгдөлд бага эмчилгээний үр нөлөөг үнэлэхэд хэцүү байдаг.

  22. [ маш хэцүү , математик шаарддаг ] Өмнөх асуулттай адилхан боловч симуляци биш шинжилгээний үр дүнг ашиглах хэрэгтэй.

  23. [ маш хэцүү , математик шаарддаг , код бичихийг шаарддаг ] Өмнөх асуулттай адилхан боловч симуляци болон аналитик үр дүнг ашиглана.

  24. [ маш хэцүү , математик шаарддаг , код бичихийг шаарддаг ] Дээр тайлбарласан тэмдэглэлийг бичсэн гэж төсөөлөөд үзье, маркетингийн хэлтсийн хэн нэг нь шинэ мэдээлэл өгч байна гэж төсөөлөөд үзээрэй: туршилтанд орсны дараа болон дараа нь борлуулалтын хоорондын хамаарлыг 0.4 гэж үздэг. Энэ нь таны санамжид зөвлөмжийг хэрхэн өөрчилдөг вэ? (Сануулга: 4.6.2-р хэсгүүүдээс ялгаатай аргын тооцоологч ба ялгааны зөрүүг тооцоолно уу.)

  25. [ хатуу , математик шаарддаг ] Веб-д суурилсан хөдөлмөр эрхлэлт-тусламжийн шинэ хөтөлбөрийн үр нөлөөг үнэлэхийн тулд их сургуулийн 10 000 сурагчдын дунд санамсаргүй хяналт шалгалт хийсэн. Онцгой шинжтэй мэдээлэл бүхий үнэгүй захиалга нь санамсаргүй сонгогдсон оюутнуудын 5,000 и-мэйл урилгыг илгээсэн бол бусад 5,000 оюутнууд хяналтын бүлэгт байсан бөгөөд захиалга аваагүй байна. Арван хоѐр сарын дараа дахин явуулсан судалгаагаар (хяналтгүй эмчилгээ хийлгээгүй) эмчилгээ, хяналтын бүлгүүдэд хоёуланд нь 70% нь сонгогдсон салбартаа бүтэн цагаар ажилласан байна (хүснэгт 4.6). Тиймээс вебд суурилсан үйлчилгээ нь ямар ч нөлөө үзүүлээгүй мэт санагдаж байв.

    Гэсэн хэдий ч их сургуулийн эрдэмтэн судлаач өгөгдөл бага зэрэг ойртсон бөгөөд эмчилгээний бүлгийн оюутнуудын зөвхөн 20% нь имэйл хүлээн авсны дараа бүртгэлд нэвтэрч байгааг олж мэдсэн байна. Цаашлаад, цахим хуудсанд нэвтэрсэн хүмүүсийн 60% нь сонгогдсон салбартаа бүтэн цагаар ажилласан, энэ нь бүртгэгдээгүй хүмүүс, эрэгтэйчүүдийн хувьд харьцангуй бага хяналтын нөхцөл (хүснэгт 4.7).

    1. Юу болж болох талаар тайлбар өг.
    2. Энэ туршилтаар эмчилгээний үр нөлөөг тооцох хоёр өөр аргыг хэрэглэдэг үү?
    3. Үүний үр дүнд энэ үйлчилгээг бүх оюутнуудад өгөх ёстой юу? Зүгээр л тодорхой байх ёстой, энэ нь энгийн хариулттай асуулт биш юм.
    4. Тэд дараа нь юу хийх ёстой вэ?

    Зөвлөгөө: Энэ асуулт нь энэ бүлэгт багтсан материалаас давсан боловч туршилтанд нийтлэг асуудлуудыг авч үздэг. Туршилтын энэхүү загварыг заримдаа урамшууллын загвар гэж нэрлэдэг тул оролцогчид эмчилгээнд хамрагдахыг дэмждэг. Энэ асуудал нь нэг талыг барьсан зөрчил гэж нэрлэдэг нэг жишээ юм ( Gerber and Green (2012) -ийн 5-р бүлгийг үз).

  26. [ хатуу Цаашдын шалгалт хийсний дараа өмнөх асуултанд тайлбарласан туршилт бүр илүү төвөгтэй байсан нь харагдсан. Хяналтын бүлгийн хүмүүсийн 10% нь үйлчилгээний хүртээмжийг төлсөн бөгөөд ажил эрхлэлтийн түвшин нь 65% (хүснэгт 4.8) байсан.

    1. Таны бодож байгаа зүйлээ нэгтгэн дүгнэж, үйл ажиллагааны чиглэлийг санал болгох.

    Зөвлөгөө: Энэ асуулт нь энэ бүлэгт багтсан материалаас давсан боловч туршилтанд нийтлэг асуудлуудыг авч үздэг. Энэ асуудал нь хоёр талын зөрчилдөөн гэж нэрлэгддэг жишээ ( Gerber and Green (2012) -ийн 6-р бүлгийг үз).

Хүснэгт 4.6: Ажил мэргэжлийн үйлчилгээг туршиж үзсэн
Групп Хэмжээ Ажил эрхлэлтийн түвшин
Вэбсайт руу нэвтрэх эрх олгосон 5,000 70%
Вэбсайт руу нэвтрэх эрх олгохгүй 5,000 70%
Хүснэгт 4.7: Ажил мэргэжлийн үйлчилгээний туршилтаас илүү бүрэн гүйцэд харах боломжтой
Групп Хэмжээ Ажил эрхлэлтийн түвшин
Вэбсайт руу нэвтрэх болон нэвтрэхийг зөвшөөрсөн 1,000 60%
Вэбсайт руу нэвтрэх болон хэзээ ч нэвтэрч ороогүй 4000 72.5%
Вэбсайт руу нэвтрэх эрх олгохгүй 5,000 70%
Хүснэгт 4.8: Ажлын байрны туршилтаас датаг бүрэн харах боломжтой
Групп Хэмжээ Ажил эрхлэлтийн түвшин
Вэбсайт руу нэвтрэх болон нэвтрэхийг зөвшөөрсөн 1,000 60%
Вэбсайт руу нэвтрэх болон хэзээ ч нэвтэрч ороогүй 4000 72.5%
Вэбсайт руу нэвтрэх эрхгүй, үүнийг төлсөн 500 65%
Вэбсайт руу нэвтрэх эрхгүй бөгөөд үүнийг төлөөгүй 4,500 70.56%