үйл ажиллагаа

түлхүүр:

  • хүндрэл зэрэг: хялбар хялбар , дунд дунд , хатуу хатуу , маш хэцүү маш хэцүү
  • математикийн шаарддаг ( математикийн шаарддаг )
  • шаардлагатай бичих ( бичих шаардлагатай )
  • мэдээлэл цуглуулах ( мэдээлэл цуглуулах )
  • Миний дуртай ( миний дуртай )
  1. [ дунд , мэдээлэл цуглуулах ] Berinsky болон түүний хамтрагчид (2012) гурван сонгодог туршилт хувилан олшруулж, хэсэгчлэн Механик Түрэг үнэлнэ. Гэхэд сонгодог Азийн өвчин боловруулалт туршилт хуулбарлах Tversky and Kahneman (1981) . таны авсан үр дүн тоглолт Tversky болон Kahneman-ын вэ? таны авсан үр дүн тоглолт Berinsky, хамтран ажиллагсадаа байна уу? Ямар Хэрвээ ямар нэг зүйл-вэ Энэ нь бидэнд судалгаа туршилт хийх Механик Түрэг ашиглах тухай заадаг вэ?

  2. [ дунд , миний дуртай ] Нэртэй зарим хэл-д хацар баримт бичигт "Бид Up эвдэж байна," Нийгмийн сэтгэл судлаач Роберт Cialdini, зохиогчдын нэг Schultz et al. (2007) тэр, учир нь тэр сахилга (сэтгэл судлалын) ихэвчлэн лабораторийн туршилт явуулж байгаа хээрийн туршилт хийж тулгарч байгаа бэрхшээл хэсэгт эрт профессор түүний ажил нь тэтгэвэрт гэж бичсэн (Cialdini 2009) . Cialdini-ийн цаас уншиж, түүнд тоон туршилтын боломж гэрэлд түүний завсарлага хүртэл дахин түүнийг шаардсан цахим захидал бичиж байна. Түүний асуудлыг шийдвэрлэх судалгааны тодорхой жишээ ашиглах хэрэгтэй.

  3. [ дунд ] Хол жижиг анхны амжилт нь түгжих-эсэхийг тодорхойлох, эсвэл алга тулд ван де Rijt болон болон түүний хамтрагчид (2014) санамсаргүйгээр сонгосон оролцогчдын дээр амжилт хүртээдэг дөрвөн өөр систем рүү оролцож, дараа нь энэ дур мэдэн амжилтын урт хугацааны нөлөөллийг хэмжинэ. Хэрэв та аль та ижил туршилт ажиллуулж болох бусад системүүдийн гэж бодож байна вэ? шинжлэх ухааны үнэ цэнэ асуудлын хувьд эдгээр тогтолцоог үнэлэх, алгоритмын confounding болон ёс (2-р бүлгийг үзнэ үү).

  4. [ дунд , мэдээлэл цуглуулах ] Туршилтын үр дүн нь оролцогчид хамааралтай байж болно. туршилт бий болгох, дараа нь Amazon Механик Turk (MTurk) хоёр өөр ажилд стратегийг ашиглах тал дээр ажиллуулах хэрэгтэй. Үр дүн нь аль болох өөр өөр байх болно болохоор туршилт, ажилд стратегийг сонгох хичээ. Жишээ нь, таны ажилд стратеги өглөө, орой оролцогчдыг сонгон шалгаруулж авах буюу өндөр болон хамгийн бага цалинтай оролцогчдыг нөхөн байж болох юм. ажилд стратегийн ялгаатай нь эдгээр төрлийн оролцогчид, янз бүрийн туршилтын үр дүнд янз бүрийн сан хүргэж болох юм. Ямар ялгаатай таны авсан үр дүн гарч эргэж бэ? Тэр MTurk дээр туршилт ажиллаж байгаа талаар юуг илэрхийлж байна вэ?

  5. [ маш хэцүү , математикийн шаарддаг , бичих шаардлагатай , миний дуртай ] Та сэтгэл зүйн Contagion судалгааг төлөвлөж байна гэж төсөөлөөд үз дээ (Kramer, Guillory, and Hancock 2014) . Гэхэд нь өмнөх ажиглалтын судалгааны үр дүнг ашиглан Kramer (2012) нөхцөлд тус бүр оролцогчдын тоо шийдвэрлэх. Эдгээр хоёр судалгаа нь төгс болохоор нь шууд утгаараа та нар хийх бүх таамаглал жагсааж хэрэгтэй таарахгүй хэрэггүй:

    1. Хэдэн оролцогчид нөлөө онд хүчин төгөлдөр болох том нээх шаардлагатай байна гэж шийдэж болно дуурайх ажиллуулна Kramer (2012) \ нь (\ альфа = 0.05 \) болон \ (1 - \ бета = 0.8 \).
    2. Нэг тооцоо аналитик байна.
    3. Үр дүнг харгалзан Kramer (2012) сэтгэл зүйн Contagion байна (Kramer, Guillory, and Hancock 2014) дээш хөдөлгүүртэй (өөрөөр хэлбэл, энэ нь хэрэгтэй илүү оролцогчдыг байсан бэ)?
    4. Таны тооцоонд хамгийн том нөлөө үзүүлж өөрийн хийсэн таамаглал, бэ?
  6. [ маш хэцүү , математикийн шаарддаг , бичих шаардлагатай , миний дуртай ] Дээрх асуултад хариул, харин өөр өмнө ажиглалтын судалгааг ашиглан илүү Kramer (2012) тус тус өмнө байгалийн туршилтын үр дүнг ашиглах Coviello et al. (2014) .

  7. [ хялбар ] Аль аль нь Rijt et al. (2014) болон Margetts et al. (2011) аль аль нь өргөдөл гарын үсэг зурах хүмүүсийн үйл явцыг судалж, туршилт хийх. Харьцуулж, зураг төсөл, эдгээр судалгааны үр дүнг эрс ялгаа.

  8. [ хялбар ] Dwyer, Maki, and Rothman (2015) , нийгмийн хэм хэмжээ, proenvironmental зан хоорондын харилцаан дээр хоёр хээрийн туршилт хийсэн. Энд тэдний цаас хийсвэр юм:

    "Хэрхэн сэтгэл зүйн шинжлэх ухаан proenvironmental зан үйлийг дэмжих ашиглаж болох вэ? Хоёр судалгаагаар олон нийтийн ариун цэврийн эрчим хүчний байгаль хамгаалах зан үйлийг дэмжих чиглэсэн арга хэмжээг тодорхойлох хэм хэмжээ, хувь хүний ​​хариуцлагын нөлөөг судалсан байна. Судалгааны 1-р сард гэрэл байдал (өөрөөр хэлбэл, идэвхтэй эсвэл идэвхгүй) хэн болохыг тогтоох нь тайлбарласан норм дохио нь Эзэнгүй олон нийтийн ариун цэврийн өрөө орж өмнө удирдах юм. Оролцогчид тэд орж ирсэн үед нь унтраах байсан бол гэрэл унтраахын тулд нэлээд их байна. Судалгааны 2-р сард нэмэлт нөхцөл нь гэрэл унтраах нь хэм хэмжээ нь Холбооны харуулж байсан оруулж байсан боловч оролцогчид өөрсдөө үүнийг асаахаасаа хариуцлага хүлээхгүй байна. Хувийн хариуцлага зан нийгмийн хэм хэмжээ нөлөөг хянагдсан, Оролцогчид гэрэл асаахаасаа хариуцлага хүлээхгүй байхад, норм нөлөө багассан байна. Эдгээр үр дүн нь proenvironmental үйл ажиллагааны үр дүнг тодорхойлох хэм хэмжээ, хувийн хариуцлага хэрхэн зохицуулж болох юм "гэжээ.

    Тэдний цаас уншиж, судалгааны 1 хуулбар боловсруулах.

  9. [ дунд , мэдээлэл цуглуулах ] Өмнөх асуулт дээр бий болгох, одоо таны зураг төсөл хийж гүйцэтгэнэ.

    1. үр дүн нь хэрхэн харьцуулах вэ?
    2. Юу эдгээр ялгааг тайлбарлаж болох вэ?
  10. [ дунд ] Amazon Механик Turk нь ажилд оролцогчдыг ашиглан туршилт-ий тухай нэлээд маргаантай байдаг байна. Үүний зэрэгцээ, бас бакалаврын оюутан хүн ам нь ажилд оролцогчдыг ашиглан туршилт-ий тухай нэлээд маргаантай байна. харьцуулах, судлаачид оролцогчид Turkers болон бакалаврийн ялгаатай хоёр хуудас хуудсыг бич. Таны харьцуулалт, шинжлэх ухаан, зохион асуудал аль аль нь хэлэлцүүлгийг оруулсан байх ёстой.

  11. [ хялбар ] Жим Manzi ном Хяналтгүй (2012) бизнест туршилтын хүчээр руу гайхамшигтай танилцуулга юм. номонд тэрээр энэ түүхийг дамжуулна:

    "Би бол жинхэнэ бизнес суут, туршилт хүчний гүн, зөн совингийн доогуур байсан нь өөрөө хийсэн тэрбумтан нь уулзалтын нэг удаа байсан юм. Түүний компани, хэрэглэгч, өсөлт нь борлуулалтын татах байсан уламжлалт мэргэн ухаан нь тэд байх ёстой хэмээн хэлсэн их дэлгүүр цонх дэлгэц бий болгох гэж оролдож ихээхэн нөөцийг зарцуулсан байна. Шинжээчид анхааралтай дизайн дараа дизайн туршсан ба борлуулалт бүр шинэ дэлгэцийн загвар ямар ч чухал ач холбогдолтой учир шалтгааны хүчин төгөлдөр байгаа хадгалагдаж нь жилийн хугацаанд бие даасан туршилтын үнэлгээ хуралдааны байна. Ахлах маркетинг, Бараа таваарын арилжаа удирдлагууд Toto эдгээр түүхэн туршилтын үр дүнг хянаж гүйцэтгэх захирал уулзсан байна. туршилтын бүх өгөгдөл танилцуулсны дараа тэд ердийн мэргэн ухаан нь буруу гэсэн цонх харуулна борлуулалт жолоодох байхгүй бол гэж дүгнэсэн. Тэдний санал болгосон арга хэмжээ энэ чиглэлээр зардал, хүчин чармайлт бууруулах явдал юм. Энэ нь эрс уламжлалт мэргэн ухааныг унах нь туршилтын чадварыг харуулсан. Гүйцэтгэх захирлын хариу энгийн байсан нь: "Миний дүгнэлт таны дизайнерууд маш сайн биш байдаг. Түүний шийдэл дэлгүүр дэлгэцийн дизайн хүчин чармайлт нэмэгдүүлэх, шинэ хүмүүс үүнийг хийх олж авах явдал байв. " (Manzi 2012, 158–9)

    Гүйцэтгэх захирал нь санаа зовоосон асуудал хүчинтэй байх ямар төрөл байдаг вэ?

  12. [ хялбар ] Өмнөх асуудлаар бүтээх нь та нар уулзалтын туршилтын үр дүнг хэлэлцэж байсан үед байсан гэж төсөөлдөг. та асууж болно дөрвөн асуулт, хүчинтэй байх төрөл бүрийн (статистик, барьж дотоод, гадаад) нэг нь юу вэ?

  13. [ хялбар ] Bernedo, Ferraro, and Price (2014) тайлбарласан ус хэмнэх арга хэмжээний долоон жилийн нөлөө судалдаг Ferraro, Miranda, and Price (2011) (Зураг 4.10-г үз). Энэ баримт бичигт, Bernedo болон хамт олон нь байж, эмчилгээний хүргэсэн дараа нүүж чадаагүй байна өрхийн зан үйлийг харьцуулан хүчин ард механизмыг ойлгохын тулд хичээдэг. Өөрөөр хэлбэл, ойролцоогоор тэд эмчилгээ гэр буюу homeowner нөлөөлсөн эсэхийг үзээрэй.

    1. , Цаас уншина тэдний загварыг тодорхойлох, тэдгээрийн үр дүнг нэгтгэн. б) Хэрэв та ижил арга хэмжээний зардлын үр ашгийг хэрхэн үнэлэх ёстой тэдний ололт нөлөөлж байна уу? Хэрэв тийм бол, яагаад? Хэрэв тийм биш бол яагаад болохгүй гэж?
  14. [ хялбар ] Нь мөрөөр онд Schultz et al. (2007) , Шульц болон хамт олон хоёр нөхцөл (зочид буудал болон timeshare Сууц өмчлөгчдийн) нь өөр өөр байгаль орчны зан (алчуур дахин ашиглах) дээр тайлбарласан ба injunctive хэм хэмжээг нөлөө гурван туршилт цуврал гүйцэтгэх (Schultz, Khazian, and Zaleski 2008) .

    1. Эдгээр гурван туршилтын загвар, үр дүнг нэгтгэн.
    2. Хэрхэн, хэрэв бүх тэд таны тайлбарлах өөрчилөх бэ Schultz et al. (2007) ?
  15. [ хялбар ] Хариуд Schultz et al. (2007) , Canfield, Bruin, and Wong-Parodi (2016) , цахилгаан үнэт цаасны загварыг судлах лабораторийн шиг туршилт цуврал гүйж. Энд тэд Хураангуй үүнийг тайлбарлах хэр байна:

    "Судалгаа суурилсан туршилтад оролцогч тус бүр нь онолын цахилгаан эрчим хүчний төлбөрийг нь гэр бүлийн хувьд харьцангуй өндөр, цахилгаан хэрэглэх нь (а) түүхэн ашиглах тухай мэдээллийг хамарсан, (б) хөрш харьцуулалт ба хэрэгсэл задаргааг (в) түүхэн ашиглах харсан. Оролцогчид зэрэг (а) хүснэгтүүд, (б) хууль график, болон (в) дүрс график нэг нь гурван хэлбэрээр бүх мэдээлэл төрлийн харсан. Бид гурван гол үр дүнг тайлагнана. Нэгдүгээрт, хэрэглэгчид цахилгаан эрчим хүчний хэрэглээний мэдээллийг төрөл бүрийн ойлгож ихэнх нь хүснэгтэд үзүүлсэн үед, ширээ энгийн цэг унших дөхөм байж болох юм. Хоёрдугаарт, тохиргоо болон цахилгаан эрчим хүч хэмнэх санаа хэлбэрээр бие даасан, түүхэн ашиглах мэдээллийг хүчтэй байсан. Гуравдугаарт, бага эрчим хүч бичиг үсэг нь хувь хүмүүс бага бүх мэдээллийг ойлгосон. "

    Бусад мөрөөр судалгаа ялгаатай нь, ашиг сонирхлын гол үр дүн нь Canfield, Bruin, and Wong-Parodi (2016) зан нь бодит байдлыг мэдээлж байна. Эрчим хүчний хэмнэлт дэмжих өргөн хүрээтэй судалгааны хөтөлбөрийн судалгаагаар энэ төрлийн давуу болон сул тал юу вэ?

  16. [ дунд , миний дуртай ] Smith and Pell (2003) шүхэр үр дүнг харуулсан судалгаа нь хошин мета-шинжилгээ юм. Тэд байгуулна:

    "Олон арга өвчтэй эрүүл мэндийн урьдчилан сэргийлэх зорилготой адил шүхэр үр нөлөө санамсаргүй хяналттай сорилт ашиглан нарийн үнэлгээ өртсөн байна. нотолгоонд суурилсан анагаах ухааны Өмгөөлөгч нь зөвхөн ажиглалтын мэдээллийг ашиглан үнэлэх арга нэвтрүүлэхэд шүүмжилж байна. Бид хүн бүр нотолгоонд суурилсан анагаах ухааны хамгийн радикал сэм зохион байгуулж, хоёр сохор оролцсон бол, санамсаргүй, плацебо хяналт, шүхэр нь кроссовер шүүх ашигтай байж болох юм гэж бодож байна. "

    Туршилтын нотлох баримт fetishization эсрэг маргалдаж, ийм New York Times зэрэг ерөнхий уншигчдын сонинд, тохиромжтой нь Хоршооны-хийгдэн бич. тодорхой, тодорхой жишээг хангах. Санамж: үзнэ үү, Bothwell et al. (2016) болон Deaton (2010)

  17. [ дунд , бичих шаардлагатай , миний дуртай ] Ялгаа-д ялгаатай нь эмчилгээний үр нөлөө нь үнэлгээчид ялгаа-д дундаж тооцсон илүү нарийн байх болно. нь эхлэлтийн нийгмийн хэвлэл мэдээллийн компани онлайн туршилт ажиллаж байгаа ялгаа-д ялгаатай арга утгыг тайлбарлах A / B туршилт хариуцсан инженер нь хуудсыг бич. танилцуулгад асуудлын мэдэгдэл, үүний дагуу зөрүүг-д ялгаа estimator ялгаа-д дундаж estimator хавьгүй илүү байх нөхцөл байдлын талаар зарим нэг зөн совин, мөн энгийн дуурайх судалгааг багтаасан байх ёстой.

  18. [ хялбар , миний дуртай ] Gary Loveman Харвардын Бизнесийн Сургуулийн профессор Harrah-ийн гүйцэтгэх захирал, дэлхийн хамгийн том казино компаниудын нэг болохоосоо өмнө байсан юм. Тэр Harrah-ийн руу нүүж ирэхэд Loveman хэрэглэгчийн зан-ий тухай мэдээлэл асар их хэмжээний цуглуулсан нь ойр ойрхон flier шиг үнэнч хөтөлбөрийн компани хувиргав. Энэ нь үргэлж дээр нь хэмжилт системийн орой дээр компани туршилт ажиллаж эхэлсэн байна. Жишээ нь, тэд тодорхой мөрийтэй тоглоомын загвар нь үйлчлүүлэгчдэд зориулсан үнэ төлбөргүй зочид буудал шөнө нь купон нөлөөг үнэлэх туршилт ажиллуулж болох юм. Энд Harrah өдөр тутмын бизнесийн үйл ажиллагаанд хэрхэн Loveman туршилтын ач холбогдлыг тайлбарласан юм:

    "Энэ бол эмэгтэй зовоох байхгүй бол адил, та нар бүү хулгайл байна шүү дээ, та нар хяналтын бүлэг байх хэрэгтэй шүү дээ. Энэ нь та Harrah's биш, хяналтын бүлэг ажиллуулах нь таны ажлаа алдах болно зүйлсийн нэг юм. " (Manzi 2012, 146)

    яагаад Loveman энэ нь хяналтын бүлэг байх нь маш чухал юм гэж боддог тайлбарлаж шинэ ажилтан нь захиа бич. Та жишээ нь, аль нь бодит эсвэл сүүлийн таны цэгийг харуулах хийсэн оруулах хичээх хэрэгтэй.

  19. [ хатуу , математикийн шаарддаг ] Шинэ туршилт тариа глицеринийг дээр текст мессеж сануулах хүлээн нөлөөг тооцох зорилготой. 150 эмнэлэг, 600 эрх бүхий өвчтөнүүдэд тус бүр оролцох хүсэлтэй байна. Та хамтран ажиллах хүсэж эмнэлэг тус бүр нь 100 ам.долларын тогтмол зардал байдаг, мөн чи илгээх хүсэж бүрийн текст мессежийг 1 долларыг үнэтэй. Цаашилбал, та ажиллаж байгаа ямар ч эмнэлэг, үр дүнг хэмжиж үнэгүй (хэн нэг нь вакцин хүлээн авсан эсэх) болно. Хэрэв та 1000 ам.долларын төсөвтэй байна гэж бодъё.

    1. ямар нөхцөл байдал дор энэ эмнэлэг нь цөөн тооны, ямар нөхцөлд таны нөөцийг анхаарах нь илүү өргөн тэдгээрийг түгээн дэлгэрүүлэх илүү сайн байж болох илүү сайн байж болох вэ?
    2. Ямар хүчин Та найдвартай өөрийн төсвөөр илрүүлэх боломжтой болно хамгийн нөлөө хэмжээг тодорхойлох вэ?
    3. боломжит санхүүжүүлэх үүргүүдээ эдгээр худалдааны тэнцвэрт тайлбарласан хуудсыг бич.
  20. [ хатуу , математикийн шаарддаг ] Онлайн курс нь гол асуудал бууралтын байх; сургалт эхлэх олон оюутнууд буурчээ-гарч дуусна. Та онлайн сургалтын тавцан дээр ажиллаж байгаа бөгөөд тавцан дээр загвар зохион бүтээгч тэрээр мэдээж завсардах оюутнуудыг урьдчилан сэргийлэх туслах болно гэж бодож байгаа нь харааны дэвшил баар бий болгож байна гэж бодъё. Та том тооцоолох нийгмийн шинжлэх ухааны явцад сурагчдын дээр ахиц баар нөлөөг шалгах хүсэж байна. туршилтанд гарч болох аливаа ёс зүйн асуудлыг шийдвэрлэхэд дараа, та болон таны хамт олон Мэдээж найдвартай дэвшил бар нөлөөг илрүүлэх хангалттай оюутан байж байж болох юм гэж санаа зовж авах болно. та доорх тооцоо онд ахиц дэвшил бар, тал хувь нь хүлээн авах нь үгүй ​​болно оюутнуудын гэж тал хувь нь гэж болно. Цаашилбал, та ямар ч хөндлөнгийн байдаг гэж болно. Өөрөөр хэлбэл, та оролцогчид зөвхөн тэд эмчилгээ болон хяналт хүлээн авсан эсэх нь өртсөн байна гэж үзэх болно; Тэд бусад хүмүүс эмчилгээ болон хяналт (а илүү албан ёсны тодорхойлолтыг үзнэ үү хүлээн авсан эсэх нь хүчин төгөлдөр биш юм Gerber and Green (2012) , Ч.. 8). Та хийх ямар ч нэмэлт таамаглал хянаж уу.

    1. ахиц дэвшил бар анги дуусгах 1 пунктээр сурагчдын эзлэх хувь нэмэгдэх хандлагатай байна гэж бодъё, найдвартай нөлөө илрүүлэх шаардлагатай түүврийн хэмжээ гэж юу вэ?
    2. ахиц дэвшил бар анги дуусгах нь 10 хувиар сурагчдын эзлэх хувь нэмэгдэх хандлагатай байна гэж бодъё, найдвартай нөлөө илрүүлэх шаардлагатай түүврийн хэмжээ гэж юу вэ?
    3. Одоо та бүх Мэдээж хэрэг материал нь эцсийн шалгалт авсан дууссаны туршилт, оюутан ажиллуулж байна гэж төсөөлдөг. Та дэвшил бар хүлээж аваагүй оюутнууд үнэхээр их гоол оруулсан гэсэн, таны гайхсан их, тэгвэл та нар олно өгөөгүй гэдгийг хүмүүст дэвшил бар хүлээн авсан оюутнуудын эцсийн шалгалтын оноог харьцуулах хэрэгтэй. Энэ ахиц дэвшил бар бага суралцах оюутнуудыг учруулсан гэсэн үг үү? Та энэ үр дүн мэдээлэлд юу сурч болох вэ? (Санамж: үзнэ үү Gerber and Green (2012) , Ч. 7).
  21. [ маш хэцүү , бичих шаардлагатай ] Сайхан цаасан онд Lewis and Rao (2015) тодхон тэр ч байтугай том туршилтын үндсэн статистик хязгаарлалт харуулж байна. цаасан анх "Зар сурталчилгааны эргэж хэмжих нь Ойрын боломжгүй нд" өдөөн хатгасан нэр байсан тэр ч байтугай дижитал туршилт харилцагчдын сая сая хамарсан онлайн зар хөрөнгө оруулалтын өгөөжийг хэмжих, хэр хэцүү -shows. Ер нь, цаасан дээр тодорхой энэ дуу чимээтэй үр дүн нь өгөгдлийг энэ үед жижиг эмчилгээний үр нөлөөг тооцох хэцүү байгааг харуулж байна. Эсвэл diffently заасан, цаас тооцоолсон эмчилгээний үр нөлөөг том итгэх интервал байх болно гэдгийг харуулж байна байхад нөлөөлж-тулд-стандарт хазайлт (\ (\ frac {\ дельта \ бар {у}} {\ Sigma} \)) харьцаа нь бага байдаг. Энэхүү баримт нь чухал ерөнхий сургамж жижиг нөлөөллийн-тулд-стандарт хазайлтын харьцаа туршилтаар үр дүн (жишээ нь, зар сурталчилгааны кампанит ажлын ROI) хангалуун байх болно гэсэн юм. Таны сорилт нь зар сурталчилгааны кампанит ажлын хөрөнгө оруулалтын өгөөжийг хэмжих төлөвлөсөн туршилт evaluting танай компаний маркетингийн хэлтэст хэн нэгэнд хуудсыг бичих болно. Таны танилцуулгад компьютер загварчлал үр дүнгийн график нь дэмжигдсэн байх ёстой.

    Энд танд хэрэгтэй байж болох зарим нэг мэдээлэл байна. Эдгээр тоон утгуудын бүх тайлагнасан бодит туршилт нийтлэг байдаг Lewis and Rao (2015) :

    • ROI, онлайн зар сурталчилгааны кампанит ажилд гол метр, кампанит ажил (аяны кампанит ажил нь хасах зардал нь нийт ашиг) кампанит ажлын зардал хувааж цэвэр ашиг гэж тодорхойлсон байна. Жишээ нь борлуулалт ямар ч нөлөөгүй -100% -ийн хөрөнгө оруулалтын өгөөжийг мөн кампанит ажил бий ашиг 0 нь хөрөнгө оруулалтын өгөөжийг байх болно зардлыг тэнцүү байсан байна гэж байсан нь кампанит ажил нь.

    • хэрэглэгч тутамд дундаж борлуулалт $ 75 нь стандарт хазайлт нь $ 7 байна.

    • кампанит ажил нь хэрэглэгч тутамд $ 0.175 ашигтай нэмэгдсэн харгалзана нь хэрэглэгч тутамд $ 0.35 гэхэд борлуулалтыг нэмэгдүүлэх төлөвтэй байна. Өөрөөр хэлбэл, нийт ашгийн 50% байна.

    • Туршилтын төлөвлөсөн хэмжээ 200,000 хүн, хяналтын бүлэгт эмчилгээний бүлгийн хагас, хагас юм.

    • кампанит ажлын зардал оролцогч тутамд $ 0.14 байна.

    Энэ туршилтыг evaluting хуудсыг бич. Та төлөвлөсний дагуу энэ туршилтыг эхлүүлэх зөвлөж байсан болов уу? Хэрэв тийм бол, яагаад? Хэрэв үгүй ​​бол, та ямар өөрчлөлт зөвлөж байна вэ?

    Сайн танилцуулгад энэ тодорхой хэргийг шийдвэрлэх болно; илүү сайн танилцуулгад нэг байдлаар энэ тохиолдолд аас ерөнхийлөн болно (жишээ нь, харуулах хэрхэн нөлөөлж-тулд-стандарт хазайлтын харьцаа функц гэх мэт шийдвэр өөрчлөлт); , агуу их танилцуулгад бүрэн ерөнхий үр дүнг танилцуулах болно.

  22. [ маш хэцүү , математикийн шаарддаг ] Өмнөх асуултын адил байна, харин та нар харин симуляци илүү аналитик үр дүнг ашиглах хэрэгтэй.

  23. [ маш хэцүү , математикийн шаарддаг , бичих шаардлагатай ] Өмнөх асуултын адил байна, гэхдээ загварчлал болон аналитик үр дүнг аль аль нь хэрэглэдэг.

  24. [ маш хэцүү , математикийн шаарддаг , бичих шаардлагатай ] Та дээрх ашиглан арга estimator нь ялгаа биш, харин ялгаа-д ялгаатай estimator ашиглан зөвлөж загварчлал аль, шинжилгээний үр дүн, эсвэл маркетингийн хэлтсийн аль аль ба хэн нэгнийг тайлбарласан хуудсыг бичсэн гэж төсөөлөөд үз дээ (Хэсэг 4.6.2-г үз) . туршилтын дараа туршилтын өмнө борлуулалт, борлуулалтын хооронд 0.4 хамаарал таны дүгнэлт хэрхэн өөрчлөх вэ тайлбарласан шинэ богино хуудсыг бич.

  25. [ хатуу , математикийн шаарддаг ] Шинэ вэб-д суурилсан ажил үйлчилгээний үр нөлөөг үнэлэх зорилгоор их сургуулийн мэргэжлийн үйлчилгээ оффисын сургуулийн эцсийн жил орж 10,000 оюутнуудын дунд санамсаргүй хяналтын шүүх хурал хийсэн. өвөрмөц бүртгэл-мэдээллийн бүхий үнэгүй захиалах, санамсаргүйгээр сонгосон оюутан 5000 нь онцгой и-мэйл урилгаар дамжуулан явуулсан бусад 5000 гаруй оюутан хяналтын бүлэгт байгаа бөгөөд захиалга байхгүй байна байна. Арванхоёр сарын дараа нэг (ямар ч бус хариу) мөрөөр судалгаа аль аль нь эмчилгээ, хяналтын бүлэг, оюутнуудын 70% нь сонгосон салбарт (Хүснэгт 4.5) -д бүрэн цагийн ажилтай аюулгүй байдлыг харуулж байна. Тиймээс энэ нь вэб дээр суурилсан үйлчилгээ ямар ч нөлөөгүй байсан юм шиг санагддаг.

    Гэсэн хэдий ч, их сургуулийн ухаантай мэдээ эрдэмтэн арай илүү дэлгэрэнгүй мэдээллийг хараад, эмчилгээний бүлгийн оюутнуудын дөнгөж 20% нь хэзээ ч захиа хүлээн авснаас хойш дансанд нэвтэрсэн болохыг тогтоожээ. Цаашилбал, мөн бага зэрэг гайхалтай, вэб хуудас руу нэвтэрч байгаа хүмүүсийн дунд зөвхөн 60% нь бүрэн цагийн ажилтай өөрсдийн сонгосон талбай дахь хүмүүсийн хувьд хувиас нэвтэрч чадахгүй байсан хүмүүсийн хувь хэмжээ доогуур, бага байсан нь баталгаатай байсан хяналтын байдал (Хүснэгт 4.6).

    1. юу болох байсан нь тайлбар өгнө үү.
    2. Юу туршилтын эмчилгээний үр нөлөөг тооцоход хоёр өөр арга зам байна вэ?
    3. Хэрэв энэ үр дүн өгсөн, их дээд сургуулийн мэргэжлийн үйлчилгээ бүх оюутнуудад энэ вэб дээр суурилсан мэргэжлийн үйлчилгээ үзүүлэх ёстой вэ? Зүгээр л тодорхой байх, энэ нь энгийн хариулт нь асуулт биш юм.
    4. тэд дараагийн юу хийх ёстой вэ?

    Санамж: Энэ асуулт энэ бүлэгт хамрагдсан материал давсан боловч туршилт нийтлэг асуудлыг тусгасан. Оролцогчид эмчилгээ эрхлэх нь зүйтэй юм, учир нь энэ төрлийн туршилт дизайн заримдаа шагнал загвар гэж нэрлэдэг. Энэ асуудал нь нэг талт бус дагаж гэгддэг нэг жишээ юм (үзнэ үү Gerber and Green (2012) , Ч.. 5)

  26. [ хатуу ] Цаашид шинжилсний дараа өмнөх тухайн заасан туршилт бүр ч илүү хэцүү хүндрэлтэй байна гэж болж байна. Энэ нь хяналтын бүлэг хүмүүсийн 10% нь үйлчилгээнд хандах төлсөн бөгөөд тэд 65% (Хүснэгт 4.7) нь хөдөлмөр эрхлэлтийн түвшин нь хүртэл дууссан гэж болж байна.

    1. Та юу болж байгааг бодож, үйл ажиллагааны курс санал болгож байна нэгтгэн нэг захиа бич.

    Санамж: Энэ асуулт энэ бүлэгт хамрагдсан материал давсан боловч туршилт нийтлэг асуудлыг тусгасан. Энэ асуудал нь хоёр талын үл нийцэл гэж нэрлэдэг ямар нэг жишээ юм (үзнэ үү Gerber and Green (2012) , Ч. 6).

Хүснэгт 4.5: ажил үйлчилгээ туршилтын өгөгдлийг Энгийн харах.
Group Хэмжээ Хөдөлмөр эрхлэлтийн түвшин
вэб хуудас руу нэвтрэх олгов 5000 70%
вэб хуудас руу нэвтрэх олгосон бус, 5000 70%
Хүснэгт 4.6: ажил үйлчилгээ туршилтын өгөгдлийг илүү бүрэн гүйцэд харах.
Group Хэмжээ Хөдөлмөр эрхлэлтийн түвшин
вэб хуудас руу нэвтрэх олгож, нэвтрээгүй 1000 60%
вэб хуудас руу нэвтрэх олгож, хэзээ ч нэвтрээгүй 4000 85%
вэб хуудас руу нэвтрэх олгосон бус, 5000 70%
Хүснэгт 4.7: ажил үйлчилгээ туршилтын өгөгдлийг бүрэн харах.
Group Хэмжээ Хөдөлмөр эрхлэлтийн түвшин
вэб хуудас руу нэвтрэх олгож, нэвтрээгүй 1000 60%
вэб хуудас руу нэвтрэх олгож, хэзээ ч нэвтрээгүй 4000 72.5%
вэб хуудас руу нэвтрэх олгосон биш, Хэрэв төлсөн 500 65%
вэб хуудас руу нэвтрэх олгосон биш, үүнийг төлж чадахгүй байсан 4500 70,56%