ተጨማሪ ሐተታ

ይህ ክፍል አንድ ትረካ ይነበባሉ ይልቅ, ማጣቀሻ ሆኖ ጥቅም ላይ የተቀየሰ ነው.

• መግቢያ (ክፍል 4.1)

በማህበራዊ ጥናት ላይ አንድ የሚፈጠር በተመለከተ ጥያቄዎች ብዙውን ጊዜ ውስብስብ እና ውስብስብ ናቸው. በሲጋራና በግራፍ ላይ የተመሠረተ ዋናነት አንድ መሠረታዊ አቀራረብ ለማግኘት Pearl (2009) , እና የሚችሉ ውጤቶች ላይ የተመሠረተ የምሥረታ ለመቅረብ ተመልከት Imbens and Rubin (2015) (በዚህ ምዕራፍ ውስጥ የቴክኒክ ተጨማሪ ክፍል). እነዚህ ሁለት አቀራረቦች መካከል ንጽጽር ለማግኘት Morgan and Winship (2014) . አንድ confounder በመግለጽ ወደ መደበኛ አቀራረብ ለማግኘት VanderWeele and Shpitser (2013) .

ምዕራፍ ውስጥ: የሙከራ ያልሆኑ-ሙከራ ውሂብ በሲጋራና ግምቶች የማድረግ ችሎታችንን መካከል ደማቅ መስመር ይመስል ምን ፈጠረ. እንደ እውነቱ ከሆነ, እኔ ልዩነት blurrier ነው ብለው ያስባሉ. ለምሳሌ ያህል, ሁሉም ሰው ማጨስ ሰዎች ለማጨስ ያስገድዳቸዋል አንድ በዘፈቀደ በቁጥጥር ሙከራ ማድረግ ፈጽሞ ምንም እንኳን ካንሰር መንስኤ እንደሆነ ይቀበላል. ያልሆኑ-የሙከራ ውሂብ በሲጋራና ግምቶች በማድረግ ላይ ግሩም መጽሐፍ ርዝመት ሕክምና ለማግኘት ይህንን ይመልከቱ Rosenbaum (2002) , Rosenbaum (2009) , Shadish, Cook, and Campbell (2001) , እና Dunning (2012) .

ምዕራፍ 1 እና 2 Freedman, Pisani, and Purves (2007) ሙከራዎች, ሙከራዎች መካከል ያለውን ልዩነት ወደ አንድ ግልጽ መግቢያ ይሰጣሉ; እንዲሁም ሙከራዎች በዘፈቀደ.

Manzi (2012) በዘፈቀደ ቁጥጥር ሙከራዎች የፍልስፍና እና ስታትስቲካዊ የትዳራችሁ መሠረት ወደ አንድ አስገራሚ እና ሊነበብ መግቢያ ይሰጣል. በተጨማሪም በንግድ ውስጥ ሙከራ ኃይል አስገራሚ በገሃዱ ዓለም ምሳሌዎችን ይዟል.

• ሙከራዎችን ምንድን ናቸው? (ክፍል 4.2)

Casella (2008) , Box, Hunter, and Hunter (2005) , Athey and Imbens (2016b) የሙከራ ንድፍ እና ትንተና ስታትስቲካዊ ገጽታዎች መልካም መግቢያ ይሰጣሉ. በኢኮኖሚክስ: ከዚህም በላይ, በተለያዩ መስኮች ውስጥ ሙከራዎች መጠቀም ግሩም ሕክምናዎች አሉ (Bardsley et al. 2009) ላይ በማጠንጠን (Willer and Walker 2007; Jackson and Cox 2013) , የሥነ ልቦና (Aronson et al. 1989) , የፖለቲካ ሳይንስ (Morton and Williams 2010) , እና ማህበራዊ ፖሊሲ (Glennerster and Takavarasha 2013) .

ተሳታፊ ምልመላ (ለምሳሌ, ናሙና) አስፈላጊነት የሙከራ ምርምር አድናቆት በታች-ብዙውን ጊዜ ነው. ሕክምና ውጤት ህዝብ ውስጥ heterogeneous ነው; ይሁን እንጂ, ከዚያ ናሙና ወሳኝ ነው. Longford (1999) እርሱ አልፎ የሚደረግ ናሙና ጋር አንድ ሕዝብ ጥናት እንደ ሙከራዎች በማሰብ ተመራማሪዎች ያበረታታል ጊዜ በግልጽ ይህን ነጥብ ያደርገዋል.

• ሙከራዎች ሁለት ገፅታዎች: ቤተ ሙከራ-መስክ እና አናሎግ-ዲጂታል (ክፍል 4.3)

እኔ ቤተ ሙከራ እና የመስክ ሙከራዎች መካከል ያቀረበው የነበረው ምንታዌነት ትንሽ ቀላል ነው. እንዲያውም ሌሎች ተመራማሪዎች ደግሞ የመስክ ሙከራዎች የተለያዩ ዓይነቶች ለይተው በተለይም ሰዎች ውስጥ, ተጨማሪ ዝርዝር የስቱዲዮ የፈለግሁት (Harrison and List 2004; Charness, Gneezy, and Kuhn 2013) . የዳሰሳ ጥናት ሙከራዎችን እና ማህበራዊ ሙከራዎች ጥናት ሙከራዎች ነባር ጥናቶች መካከል የመሰረተ ልማት በመጠቀም ሙከራዎችን ናቸው እና አማራጭ ስሪቶች ምላሾች ጋር አወዳድር. በተጨማሪም, በዚያ ላብ እና የመስክ ምንታዌነት ውስጥ በጽዳት ጋር የማይገጣጠሙ ሰርቲፊኬቶች ማህበራዊ ሳይንቲስቶች ያከናወናቸውን ሙከራዎች ሌሎች ሁለት ዓይነት ናቸው (አንዳንድ የዳሰሳ ጥናት ሙከራዎች ምዕራፍ 3 ላይ የቀረቡ) ተመሳሳይ ጥያቄዎች; የዳሰሳ ጥናት ሙከራዎች ላይ ተጨማሪ ይመልከቱ Mutz (2011) . ማህበራዊ ሙከራዎች ሕክምና ብቻ በመንግስት ተግባራዊ ሊሆኑ የሚችሉ አንዳንድ ማህበራዊ ፖሊሲን ሥራ ላይ ባለበት ሙከራዎች ናቸው. ማህበራዊ ሙከራዎች በቅርበት ግምገማ ፕሮግራም ጋር የተያያዙ ናቸው. መምሪያ ሙከራዎች ላይ ተጨማሪ ለማግኘት Orr (1998) , Glennerster and Takavarasha (2013) , እና Heckman and Smith (1995) .

ወረቀቶች በርካታ በጥቅሉ ቤተ ሙከራ እና የመስክ ሙከራዎች ጋር ሲነጻጸር ናቸው (Falk and Heckman 2009; Cialdini 2009) እና የፖለቲካ ሳይንስ ውስጥ የተወሰኑ ሙከራዎች ውጤት አንፃር (Coppock and Green 2015) , ኢኮኖሚክስ (Levitt and List 2007a; Levitt and List 2007b; Camerer 2011; Al-Ubaydli and List 2013) እና የሥነ ልቦና (Mitchell 2012) . Jerit, Barabas, and Clifford (2013) ቤተ ሙከራ እና የመስክ ሙከራዎች ውጤቶችን በማነጻጸር አንድ ጥሩ ምርምር ንድፍ ያቀርባል.

እነርሱም በቅርበት አንዳንድ ፍላጎት ውጤቶች ተብለው መከበር ነው እናውቃለን, እና ደግሞ ልቦና ጥናት ተደርጎባቸው ምክንያቱም ባህሪያቸውን መቀየር ተሳታፊዎች ስለ አሳሳቢ (Orne 1962) እና ኢኮኖሚክስ (Zizzo 2009) . በአብዛኛው በቤተ ሙከራ ጋር የተያያዘ ቢሆንም, በእነዚሁ ተመሳሳይ ጉዳዮች እንዲሁም የመስክ ሙከራዎች ላይ ችግር ሊያስከትል ይችላል. እንዲያውም ፍላጎት ጉዳት ደግሞ አንዳንድ ጊዜ, አንድ መስክ ሙከራ ከሚለው ይህ ቃል, የምዕራቡ የኤሌክትሪክ ኩባንያ ጥልቀታቸውን ስራዎች በ 1924 የጀመረው በተለይ ታዋቂ ብርሃን እንዳያበራላቸው ሙከራዎችን ጥልቀታቸውን ውጤቶች ተብለው ይጠራሉ (Adair 1984; Levitt and List 2011) . ሁለቱም ፍላጐት ውጤቶች እና Hawthorn ስለሚያስከትለው ችግር በቅርበት ምዕራፍ 2 ላይ ይብራራል ምላሽ የመለኪያ ሃሳብ ጋር የተያያዙ ናቸው እናያለን (በተጨማሪ Webb et al. (1966) ).

የመስክ ሙከራዎች ታሪክ ኢኮኖሚክስ ውስጥ ተገልጿል (Levitt and List 2009) , የፖለቲካ ሳይንስ (Green and Gerber 2003; Druckman et al. 2006; Druckman and Lupia 2012) , ልቦና (Shadish 2002) , እና የህዝብ ፖሊሲ (Shadish and Cook 2009) . የመስክ ሙከራዎችን በፍጥነት ታዋቂ ሆነ የት ማህበራዊ ሳይንስ አንድ አካባቢ ዓለም አቀፍ ልማት ነው. በኢኮኖሚክስ ውስጥ ሥራ አዎንታዊ ግምገማ ለማግኘት ተመልከት Banerjee and Duflo (2009) , እና ወሳኝ ምዘና ማየት Deaton (2010) . የፖለቲካ ሳይንስ ውስጥ በዚህ ሥራ ግምገማ ለማግኘት ተመልከት Humphreys and Weinstein (2009) . በመጨረሻም, የመስክ ሙከራዎች ጋር ግንኙነት ያለው የሥነ ምግባር ችግሮች የፖለቲካ ሳይንስ ውስጥ ዳስሰናል ቆይተዋል (Humphreys 2015; Desposato 2016b) እና የልማት ኢኮኖሚክስ (Baele 2013) .

ምዕራፍ ውስጥ: ቅድመ-ሕክምና መረጃ የተገመተ የሕክምና ውጤቶች ትክክለኛነት ለማሻሻል ጥቅም ላይ ሊውል ይችላል የሚል ሐሳብ, ነገር ግን ይህ ዘዴ አንዳንድ ክርክር የለም; Freedman (2008) , Lin (2013) , እና Berk et al. (2013) ; ማየት Bloniarz et al. (2016) ተጨማሪ መረጃ ለማግኘት.

• ቀላል ሙከራዎች በላይ በመውሰድ ላይ (ክፍል 4.4)

ፀንቶ, የሕክምና ውጤቶች የተለያያ, እና ስልቶችን: ሦስት ጽንሰ-ላይ ትኩረት መርጠዋል. እነዚህ ጽንሰ ሐሳቦች በተለያዩ መስኮች ውስጥ የተለያዩ ስሞች አሏቸው. ለምሳሌ ያህል, የሥነ ልቦና መካከለኛ እና አወያዮች ላይ በማተኮር ቀላል ሙከራዎች ውጪ ለመሄድ አዝማሚያ (Baron and Kenny 1986) . መካከለኛ የሚለውን ሃሳብ እኔ ዘዴዎች እጠራለሁ ነገር ይያዛል, እና አወያዮች ሃሳብ እኔ ውጫዊ ፀንቶ (የተለያዩ ሁኔታዎች ውስጥ መሄዱን ከሆነ ለምሳሌ, ሙከራ ውጤት የተለየ ይሆን ነበር) እና የህክምና ውጤቶች የተለያያ (ይደውሉ ነገር ይያዛል ለምሳሌ, ከሌሎች ሰዎች ይልቅ አንዳንድ ሰዎች) የሚሆን ትልቅ ውጤት ናቸው.

ያለው ሙከራ Schultz et al. (2007) ውጤታማ ጣሌቃ ንድፍ ጥቅም ላይ ሊውል ይችላል እንዴት ማህበራዊ ንድፈ ያሳያል. ውጤታማ ጣሌቃ ለመንደፍ ንድፈ ሚና ስለ ይበልጥ አጠቃላይ ክርክር ለማግኘት Walton (2014) .

• የተገቢነት (ክፍል 4.4.1)

ውስጣዊ እና ውጫዊ ፀንቶ የሚቆይበት ፅንሰ መጀመሪያ ላይ አስተዋወቀ ነበር Campbell (1957) . ተመልከት Shadish, Cook, and Campbell (2001) , ይበልጥ ዝርዝር የሆነ ታሪክ እና ስታትስቲክሳዊ መደምደሚያ ፀንቶ, ውስጣዊ ፀንቶ በጥንቃቄ ፓለቲካ ያህል ፀንቶ, እና የውጭ ፀንቶ መገንባት.

ሙከራዎች ውስጥ እስታቲስቲካዊ መደምደሚያ ፀንቶ ጋር የተያያዙ ጉዳዮች አጠቃላይ እይታ ለማግኘት ተመልከት Gerber and Green (2012) (ማኅበራዊ ሳይንስ አንፃር ለ) እና Imbens and Rubin (2015) (ሀ እስታቲስቲካዊ አመለካከት ለ). የመስመር ላይ መስክ ሙከራዎች ውስጥ በተለይም ሊነሱ እስታቲስቲካዊ መደምደሚያ ፀንቶ አንዳንድ ጉዳዮች እንዲህ ጥገኛ ውሂብ ጋር እምነት ልዩነት መፍጠር computationally ውጤታማ ዘዴዎች እንደ ጉዳዮች ማካተት (Bakshy and Eckles 2013) .

ውስጣዊ ፀንቶ ውስብስብ መስክ ሙከራዎች ውስጥ ለማረጋገጥ አስቸጋሪ ሊሆን ይችላል. ለምሳሌ, ለ ተመልከት Gerber and Green (2000) , Imai (2005) , እና Gerber and Green (2005) ድምጽ መስጠት በተመለከተ ውስብስብ መስክ ሙከራ ትግበራ ስለ ክርክር ነው. Kohavi et al. (2012) እና Kohavi et al. (2013) የመስመር ላይ መስክ ሙከራዎች ውስጥ ክፍተት ፀንቶ የሚቆይበት ተፈታታኝ ወደ መግቢያ ይሰጣሉ.

ውስጣዊ ፀንቶ ጋር አንድ ዋነኛ አሳቢነት randomization ጋር ችግር ነው. ጉዳት ሊያስከትል የሚችል randomization ጋር ችግር መለየት የሚቻልበት አንዱ መንገድ የሚታይ ባሕርይ ላይ ሕክምና እና ቁጥጥር ቡድኖች ማወዳደር ነው. ንጽጽር ይህ ዓይነት ሚዛን ቼክ ይባላል. ተመልከት Hansen and Bowers (2008) ቼክ ሚዛናዊ, እና ለማየት እስታቲስቲካዊ ለመቅረብ Mutz and Pemantle (2015) ቀሪ ቼክ በተመለከተ አሳሳቢ ነው. ለምሳሌ ያህል, አንድ ሚዛናዊ በመጠቀም ፈትሽ Allcott (2011) (; ጣቢያዎች 2, 6, እና 8 ሠንጠረዥ 2 ይመልከቱ) randomization ወደ OPower ሙከራዎች አንዳንድ ውስጥ ሙከራዎች ሦስት ላይ በትክክል አልተተገበረም ነበር አንዳንድ ማስረጃ የለም አልተገኘም. ሌሎች መንገዶችንም ለማግኘት Imbens and Rubin (2015) , ምዕራፍ 21.

ውስጣዊ ፀንቶ ጋር የተያያዙ ሌሎች ዋና ዋና ስጋቶች ናቸው: 1) ሕክምና ቡድን ውስጥ ሁሉም ሰው ከበግ ሕክምና ተደርጎለታል የት ያልሆኑ-ተገዢነት, አንድ ጎን, ሁለት ህክምና ቡድን ውስጥ ሁሉም ሰው ሕክምና እና አንዳንድ ይቀበላል የት ያልሆኑ-ተገዢነት, ወገነ 2) የቁጥጥር ቡድን ውስጥ ያሉ ሰዎች ሕክምና ቁጥጥር ሁኔታ ውስጥ ያሉ ሰዎች ወደ ሕክምና ሁኔታ ውስጥ ሰዎች ላይ ውጥረቱ የት ሕክምና, ውጤት አንዳንድ ተሳታፊዎች የሚለካው ቦታ 3) በዝውውር,, እና 4) ጣልቃ ተቀበሉ. ተመልከት Gerber and Green (2012) ምዕራፍ 5, 6, 7, እና እነዚህ ጉዳዮች በእያንዳንዱ ላይ ተጨማሪ 8.

CONSTRUCT ፀንቶ ላይ ተጨማሪ ለማግኘት Westen and Rosenthal (2003) , እና CONSTRUCT ትልቅ ውሂብ ምንጮች ውስጥ ተቀባይነት እንዲኖረው, ላይ ተጨማሪ Lazer (2015) እና በዚህ መጽሐፍ ምዕራፍ 2.

ውጫዊ ፀንቶ ገጽታዎች አንዱ አንድ ጣልቃ ፈተና ነው የት ቅንብር ነው. Allcott (2015) ጣቢያ ምርጫ አጥቅቷቸው በጥንቃቄ የንድፈ እና የማስወገ ህክምና ይሰጣል. ይህ ጉዳይ ደግሞ ተብራርቷል Deaton (2010) . በብዙ ጣቢያዎች ውስጥ ሊደገም መሆን በተጨማሪ, የመነሻ የኃይል ሪፖርት ጣልቃ ደግሞ ራሱን ችሎ ብዙ ምርምር ቡድኖች ጥናት ተደርጓል (ለምሳሌ, Ayres, Raseman, and Shih (2013) ).

• የሕክምና ውጤቶች መካከል የተለያያ (ክፍል 4.4.2)

መስክ ሙከራዎች ውስጥ የሕክምና ውጤቶች የተለያያ ግሩም ማብራሪያ ለማግኘት ምዕራፍ 12 ተመልከት Gerber and Green (2012) . የሕክምና ፈተና ውስጥ የሕክምና ውጤቶች የተለያያ ወደ መግቢያዎች ለማግኘት Kent and Hayward (2007) , Longford (1999) , እና Kravitz, Duan, and Braslow (2004) . የሕክምና ውጤቶች መካከል የተለያያ በአጠቃላይ ቅድመ-ሕክምና ባህሪያት ላይ የተመሰረተ ልዩነት ላይ እናተኩራለን. እናንተ ልጥፍ-የሕክምና ውጤት ላይ የተመሠረተ የተለያያ ፍላጎት ከሆነ, ከዚያ ይበልጥ ውስብስብ approachs ያሉ ዋና ዋና የተሸከረከረ እንደ አስፈላጊ ናቸው (Frangakis and Rubin 2002) ; ማየት Page et al. (2015) ግምገማ ነው.

ብዙ ተመራማሪዎች ተዛምዶ በመጠቀም ሕክምና ውጤቶች መካከል የተለያያ እንዲገምቱ, ነገር ግን አዳዲስ ዘዴዎች ለምሳሌ ያህል, የማሽን መማሪያ ላይ መታመን Green and Kern (2012) , Imai and Ratkovic (2013) , Taddy et al. (2016) , እና Athey and Imbens (2016a) .

ምክንያቱም በርካታ ንጽጽር ችግሮች እና ". ዓሣ የማጥመድ" በርካታ መነጻጸሩ ምን አድራሻ አሳሳቢ ሊረዳ የሚችል እስታቲስቲካዊ አቀራረቦች የተለያዩ አሉ ናቸው ውጤቶች የተለያያ መካከል ግኝቶች አንዳንድ ጥርጣሬ አለ (Fink, McConnell, and Vollmer 2014; List, Shaikh, and Xu 2016) . "ዓሣ የማጥመድ" ስለ ስጋቶች አንዱ አቀራረብ ልቦና ላይ እየተለመደ ነው ይህም ቅድመ-ምዝገባ, ነው (Nosek and Lakens 2014) , የፖለቲካ ሳይንስ (Humphreys, Sierra, and Windt 2013; Monogan 2013; Anderson 2013; Gelman 2013; Laitin 2013) , እና ኢኮኖሚክስ (Olken 2015) .

ጥናት ውስጥ Costa and Kahn (2013) በሙከራ ውስጥ ቤተሰቦች መካከል ግማሽ ያህሉ ብቻ ወደ የስነ ህዝብ መረጃ ጋር የተገናኙ መሆን ችለው ነበር. በዚህ ትንታኔ ጋር ዝርዝር እና በተቻለ ችግሮች ውስጥ ፍላጎት ያለው አንባቢ የመጀመሪያው ወረቀት ማመልከት አለበት.

• አሠራሮች (ክፍል 4.4.3)

አሠራሮች በሚገርም መልኩ በጣም አስፈላጊ ናቸው, ነገር ግን ማጥናት በጣም አስቸጋሪ መሆን ይለወጣል. አሠራሮች ስለ ጥናቶች በቅርብ ልቦና ውስጥ መካከለኛ ጥናት ጋር የተያያዙ (ሳይሆን ተመልከት VanderWeele (2009) በሁለቱ ሐሳቦች መካከል ግልጽ የሆነ ንጽጽር ለ). እንዲህ ውስጥ ልማት አቀራረብ እንደ ገና ዝተው ስልቶችን ስታትስቲካዊ አቀራረብ, Baron and Kenny (1986) , በጣም የተለመዱ ናቸው. በሚያሳዝን ሁኔታ, ይህ እነዚህን ቅደም ተከተሎች አንዳንድ ጠንካራ ግምታዊ ላይ የተመካ እንደሆነ የማይኖረው (Bullock, Green, and Ha 2010) እና በርካታ ዘዴዎች አሉ ጊዜ አንድ ሰው ብዙ ሁኔታዎች ላይ መጠበቅ ዘንድ እንደ መከራ (Imai and Yamamoto 2013; VanderWeele and Vansteelandt 2014) . Imai et al. (2011) እና Imai and Yamamoto (2013) አንዳንድ የተሻሻለ ስታትስቲካዊ ዘዴዎችን ይሰጣሉ. በተጨማሪም, VanderWeele (2015) ስሜታዊነት ትንተና አጠቃላይ አቀራረብ ጨምሮ አስፈላጊ ውጤቶች, በርካታ ጋር መጽሐፍ-ርዝመት ህክምና ይሰጣል.

አንድ የተለየ አቀራረብ በቀጥታ ስልት (ለምሳሌ, መስጠት መርከበኞች ቫይታሚን ሲ) ለማዛባት መሞከር ሙከራዎች ላይ ያተኩራል. የሚያሳዝነው ግን, በርካታ ማኅበራዊ ሳይንስ ቅንብሮች ውስጥ አብዛኛውን ጊዜ ከአንድ በላይ መሳሪያዎች ናቸው እና ሌሎችን መለወጥ ላይ ያለ አንድ ለውጥ የሕክምና ንድፍ አስቸጋሪ ነው. አንዳንድ አቀራረቦች experimentally የሚለውጥ አሠራሮች ውስጥ ተገልጸዋል ወደ Imai, Tingley, and Yamamoto (2013) , Ludwig, Kling, and Mullainathan (2011) , እና Pirlott and MacKinnon (2016) .

እንደተገለፀው በመጨረሻም, ስልቶችን ደግሞ የሳይንስ ፍልስፍና ውስጥ ረጅም ታሪክ ያላቸው Hedström and Ylikoski (2010) .

• ነባር አካባቢዎች በመጠቀም (ክፍል 4.5.1.1)

መድልዎን ለመለካት የተልእኮ ጥናቶች እና ኦዲት ጥናት አጠቃቀም ላይ ተጨማሪ ለማግኘት ይህንን ይመልከቱ Pager (2007) .

• የራስዎን ሙከራ ይገንቡ (ክፍል 4.5.1.2)

አንተ ለመገንባት ሙከራዎች ተሳታፊዎች ለመመልመል በጣም የተለመደው መንገድ የአማዞን ሜካኒካል ግራንድ (MTurk) ነው. ባህላዊ ሙከራ-ክፍያ ሰዎች MTurk የሚያስመስል ገጽታዎች እነርሱም-ነጻ ብዙ ተመራማሪዎች ማድረግ እንደማይችሉ ሥራዎችን ለማጠናቀቅ ምክንያቱም አስቀድሞ ባህላዊ የበለጠ ፈጣን እና ርካሽ ውሂብ ክምችት ውስጥ ምክንያት ሰብዓዊ ርዕሰ ሙከራዎች ውስጥ ተሳታፊዎች እንደ Turkers (MTurk ላይ ሠራተኞች) መጠቀም ጀምረናል ላይ-ካምፓስ ላቦራቶሪ ሙከራዎች (Paolacci, Chandler, and Ipeirotis 2010; Horton, Rand, and Zeckhauser 2011; Mason and Suri 2012; Rand 2012; Berinsky, Huber, and Lenz 2012) .

MTurk የሚመለመሉ ተሳታፊዎች ጋር ሙከራዎች መካከል ያለው ትልቁ ጥንካሬ የሎጂስቲክ ናቸው: ተመራማሪዎች በፍጥነት እና እንደ አስፈላጊነቱ ተሳታፊዎች ለመቅጠር ያስችላቸዋል. በቤተ ሙከራ ውስጥ ለማሄድ ሳምንታት ሊወስድ ይችላል እና የመስክ ሙከራዎች-ለማዋቀር ወራት ሊወስድ ይችላል ሲሆን, MTurk የሚመለመሉ ተሳታፊዎች ጋር ሙከራዎችን ቀናት ውስጥ ሊሄድ ይችላል. ለምሳሌ ያህል, Berinsky, Huber, and Lenz (2012) የ 8 ደቂቃ ሙከራ ውስጥ ለመሳተፍ በአንድ ቀን ውስጥ ብቻ 400 ርዕሰ ለመቅጠር ችለው ነበር. በተጨማሪም, እነዚህ ተሳታፊዎች (ምዕራፍ 3 ላይ እንደተገለጸው, የዳሰሳ ጥናቶች እና ጅምላ ትብብር ጨምሮ እና 5) ማንኛውንም ዓላማ መልምሎ ይችላል. ምልመላ ይህ ምቾት ተመራማሪዎች ፈጣን በተከታታይ ተዛማጅ ሙከራዎች ቅደም ተከተል ማስኬድ ይችላሉ ማለት ነው.

የራስዎን ሙከራዎች ስለ MTurk የመጡ ተሳታፊዎች በመመልመል በፊት ማወቅ አራት በጣም አስፈላጊ ነገሮች አሉ. በመጀመሪያ ደረጃ, ብዙ ተመራማሪዎች Turkers ጋር የተያያዙ ሙከራዎች ያልሆነ የተወሰነ ጥርጣሬ አላቸው. ይህ ጥርጣሬ የተወሰነ አይደለም ስለሆነ ማስረጃ ጋር ለመቋቋም አስቸጋሪ ነው. ይሁን እንጂ, Turkers በመጠቀም ጥናቶች በርካታ ዓመታት በኋላ, አሁን ይህን ጥርጣሬ በተለይ አስፈላጊ አይደለም ብለን መደምደም እንችላለን. ሌሎች ህዝብ እና ሌሎች ሕዝብ ከ ውጤቶች Turkers ጋር ሙከራዎች ውጤቶችን በማነጻጸር ብዙ ጥናቶች Turkers መካከል የስነሕዝብ በማነጻጸር ብዙ ጥናቶች ሲደረጉ ቆይቷል. ይህ ሁሉ ሥራ ከተሰጠው በኋላ, እኔ ስለእሱ ማሰብ ከሁሉ የተሻለው መንገድ Turkers ብዙ ተማሪዎች ግን ትንሽ የተለያየ እንደ ምክንያታዊ ምቾት ናሙና ናቸው ነው ብለው ያስባሉ (Berinsky, Huber, and Lenz 2012) . በመሆኑም, ተማሪዎች አንዳንድ ሰዎች ምክንያታዊ ሕዝብ ሁሉ ግን የሚጠቅም አይደለም የሙከራ ምርምር ናቸው ልክ እንደ Turkers ምክንያታዊ አንዳንድ የህዝብ ነገር ግን ሁላችሁ አይደላችሁም ምርምር ናቸው. እናንተ Turkers ጋር ለመስራት የሚሄዱ ከሆነ, ታዲያ እነዚህ ንጽጽራዊ ጥናት ብዙ ማንበብ እና ቅላጼ ለመረዳት ትርጉም ይሰጣል.

ሁለተኛ, ተመራማሪዎች ግራንድ ሙከራዎች ውስጣዊ ፀንቶ በማሳደግ ምርጥ-ልማዶች አዳብረዋል; እንዲሁም ስለ ለማወቅ እነዚህን ምርጥ ልምዶች መከተል አለበት (Horton, Rand, and Zeckhauser 2011; Mason and Suri 2012) . ለምሳሌ ያህል, Turkers በመጠቀም ተመራማሪዎች ከማይሰጥ ተሳታፊዎች ለማስወገድ ተቆጣጣሪዎች እንዲጠቀሙ ይበረታታሉ (Berinsky, Margolis, and Sances 2014; Berinsky, Margolis, and Sances 2016) (ግን ደግሞ ማየት DJ Hauser and Schwarz (2015b) እና DJ Hauser and Schwarz (2015a) ). እናንተ ከማይሰጥ ተሳታፊዎች ማስወገድ አይደለም ከሆነ, ከዚያም ሕክምና ምንም ዓይነት ተጽዕኖ ከማይሰጥ ተሳታፊዎች አስተዋወቀ ድምፅ በ ውጭ ታጠበ ይችላል, እና በተግባር ከማይሰጥ ተሳታፊዎች ቁጥር ከፍተኛ ሊሆን ይችላል. ሁበር እና ባልደረቦቼ በሙከራ ውስጥ (2012) ተሳታፊዎች መካከል 30% መሰረታዊ ትኩረት ተቆጣጣሪዎች አልተሳካም. Turkers ጋር የጋራ ሌላው ችግር ያልሆኑ የዋህነት ነው ተሳታፊዎች ነው (Chandler et al. 2015) .

ሦስተኛ, ዲጂታል ሙከራዎች ሌሎች ቅጾች ዘመድ, MTurk ሙከራዎችን መውጣት አይችሉም; Stewart et al. (2015) በማንኛውም ጊዜ MTurk ላይ ብቻ 7,000 ሰዎች እንዳሉ ገምቷል.

በመጨረሻም, MTurk የራሱን ደንቦች እና ደንቦች ጋር አንድ ማህበረሰብ መሆኑን ማወቅ አለባቸው (Mason and Suri 2012) . ነዎት ሙከራዎችን ማስኬድ በመሄድ ነበር; አንድ አገር ባህል ለማወቅ ይሞክሩ ነበር በተመሳሳይ መንገድ: የ ባህል እና Turkers ውስጥ ደንቦች ይበልጥ ለማወቅ ጥረት ማድረግ ይኖርብናል (Salehi et al. 2015) . እናም, ተገቢ ያልሆነ ወይም ያልተሟላና ነገር ለማድረግ ከሆነ Turkers የእርስዎን ሙከራ እየተናገረ ያለው ስለ መሆኑን ማወቅ አለባቸው (Gray et al. 2016) .

MTurk እነርሱ እንደ, ላብ-እንደ ሆነው እንደ ሆነ መርምሩ; የእርስዎ ሙከራዎች ተሳታፊዎች በመመልመል በሚገርም ምቹ መንገድ ነው Huber, Hill, and Lenz (2012) , ወይም የመሳሰሉ ተጨማሪ መስክ-እንደ Mason and Watts (2009) , Goldstein, McAfee, and Suri (2013) , Goldstein et al. (2014) , Horton and Zeckhauser (2016) , እና Mao et al. (2016) .

• የራስዎን ምርት ይገንቡ (ክፍል 4.5.1.3)

የራስህን ምርት ለመፍጠር እየሞከሩ የሚያስቡ ከሆነ, እኔ በእናንተ ውስጥ MovieLens ቡድን የሚሰጡትን ምክር ማንበብ እንመክራለን Harper and Konstan (2015) . ያላቸውን ተሞክሮ አንድ ቁልፍ ማስተዋል ለእያንዳንዱ ስኬታማ ፕሮጀክት ብዙ, ብዙ ውድቀቶች መኖራቸው ነው. ለምሳሌ ያህል, MovieLens ቡድን እንዲህ ሙሉ ውድቀቶች ነበሩ GopherAnswers እንደ ሌሎች ምርቶች መጀመሩን (Harper and Konstan 2015) . አንድ ምርት ለመገንባት በመሞከር ላይ ሳለ በመቅረቱ አንድ ተመራማሪ ሌላው ምሳሌ Arden ተብሎ የመስመር ላይ ጨዋታ ለመገንባት ኤድዋርድ Castronova ሙከራ ነው. ገንዘብ ውስጥ $ 250,000 ቢሆንም, ፕሮጀክቱ አንድ flop ነበር (Baker 2008) . GopherAnswers እና Arden ያሉ ፕሮጀክቶች የአጋጣሚ ነገር ሆኖ እጅግ የተለመደ MovieLens ያሉ ፕሮጀክቶች በላይ ናቸው. 1) ተሳታፊዎች ምክንያቱም ለምሳሌ, ተከፍሏቸው አይደለም (ከእነርሱ ይሰጣል ምን ውጤት መጠቀም እነርሱም አይደሉም: እኔ በተሳካ ሁኔታ በተደጋጋሚ ሙከራ ለ ምርቶች በሠራው ሌላ ማንኛውም ተመራማሪዎች አላውቅም ነበር ሲናገር በመጨረሻም, እዚህ ላይ የእኔ መመዘኛዎች ናቸው በጎ ፈቃደኞች ሳይንስ በመርዳት) እና 2) ምርት ከአንድ በላይ የተለያዩ ሙከራ (የተለያዩ ተሳታፊ ገንዳዎች ጋር ማለትም, ተመሳሳይ ሙከራ በርካታ ጊዜ) ጥቅም ላይ ቆይቷል. ሌሎች ምሳሌዎችን እናውቃለን ከሆነ, እኔን እባክዎ ያሳውቁን.

• ኃይለኛ ጋር አጋር (ክፍል 4.5.2)

እኔ የቴክኖሎጂ ኩባንያዎች ላይ በተደጋጋሚ ውይይት ፓስተር የአምላክ Quadrant የሚለው ሐሳብ ሰምቻለሁ, እና በ Google ላይ ምርምር ጥረት ማደራጀት ያግዛል (Spector, Norvig, and Petrov 2012) .

ማስያዣ እና የሥራ ባልደረቦች 'ጥናት (2012) በተጨማሪም የተቀበሉ ሰዎች ጓደኞች ላይ እነዚህን የሕክምና ውጤት መለየት ይሞክራል. ምክንያቱም ሙከራው ንድፍ, እነዚህ መሥፋፋትን በጥራት ለመለየት አስቸጋሪ ነው; ፍላጎት ያለው አንባቢ ማየት ይገባል Bond et al. (2012) ይበልጥ ሰፊ ማብራሪያ ለማግኘት. ይህ ሙከራ ድምጽ ለማበረታታት ጥረት ላይ የፖለቲካ ሳይንስ ሙከራዎች መካከል ለረጅም ወግ ክፍል ነው (Green and Gerber 2015) . እነዚህ ፓስተር የአምላክ Quadrant ውስጥ ናቸው; ምክንያቱም እነዚህ ማግኘት-ውጭ-ወደ-ድምጽ ሙከራዎች ክፍል ውስጥ የተለመደ ነው. ይህ የባህሪ ለውጥ እና ማህበራዊ ተጽዕኖ ይበልጥ አጠቃላይ ንድፈ ለመሞከር አንድ አስገራሚ ባሕርይ ሊሆን ይችላል ድምጽ መስጠት እና ድምጽ መስጠት ለማሳደግ ያነሳሳው የሆኑ ብዙ ሰዎች አሉ ማለት ነው.

ሌሎች ተመራማሪዎች እንዲህ ያለ የፖለቲካ ፓርቲዎች, መንግሥታዊ ያልሆኑ ድርጅቶች, እና ንግዶች እንደ አጋር ድርጅቶች ጋር የመስክ ሙከራዎችን በማስኬድ በተመለከተ ምክር ያቀረቡት (Loewen, Rubenson, and Wantchekon 2010; List 2011; Gueron 2002) . ሌሎች ድርጅቶች ጋር ሽርክና ምርምር ንድፎች ተፅዕኖ የሚችለው እንዴት እንደሆነ ምክር ሰጥተዋል (Green, Calfano, and Aronow 2014; King et al. 2007) . አጋርነት ደግሞ ምግባር ጥያቄዎች ሊያስከትል ይችላል (Humphreys 2015; Nickerson and Hyde 2016) .

• ንድፍ ምክር (ክፍል 4.6)

የእርስዎን ሙከራ ከመካሄዱ በፊት አንድ ትንተና እቅድ ለመፍጠር የሚሄዱ ከሆነ, እኔ ሪፖርት መመሪያዎች በማንበብ መጀመር ይጠቁማል. የ ሚስት የሌለችው መመሪያዎች (ለፈተናዎች የተጠናቀረ መደበኛ ሪፖርት) በሕክምናው የበለፀገ ነበር (Schulz et al. 2010) እና ማህበራዊ ምርምር ቀይረዋል (Mayo-Wilson et al. 2013) . መመሪያዎች ጋር ተዛማጅነት ያለው ስብስብ የሙከራ የፖለቲካ ሳይንስ መጽሔት አዘጋጆች የተዘጋጀው ተደርጓል (Gerber et al. 2014) እናያለን (በተጨማሪ Mutz and Pemantle (2015) እና Gerber et al. (2015) ). በመጨረሻም, ሪፖርት መመሪያዎች ልቦና ውስጥ እያደገ ነበር (Group 2008) , እና እንዲሁም ተመልከት Simmons, Nelson, and Simonsohn (2011) .

አንድ ትንተና እቅድ ለመፍጠር ከሆነ ቅድመ-ምዝገባ ሌሎች በእርስዎ ውጤቶች ላይ ያላቸው እምነት እንዲጨምር ያደርጋል; ምክንያቱም-በመመዝገብ ቅድመ ግምት ውስጥ ይገባል. አጋር ጋር የሚሰሩ ከሆነ በተጨማሪም, ይህ ውጤት ካዩ በኋላ ወደ ትንተና ለመቀየር ባልደረባ ችሎታቸውን አይገድብም. ቅድመ-ምዝገባ ልቦና ላይ እየተለመደ ነው (Nosek and Lakens 2014) , የፖለቲካ ሳይንስ (Humphreys, Sierra, and Windt 2013; Monogan 2013; Anderson 2013; Gelman 2013; Laitin 2013) , እና ኢኮኖሚክስ (Olken 2015) .

የእርስዎ ቅድመ-ትንታኔ ዕቅድ በመፍጠር ላይ ሳለ አንዳንድ ተመራማሪዎች ደግሞ በግምት ሕክምና ውጤት ትክክለኛነት ለማሻሻል ተዛምዶ እና ተዛማጅ አቀራረቦች መጠቀም መሆኑን መገንዘብ ይኖርባቸዋል, እና ይህ ዘዴ አንዳንድ ክርክር የለም; Freedman (2008) , Lin (2013) , እና Berk et al. (2013) ; ማየት Bloniarz et al. (2016) ተጨማሪ መረጃ ለማግኘት.

የመስመር ላይ መስክ ሙከራዎች በተለይ ንድፍ ምክር ደግሞ ውስጥ ነው የቀረበው Konstan and Chen (2007) እና Chen and Konstan (2015) .

• ዜሮ ተለዋዋጭ ወጪ ውሂብ ይፍጠሩ (ክፍል 4.6.1)

በ MusicLab ሙከራዎች ላይ ተጨማሪ ለማግኘት Salganik, Dodds, and Watts (2006) , Salganik and Watts (2008) , Salganik and Watts (2009b) , Salganik and Watts (2009a) , እና Salganik (2007) . አሸናፊ-መውሰድ-በሁሉም ገበያዎች ላይ ተጨማሪ ለማግኘት Frank and Cook (1996) . ተጨማሪ በአጠቃላይ untangling እድል እና ክህሎት ላይ ተጨማሪ ለማግኘት Mauboussin (2012) , Watts (2012) , እና Frank (2016) .

ስጡኝና: ተመራማሪዎች በጥንቃቄ መጠቀም ይገባል ተሳታፊ ክፍያዎች በማስወገድ ወደ ሌላ ዘዴ አለ. ብዙ የመስመር ላይ መስክ ሙከራዎች ውስጥ ተሳታፊዎች በመሠረቱ የካሳ ክፍያ ፈጽሞ ሙከራዎች ውስጥ እየተመለመሉ ነው. ይህ አቀራረብ ምሳሌዎች Restivo እና ቫን ዴ Rijt የአምላክ ይገኙበታል (2012) ውክፔዲያ እና የማስያዣ እና በጓደኛው ውስጥ ሽልማት ላይ ሙከራ (2012) ድምጽ ለመስጠት ሰዎች በማበረታታት ላይ ሙከራ. እነዚህ ሙከራዎች በእርግጥ ዜሮ ተለዋዋጭ ዋጋ የላቸውም, እነሱ ተመራማሪዎች ወደ ዜሮ ተለዋዋጭ ዋጋ አላቸው. E ነዚህ ሙከራዎች ብዙ ወጪ እያንዳንዱ ተሳታፊ በጣም አነስተኛ ቢሆንም, አነስተኛ ወጪ ተሳታፊዎች መካከል ከፍተኛ ቁጥር በፍጥነት ድረስ ማከል ይችላሉ ሊያደርጉት አይችሉም. ግዙፍ የመስመር ላይ ሙከራዎችን በማስኬድ ተመራማሪዎች ብዙ ጊዜ ብዙ ሰዎች ወደ ተግባራዊ ጊዜ እነዚህ አነስተኛ ውጤት ጠቃሚ ሊሆን ይችላል ብሎ አነስተኛ ግምት ሕክምና ውጤት ምን ያህል አስፈላጊ እንደሆነ ለማስመሰል. ትክክለኛው ተመሳሳይ አስተሳሰብ ተመራማሪዎች ተሳታፊዎች ላይ እንዲቀበሉ ለማስገደድ ወጪዎችን ነው የሚመለከተው. የእርስዎ ሙከራዎች አንድ ደቂቃ ማባከን አንድ ሚሊዮን ሕዝብ መንስኤ ከሆነ, ሙከራው ማንኛውንም ሰው በጣም ጎጂ አይደለም, ነገር ግን አጠቃልሎ ውስጥ ጊዜ ወደ ሁለት ዓመት በተነ አድርጓል.

ተሳታፊዎች ወደ ዜሮ ተለዋዋጭ ወጪ ክፍያ ለመፍጠር ሌላ አቀራረብ ሎተሪ ደግሞ የዳሰሳ ጥናት ላይ የዋለ መሆኑን አንድ አቀራረብ መጠቀም ነው (Halpern et al. 2011) . በመጨረሻም, መንደፍ የበለጠ አስደሳች በተጠቃሚ-ተሞክሮዎች ለማየት Toomim et al. (2011) .

• , ተካ አጣራ, እና መቀነስ (ክፍል 4.6.2)

ከዚህ ሦስት R ቀደምት ትርጉም, ናቸው Russell and Burch (1959) :

"የተተኩት insentient ቁሳዊ የሚያውቁ ሕያው ከፍተኛ እንስሳት መተካት ማለት ነው. ቅነሳ በአንድ የተሰጠ መጠን እና የትክክለኛነት መረጃ ለማግኘት ስራ ላይ የዋለ እንስሳት ቁጥር ውስጥ መቀነስ ማለት ነው. ማሻሻያ ስርጭት ወይም ገና ጥቅም ላይ እንዲውል ያላቸው ሰዎች እንስሳት ተተግብረዋል ኢሰብዓዊ አሰራሮችን ጭከናው በወደቁት ላይ ማንኛውም መቀነስ ማለት ነው. "

እኔ ምዕራፍ 6 ላይ በተገለጸው ምግባር መመሪያዎች ሊሽሩት አይደለም በሚያቀርቡበት ሦስት R የአምላክ ከዚህ ይልቅ የሰው የሙከራ ቅንብር እነዚህን መሠረታዊ-beneficence-በተለይ ይበልጥ የተብራራ ስሪት አንድ ነን.

የስሜት ወረርሽኝ ላይ ስትወያዩ, ይህ ሙከራ ለመተርጎም በአእምሯችን መያዝ ሦስት ያልሆኑ-ምግባር ጉዳዮች አሉ. በመጀመሪያ ደረጃ, ይህ ሙከራ ትክክለኛ ዝርዝሮችን የንድፈ የይገባኛል ጥያቄ ጋር መገናኘት እንዴት እንደሆነ ግልጽ አይደለም; በሌላ አባባል, CONSTRUCT ፀንቶ ጥያቄዎች አሉ. ይህም 1) ግልጽ አይደለም ምክንያቱም አዎንታዊ እና አሉታዊ ቃል ቆጠራዎች ሰዎች ለመለጠፍ ቃል ስሜታቸውን ጥሩ አመላካች መሆናቸውን በተጨባጭ ተሳታፊዎች የስሜት ሁኔታ ጥሩ አመላካች እንደሆነ ግልጽ አይደለም እና 2) ግልጽ አይደለም ተመራማሪዎቹ የተጠቀሙበትን የተለየ በስሜት ትንተና ዘዴ አስተማማኝ በሆነ ስሜት ለመገመት የሚችል ነው (Beasley and Mason 2015; Panger 2016) . በሌላ አነጋገር, አንድ የተዛባ ምልክት መጥፎ መስፈሪያ ሊኖር ይችላል. ሁለተኛ, የሙከራ ንድፍ እና ትንተና ለእኛ በጣም ተፅዕኖ ነበር (ማለትም, የሕክምና ውጤቶች የተለያያ ምንም ትንተና የለም) እና ዘዴ ምን ይሆን? ማን ስለ ምንም ነገር ይነግረናል. በዚህ ሁኔታ, ተመራማሪዎቹ ተሳታፊዎች መረጃ ብዙ ነበር, ነገር ግን በመሠረቱ ትንተና ውስጥ ንዑስ ፕሮግራሞች ተደርገው ይታዩ ነበር. ሦስተኛ, ይህ ሙከራ ውስጥ ውጤት መጠን በጣም ትንሽ ነበር; ስለ ሕክምና እና ቁጥጥር ሁኔታዎች መካከል ስላለው ልዩነት 1 1,000 ቃላት ውስጥ ነው. በእነርሱ ወረቀት, ክሬመር እና ባልደረቦቻቸው በሚሊዮን የሚቆጠሩ ሰዎች የሚገኙ በመቶዎች የሚቆጠሩ ሰዎች ዜና በየቀኑ መመገብ መድረስ ስለሚችል ይህን ግዙፍ የሆነ ውጤት አስፈላጊ እንደሆነ ጉዳዩ ማድረግ. በሌሎች ቃላት: እነርሱ በጥቅሉ ትልቅ ናቸው እያንዳንዱ ሰው ትንሽ የሆኑ እንኳ ውጤት ይከራከራሉ. ይህንን መከራከሪያ ለመቀበል እንኳ ቢሆን ይህን ግዙፍ የሆነ ውጤት የስሜት ወረርሽኝ ስለ ይበልጥ አጠቃላይ ሳይንሳዊ ጥያቄ በተመለከተ አስፈላጊ ከሆነ, አሁንም ግልጽ አይደለም. አነስተኛ ጉዳት አስፈላጊ ናቸው ቦታ ሁኔታዎች ላይ ተጨማሪ ለማግኘት ይህንን ይመልከቱ Prentice and Miller (1992) .

የመጀመሪያው R (ምትክ), አንፃር ስሜታዊ ወረርሽኝ ሙከራ በማወዳደር (Kramer, Guillory, and Hancock 2014) እና የስሜት ወረርሽኝ የተፈጥሮ ሙከራ (Coviello et al. 2014) ጀምሮ የሚንቀሳቀሱ ጋር የተያያዘ የንግድ ያዝነበለ አንዳንድ አጠቃላይ ትምህርት ይሰጣል የተፈጥሮ ሙከራዎች ሙከራዎችን (ያልሆኑ የሙከራ ውሂብ ውስጥ ሙከራዎችን ለመገመት መሆኑን ሙከራ በማዛመድ ያሉ ሌሎች አቀራረቦች, ምዕራፍ 2 ተመልከት). ወደ ምግባር ጥቅም በተጨማሪ, ያልሆኑ-የሙከራ ጥናቶች የሙከራ ለመቀየር ደግሞ logistically ማሰማራት የማይችሉ መሆኑን ሕክምና ጥናት ተመራማሪዎች ያስችላቸዋል. እነዚህ የስነምግባር እና የሎጂስቲክ ጥቅሞች ይሁን እንጂ ወጪ ይመጣል. የተፈጥሮ ሙከራዎች ጋር ተመራማሪዎች ያነሰ ተሳታፊዎች, randomization ቅጥርን ባሉ ነገሮች ላይ ቁጥጥር, እና ሕክምና ተፈጥሮ አላቸው. ለምሳሌ ያህል, አንድ ሕክምና እንደ ዝናብ አንድ ውስንነት በሁለቱም positivity የሚጨምር እና negativity ይቀንሳል ነው. የሙከራ ጥናት ውስጥ, ይሁን እንጂ, ክሬመር እና ባልደረቦቻቸው በግላቸው positivity እና negativity ማስተካከል ይችሉ ነበር.

ጥቅም ላይ የዋለው በተለየ አቀራረብ Coviello et al. (2014) ተጨማሪ ውስጥ የተብራራ ነበር Coviello, Fowler, and Franceschetti (2014) . መሣሪያ ተለዋዋጮች መግቢያ ለማግኘት ተመልከት Angrist and Pischke (2009) (ያነሰ መደበኛ) ወይም Angrist, Imbens, and Rubin (1996) (በተጨማሪ መደበኛ). መሣሪያ ተለዋዋጮች አንድ ተጠራጣሪ ያልተጋነነ ለማግኘት ተመልከት Deaton (2010) , እና ደካማ መሣሪያዎች (ዝናብ ደካማ መሣሪያ ነው) ጋር መሣሪያ ተለዋዋጮች መግቢያ ለማግኘት ተመልከት Murray (2006) .

ይበልጥ በአጠቃላይ, የተፈጥሮ ሙከራዎች አንድ ጥሩ መግቢያ ነው Dunning (2012) , እና Rosenbaum (2002) , Rosenbaum (2009) , እና Shadish, Cook, and Campbell (2001) ሙከራዎች ያለ በሲጋራና ውጤት ለመገመት ጥሩ ሐሳቦች ያቀርባሉ.

ሁለተኛው R (ማሻሻያ) አንፃር, ልጥፎች ለማሳደግ ወደ ልጥፎች ማገድ ከ የስሜት ወረርሽኝ ንድፍ መለወጥ ከግምት ጊዜ ሳይንሳዊ እና የሎጂስቲክ የንግድ ያዝነበለ አሉ. ለምሳሌ ያህል, ይህ ዜና መጋቢ ቴክኒካዊ አተገባበር ልጥፎች ለማሳደግ ጋር ሙከራ ይልቅ ልጥፎች ማገድ ጋር ሙከራ ለማድረግ በከፍተኛ ቀላል ነው የሚያደርገው ጉዳይ ሊሆን ይችላል (ልጥፎች ማገድ ጋር ሙከራ ላይ ንብርብር ሆኖ ተግባራዊ ሊሆን እንደሚችል ልብ ይበሉ የችግሩን መንስኤ ሥርዓት ላይ ለውጥ) ማንኛውም አስፈላጊነት ያለ ዜና መጋቢ ስርዓት ላይኛው. ከሳይንስ, ይሁን እንጂ ሙከራ በማድረግ ለመፍታት ጽንሰ ሐሳብ በግልጽ በሌላ ላይ አንድ ንድፍ ሀሳብ ነበር.

መጥፎ አጋጣሚ ሆኖ, እኔ ማገድ እና ዜና ምግብ ይዘት ለማሳደግ ያለውን አንጻራዊ ልንመረምረው በተመለከተ ሰፊ በፊት ምርምር ዐዋቂ አይደለሁም. በተጨማሪም; እኔም በእነርሱ ያነሰ ጎጂ ለማድረግ ህክምና ማጣራት ብዙ ምርምር አላየንም; አንድ ለየት ያለ ነው Jones and Feamster (2015) የኢንተርኔት ሳንሱር መለካት ሁኔታ ያብራራል ይህም (እኔ Encore ጥናት ግንኙነት ምዕራፍ 6 ላይ ውይይት ርዕስ (Burnett and Feamster 2015; Narayanan and Zevenbergen 2015) ).

ሦስተኛው R (ቅነሳ) አንፃር, ባህላዊ ኃይል ትንተና ጥሩ መግቢያ ነው Cohen (1988) . ቅድመ-ሕክምና covariates ንድፍ ደረጃ እና ሙከራዎች ላይ ትንተና ደረጃ ውስጥ ሊካተቱ ይችላሉ; ምዕራፍ 4 Gerber and Green (2012) ሁለቱንም አቀራረቦች ጥሩ መግቢያ ያቀርባል, እና Casella (2008) ይበልጥ ጥልቀት ያለው ህክምና ይሰጣል. በ randomization ውስጥ ይህ ቅድመ-ሕክምና መረጃ የሚጠቀሙ ዘዴዎች በተለምዶ ወይም የሙከራ ንድፍ ወይም ወጋቸውና የሙከራ ንድፍ (ጠበብቶች ማህበረሰቦች በመላው በወጥነት ጥቅም አይደለም) ታግደዋል ተጠርተናል; እነዚህ ዘዴዎች በጥልቅ ምዕራፍ 3 ተመልከት ውስጥ የቀረቡት ወጋቸውና ናሙና ዘዴዎች ጋር የሚዛመዱ Higgins, Sävje, and Sekhon (2016) ግዙፍ ሙከራዎች ውስጥ ንድፍ መጠቀም ላይ ተጨማሪ ነው. ቅድመ-ሕክምና covariates ደግሞ ትንተና ደረጃ ውስጥ ሊካተቱ ይችላሉ. McKenzie (2012) በዝርዝር የመስክ ሙከራዎችን በመተንተን ወደ ልዩነት-በ-ልዩነት አቀራረብ ይዳስሳል. ተመልከት Carneiro, Lee, and Wilhelm (2016) የሕክምና ውጤቶች ግምት ውስጥ ዝንፍ ለማሳደግ የተለያዩ አቀራረቦች መካከል ያለውን የንግድ ያዝነበለ ላይ ተጨማሪ. ዲዛይን ወይም ትንተና ደረጃ (ወይም ሁለቱም) ላይ ቅድመ-ሕክምና covariates ለማካተት መሞከር ስንወስን በመጨረሻም, እስቲ ጥቂት ነገሮች አሉ. ተመራማሪዎች "ዓሣ የማጥመድ" እንዳልሆኑ ለማሳየት የሚፈልጉ ቦታ ቅንብር ውስጥ (Humphreys, Sierra, and Windt 2013) , ጠቃሚ ሊሆን ይችላል ንድፍ ደረጃ ላይ ቅድመ-ሕክምና covariates በመጠቀም (Higgins, Sävje, and Sekhon 2016) . ተሳታፊዎች, በቅደም ተከተል መድረስ logistically አስቸጋሪ ሊሆን ይችላል ንድፍ ደረጃ ላይ ቅድመ-ሕክምና መረጃ በመጠቀም በተለይ የመስመር ላይ የመስክ ሙከራዎች, የት ሁኔታዎች ውስጥ, ለምሳሌ ያህል ማየት Xie and Aurisset (2016) .

ይህ ልዩነት--ልዩነቶች ውስጥ ልዩነት-በ-አማካኝነት ይልቅ እጅግ የበለጠ ውጤታማ ሊሆን ይችላል ለምን የስሜት አንድ ትንሽ ማከል ተገቢ ነው. ብዙ የመስመር ላይ ውጤት በጣም ከፍተኛ ልዩነት አላቸው (see ለምሳሌ, Lewis and Rao (2015) እና Lamb et al. (2015) ) እና ከጊዜ ወደ ጊዜ በአንጻራዊ ሁኔታ የተረጋጋ ናቸው. በዚህ ሁኔታ, ለውጡ ነጥብ ስታስቲካዊ ፈተና ኃይል እየጨመረ, በከፍተኛ ትናንሽ ልዩነቶች አላቸው. ይህ ብዙ ጊዜ ጥቅም ላይ አይደለም ቀርበው አንዱ ምክንያት ወደ የዲጂታል ዘመን በፊት ይህ ቅድመ-ሕክምና ውጤት ሊኖራቸው የተለመደ አይደለም መሆኑ ነው. ስለ ጉዳዩ ማሰብ ይበልጥ ተጨባጭ መንገድ አንድ የተወሰነ የአካል ብቃት እንቅስቃሴ ክብደት መቀነስ ያስከትላል እንደሆነ ለመለካት ሙከራ መገመት ነው. አንድ ልዩነት-በ-አማካኝነት አቀራረብ ማድረግ ከሆነ, እባክዎ ግምት በሕዝብ ውስጥ መለኪያዎች ውስጥ ተለዋዋጭነት የሚመጣው መለዋወጥ ይኖረናል. አንድ ልዩነት-በ-ልዩነት አቀራረብ የምናደርግ ከሆነ, ይሁን እንጂ, ክብደት ውስጥ በተፈጥሮ ልዩነት የሚወገድ እና ይበልጥ በቀላሉ ሕክምና ምክንያት ልዩነት መለየት ይችላሉ.

የእርስዎ ሙከራ ውስጥ የተሳታፊዎች ብዛት ለመቀነስ አንዱ ወሳኝ መንገድ ክሬመር እና የሥራ ባልደረቦቹ በማድረግ የተፈጥሮ ሙከራ ጀምሬ ጠብቄአለሁ ውጤት መጠኖች ላይ የተመሠረተ ማድረግ ይችል የነበረ ኃይል ትንተና, መምራት ነው Coviello et al. (2014) ወይም ክሬመር ያልሆኑ የሙከራ ምርምር ቀደም ሲል (2012) (እንዲያውም እነዚህ ነገሮች በዚህ ምዕራፍ መጨረሻ ላይ ተግባራት ናቸው). ኃይል ትንተና ይህን መጠቀም የተለመደ ይልቅ ትንሽ ለየት ያለ ነው ልብ በል. ከአናሎግ ዕድሜ ውስጥ, ተመራማሪዎች በአብዛኛው ጥናት በጣም ትንሽ እንዳልሆነ እርግጠኛ ለማድረግ ኃይል ትንተና ነበር (ማለትም, ሥር-ሃይል). አሁን ግን, ተመራማሪዎች ማጥናት በጣም ትልቅ አይደለም መሆኑን ለማረጋገጥ ኃይል ትንተና ማድረግ አለበት (ማለትም, በላይ ሃይል).

Repurpose: በመጨረሻም, እኔ አራተኛ R ማከል ላይ ተመልክተናል. ይህ ደግሞ በመጀመሪያው ምርምር ጥያቄ ማንሳታችን በላይ ተመራማሪዎች ይበልጥ የሙከራ ውሂብ ጋር ራሳቸውን ማግኘት ከሆነ, አዳዲስ ጥያቄዎች መጠየቅ ውሂብ repurpose የለበትም. ለምሳሌ ያህል, ክሬመር እና ባልደረቦቻቸው የምርምር ጥያቄ መልስ ያስፈልጋል በላይ ተጨማሪ ውሂብ ጋር ራሳቸውን ልዩነት-በ-ልዩነት estimator ጥቅም ላይ አልተገኘም ነበር እንበል. ከዚህ ይልቅ ሙሉ በሙሉ ያህል ወደ ውሂብ በመጠቀም አይደለም ይልቅ, እነሱ የስሜት አገላለጽ-ሕክምና የቅድመ ተግባር እንደ ውጤት መጠን ላይ ጥናት ይችል ነበር. ልክ እንደ Schultz et al. (2007) ሕክምና ውጤት ምናልባትም ዜና ምግብ ውጤቶች አሁን ደስተኛ (ወይም አሳዛኝ) መልዕክቶችን ለመለጠፍ በማድረግ አዘንብለዋል ሰዎች የተለዩ ነበሩ, ቀላል እና ከባድ ተጠቃሚዎች የተለየ እንደሆነ አልተገኘም. "ዓሣ የማጥመድ" ሊያስከትል ይችላል Repurposing (Humphreys, Sierra, and Windt 2013) እና "ገጽ-ለጠለፋ" (Simmons, Nelson, and Simonsohn 2011) , ነገር ግን እነዚህ በአብዛኛው ሐቀኛ ሪፖርት ጥምረት ጋር addressable ነው (Simmons, Nelson, and Simonsohn 2011) , ቅድመ-ምዝገባ (Humphreys, Sierra, and Windt 2013) , እና ከዚያ በላይ-ተገቢ ለማስወገድ የሚሞክሩትንም የማሽን መማሪያ ዘዴ.