4.4 सरल प्रयोगों से परे चल रहा

आइए सरल प्रयोगों से आगे बढ़ें। समृद्ध प्रयोगों के लिए तीन अवधारणाएं उपयोगी हैं: वैधता, उपचार प्रभावों की विषमता, और तंत्र।

प्रयोगकर्ताओं जो प्रयोगों के लिए नए हैं अक्सर एक बहुत ही विशिष्ट, संकीर्ण प्रश्न पर ध्यान केंद्रित करते हैं: क्या यह उपचार "काम" करता है? उदाहरण के लिए, क्या एक स्वयंसेवक से एक फोन कॉल किसी को मतदान करने के लिए प्रोत्साहित करता है? नीले से हरे रंग के वेबसाइट बटन को क्लिक-थ्रू दर में वृद्धि करता है? दुर्भाग्यवश, "काम करता है" के बारे में ढीला वाक्यांश इस तथ्य को अस्पष्ट करता है कि संकीर्ण रूप से केंद्रित प्रयोग वास्तव में आपको नहीं बताते हैं कि कोई इलाज सामान्य रूप से "काम करता है"। इसके बजाय, संकीर्ण रूप से केंद्रित प्रयोगों का जवाब एक और अधिक विशिष्ट प्रश्न का उत्तर देता है: इस समय प्रतिभागियों की इस आबादी के लिए इस विशिष्ट कार्यान्वयन के साथ इस विशिष्ट उपचार का औसत प्रभाव क्या है? मैं उन प्रयोगों को बुलाऊंगा जो इस संकीर्ण प्रश्न पर सरल प्रयोगों पर ध्यान केंद्रित करते हैं।

सरल प्रयोग मूल्यवान जानकारी प्रदान कर सकते हैं, लेकिन वे कई प्रश्नों का उत्तर देने में विफल रहते हैं जो महत्वपूर्ण और रोचक दोनों हैं, जैसे कि कुछ ऐसे लोग हैं जिनके लिए उपचार का बड़ा या छोटा प्रभाव पड़ा; क्या कोई और उपचार है जो अधिक प्रभावी होगा; और क्या यह प्रयोग व्यापक सामाजिक सिद्धांतों से संबंधित है।

सरल प्रयोगों से आगे बढ़ने के मूल्य को दिखाने के लिए, आइए सामाजिक मानदंडों और ऊर्जा खपत (Schultz et al. 2007) के बीच संबंधों पर पी। वेस्ले शल्ट्ज और सहयोगियों द्वारा एनालॉग फील्ड प्रयोग पर विचार करें। शल्ट्ज़ और सहयोगियों ने सैन मार्कोस, कैलिफ़ोर्निया में 300 घरों पर दरवाजे पर लटका दिया, और इन दरवाजेदारों ने ऊर्जा संरक्षण को प्रोत्साहित करने के लिए डिज़ाइन किए गए विभिन्न संदेशों को वितरित किया। फिर, Schultz और सहयोगियों ने एक सप्ताह के बाद और तीन हफ्तों के बाद बिजली की खपत पर इन संदेशों के प्रभाव को मापा; प्रयोगात्मक डिजाइन के एक और विस्तृत विवरण के लिए आंकड़ा 4.3 देखें।

चित्रा 4.3: Schultz et al से प्रयोगात्मक डिजाइन के योजनाबद्ध। (2007)। क्षेत्रीय प्रयोग में सैन मार्कोस, कैलिफ़ोर्निया में लगभग 300 घरों में आठ सप्ताह की अवधि में पांच गुना शामिल थे। प्रत्येक यात्रा पर, शोधकर्ताओं ने मैन्युअल रूप से घर के बिजली मीटर से एक पठन लिया। दो यात्राओं पर, उन्होंने घर के ऊर्जा उपयोग के बारे में कुछ जानकारी प्रदान करते हुए प्रत्येक घर पर दरवाजे लगाए। शोध प्रश्न यह था कि इन संदेशों की सामग्री ऊर्जा उपयोग को कैसे प्रभावित करेगी।

चित्रा 4.3: Schultz et al. (2007) से प्रयोगात्मक डिजाइन के योजनाबद्ध Schultz et al. (2007) । क्षेत्रीय प्रयोग में सैन मार्कोस, कैलिफ़ोर्निया में लगभग 300 घरों में आठ सप्ताह की अवधि में पांच गुना शामिल थे। प्रत्येक यात्रा पर, शोधकर्ताओं ने मैन्युअल रूप से घर के बिजली मीटर से एक पठन लिया। दो यात्राओं पर, उन्होंने घर के ऊर्जा उपयोग के बारे में कुछ जानकारी प्रदान करते हुए प्रत्येक घर पर दरवाजे लगाए। शोध प्रश्न यह था कि इन संदेशों की सामग्री ऊर्जा उपयोग को कैसे प्रभावित करेगी।

प्रयोग में दो स्थितियां थीं। सबसे पहले, घरों को सामान्य ऊर्जा-बचत युक्तियाँ मिलीं (उदाहरण के लिए, एयर कंडीशनर के बजाए प्रशंसकों का उपयोग करें) और उनके पड़ोस में औसत ऊर्जा उपयोग की तुलना में उनके ऊर्जा उपयोग के बारे में जानकारी। शल्ट्ज़ और सहयोगियों ने इसे वर्णनात्मक मानक स्थिति कहा क्योंकि पड़ोस में ऊर्जा उपयोग के बारे में जानकारी ने सामान्य व्यवहार (यानी, एक वर्णनात्मक मानदंड) के बारे में जानकारी प्रदान की। जब शल्ट्ज़ और सहयोगियों ने इस समूह में परिणामी ऊर्जा उपयोग को देखा, तो उपचार को कम या दीर्घ अवधि में कोई प्रभाव नहीं पड़ा; दूसरे शब्दों में, उपचार "काम" नहीं लग रहा था (आंकड़ा 4.4)।

सौभाग्य से, Schultz और सहयोगियों ने इस सरल विश्लेषण के लिए व्यवस्थित नहीं किया था। प्रयोग शुरू होने से पहले, उन्होंने तर्क दिया कि बिजली के भारी उपयोगकर्ता-अर्थ से ऊपर के लोग अपनी खपत को कम कर सकते हैं, और बिजली के हल्के उपयोगकर्ता-अर्थ के नीचे लोगों को वास्तव में उनकी खपत में वृद्धि हो सकती है। जब उन्होंने डेटा को देखा, तो उन्हें वही मिला जो उन्होंने पाया (चित्र 4.4)। इस प्रकार, जो उपचार नहीं हुआ था, वह वास्तव में एक ऐसा उपचार था जिस पर दो ऑफसेटिंग प्रभाव थे। प्रकाश उपयोगकर्ताओं के बीच यह प्रतिकूल वृद्धि एक बुमेरांग प्रभाव का एक उदाहरण है, जहां एक उपचार के उद्देश्य से विपरीत प्रभाव हो सकता है।

चित्रा 4.4: Schultz et al से परिणाम। (2007)। पैनल (ए) से पता चलता है कि वर्णनात्मक मानक उपचार का अनुमानित औसत औसत औसत प्रभाव है। हालांकि, पैनल (बी) से पता चलता है कि यह औसत उपचार प्रभाव वास्तव में दो ऑफसेटिंग प्रभावों से बना है। भारी उपयोगकर्ताओं के लिए, उपचार में कमी आई लेकिन हल्के उपयोगकर्ताओं के लिए, उपचार में वृद्धि हुई। अंत में, पैनल (सी) से पता चलता है कि दूसरा उपचार, जो वर्णनात्मक और निषेधात्मक मानदंडों का उपयोग करता था, भारी उपयोगकर्ताओं पर लगभग समान प्रभाव पड़ा था लेकिन हल्के उपयोगकर्ताओं पर बूमरंग प्रभाव को कम करता था। Schultz et al से अनुकूलित। (2007)।

चित्रा 4.4: Schultz et al. (2007) से परिणाम Schultz et al. (2007) । पैनल (ए) से पता चलता है कि वर्णनात्मक मानक उपचार का अनुमानित औसत औसत औसत प्रभाव है। हालांकि, पैनल (बी) से पता चलता है कि यह औसत उपचार प्रभाव वास्तव में दो ऑफसेटिंग प्रभावों से बना है। भारी उपयोगकर्ताओं के लिए, उपचार में कमी आई लेकिन हल्के उपयोगकर्ताओं के लिए, उपचार में वृद्धि हुई। अंत में, पैनल (सी) से पता चलता है कि दूसरा उपचार, जो वर्णनात्मक और निषेधात्मक मानदंडों का उपयोग करता था, भारी उपयोगकर्ताओं पर लगभग समान प्रभाव पड़ा था लेकिन हल्के उपयोगकर्ताओं पर बूमरंग प्रभाव को कम करता था। Schultz et al. (2007) से अनुकूलित Schultz et al. (2007)

पहली शर्त के साथ-साथ, शल्ट्ज़ और सहयोगियों ने भी दूसरी शर्त चलायी। दूसरी स्थिति में घरों को सटीक वही उपचार-सामान्य ऊर्जा-बचत युक्तियाँ और उनके पड़ोस के औसत के मुकाबले अपने घर के ऊर्जा उपयोग के बारे में जानकारी मिली - एक छोटे से जोड़े के साथ: औसत उपभोग वाले लोगों के लिए, शोधकर्ताओं ने एक जोड़ा: ) और उपरोक्त औसत खपत वाले लोगों के लिए उन्होंने एक जोड़ा :(। इन इमोटिकॉन्स को शोधकर्ताओं को निषेधात्मक मानदंडों को ट्रिगर करने के लिए डिज़ाइन किया गया था। संयोग मानदंड सामान्यतः अनुमोदित (और अस्वीकृत) की धारणाओं को संदर्भित करते हैं, जबकि वर्णनात्मक मानदंडों की धारणाओं को संदर्भित किया जाता है आमतौर पर क्या किया जाता है (Reno, Cialdini, and Kallgren 1993)

इस छोटे से इमोटिकॉन को जोड़कर, शोधकर्ताओं ने नाटकीय रूप से बुमेरांग प्रभाव को कम किया (आंकड़ा 4.4)। इस प्रकार, इसे एक साधारण परिवर्तन करके - एक परिवर्तन जो एक अमूर्त सामाजिक मनोवैज्ञानिक सिद्धांत (Cialdini, Kallgren, and Reno 1991) द्वारा प्रेरित था - शोधकर्ता एक ऐसे कार्यक्रम को बदलने में सक्षम थे जो काम करने वाले व्यक्ति में काम नहीं कर रहा था, और, साथ ही, वे सामान्य मानदंडों में योगदान देते हैं कि सामाजिक मानदंड मानव व्यवहार को कैसे प्रभावित करते हैं।

इस बिंदु पर, हालांकि, आप देख सकते हैं कि इस प्रयोग के बारे में कुछ अलग है। विशेष रूप से, शल्ट्ज़ और सहयोगियों के प्रयोग में वास्तव में एक नियंत्रण समूह नहीं होता है, जिस तरह यादृच्छिक नियंत्रित प्रयोग करते हैं। इस डिजाइन और रेस्टिवो और वैन डी रिजेट के बीच तुलना दो प्रमुख प्रयोगात्मक डिज़ाइनों के बीच अंतर को दर्शाती है। बीच-विषयों के डिज़ाइनों में , जैसे कि रेस्टिवो और वैन डी रिजट, एक उपचार समूह और नियंत्रण समूह है। दूसरी तरफ, विषयों के डिजाइन में , प्रतिभागियों का व्यवहार उपचार से पहले और बाद में तुलना की जाती है (Greenwald 1976; Charness, Gneezy, and Kuhn 2012) । एक विषय-वस्तु प्रयोग में ऐसा लगता है कि प्रत्येक प्रतिभागी अपने नियंत्रण समूह के रूप में कार्य करता है। विषयों के बीच की ताकत यह है कि वे confounders (जैसा कि मैंने पहले वर्णित किया गया है) के खिलाफ सुरक्षा प्रदान करते हैं, जबकि भीतर विषयों के प्रयोगों की ताकत अनुमानों की सटीकता में वृद्धि हुई है। आखिरकार, एक विचार को पूर्ववत करने के लिए जो बाद में आएगा जब मैं डिजिटल प्रयोगों को डिजाइन करने के बारे में सलाह देता हूं, एक मिश्रित डिज़ाइन_-विषयों के डिजाइन की बेहतर परिशुद्धता और विषयों के डिजाइन (आकृति 4.5) को उलझाने के खिलाफ सुरक्षा को नियंत्रित करता है।

चित्रा 4.5: तीन प्रयोगात्मक डिजाइन। मानक यादृच्छिक नियंत्रित प्रयोगों के बीच विषयों के डिजाइन का उपयोग करें। बीच-विषयों के डिजाइन का एक उदाहरण रेस्टिवो और वैन डी रिजेट्स (2012) बर्नस्टार पर योगदान और विकिपीडिया में योगदान: शोधकर्ताओं ने यादृच्छिक रूप से प्रतिभागियों को उपचार और नियंत्रण समूहों में बांटा, उपचार समूह में प्रतिभागियों को एक बार्नस्टार दिया, और परिणामों की तुलना में दो समूह दूसरा प्रकार का डिज़ाइन एक विषय-वस्तु डिज़ाइन है। Schultz और सहयोगियों '(2007) में दो प्रयोगों में सामाजिक मानदंडों और ऊर्जा उपयोग पर अध्ययन एक विषयों के डिजाइन को चित्रित करता है: शोधकर्ताओं ने उपचार प्राप्त करने से पहले और बाद में प्रतिभागियों के बिजली के उपयोग की तुलना की। भीतर के विषयों के डिजाइन में सांख्यिकीय परिशुद्धता में सुधार होता है, लेकिन वे संभावित confounders (उदाहरण के लिए, पूर्व उपचार और उपचार अवधि के बीच मौसम में परिवर्तन) (ग्रीनवाल्ड 1 9 76; चेरनेस, गीनी, और कुह्न 2012) के लिए खुले हैं। भीतर के विषयों के डिजाइन को कभी-कभी दोहराए गए उपायों के डिजाइन भी कहा जाता है। अंत में, मिश्रित डिज़ाइन भीतर-विषयों के डिजाइनों और बीच-विषयों के डिजाइनों को उलझाने के खिलाफ सुरक्षा के बेहतर परिशुद्धता को जोड़ते हैं। एक मिश्रित डिजाइन में, एक शोधकर्ता उपचार और नियंत्रण समूहों के लोगों के परिणामों में परिवर्तन की तुलना करता है। जब शोधकर्ताओं के पास पहले से ही पूर्व-उपचार की जानकारी होती है, जैसा कि कई डिजिटल प्रयोगों में होता है, मिश्रित डिज़ाइन आम तौर पर विषयों के डिजाइन के लिए बेहतर होते हैं क्योंकि परिणामस्वरूप अनुमानों में सुधार हुआ है।

चित्रा 4.5: तीन प्रयोगात्मक डिजाइन। मानक यादृच्छिक नियंत्रित प्रयोगों के बीच विषयों के डिजाइन का उपयोग करें। बीच-विषयों के डिजाइन का एक उदाहरण रेस्टिवो और वैन डी रिजेट्स (2012) बर्नस्टार पर योगदान और विकिपीडिया में योगदान: शोधकर्ताओं ने यादृच्छिक रूप से प्रतिभागियों को उपचार और नियंत्रण समूहों में बांटा, उपचार समूह में प्रतिभागियों को एक बार्नस्टार दिया, और परिणामों की तुलना में दो समूह दूसरा प्रकार का डिज़ाइन एक विषय-वस्तु डिज़ाइन है। Schultz और सहयोगियों ' (2007) में दो प्रयोगों में सामाजिक मानदंडों और ऊर्जा उपयोग पर अध्ययन एक विषयों के डिजाइन को चित्रित करता है: शोधकर्ताओं ने उपचार प्राप्त करने से पहले और बाद में प्रतिभागियों के बिजली के उपयोग की तुलना की। भीतर के विषयों के डिजाइन में सांख्यिकीय परिशुद्धता में सुधार होता है, लेकिन वे संभावित confounders (उदाहरण के लिए, पूर्व उपचार और उपचार अवधि के बीच मौसम में परिवर्तन) (Greenwald 1976; Charness, Gneezy, and Kuhn 2012) । भीतर के विषयों के डिजाइन को कभी-कभी दोहराए गए उपायों के डिजाइन भी कहा जाता है। अंत में, मिश्रित डिज़ाइन भीतर-विषयों के डिजाइनों और बीच-विषयों के डिजाइनों को उलझाने के खिलाफ सुरक्षा के बेहतर परिशुद्धता को जोड़ते हैं। एक मिश्रित डिजाइन में, एक शोधकर्ता उपचार और नियंत्रण समूहों के लोगों के परिणामों में परिवर्तन की तुलना करता है। जब शोधकर्ताओं के पास पहले से ही पूर्व-उपचार की जानकारी होती है, जैसा कि कई डिजिटल प्रयोगों में होता है, मिश्रित डिज़ाइन आम तौर पर विषयों के डिजाइन के लिए बेहतर होते हैं क्योंकि परिणामस्वरूप अनुमानों में सुधार हुआ है।

कुल मिलाकर, Schultz और सहयोगियों (2007) द्वारा अध्ययन के डिजाइन और परिणाम सरल प्रयोगों से आगे बढ़ने का मूल्य दिखाते हैं। सौभाग्य से, आपको इस तरह के प्रयोगों को डिजाइन करने के लिए एक रचनात्मक प्रतिभा होने की आवश्यकता नहीं है। सामाजिक वैज्ञानिकों ने तीन अवधारणाओं को विकसित किया है जो आपको अमीर प्रयोगों की दिशा में मार्गदर्शन करेंगे: (1) वैधता, (2) उपचार प्रभावों की विषमता, और (3) तंत्र। यही है, यदि आप अपने प्रयोग को डिजाइन करते समय इन तीन विचारों को ध्यान में रखते हैं, तो आप स्वाभाविक रूप से एक और अधिक रोचक और उपयोगी प्रयोग करेंगे। कार्रवाई में इन तीन अवधारणाओं को चित्रित करने के लिए, मैं कई अनुवर्ती आंशिक रूप से डिजिटल फ़ील्ड प्रयोगों का वर्णन करूंगा जो शल्ट्ज़ और सहयोगियों (2007) के सुरुचिपूर्ण डिजाइन और रोमांचक परिणामों पर आधारित हैं। जैसा कि आप देखेंगे, अधिक सावधानीपूर्वक डिजाइन, कार्यान्वयन, विश्लेषण और व्याख्या के माध्यम से, आप भी सरल प्रयोगों से आगे बढ़ सकते हैं।