4.6.2 बदली करा, शुद्ध, आणि कमी

नॉन-प्रायोगिक अभ्यास प्रयोग बदली उपचार परिष्कृत, आणि सहभागी संख्या कमी करून आपला प्रयोग अधिक मानवी करा.

मी डिजिटल प्रयोग रचना बद्दल ऑफर करू इच्छित की सल्ला दुसरा तुकडा आचारसंहिता निगडीत आहे. म्हणून विकिपीडिया शो मध्ये barnstars वर Restivo आणि डी Rijt प्रयोग, खर्च कमी आचारसंहिता संशोधन रचना एक वाढत्या महत्त्वाचा भाग बनले अर्थ असा की. प्राणी समावेश प्रयोग मार्गदर्शन करण्यासाठी विकसित नैतिक तत्त्वे: मी 6 व्या अध्यायात वर्णन करू मानवी विषय संशोधन मार्गदर्शन नैतिक फ्रेमवर्क व्यतिरिक्त, डिजिटल प्रयोग रचना संशोधक देखील वेगळ्या स्रोत पासून नैतिक कल्पना काढू शकता. विशेषतः, ह्यूमेन प्रायोगिक तंत्र त्यांच्या शेताची हद्द दाखवणारी खूण पुस्तक तत्त्वे Russell and Burch (1959) बदली करा, शुद्ध, आणि कमी: प्राणी संशोधन मार्गदर्शन करावे तीन तत्व दिले आहे. मानवी प्रयोग रचना-फॉर्म मार्गदर्शन मी या तीन आर चे देखील वापरले-मध्ये एक किंचित सुधारित केले जाऊ शकतात, असे आवडेल. विशेषतः,

  • पुनर्स्थित करा: शक्य असेल तर कमी हल्ल्याचा पद्धती प्रयोग बदला
  • परिष्कृत शक्य तितके निरुपद्रवी म्हणून करण्यासाठी उपचार अचूक
  • कमी: शक्य तितकी आपला प्रयोग सहभागी संख्या कमी

या तीन आर सिमेंट करा आणि ते संभाव्य चांगले आणि अधिक मानवी आणि प्रायोगिक डिझाइन होऊ शकते कसे दर्शविण्यासाठी, मी नैतिक वादविवाद निर्माण ऑनलाइन क्षेत्रात प्रयोग वर्णन करू. मग मी तीन आर च्या प्रयोग रचना करण्यासाठी ठोस आणि व्यावहारिक बदल सुचविण्यासाठी कसे वर्णन करू.

सर्वात नैतिकदृष्ट्या चर्चा डिजिटल क्षेत्रात एक प्रयोग आदाम Kramer, जेमी Gillroy, आणि जेफ्री सांगता द्वारे आयोजित करण्यात आले जे "भावनिक संसर्ग," आहे (2014) . प्रयोग Facebook वर स्थान घेतले आणि त्यांनी शास्त्रशुद्ध व व्यावहारिक प्रश्न मिश्रण प्रवृत्त होते. वेळ, वापरकर्त्यांना फेसबुक संवाद साधला की हाती सत्ता असलेला प्रबळ मार्ग बातम्या फीड, वापरकर्त्याचे Facebook मित्र फेसबुक स्थिती अद्यतने एक अल्गोरिदमपणे काढलेल्या केली होती. फेसबुक काही समीक्षक बातम्या फीड मुख्यतः सकारात्मक त्यांच्या नवीनतम दाखविणे पोस्ट-मित्र आहे, कारण की पक्ष-त्याचा त्यांच्या जीवनावर तुलनेत कमी रोमांचक वाटते कारण वापरकर्ते दुःखी वाटत होऊ शकते सुचवले होते. दुसरीकडे, कदाचित परिणाम अगदी उलट आहे; कदाचित आपल्या मित्र एक चांगली वेळ आपण आनंदी वाटत होईल, तेव्हा? पत्ता करण्यासाठी या स्पर्धा गृहीत धरलेली गोष्ट आणि एक प्रयोग एक व्यक्ती भावना तिचे मित्र 'प्रभाव आहात कसे आपली समज सरसावणे भावना-Kramer आणि सहकारी संपली. संशोधक चार गट बद्दल 700,000 वापरकर्ते ठेवलेल्या एक आठवडा: एक "नकारात्मकता कमी" गट, नकारात्मक शब्द (उदा, दु: खी) सहजगत्या बातम्या फीड दिसणारी अवरोधित केलेले होते ज्यांच्याकडे पोस्ट; एक "सकारात्मकता कमी" त्या सकारात्मक शब्द (उदा, आनंदी) सह पोस्ट सहजगत्या अवरोधित केलेले होते गट; आणि दोन नियंत्रण गट. "नकारात्मकता कमी" गट नियंत्रण समूहात, पोस्ट सहजगत्या "नकारात्मकता कमी" गट म्हणून पण भावनिक सामग्री संबंधित न करता समान दराने अवरोधित केलेले होते. "सकारात्मकता कमी" गट नियंत्रण गट समांतर फॅशन बांधण्यात आले. हा प्रयोग रचना योग्य नियंत्रण गट नेहमी बदल नाही आहे की स्पष्ट होते. उलट, कधी कधी कंट्रोल ग्रूप तंतोतंत तुलना तयार करण्यासाठी एक संशोधन प्रश्न आवश्यक क्रमाने एक उपचार प्राप्त. सर्व प्रकरणांमध्ये, बातम्या फीड पासून अवरोधित पोस्ट्स फेसबुक वेबसाइट इतर भाग माध्यमातून वापरकर्त्यांसाठी उपलब्ध होते.

Kramer आणि सहकारी साठी सकारात्मकता सहभागी अट कमी त्यांची स्थिती सुधारणा सकारात्मक शब्द टक्केवारी कमी आणि नकारात्मक शब्द टक्केवारी वाढली असे आढळले. दुसरीकडे, नकारात्मकता कमी स्थितीत सहभागी, सकारात्मक शब्द टक्केवारी वाढली आणि नकारात्मक शब्द टक्केवारी कमी (आकृती 4.23). तथापि, या प्रभाव जोरदार लहान होते: उपचार आणि नियंत्रणे दरम्यान सकारात्मक आणि नकारात्मक शब्दांत फरक 1 1000 शब्द होते.

आकृती 4.23: भावनिक संसर्ग पुरावा (Kramer, Guillory, आणि सांगता 2014). सकारात्मक शब्द आणि प्रायोगिक स्थिती नकारात्मक शब्द टक्केवारी. बार मानक चुका अंदाज सादर.

आकृती 4.23: भावनिक संसर्ग पुरावा (Kramer, Guillory, and Hancock 2014) . सकारात्मक शब्द आणि प्रायोगिक स्थिती नकारात्मक शब्द टक्केवारी. बार मानक चुका अंदाज सादर.

मी प्रकरणा या शेवटी अधिक वाचनासाठी विभागात हा प्रयोग शास्त्रीय पैलू चर्चा ठेवले आहे, पण दुर्दैवाने, हा प्रयोग नैतिक वादविवाद निर्माण करण्यासाठी सर्वात ज्ञात आहे. हा पेपर नॅशनल ऍकॅडमी ऑफ सायन्सेस कामकाज मध्ये प्रकाशित झाले फक्त दिवसांनी, संशोधक आणि प्रेस दोन्ही एक प्रचंड आरडाओरड होती. 1) सहभागी काही विचार 2) अभ्यास घडून नव्हते तृतीय-पक्ष नैतिक सहभागी हानी होऊ आणि यासाठी की, उपचार मानक फेसबुक अटी-ऑफ-सेवा पलीकडे कोणत्याही संमती प्रदान नाही: दोन मुख्य मुद्दे लक्ष केंद्रित कागद सुमारे बलात्कार पुनरावलोकन (Grimmelmann 2015) . या वादविवाद असण्याचा नैतिक प्रश्न जर्नल लवकर संशोधन आचारसंहिता आणि नैतिक पुनरावलोकन प्रक्रियेबद्दल एक दुर्मिळ "चिंता संपादकीय अभिव्यक्ती" प्रकाशित झाले (Verma 2014) . त्यानंतरच्या वर्षांमध्ये, प्रयोग प्रखर वादविवाद आणि भांडण एक स्रोत चालू आहे, आणि हे भांडण सावल्या इतर अनेक प्रयोग कंपन्यांनी जात आहेत त्या मध्ये वाहनचालक अनपेक्षित परिणाम होता असावे (Meyer 2014) .

भावनिक संसर्ग बद्दल की पार्श्वभूमी दिले, मी आता 3 आर सिमेंट, रिअल अभ्यास व्यावहारिक सुधारणा (जे आपण स्वतः या विशिष्ट प्रयोग आचारसंहिता विचार शकते) सूचित करू शकता, हे दाखवण्यासाठी आवडेल. पहिल्या आर बदला आहे: संशोधक, शक्य असल्यास कमी हल्ल्याचा आणि धोकादायक तंत्र प्रयोग पुनर्स्थित घ्यावी. उदाहरणार्थ, ऐवजी एक प्रयोग चालवत पेक्षा, संशोधक एक नैसर्गिक प्रयोग शोषण असू शकते. Chapter 2 मध्ये वर्णन केल्याप्रमाणे, नैसर्गिक प्रयोग (उदा, लष्करी मध्ये तयार होईल निर्णय लॉटरी) जेथे काहीतरी उपचार यादृच्छिक नेमणूक approximates की जगात घडते घटनांमध्ये आहेत. एक नैसर्गिक प्रयोग फायदा संशोधक उपचार वितरीत करण्यासाठी नाही आहे; पर्यावरण आपण काही नाही. दुसऱ्या शब्दांत, एक नैसर्गिक प्रयोग, संशोधक प्रायोगिक लोकांच्या बातम्या हाताळू आवश्यक नसते.

खरं तर, भावनिक संसर्ग प्रयोग जवळजवळ स्वतंत्ररित्या, Coviello et al. (2014) एक भावनिक संसर्ग नैसर्गिक प्रयोग म्हटले जाऊ शकते काय शोषण होते. त्यांच्या दृष्टिकोन, इंस्ट्रूमेंटल चल नावाची तंत्रज्ञानाचा वापर, जे आपण आधी हे पाहिली आहे तर थोडा क्लिष्ट आहे. इतका, तो आवश्यकता होती का, हे स्पष्ट करण्यासाठी, च्या वर तयार करू देतात. काही संशोधक भावनिक संसर्ग अभ्यास आहे, यासाठी की प्रथम कल्पना दिवस बातम्या फीड अतिशय नकारात्मक होते जेथे आपल्या बातम्या फीड दिवशी आपल्या पोस्टशी अतिशय सकारात्मक होते जेथे आपल्या पोस्ट तुलना होईल. ध्येय आपल्या पोस्ट भावनिक सामग्री अंदाज फक्त होते तर दृष्टिकोन दंड होईल, पण ध्येय आपल्या पोस्टवरील आपल्या बातम्या फीड कार्यकारण भाव होणारा परिणाम असेल तर हा दृष्टिकोन संशयास्पद आहे. या रचना समस्या पाहण्यासाठी, आभार विचार. अमेरिका, सकारात्मक पोस्ट अणकुचीदार टोकाने भोसकणे आणि नकारात्मक पोस्ट आभार पडणे. अशा प्रकारे, आभार, संशोधक आपल्या बातम्या फीड अतिशय सकारात्मक होते की नाही ते पाहा आणि आपण तसेच सकारात्मक गोष्टी पोस्ट नाही. पण, आपल्या सकारात्मक पोस्ट आपल्या बातम्या फीड सामग्री नाही आभार झाल्याने शकते. त्याऐवजी, कार्यकारण भाव परिणाम संशोधक थेट आपल्या भावना बदलून न आपल्या बातम्या फीड सामग्री बदलणारी काहीतरी गरज अंदाज करण्यासाठी. हवामान: सुदैवाने, की एकेकाळी हे सर्व वेळ सारखे काहीतरी आहे.

Coviello आणि सहकारी की एखाद्याच्या शहरात एक पावसाळी दिवशी होईल, सरासरी, सुमारे 1 टक्का सकारात्मक आहेत पोस्ट प्रमाण कमी आणि 1 टक्का नकारात्मक आहेत पोस्ट प्रमाणात वाढ आढळले. मग, Coviello आणि सहकारी प्रायोगिक कोणाच्याही बातम्या फीड हाताळू न करता भावनिक संसर्ग अभ्यास हे खरं पिळवणूक केली. थोडक्यात काय ते केलं आपले पोस्ट आपले मित्र राहतात शहरात हवामान कसे परिणाम झाले उपाय आहे. या अर्थ प्राप्त होतो का हे पाहण्यासाठी, आपल्याला न्यू यॉर्क शहर राहतात आणि आपण सीॅट्ल राहतात जो मित्र आहे अशी कल्पना करा. आता सुरू एकाच दिवशी सीॅट्ल पाऊस अशी कल्पना करा. सिअॅटल मध्ये पावसामुळे थेट आपल्या मूड परिणाम होणार नाही, परंतु तो आपल्या बातम्या फीड कारण आपल्या मित्र पोस्ट कमी सकारात्मक आणि अधिक नकारात्मक देईन. अशा प्रकारे, सिअॅटल मध्ये पाऊस सहजगत्या आपल्या बातम्या फीड manipulates. या अंतर्ज्ञान चालू एक विश्वसनीय संख्याशास्त्रीय प्रक्रिया मध्ये गुंतागुतीचे आहे (आणि Coviello आणि सहकारी द्वारे वापरले अचूक दृष्टिकोन थोडा अ-प्रमाण आहे) त्यामुळे मी अधिक वाचनासाठी विभागात अधिक तपशीलवार चर्चा ठेवले आहे. Coviello लक्षात सर्वात महत्वाची गोष्ट आणि सहकारी च्या पध्दत संभाव्य सहभागी हानी पोहोचवू शकते की एक प्रयोग नचलाई भावनिक संसर्ग अभ्यास सक्षम आहे, आणि इतर अनेक सेटिंग्ज आपण इतर प्रयोग अदलाबदल करू शकता असू शकते तंत्र.

3 रुपये दुसऱ्या परिष्कृत आहे: संशोधक शक्य लहान हानी होऊ करण्यासाठी त्यांच्या उपचार सुधारणा करण्यासाठी, घ्यावी. उदाहरणार्थ, ऐवजी सकारात्मक किंवा नकारात्मक एकतर होते की सामग्री अवरोधित करणे सुरू ठेवा पेक्षा, संशोधक सकारात्मक किंवा नकारात्मक होते की सामग्री वाढला असू शकते. या वाढविणे डिझाइन सहभागी बातम्या भावनिक सामग्री बदलली होईल, पण तो समीक्षक व्यक्त की चिंता एक संबोधित होईल: प्रयोग त्यांच्या बातम्या फीड मध्ये महत्वाची माहिती चुकली सहभागी झाले आहे की. Kramer आणि सहकारी द्वारे वापरले डिझाइन महत्वाचे आहे, की एक संदेश नाही आहे की एक म्हणून अवरोधित केली जाणार म्हणून शक्यता आहे. तथापि, एक चालना रचना विस्थापित जाईल, असे संदेश कमी महत्वाचे आहेत होऊ शकेल.

शेवटी तिसऱ्या आर कमी आहे: संशोधक शक्य असेल तर, त्यांच्या प्रयोगात सहभागी संख्या कमी करण्यासाठी घ्यावी. पूर्वी, ही कपात संशोधन उद्युक्त त्यांच्या रचना आणि विश्लेषण अनुकूल analog प्रयोग चल किमतीच्या उच्च होते, कारण नैसर्गिकरित्या झाले. तथापि, शून्य बदलणारा खर्च डेटा आहे, तेव्हा, संशोधक त्यांच्या प्रयोग आकारावर खर्च मर्यादा तोंड नाही, आणि या अनावश्यकपणे मोठ्या प्रयोग होऊ करण्याची क्षमता आहे.

उदाहरणार्थ, Kramer आणि सहकारी त्यांच्या सहभागी अशा पूर्व-उपचार पोस्टिंग म्हणून पूर्व उपचार माहिती वापरली विश्लेषण अधिक कार्यक्षम करण्यासाठी वर्तन-टू असू शकते. अधिक विशेषतः, ऐवजी उपचार आणि नियंत्रण परिस्थितीमध्ये सकारात्मक शब्द प्रमाण तुलना पेक्षा, Kramer आणि सहकारी स्थितींदरम्यान सकारात्मक शब्द प्रमाणात बदल तुलनेत असू शकते; एक दृष्टिकोन अनेकदा फरक-इन-फरक आणि लक्षपूर्वक मी धडा पूर्वी वर्णन मिश्र डिझाइन (आकृती 4.5) संबंधित आहे म्हणतात. आहे, प्रत्येक सहभागी साठी, संशोधक एक बदल धावसंख्या (पोस्ट-उपचार वर्तन - पूर्व उपचार वर्तन) निर्माण केली शकली नाही आणि नंतर उपचार आणि नियंत्रण परिस्थितीमध्ये सहभागी बदल स्कोअर तुलनेत. हा फरक-इन-फरक दृष्टिकोन सांख्यिकीय अधिक कार्यक्षम आहे, जे संशोधक खूपच लहान नमुने वापरून समान संख्याशास्त्रीय आत्मविश्वास साध्य करू शकतात. दुसऱ्या शब्दांत, "विजेट" सारखे सहभागी उपचारांचा नाही, संशोधक अनेकदा अधिक तंतोतंत अंदाज मिळवू शकता.

कच्चा डेटा न करता तो एक फरक-इन-फरक दृष्टिकोन या प्रकरणात नक्की किती अधिक कार्यक्षम झाले असते माहित कठीण आहे. पण, Deng et al. (2013) अहवाल Bing शोध इंजिन तीन ऑनलाइन प्रयोग ते 50% त्यांच्या अंदाज फरक कमी करण्यास सक्षम होते, आणि तत्सम परिणाम Netflix काही ऑनलाइन प्रयोग नोंदवली गेली आहे (Xie and Aurisset 2016) . या 50% फरक कमी भावनिक संसर्ग संशोधक एक वेगळी विश्लेषण पद्धती वापरली असता तर अर्धा त्यांच्या नमुना कट केले गेले आहे याचा अर्थ असा की. दुसऱ्या शब्दांत, विश्लेषण एक लहान बदलाशिवाय, 350,000 लोक प्रयोग सहभाग तरतूद करण्यात आली आहे.

या टप्प्यावर तुम्ही संशोधक 350,000 लोक विनाकारण भावनिक संसर्ग आले असते, तर काळजी पाहिजे का आश्चर्य जाऊ शकते. जास्त आकार चिंता योग्य करा की भावनिक संसर्ग दोन विशिष्ट वैशिष्ट्ये आहेत, आणि ही वैशिष्ट्ये अनेक डिजिटल क्षेत्रात प्रयोग सामायिक आहेत: 1) प्रयोग किमान काही भाग हानी होऊ आणि 2) सहभाग नाही नाही किंवा नाही याबद्दल अनिश्चितता आहे ऐच्छिक. या दोन वैशिष्ट्ये प्रयोगांमध्ये असे शक्य तितक्या लहान प्रयोग ठेवणे सल्ला दिला आहे असे दिसते.

शेवटी, तीन R's-बदली करा, अचूक, आणि संशोधक त्यांच्या प्रायोगिक डिझाईन्स मध्ये आचारसंहिता तयार मदत करू शकता तत्त्वे-प्रदान कमी करा. अर्थात, भावनिक संसर्ग या शक्य बदल प्रत्येक ट्रेड-ऑफ समाविष्टीत आहे. उदाहरणार्थ, नैसर्गिक प्रयोगांमध्ये पुरावा नाही म्हणून नेहमी स्वच्छ यादृच्छिकीकृत प्रयोगांमध्ये पुरावा म्हणून आहे आणि कदाचित ब्लॉक पेक्षा अंमलबजावणी करण्यासाठी अधिक logistically कठीण आहे उंचावल्या आहेत. त्यामुळे, हे बदल सुचवून उद्देश इतर संशोधक निर्णय अंदाज नव्हता. असं म्हणा, तो तीन आर च्या एक वास्तववादी वातावरण परिस्थितीत लागू केले जाऊ शकते कसे स्पष्ट होते.