4.5.1.1 สภาพแวดล้อมการใช้งานที่มีอยู่

คุณสามารถเรียกใช้การทดลองภายในสภาพแวดล้อมที่มีอยู่มักจะไม่มีการเข้ารหัสหรือห้างหุ้นส่วนใด ๆ

logistically วิธีที่ง่ายที่สุดที่จะทำทดลองดิจิตอลคือการซ้อนทับทดสอบของคุณอยู่ด้านบนของสภาพแวดล้อมที่มีอยู่ช่วยให้คุณสามารถเรียกใช้การทดสอบข้อมูลดิจิตอล การทดลองเหล่านี้สามารถทำงานได้ที่ขนาดใหญ่พอสมควรและไม่จำเป็นต้องร่วมมือกับ บริษัท หรือการพัฒนาซอฟต์แวร์ที่กว้างขวาง

ยกตัวอย่างเช่นเจนนิเฟอร์ Doleac และลุคสไตน์ (2013) ใช้ประโยชน์จากตลาดออนไลน์ (เช่น Craigslist) เพื่อเรียกใช้การทดสอบที่วัดเหยียดผิว Doleac และสไตน์โฆษณาหลายพัน iPods และระบบที่แตกต่างกันในลักษณะของผู้ขายที่พวกเขาก็สามารถที่จะศึกษาผลกระทบของการแข่งขันในการทำธุรกรรมทางเศรษฐกิจ นอกจาก Doleac และสไตน์ใช้ขนาดของการทดลองของพวกเขาในการประมาณการเมื่อผลที่มีขนาดใหญ่ (ความแตกต่างของผลการรักษา) และนำเสนอความคิดบางอย่างเกี่ยวกับสาเหตุที่ผลกระทบที่อาจเกิดขึ้น (กลไก)

ก่อนที่จะมีการศึกษาและ Doleac สไตน์มีการได้รับสองแนวทางหลักในการทดลองการวัดการเลือกปฏิบัติ ในการศึกษานักวิจัยสร้างจดหมายสมัครงานของคนที่สวมของการแข่งขันที่แตกต่างกันและใช้การดำเนินการต่อเหล่านี้เพื่อยกตัวอย่างเช่นการสมัครงานที่แตกต่างกัน เบอร์ทรานด์และ Mullainathan ของ (2004) กระดาษที่มีชื่อที่น่าจดจำ "อยู่ที่เอมิลี่และเกร็กอื่น ๆ กว่าจ้าง Lakisha และออสการ์? การทดลองภาคสนามในตลาดแรงงานการเลือกปฏิบัติ "เป็นภาพที่ยอดเยี่ยมของการศึกษาการติดต่อ การศึกษาการติดต่อมีค่าใช้จ่ายค่อนข้างต่ำต่อการสังเกตซึ่งจะช่วยให้นักวิจัยเดียวในการเก็บรวบรวมหลายพันข้อสังเกตในการศึกษาทั่วไป แต่การศึกษาความสอดคล้องของการเลือกปฏิบัติทางเชื้อชาติได้รับการสอบสวนเพราะชื่อที่อาจส่งสัญญาณหลายสิ่งหลายอย่างที่นอกเหนือไปจากการแข่งขันของผู้สมัคร นั่นคือชื่อเช่นเกร็กเอมิลี่ Lakisha และออสการ์อาจส่งสัญญาณระดับชั้นทางสังคมนอกเหนือจากการแข่ง ดังนั้นความแตกต่างใด ๆ ในการรักษาสำหรับการดำเนินการต่อของเกร็กและออสการ์อาจจะเป็นเพราะความแตกต่างมากขึ้นกว่าการแข่งขันสันนิษฐานของผู้สมัคร. การศึกษาตรวจสอบบนมืออื่น ๆ ที่เกี่ยวข้องกับการจ้างงานนักแสดงของการแข่งขันที่แตกต่างกันเพื่อนำไปใช้ในคนหางาน แม้ว่าการศึกษาตรวจสอบให้สัญญาณที่ชัดเจนของการแข่งขันสมัครพวกเขามีราคาแพงมากต่อการสังเกตซึ่งหมายความว่าพวกเขามักจะมีเพียงร้อยของการสังเกต

ในการทดสอบข้อมูลดิจิตอลของพวกเขา, Doleac และสไตน์มีความสามารถในการสร้างไฮบริดที่น่าสนใจ พวกเขามีความสามารถในการเก็บรวบรวมข้อมูลค่าใช้จ่ายที่ค่อนข้างต่ำต่อการสังเกตผลในพันของการสังเกต (ในขณะที่การศึกษาการติดต่อ) และพวกเขาก็สามารถที่จะส่งสัญญาณการแข่งขันโดยการใช้รูป-ส่งผลให้สัญญาณ uncounfounded ที่ชัดเจนของการแข่งขัน (ในขณะที่การศึกษาการตรวจสอบ ) ดังนั้นสภาพแวดล้อมออนไลน์บางครั้งทำให้นักวิจัยสามารถสร้างการรักษาใหม่ที่มีคุณสมบัติที่ยากที่จะสร้างเป็นอย่างอื่น

โฆษณา iPod ของ Doleac และสไตน์ที่แตกต่างกันไปตามหลักสามมิติ ก่อนที่พวกเขาแตกต่างกันลักษณะของผู้ขายซึ่งได้รับการส่งสัญญาณด้วยมือถือถ่ายภาพ iPod [สีขาว, สีดำ, สีขาวมีรอยสัก] (รูปที่ 4.12) เดอะ ประการที่สองพวกเขาแตกต่างกันราคาขอ [$ 90, $ 110, $ 130] สามพวกเขาแตกต่างกันคุณภาพของข้อความโฆษณา [ที่มีคุณภาพสูงและมีคุณภาพต่ำ (เช่นข้อผิดพลาดและข้อผิดพลาดเป็นทุน spelin)] ที่ ดังนั้นผู้เขียนมีการออกแบบ 3 x 3 x 2 ซึ่งถูกนำไปใช้ในตลาดท้องถิ่นกว่า 300 ตั้งแต่เมือง (เช่น Kokomo ทั้งในและนอร์ทแพลตต์, เนบราสก้า) ไปเมืองใหญ่ (เช่นนิวยอร์กและลอสแอนเจลิ)

รูปที่ 4.12: Hands ใช้ในการทดลองของ Doleac และสไตน์ (2013) iPods ถูกขายโดยผู้ขายที่มีลักษณะที่แตกต่างกันในการวัดการเลือกปฏิบัติในตลาดออนไลน์

รูปที่ 4.12: Hands ใช้ในการทดลองของ Doleac and Stein (2013) iPods ถูกขายโดยผู้ขายที่มีลักษณะที่แตกต่างกันในการวัดการเลือกปฏิบัติในตลาดออนไลน์

เฉลี่ยทั่วทุกสภาวะผลดีสำหรับผู้ขายสีขาวกว่าสีดำผู้ขายกับผู้ขายที่มีรอยสักที่มีผลกลาง ตัวอย่างเช่นผู้ขายสีขาวได้รับข้อเสนอมากขึ้นและมีราคาขายที่สูงขึ้นเป็นครั้งสุดท้าย นอกเหนือจากผลกระทบเฉลี่ยเหล่านี้ Doleac และสไตน์ประมาณความแตกต่างของผลกระทบ ตัวอย่างเช่นหนึ่งในการทำนายจากทฤษฎีก่อนหน้านี้ก็คือการเลือกปฏิบัติจะน้อยในตลาดที่มีการแข่งขันมากขึ้น โดยใช้จำนวนของข้อเสนอที่ได้รับเป็นพร็อกซีสำหรับการแข่งขันในตลาดที่ผู้เขียนพบว่าผู้ขายสีดำทำแน่นอนได้รับข้อเสนอที่เลวร้ายยิ่งในตลาดที่มีระดับต่ำของการแข่งขัน นอกจากนี้โดยการเปรียบเทียบผลลัพธ์สำหรับโฆษณาที่มีคุณภาพสูงและมีข้อความที่มีคุณภาพต่ำ Doleac และสไตน์พบว่าคุณภาพของโฆษณาไม่ได้ส่งผลกระทบต่อข้อเสียที่ต้องเผชิญกับผู้ขายสีดำและรอยสัก ในที่สุดการใช้ประโยชน์จากความจริงที่ว่ามีการโฆษณาอยู่ในกว่า 300 ตลาดผู้เขียนพบว่าผู้ขายสีดำเป็นผู้ด้อยโอกาสมากขึ้นในเมืองที่มีอัตราการเกิดอาชญากรรมสูงและที่อยู่อาศัยแยกสูง ไม่มีผลการค้นหาเหล​​่านี้ทำให้เรามีความเข้าใจที่ถูกต้องของผู้ขายว่าทำไมสีดำมีผลลัพธ์ที่เลวร้าย แต่เมื่อรวมกับผลการศึกษาอื่น ๆ ที่พวกเขาสามารถเริ่มต้นที่จะแจ้งให้ทฤษฎีเกี่ยวกับสาเหตุของการเหยียดผิวในประเภทที่แตกต่างกันของการทำธุรกรรมทางเศรษฐกิจ

ตัวอย่างที่แสดงให้เห็นความสามารถของนักวิจัยที่จะดำเนินการทดลองดิจิตอลในระบบที่มีอยู่ก็คือการวิจัยโดย Arnout แวนเดอ Rijt และเพื่อนร่วมงาน (2014) ในกุญแจสู่ความสำเร็จ ในหลายแง่มุมของชีวิตคนที่คล้ายกันดูเหมือนจะจบลงด้วยผลลัพธ์ที่แตกต่างกันมาก หนึ่งคำอธิบายที่เป็นไปได้สำหรับรูปแบบนี้คือการที่ขนาดเล็กและเป็นหลักสุ่มข้อดีสามารถล็อคอินและเติบโตในช่วงเวลากระบวนการที่นักวิจัยเรียกประโยชน์สะสม เพื่อที่จะตรวจสอบว่าประสบความสำเร็จเริ่มต้นเล็ก ๆ ล็อคอินหรือจางหายไป, แวนเดอ Rijt และเพื่อนร่วมงาน (2014) เข้าแทรกแซงเป็นสี่ระบบที่แตกต่างให้รางวัลความสำเร็จในผู้เข้าร่วมการสุ่มเลือกและจากนั้นวัดผลกระทบในระยะยาวของความสำเร็จนี้โดยพลการ

โดยเฉพาะอย่างยิ่งแวนเดอ Rijt และเพื่อนร่วมงาน 1) ให้คำมั่นสัญญาเงินให้กับโครงการในการสุ่มเลือก kickstarter.com เว็บไซต์ crowdfunding นั้น 2) จัดอันดับความคิดเห็นในเชิงบวกสุ่มเลือกบนเว็บไซต์ Epinions ; 3) ให้รางวัลที่ได้รับการสุ่มเลือกผู้ให้ วิกิพีเดีย ; และ 4) ได้ลงนามในคำอุทธรณ์สุ่มเลือก change.org นักวิจัยพบว่าผลที่คล้ายกันมากในทุกสี่ระบบ: ในแต่ละกรณีผู้เข้าร่วมที่ได้รับการคัดสรรบางประสบความสำเร็จเร็วไปในการประสบความสำเร็จที่ตามมามากกว่าเพื่อนร่วมงานเป็นอย่างอื่นไม่สามารถแยกได้อย่างสมบูรณ์ของพวกเขา (รูปที่ 4.13) ความจริงที่ว่ารูปแบบเดียวกันปรากฏอยู่ในหลายระบบเพิ่มความถูกต้องของผลภายนอกเหล่านี้เพราะจะช่วยลดโอกาสที่รูปแบบนี้เป็นสิ่งประดิษฐ์ของระบบใด ๆ

รูปที่ 4.13: ผลกระทบระยะยาวของความสำเร็จให้แก่สุ่มสี่ในระบบสังคมที่แตกต่างกัน Arnout แวนเดอ Rijt และเพื่อนร่วมงาน (2014) 1) ให้คำมั่นสัญญาเงินให้กับโครงการ kickstarter.com เว็บไซต์ crowdfunding สุ่มเลือก; 2) จัดอันดับความคิดเห็นในเชิงบวกในการสุ่มเลือก Epinions เว็บไซต์; 3) ให้รางวัลที่ได้รับการสุ่มเลือกผู้ให้วิกิพีเดีย; และ 4) ได้ลงนามในคำอุทธรณ์สุ่มเลือก change.org

รูปที่ 4.13: ผลกระทบระยะยาวของความสำเร็จให้แก่สุ่มสี่ในระบบสังคมที่แตกต่างกัน Arnout แวนเดอ Rijt และเพื่อนร่วมงาน (2014) 1) ให้คำมั่นสัญญาเงินให้กับโครงการในการสุ่มเลือก kickstarter.com เว็บไซต์ crowdfunding นั้น 2) จัดอันดับความคิดเห็นในเชิงบวกสุ่มเลือกบนเว็บไซต์ Epinions ; 3) ให้รางวัลที่ได้รับการสุ่มเลือกผู้ให้ วิกิพีเดีย ; และ 4) ได้ลงนามในคำอุทธรณ์สุ่มเลือก change.org

ร่วมกันทั้งสองตัวอย่างที่แสดงให้เห็นว่านักวิจัยสามารถดำเนินการทดลองดิจิตอลโดยไม่จำเป็นต้องเป็นพันธมิตรกับ บริษัท หรือจำเป็นที่จะต้องสร้างระบบดิจิตอลที่ซับซ้อน นอกจากนี้ตารางที่ 4.2 แสดงตัวอย่างมากยิ่งขึ้นที่แสดงช่วงของสิ่งที่เป็นไปได้เมื่อนักวิจัยใช้โครงสร้างพื้นฐานของระบบที่มีอยู่ในการส่งมอบผลการรักษาและ / หรือมาตรการ การทดลองนี้จะค่อนข้างถูกสำหรับนักวิจัยและพวกเขามีระดับสูงของความสมจริง แต่การทดลองเหล่านี้มีนักวิจัยการควบคุม จำ​​กัด มากกว่าผู้เข้าร่วมการรักษาและผลที่จะวัด นอกจากนี้สำหรับการทดลองที่เกิดขึ้นในระบบเดียวนักวิจัยจะต้องกังวลว่าผลกระทบที่อาจจะได้แรงหนุนจากการเปลี่ยนแปลงเฉพาะระบบ (เช่นวิธีการที่ Kickstarter อันดับโครงการหรือวิธีการที่ change.org อันดับอุทธรณ์สำหรับข้อมูลเพิ่มเติม ดูการอภิปรายเกี่ยวกับการรบกวนอัลกอริทึมในบทที่ 2) สุดท้ายเมื่อนักวิจัยแทรกแซงในระบบการทำงานคำถามจริยธรรมหากินโผล่ออกมาเกี่ยวกับอันตรายที่เป็นไปได้ให้ผู้เข้าร่วมเข้าร่วมไม่ใช่และระบบ เราจะพิจารณาคำถามจริยธรรมเหล่านี้ในรายละเอียดเพิ่มเติมในบทที่ 6 และมีการสนทนาที่ดีของพวกเขาในภาคผนวกของแวนเดอ Rijt (2014) การค้าไม่ชอบที่มาพร้อมกับการทำงานในระบบที่มีอยู่ไม่ได้เหมาะสำหรับทุกโครงการและสำหรับเหตุผลที่นักวิจัยบางคนสร้างระบบการทดลองของตัวเองเรื่องของส่วนถัดไป

ตารางที่ 4.2: ตัวอย่างของการทดลองในระบบที่มีอยู่ การทดลองเหล่านี้ดูเหมือนจะตกอยู่ในสามประเภทหลักและการจำแนกประเภทนี้อาจช่วยให้คุณทราบโอกาสเพิ่มเติมสำหรับการวิจัยของคุณเอง แรกมีการทดลองที่เกี่ยวข้องกับการขายหรือซื้อบางสิ่งบางอย่าง (เช่น Doleac and Stein (2013) ) ประการที่สองมีการทดลองที่เกี่ยวข้องกับการส่งมอบการรักษาที่เฉพาะเจาะจงกับผู้เข้าร่วม (เช่น Restivo and Rijt (2012) ) ในที่สุดก็มีการทดลองที่เกี่ยวข้องกับการรักษาการส่งมอบไปยังวัตถุที่เฉพาะเจาะจงเช่นอุทธรณ์ (เช่น Vaillant et al. (2015) )
กระทู้ การอ้างอิง
ผลของการมีส่วนร่วม barnstars ในวิกิพีเดีย Restivo and Rijt (2012) ; Restivo and Rijt (2014) ; Rijt et al. (2014)
ผลของข้อความต่อต้านการคุกคามบนทวีตเหยียดผิว Munger (2016)
ผลของวิธีการประมูลราคาขาย Lucking-Reiley (1999)
ผลของการมีชื่อเสียงเกี่ยวกับราคาในการประมูลออนไลน์ Resnick et al. (2006)
ผลของการแข่งขันของผู้ขายจากการขายการ์ดเบสบอลบนอีเบย์ Ayres, Banaji, and Jolls (2015)
ผลของการแข่งขันของผู้ขายจากการขายไอพ็อด Doleac and Stein (2013)
ผลของการแข่งขันของแขกรับเชิญใน Airbnb เช่า Edelman, Luca, and Svirsky (2016)
ผลของการบริจาคในความสำเร็จของโครงการเมื่อ Kickstarter Rijt et al. (2014)
ผลของการแข่งขันและชาติพันธุ์ในการเช่าที่อยู่อาศัย Hogan and Berry (2011)
ผลของการให้คะแนนในเชิงบวกต่อการจัดอันดับในอนาคตเกี่ยวกับ Epinions Rijt et al. (2014)
ผลของลายเซ็นบนความสำเร็จของการอุทธรณ์ Vaillant et al. (2015) ; Rijt et al. (2014)