4.4.3 Mekanisme

Percobaan mengukur apa yang terjadi. Mekanisme menjelaskan mengapa dan bagaimana hal itu terjadi.

Ide kunci ketiga untuk bergerak di luar eksperimen sederhana adalah mekanisme . Mekanisme memberi tahu kita mengapa atau bagaimana pengobatan menyebabkan efek. Proses pencarian mekanisme juga terkadang disebut mencari variabel intervening atau variabel mediasi . Meskipun eksperimen baik untuk memperkirakan efek kausal, mereka sering tidak dirancang untuk mengungkapkan mekanisme. Eksperimen digital dapat membantu kami mengidentifikasi mekanisme dalam dua cara: (1) mereka memungkinkan kami untuk mengumpulkan lebih banyak data proses dan (2) mereka memungkinkan kami untuk menguji banyak perawatan terkait.

Karena mekanisme sulit untuk didefinisikan secara formal (Hedström and Ylikoski 2010) , saya akan memulai dengan contoh sederhana: limau dan kudis (Gerber and Green 2012) . Pada abad ke delapan belas, para dokter memiliki pengertian yang bagus bahwa ketika para pelaut memakan limau, mereka tidak mendapat penyakit kudis. Scurvy adalah penyakit yang mengerikan, jadi ini adalah informasi yang sangat kuat. Tetapi para dokter ini tidak tahu mengapa limau mencegah penyakit kudis. Itu tidak sampai 1932, hampir 200 tahun kemudian, para ilmuwan dapat dipercaya menunjukkan bahwa vitamin C adalah alasan bahwa kapur mencegah penyakit kudis (Carpenter 1988, 191) . Dalam hal ini, vitamin C adalah mekanisme di mana limau mencegah kudis (gambar 4.10). Tentu saja, mengidentifikasi mekanisme ini juga sangat penting secara ilmiah — banyak ilmu pengetahuan adalah tentang memahami mengapa sesuatu terjadi. Mengidentifikasi mekanisme juga sangat penting secara praktis. Setelah kami memahami mengapa suatu perawatan berhasil, kami berpotensi mengembangkan perawatan baru yang bekerja lebih baik.

Gambar 4.10: Limau mencegah kudis dan mekanismenya adalah vitamin C.

Sayangnya, mekanisme isolasi sangat sulit. Tidak seperti limau dan kudis, dalam banyak pengaturan sosial, perawatan mungkin beroperasi melalui banyak jalur yang saling terkait. Namun, dalam kasus norma sosial dan penggunaan energi, peneliti telah mencoba mengisolasi mekanisme dengan mengumpulkan data proses dan menguji perawatan terkait.

Salah satu cara untuk menguji mekanisme yang mungkin adalah dengan mengumpulkan data proses tentang bagaimana perawatan berdampak pada mekanisme yang mungkin. Misalnya, ingat bahwa Allcott (2011) menunjukkan bahwa Laporan Energi Rumah menyebabkan orang menurunkan penggunaan listrik mereka. Tetapi bagaimana laporan ini menurunkan penggunaan listrik? Apa mekanismenya? Dalam studi lanjutan, Allcott and Rogers (2014) bermitra dengan perusahaan listrik yang, melalui program rabat, telah memperoleh informasi tentang konsumen mana yang meningkatkan peralatan mereka ke model yang lebih hemat energi. Allcott and Rogers (2014) menemukan bahwa sedikit lebih banyak orang yang menerima Laporan Energi Rumah meningkatkan peralatan mereka. Tetapi perbedaan ini sangat kecil sehingga hanya dapat memperhitungkan 2% dari penurunan penggunaan energi di rumah tangga yang dirawat. Dengan kata lain, upgrade alat bukan mekanisme dominan yang melaluinya Laporan Energi Rumah menurunkan konsumsi listrik.

Cara kedua untuk mempelajari mekanisme adalah dengan menjalankan eksperimen dengan versi perlakuan yang sedikit berbeda. Misalnya, dalam percobaan Schultz et al. (2007) dan semua eksperimen Laporan Energi Depan berikutnya, peserta diberikan perawatan yang memiliki dua bagian utama (1) kiat tentang penghematan energi dan (2) informasi tentang penggunaan energi mereka relatif terhadap rekan-rekan mereka (gambar 4.6). Dengan demikian, ada kemungkinan bahwa kiat hemat energi itulah yang menyebabkan perubahan, bukan informasi rekan. Untuk menilai kemungkinan bahwa tips saja sudah cukup, Ferraro, Miranda, and Price (2011) bermitra dengan perusahaan air dekat Atlanta, Georgia, dan menjalankan percobaan terkait pada konservasi air yang melibatkan sekitar 100.000 rumah tangga. Ada empat kondisi:

• kelompok yang menerima kiat menghemat air
• kelompok yang menerima kiat menghemat air ditambah daya tarik moral untuk menghemat air
• kelompok yang menerima tips menghemat air ditambah daya tarik moral untuk menghemat air ditambah informasi tentang penggunaan air mereka relatif terhadap rekan-rekan mereka
• kelompok kontrol

Para peneliti menemukan bahwa pengobatan hanya-tips tidak berpengaruh pada penggunaan air dalam jangka pendek (satu tahun), menengah (dua tahun), dan panjang (tiga tahun). Tips plus perawatan banding menyebabkan peserta mengurangi penggunaan air, tetapi hanya dalam jangka pendek. Akhirnya, tip plus daya tarik ditambah pengobatan informasi rekan menyebabkan penurunan penggunaan dalam jangka pendek, menengah, dan panjang (gambar 4.11). Eksperimen semacam ini dengan perlakuan tidak berbatas adalah cara yang baik untuk mengetahui bagian mana dari perawatan — atau bagian mana bersama — adalah yang menyebabkan efek (Gerber and Green 2012, sec. 10.6) . Sebagai contoh, percobaan Ferraro dan rekan menunjukkan kepada kita bahwa tips hemat air saja tidak cukup untuk mengurangi penggunaan air.

Gambar 4.11: Hasil dari Ferraro, Miranda, and Price (2011) . Perawatan dikirim 21 Mei 2007, dan efek diukur selama musim panas 2007, 2008, dan 2009. Dengan memisahkan pengobatan, para peneliti berharap untuk mengembangkan rasa yang lebih baik dari mekanisme. Perawatan hanya-tips pada dasarnya tidak berpengaruh dalam jangka pendek (satu tahun), menengah (dua tahun), dan panjang (tiga tahun). Tips plus perawatan banding menyebabkan peserta mengurangi penggunaan air, tetapi hanya dalam jangka pendek. Saran ditambah daya tarik ditambah informasi rekan pengobatan menyebabkan peserta untuk mengurangi penggunaan air dalam jangka pendek, menengah, dan panjang. Bar vertikal merupakan perkiraan interval kepercayaan. Lihat Bernedo, Ferraro, and Price (2014) untuk bahan belajar yang sebenarnya. Diadaptasi dari Ferraro, Miranda, and Price (2011) , tabel 1.

Idealnya, seseorang akan bergerak di luar layering komponen (kiat; kiat plus daya tarik; kiat plus daya tarik plus informasi rekan) ke rancangan faktorial lengkap — juga kadang-kadang disebut \(2^k\) desain faktorial — di mana setiap kemungkinan kombinasi dari tiga elemen diuji (tabel 4.1). Dengan menguji setiap kemungkinan kombinasi komponen, peneliti dapat sepenuhnya menilai efek dari setiap komponen dalam isolasi dan dalam kombinasi. Sebagai contoh, percobaan Ferraro dan rekan tidak mengungkapkan apakah perbandingan rekan saja sudah cukup untuk menyebabkan perubahan perilaku jangka panjang. Di masa lalu, desain faktorial lengkap ini sulit dijalankan karena mereka membutuhkan sejumlah besar peserta dan mereka membutuhkan peneliti untuk dapat mengontrol dan memberikan sejumlah besar perawatan secara tepat. Namun, dalam beberapa situasi, era digital menghilangkan kendala logistik ini.

Singkatnya, mekanisme — jalur di mana pengobatan memiliki efek — sangat penting. Eksperimen era digital dapat membantu peneliti mempelajari mekanisme dengan (1) mengumpulkan data proses dan (2) mengaktifkan desain faktorial lengkap. Mekanisme yang disarankan oleh pendekatan ini kemudian dapat diuji secara langsung dengan eksperimen yang dirancang khusus untuk menguji mekanisme (Ludwig, Kling, and Mullainathan 2011; Imai, Tingley, and Yamamoto 2013; Pirlott and MacKinnon 2016) .

Secara keseluruhan, ketiga konsep ini — validitas, heterogenitas efek perawatan, dan mekanisme — memberikan serangkaian gagasan yang kuat untuk merancang dan menafsirkan eksperimen. Konsep-konsep ini membantu para peneliti bergerak melampaui eksperimen sederhana tentang apa yang "berhasil" untuk eksperimen yang lebih kaya yang memiliki hubungan erat dengan teori, yang mengungkapkan di mana dan mengapa perawatan bekerja, dan itu bahkan dapat membantu peneliti merancang perawatan yang lebih efektif. Dengan latar belakang konseptual tentang eksperimen ini, sekarang saya akan beralih ke bagaimana Anda dapat benar-benar membuat eksperimen Anda terjadi.