4.6.2 Ngawangun étika kana desain anjeun: ngaganti, nyaring, sarta ngurangan
Jieun percobaan leuwih manusiawi ku ngaganti percobaan jeung studi non-percobaan, pemurnian nu perlakuan, jeung ngurangan jumlah pamilon.
Potongan kadua nasehat yen Abdi hoyong nawiskeun ngeunaan ngarancang percobaan digital masalah étika. Salaku Restivo na van de Rijt percobaan dina barnstars di Wikipedia nempokeun, turun ongkos hartina étika baris jadi hiji bagian beuki penting desain panalungtikan. Sajaba frameworks etika guiding subjék manusa panalungtikan anu kuring gé ngajelaskeun dina bab 6, peneliti ngarancang percobaan digital ogé bisa digambarkeun dina pamendak etika ti sumber béda: prinsip etis dikembangkeun pikeun panduan percobaan ngalibetkeun sato. Dina sababaraha hal, di Prinsip buku Landmark maranéhanana Téhnik Experimental manusiawi, Russell and Burch (1959) ngajukeun tilu prinsip anu sakuduna pituduh panalungtikan sato: ngaganti, nyaring, sarta ngurangan. Abdi resep ngajukeun yén ieu tilu Sunda urang ogé bisa dipaké-dina rada dirobah formulir-pikeun panduan desain percobaan manusa. Khususna,
- Ngaganti: ngaganti percobaan kalawan metode kirang invasif lamun mungkin.
- Nyaring: nyaring perlakuan sangkan salaku bahya salaku kamungkinan.
- Ngurangan: ngurangan jumlah pamilon dina percobaan Anjeun saloba mungkin.
Dina raraga nyieun beton tilu Sunda urang ieu sarta némbongkeun kumaha aranjeunna berpotensi bisa ngakibatkeun design eksperimen hadé tur leuwih manusiawi, abdi gé ngajelaskeun hiji percobaan widang online nu dihasilkeun perdebatan etika. Lajeng, abdi gé ngajelaskeun kumaha tilu Sunda urang nyarankeun parobahan beton tur praktis jeung desain percobaan.
Salah sahiji percobaan widang digital paling ethically didebat ieu dilakukeun ku Adam Kramer, Jamie Guillroy, sarta Jeffrey Hancock (2014) sarta geus datang ka disebut "Contagion emosi". Percobaan lumangsung on Facebook sarta ngamotivasi ku campuran ilmiah tur patarosan praktis. Wanoh, cara dominan anu pamaké berinteraksi kalawan Facebook ieu News Feed, hiji set algorithmically curated of apdet status Facebook ti babaturan Facebook mangrupa pamaké urang. Sababaraha kritik ngeunaan Facebook sempet ngusulkeun yen kusabab News Feed boga lolobana positif tulisan-babaturan némbongkeun kaluar panganyarna maranéhanana pihak-eta bisa ngakibatkeun pamaké ngarasa hanjelu alatan kahirupan maranéhanana seemed kirang seru dina perbandingan. Di sisi séjén, meureun pangaruh nu persis sabalikna: meureun ningali sobat anjeun gaduh waktu nu sae bakal make aran senang. Dina raraga alamat ieu hipotesis-na competing maju pamahaman kami kumaha emosi a jalma nu impacted ku babaturan nya 'émosi-Kramer sareng kolega Anjeun lumpat hiji percobaan. Aranjeunna ditempatkeun ngeunaan 700.000 pamaké jadi opat golongan pikeun hiji minggu: grup "negativity-ngurangan", keur saha tulisan kalawan kecap négatip (misalna, "hanjelu") anu acak diblokir ti muncul dina News Feed; grup "positivity-ngurangan" kanggo saha tulisan kalawan kecap positif (misalna, "bahagia") anu acak diblokir; sareng dua grup kontrol. Di kelompok kontrol keur group "negativity-ngurangan", tulisan anu acak diblokir dina laju anu sarua salaku grup "negativity-ngurangan" tapi tanpa hal ka eusi émosional. Kelompok kontrol keur group "positivity-ngurangan" diwangun dina fashion paralel. Desain percobaan ieu illustrates yén grup kontrol luyu henteu salawasna hiji kalawan euweuh parobahan. Rada, sakapeung, kelompok kontrol narima perlakuan dina urutan nyieun perbandingan tepat anu pertanyaan panalungtikan merlukeun. Dina sakabeh kasus, tulisan nya éta diblokir ti News Feed masih sadia pikeun pamaké ngaliwatan bagian séjén tina ramatloka Facebook.
Kramer sareng kolega Anjeun manggihan yén pikeun pamilon dina kaayaan positivity-ngurangan, persentase kecap positif di apdet status maranéhanana turun sarta persentase kecap négatip ngaronjat. Di sisi séjén, pikeun pamilon dina kaayaan negativity-ngurangan, persentase kecap positif ngaronjat sarta yén kecap négatip turun (inohong 4.24). Najan kitu, pangaruh ieu nya rada leutik: beda dina kecap positif jeung negatif antara perlakuan jeung kadali éta ngeunaan 1 dina 1.000 kecap.
Gambar 4,24: Bukti contagion emosi (Kramer, Guillory, and Hancock 2014) . Pamilon dina kaayaan negativity-ngurangan dipaké kecap pangsaeutikna négatip jeung kecap leuwih positif, sarta peserta dina kaayaan positivity-ngurangan dipaké kecap leuwih négatip jeung kecap positif pangsaeutikna. Bar ngawakilan diperkirakeun kasalahan baku. Diadaptasi tina Kramer, Guillory, and Hancock (2014) , inohong 1.
Méméh nyawalakeun isu etika diangkat ku percobaan ieu, Abdi hoyong ngajelaskeun tilu isu ilmiah ngagunakeun sababaraha pamendak ti tadi dina bab. Kahiji, teu jelas kumaha rincian sabenerna percobaan nyambung ka klaim teoritis; dina basa sejen, aya patarosan ngeunaan validitas nyusunna. Teu jelas yén diitung Kecap positif jeung negatif nu sabenerna indikator alus ti kaayaan emosi pamilon sabab (1) teu jelas yén kecap anu posting urang téh mangrupa indikator hade émosi maranéhanana jeung (2) teu jelas yén téknik analisis sentimen tinangtu yén peneliti dipake nyaeta bisa reliably infer emosi (Beasley and Mason 2015; Panger 2016) . Dina basa sejen, aya bisa jadi ukuran goréng tina hiji sinyal bias. Kadua, rarancang jeung analisis percobaan Kami ngabejaan nanaon ngeunaan anu ieu paling impacted (ie, taya analisis heterogeneity of épék treatment) jeung naon mékanisme nu bisa jadi. Dina hal ieu, panalungtik miboga kavling informasi ngeunaan pamilon, tapi maranéhanana dasarna diperlakukeun salaku widget dina analisis. Katilu, ukuran éfék dina percobaan ieu pisan leutik; beda antara kaayaan pengobatan sarta control nyaeta ngeunaan 1 dina 1.000 kecap. Dina makalah maranéhanana, Kramer sareng kolega Anjeun nyieun hal anu mangrupa pangaruh ukuran ieu penting lantaran ratusan jutaan jalma ngakses News maranéhna Gebang unggal poé. Dina basa sejen, aranjeunna ngajawab yén sanajan efekna leutik pikeun tiap jalma, aranjeunna badag di agrégat. Malah lamun anjeun nepi ka nampa argumen ieu, éta masih teu jelas lamun hiji efek ukuran ieu penting ngeunaan sual ilmiah leuwih umum ngeunaan sumebarna emosi (Prentice and Miller 1992) .
Salian ieu patarosan ilmiah, ngan poé sanggeus kertas ieu diterbitkeun dina cara ngagawe sahiji National Academy of Sciences, aya hiji outcry pisan ti duanana peneliti sarta pencét (I gé nerangkeun alesan dina perdebatan ieu leuwih jéntré dina bab 6 ). Isu digedékeun di perdebatan ieu disababkeun jurnal ka nyebarkeun hiji "ekspresi redaksi bahan perhatian" langka ngeunaan étika jeung prosés review etika pikeun panalungtikan (Verma 2014) .
Nunjukkeun yen tukang ngeunaan Contagion emosi, abdi ayeuna hoyong nunjukkeun yén tilu Sunda urang bisa nyarankeun beton, perbaikan praktis pikeun studi nyata (naon maneh bisa pribadi pikir ngeunaan étika percobaan husus dina ieu). Kahiji R ngarupakeun ngaganti: peneliti kedah neangan pikeun ngaganti percobaan kalawan téhnik kirang invasif sarta picilakaeun, upami mungkin. Contona, tinimbang ngajalankeun hiji percobaan dikawasa randomized, para panalungtik bisa geus dieksploitasi percobaan alam. Salaku nu dijelaskeun dina bagean 2, percobaan alam anu kaayan hal kajadian di dunya nu approximates nu ngerjakeun acak tina perlakuan (misalna lotre pikeun mutuskeun saha nu bakal drafted kana militer). Kauntungan etika tina percobaan alam éta panalungtik teu kudu nganteurkeun perlakuan: lingkungan teu yén pikeun anjeun. Contona, ampir concurrently jeung percobaan Contagion emosi, Lorenzo Coviello et al. (2014) anu exploiting naon bisa disebut hiji emosi Contagion percobaan alam. Coviello sareng kolega Anjeun manggihan yén jalma masangkeun kecap leuwih négatip jeung kecap positif pangsaeutikna dina poé dimana eta hujan. Ku alatan éta, ku ngagunakeun variasi acak dina cuaca, maranéhanana éta bisa diajar efek parobahan dina News Feed tanpa perlu dihalangan pisan. Ieu sakumaha lamun cuaca ieu ngajalankeun percobaan maranéhanana pikeun aranjeunna. Wincik prosedur disebut bit pajeulit, tapi titik pangpentingna pikeun tujuan urang dieu nya éta ku cara maké percobaan alam, Coviello sareng kolega Anjeun éta bisa ngalenyepan sumebarna émosi tanpa kudu ngajalankeun percobaan sorangan.
Nu kadua tina tilu Rs nyaéta nyaring: peneliti kedah neangan keur nyaring perlakuan maranéhna pikeun nyieun éta stasiun bahya salaku kamungkinan. Contona, tinimbang blocking eusi anu boh positif atawa négatif, anu peneliti bisa geus boosted eusi anu positif atawa négatif. Desain boosting Ieu bakal geus robah eusi emosi pamilon 'News eupan, tapi bakal geus kajawab salah sahiji masalah anu kritik dikedalkeun: yén percobaan bisa geus disababkeun pamilon kantun informasi penting dina News Feed maranéhanana. Kalawan desain dipaké ku Kramer sareng kolega Anjeun, pesen anu penting nyaeta salaku kamungkinan diblokir salaku salah yen teu. Sanajan kitu, ku desain boosting, anu pesen nu bakal jadi lunta bakal jadi jalma anu kirang penting.
Tungtungna, anu katilu R ngarupakeun ngurangan: peneliti kedah neangan pikeun ngurangan jumlah pamilon dina percobaan maranéhanana ka minimum diperlukeun pikeun ngahontal obyektif ilmiah maranéhanana. Dina percobaan analog, hal ieu kajantenan alami kusabab waragad variabel tinggi pamilon. Tapi dina percobaan digital, utamana maranéhanana jeung enol ongkos variable, peneliti teu nyanghareupan waragad Konstrain on ukuran percobaan, sarta ieu boga potensi pikeun ngakibatkeun percobaan unnecessarily badag.
Contona, Kramer sareng kolega Anjeun bisa geus dipaké informasi pre-perlakuan ngeunaan pamilon-sapertos maranéhanana salaku pre-perlakuan posting kabiasaan-nyieun analisa maranéhanana leuwih efisien. Leuwih husus, tinimbang ngabandingkeun saimbang kecap positif dina kaayaan pengobatan sarta control, Kramer sareng kolega Anjeun bisa geus dibandingkeun parobahan dina proporsi kecap positif antara kaayaan; hiji pendekatan nu kadangkala disebut desain dicampur (inohong 4,5) sarta kadangkala disebut bédana-di-béda estimator. Nyaeta, pikeun tiap pamilon, anu peneliti bisa geus dijieun skor robah (pos-perlakuan kabiasaan \(-\) kabiasaan pre-treatment) lajeng dibandingkeun skor robah pamilon dina kaayaan pengobatan sarta kontrol. pendekatan ieu bédana-di-béda téh leuwih efisien statistik, nu hartina peneliti bisa ngahontal kapercayaan statistik sami ngagunakeun sampel nu leuwih saeutik.
Tanpa ngabogaan data atah, hese nyaho persis sabaraha leuwih efisien béda-di-béda estimator bakal geus dina hal ieu. Tapi urang tiasa kasampak di percobaan patali séjén pikeun gagasan kasar. Deng et al. (2013) ngalaporkeun yén ku maké formulir di bédana-di-béda estimator, maranéhanana éta bisa ngurangan varian perkiraan maranéhanana ku kira 50% dina tilu percobaan online béda; Hasil sarupa geus dilaporkeun ku Xie and Aurisset (2016) . ngurangan varian 50% Ieu ngandung harti yén peneliti Contagion emosi bisa geus bisa motong sampel maranéhanana di satengah lamun maranéhna sempet dipaké metoda analisa rada béda. Dina basa sejen, ku robah leutik di analisis, 350.000 urang bisa geus luput partisipasi dina percobaan.
Dina titik ieu, anjeun bisa jadi wondering naha peneliti kedah paduli lamun 350.000 jalma éta dina Contagion emosi unnecessarily. Aya dua fitur tangtu Contagion emosi nu nyieun garapan kalayan ukuranana kaleuleuwihan luyu, tur fitur ieu dibagikeun ku loba percobaan widang digital: (1) aya kateupastian ngeunaan naha percobaan bakal ngakibatkeun ngarugikeun ka sahenteuna sababaraha pamilon na (2) partisipasi teu rido. Sigana lumrah mun cobian tetep percobaan nu mibanda fitur ieu salaku leutik jéntré.
Janten jelas, kahayang pikeun ngurangan ukuran percobaan anjeun henteu hartosna yén anjeun teu kudu ngajalankeun badag, enol percobaan ongkos variabel. Ieu ngan hartina percobaan Anjeun teu kudu sagala leuwih badag batan nu peryogi pikeun ngahontal obyektif ilmiah Anjeun. Hiji cara penting pikeun mastikeun yén hiji percobaan anu ukuran appropriately téh keur ngalaksanakeun analisis kakuatan (Cohen 1988) . Dina umur analog nu, peneliti umumna tuh analisis kakuatan pikeun mastikeun yén ulikan maranéhanana éta henteu leutik teuing (ie, dina program-program). Ayeuna, kumaha oge, peneliti kedah ngalakukeun analisis kakuatan pikeun mastikeun yén ulikan maranéhanana henteu badag teuing (ie, leuwih-Powered).
Dina kacindekan, anu tilu R's-ngaganti, nyaring, sarta ngurangan-nyadiakeun prinsip nu bisa ngabantu peneliti ngawangun étika kana desain percobaan maranéhanana. Tangtu, saban ieu parobahan mungkin mun Contagion emosi nawarkeun dagangan-offs. Contona, bukti tina percobaan alam teu salawasna sakumaha bersih sakumaha anu ti percobaan randomized, sarta boosting eusi bisa geus logistically leuwih hese pikeun nerapkeun ti blocking eusi. Ku kituna, tujuan suggesting parobahan ieu éta teu kadua nebak kaputusan peneliti lianna. Rada, ieu keur ngagambarkeun kumaha tilu Sunda urang bisa dilarapkeun dina situasi realistis. Komo, masalah perdagangan-offs asalna nepi sadayana waktos dina desain panalungtikan, sarta di-umur digital, ieu dagang-offs ieu beuki baris ngalibetkeun pertimbangan etika. Engké, dina surah 6, abdi gé nawiskeun sababaraha prinsip sarta frameworks etika nu bisa ngabantu peneliti ngarti tur ngabahas perdagangan-offs ieu.
