4.6.2 Ibni l-etika fid-disinn tiegħek: ibdel, jirfina u jnaqqas

Għamla esperiment tiegħek aktar umana billi tissostitwixxi esperimenti ma 'studji mhux esperimentali, raffinar-trattamenti, u jitnaqqas in-numru ta' parteċipanti.

It-tieni biċċa ta 'parir li nixtieq nipproponi dwar it-tfassil ta' esperimenti diġitali jikkonċerna l-etika. Peress li l-esperiment Restivo u van de Rijt dwar il-varjazzjonijiet fil-Wikipedia juri, tnaqqis fl-ispiża jfisser li l-etika se ssir parti dejjem aktar importanti tad-disinn tar-riċerka. Minbarra l-oqfsa etiċi li jiggwidaw ir-riċerka tas-suġġetti umani li se niddeskrivi fil-kapitolu 6, ir-riċerkaturi li jiddisinjaw esperimenti diġitali jistgħu wkoll jużaw ideat etiċi minn sors differenti: il-prinċipji etiċi żviluppati biex jiggwidaw l-esperimenti li jinvolvu l-annimali. B'mod partikolari, fil-ktieb importanti tagħhom Prinċipji ta 'Teknoloġija Esperimentali Kannella , Russell and Burch (1959) ipproponew tliet prinċipji li għandhom jiggwidaw ir-riċerka dwar l-annimali: jissostitwixxu, jirfinaw u jnaqqsu. Nixtieq nipproponi li dawn it-tliet R's jistgħu jintużaw ukoll - f'forma kemmxejn modifikata - biex jiggwidaw id-disinn ta 'esperimenti umani. Partikolarment,

• Ibdel: Ibdel l-esperimenti b'metodi inqas invażivi jekk possibbli.
• Irfina: Irfina t-trattament biex tagħmilha kemm jista 'jkun mingħajr periklu.
• Naqqas: Naqqas in-numru ta 'parteċipanti fl-esperiment tiegħek kemm jista' jkun.

Sabiex dawn it-tliet Rs ikunu konkreti u juru kif jistgħu potenzjalment iwasslu għal disinn sperimentali aħjar u aktar uman, se niddeskrivi esperiment ta 'qasam fuq l-internet li ġġenera dibattitu etiku. Imbagħad, jien ser niddeskrivi kif it-tliet R's jissuġġerixxu bidliet konkreti u prattiċi għad-disinn ta 'l-esperiment.

Waħda mill-esperimenti diġitali fuq l-iktar diskussjonijiet etiċi tmexxiet minn Adam Kramer, Jamie Guillroy u Jeffrey Hancock (2014) u ġiet imsejħa "Konġunazzjoni Emozzjonali". L-esperiment sar fuq Facebook u kien motivat minn taħlita ta 'esperti xjentifiċi u mistoqsijiet prattiċi. Dak iż-żmien, il-mod dominanti li l-utenti kienu jinteraġixxu ma 'Facebook kien l-Aħbarijiet Feed, sett ta' aġġornamenti tal-istatus tal-Facebook mill-ħbieb ta 'Facebook ta' utent. Uħud mill-kritiċi ta 'Facebook kienu ssuġġerew li minħabba li l-Għalf Aħbarijiet għandu kariga pożittiva ħafna-ħbieb li juru l-aħħar parti tagħhom - jista' jikkawża lill-utenti li jħossu imdejjaq minħabba li ħajjithom deher inqas eċċitanti meta mqabbla. Min-naħa l-oħra, forsi l-effett huwa eżattament l-oppost: forsi jaraw li l-ħabib tiegħek meta jkun hemm ħin tajjeb jġiegħlek tħossok kuntent. Sabiex tindirizza dawn l-ipoteżijiet li jikkompetu - u biex niffaċċjaw il-fehim tagħna dwar kif l-emozzjonijiet ta 'persuna jiġu affettwati mill-emozzjonijiet tal-ħbieb tagħha-Kramer u l-kollegi mexxa esperiment. Huma poġġew madwar 700,000 utent f'erba 'gruppi għal ġimgħa waħda: grupp "negattiv-imnaqqas", li għalih karigi b'kelm negattivi (eż., "Imdejjaq") kienu blokkati bl-addoċċ milli jidhru fl-Għalf tal-Aħbarijiet; grupp "pożittiv mnaqqas" li għalih karigi b'kelm pożittivi (eż., "kuntenti") ġew imblukkati bl-addoċċ; u żewġ gruppi ta 'kontroll. Fil-grupp ta 'kontroll għall-grupp "imnaqqas b'negatività", il-postijiet ġew imblukkati bl-addoċċ bl-istess rata bħall-grupp "negattivament imnaqqas" iżda mingħajr kont tal-kontenut emozzjonali. Il-grupp ta 'kontroll għall-grupp "pożittiv mnaqqas" inbena b'mod parallel. Id-disinn ta 'dan l-esperiment juri li l-grupp ta' kontroll xieraq mhuwiex dejjem wieħed mingħajr tibdil. Pjuttost, xi drabi, il-grupp ta 'kontroll jirċievi trattament sabiex joħloq paragun preċiż li teħtieġ mistoqsija ta' riċerka. Fil-każijiet kollha, il-postijiet li kienu mblukkati mill-Feed News għadhom disponibbli għall-utenti permezz ta 'partijiet oħra tal-websajt Facebook.

Kramer u l-kollegi sabu li għall-parteċipanti fil-kundizzjoni mnaqqsa b'potittività, il-persentaġġ ta 'kliem pożittiv fl-aġġornamenti tal-istatus tagħhom naqas u l-persentaġġ ta' kliem negattiv żdied. Min-naħa l-oħra, għall-parteċipanti f'kondizzjoni mnaqqsa min-negattività, il-perċentwal ta 'kliem pożittiv żdied u dak tal-kliem negattiv naqas (figura 4.24). Madankollu, dawn l-effetti kienu pjuttost żgħar: id-differenza fil-kliem pożittiv u negattiv bejn it-trattamenti u l-kontrolli kienet madwar 1 f'1,000 kelma.

Figura 4.24: Evidenza ta 'kontaġju emozzjonali (Kramer, Guillory, and Hancock 2014) . Il-parteċipanti fil-kundizzjoni mnaqqsa b'negatività użaw inqas kliem negattivi u kliem iktar pożittiv, u l-parteċipanti fil-kundizzjoni mnaqqsa b'potittività użaw kliem aktar negattivi u inqas kliem pożittivi. Il-bars jirrappreżentaw żbalji standard stmati. Adattat minn Kramer, Guillory, and Hancock (2014) , figura 1.

Qabel ma tiddiskuti l-kwistjonijiet etiċi mqajma minn dan l-esperiment, nixtieq niddeskrivi tliet kwistjonijiet xjentifiċi billi tuża uħud mill-ideat minn qabel fil-kapitolu. L-ewwelnett, mhuwiex ċar kif id-dettalji attwali tal-esperiment jingħaqdu mal-pretensjonijiet teoretiċi; Fi kliem ieħor, hemm mistoqsijiet dwar il-validità tal-kostruzzjoni. Mhuwiex ċar li l-għadd ta 'kelmiet pożittivi u negattivi huma attwalment indikatur tajjeb tal-istat emozzjonali tal-parteċipanti minħabba li (1) mhuwiex ċar li l-kliem li l-post tan-nies huwa indikatur tajjeb tal-emozzjonijiet tagħhom u (2) mhuwiex ċar li t-teknika ta 'analiżi ta' sentiment partikulari li r-riċerkaturi wżati tista 'tiddeduċi l-emozzjonijiet b'mod affidabbli (Beasley and Mason 2015; Panger 2016) . Fi kliem ieħor, jista 'jkun hemm miżura ħażina ta' sinjal preġudikat. It-tieni nett, id-disinn u l-analiżi tal-esperiment jgħidulna xejn dwar min kien l-aktar milqut (jiġifieri, m'hemmx analiżi tal-eteroġeneità tal-effetti tat-trattament) u x'jista 'jkun il-mekkaniżmu. F'dan il-każ, ir-riċerkaturi kellhom ħafna informazzjoni dwar il-parteċipanti, iżda kienu essenzjalment trattati bħala widgets fl-analiżi. It-tielet, id-daqs ta 'l-effett f'dan l-esperiment kien żgħir ħafna; id-differenza bejn il-kundizzjonijiet ta 'trattament u kontroll hija ta' madwar 1 f'1,000 kelma. Fid-dokument tagħhom, Kramer u l-kollegi jagħmlu l-każ li effett ta 'dan id-daqs huwa importanti għax mijiet ta' miljuni ta 'nies jaċċessaw l-Għalf Aħbarijiet tagħhom kuljum. Fi kliem ieħor, huma jargumentaw li anke jekk l-effetti huma żgħar għal kull persuna, huma kbar fl-aggregat. Anke jekk aċċettajt dan l-argument, għadu mhux ċar jekk l-effett ta 'dan id-daqs huwiex importanti rigward il-kwistjoni xjentifika aktar ġenerali dwar it-tixrid tal-emozzjonijiet (Prentice and Miller 1992) .

Minbarra dawn il-mistoqsijiet xjentifiċi, ftit jiem wara li dan id-dokument kien ippubblikat fil- Proċedimenti tal-Akkademja Nazzjonali tax-Xjenzi , kien hemm kritika enormi kemm mir-riċerkaturi kif ukoll mill-istampa (ser niddeskrivi l-argumenti f'dan id-dibattitu f'aktar dettall fil-kapitolu 6 ). Il-kwistjonijiet imqajma f'dan id-dibattitu kkawżaw li l-ġurnal jippubblika "espressjoni editorjali ta 'tħassib" rari dwar l-etika u l-proċess ta' analiżi etika għar-riċerka (Verma 2014) .

Minħabba dak l-isfond dwar il-Konġin Emozzjonali, issa nixtieq nuri li t-tliet R's jistgħu jissuġġerixxu titjib konkret u prattiku għal studji reali (x'ikun inti tista 'personalment taħseb dwar l-etika ta' dan l-esperiment partikolari). L-ewwel R jissostitwixxi : ir-riċerkaturi għandhom ifittxu li jissostitwixxu esperimenti b'metodi inqas invażivi u riskjużi, jekk possibbli. Per eżempju, minflok imexxi esperiment ikkontrollat ​​randomizzat, ir-riċerkaturi setgħu jisfruttaw esperiment naturali . Kif deskritt fil-kapitolu 2, l-esperimenti naturali huma sitwazzjonijiet fejn jiġri xi ħaġa fid-dinja li tavviċina l-assenjazzjoni bl-addoċċ ta 'trattamenti (eż. Lotterija biex tiddeċiedi min se jiġi abbozzat fil-militar). Il-vantaġġ etiku ta 'esperiment naturali huwa li r-riċerkatur m'għandux jagħti trattamenti: l-ambjent jagħmel dak għalik. Pereżempju, kważi fl-istess ħin ma 'l-esperiment Emozzjonali Konġjun, Lorenzo Coviello et al. (2014) kienu qegħdin jisfruttaw dak li seta 'jissejjaħ esperiment naturali ta' Konġun Emozzjonali. Coviello u l-kollegi skoprew li n-nies jippubblikaw kliem iktar negattivi u anqas kliem pożittivi f'jiem fejn qed ix-xita. Għalhekk, bl-użu ta 'varjazzjoni każwali fit-temp, huma setgħu jistudjaw l-effett tal-bidliet fl-Għalf Aħbarijiet mingħajr il-ħtieġa li jintervjenu. Kien bħallikieku t-temp kien għaddej l-esperiment tagħhom għalihom. Id-dettalji tal-proċedura tagħhom huma daqsxejn ikkumplikati, iżda l-iktar punt importanti għall-iskopijiet tagħna hawnhekk huwa li bl-użu ta 'esperiment naturali, Coviello u l-kollegi setgħu jitgħallmu dwar it-tixrid tal-emozzjonijiet mingħajr il-ħtieġa li jwettqu l-esperiment tagħhom stess.

It-tieni mit-tliet Rs huwa rfinut : ir-riċerkaturi għandhom ifittxu li jirfinaw it-trattamenti tagħhom biex jagħmluhom kemm jista 'jkun ma jagħmlux ħsara. Pereżempju, aktar milli jimblokka kontenut li kien jew pożittiv jew negattiv, ir-riċerkaturi setgħu żiedu kontenut li kien pożittiv jew negattiv. Dan it-tisħiħ tad-disinn kien ibiddel il-kontenut emozzjonali tal-Feeds Aħbarijiet tal-parteċipanti, iżda kien jindirizza waħda mit-tħassib li l-kritiċi esprimew: li l-esperimenti setgħu kkawżaw lill-parteċipanti li jitilfu informazzjoni importanti fl-Għalf Aħbarijiet tagħhom. Bid-disinn użat minn Kramer u l-kollegi, messaġġ li huwa importanti huwa probabbli li jiġi mblukkat bħala wieħed li mhuwiex. Madankollu, b'żieda fid-disinn, il-messaġġi li jiġu spustati jkunu dawk li huma inqas importanti.

Fl-aħħarnett, it-tielet R hija mnaqqsa : ir-riċerkaturi għandhom ifittxu li jnaqqsu n-numru ta 'parteċipanti fl-esperiment tagħhom għall-minimu meħtieġ biex jintlaħaq l-għan xjentifiku tagħhom. Fl-esperimenti analogi, dan ġara naturalment minħabba l-ispejjeż varjabbli għolja tal-parteċipanti. Iżda f'esperimenti diġitali, partikolarment dawk b'inqas spejjeż varjabbli, ir-riċerkaturi ma jiffaċċjawx restrizzjoni tal-ispiża fuq id-daqs tal-esperiment tagħhom, u dan għandu l-potenzjal li jwassal għal esperimenti kbar bla bżonn.

Pereżempju, Kramer u l-kollegi setgħu użaw informazzjoni ta 'qabel it-trattament dwar il-parteċipanti tagħhom - bħat-trattament ta' qabel it-trattament tal-imġieba - biex jagħmlu l-analiżi tagħhom aktar effiċjenti. B'mod aktar speċifiku, minflok ma tqabbel il-proporzjon ta 'kliem pożittiv fil-kundizzjonijiet ta' trattament u kontroll, Kramer u l-kollegi setgħu qabblu l- bidla fil-proporzjon ta 'kliem pożittiv bejn il-kundizzjonijiet; approċċ li xi kultant jissejjaħ disinn imħallat (figura 4.5) u kultant jissejjaħ stimatur ta 'differenza fid-differenzi. Dan huwa, għal kull parteċipant, ir-riċerkaturi setgħu ħolqu punteġġ bidla (wara t-trattament imġieba \(-\) mġiba qabel il-kura) u mbagħad imqabbla l-punteġġi it-tibdil tal-parteċipanti fil-kondizzjonijiet tat-trattament u ta 'kontroll. Dan l-approċċ ta 'differenza fid-differenzi huwa aktar effiċjenti statistikament, li jfisser li r-riċerkaturi jistgħu jiksbu l-istess fiduċja statistika billi jużaw kampjuni ferm iżgħar.

Mingħajr ma jkollok id-data mhux ipproċessata, huwa diffiċli li tkun taf eżattament x'inhu l-iktar stimatur ta 'differenza fid-differenzi f'dan il-każ. Imma nistgħu nħarsu lejn esperimenti oħra relatati għal idea approssimattiva. Deng et al. (2013) irrappurtaw li bl-użu ta 'stima tal-differenza fid-differenzi, dawn kienu kapaċi jnaqqsu d-differenza tal-istimi tagħhom b'madwar 50% fi tliet esperimenti online differenti; riżultati simili ġew irrappurtati minn Xie and Aurisset (2016) . Dan it-tnaqqis tal-varjanza ta '50% ifisser li r-riċerkaturi tal-Konġjun Emozzjonali setgħu inaqqsu l-kampjun tagħhom bin-nofs jekk użaw metodu ta' analiżi kemmxejn differenti. Fi kliem ieħor, bi ftit bidla fl-analiżi, 350,000 persuna setgħu ġew meħlusa mill-parteċipazzjoni fl-esperiment.

Fuq dan il-punt, tista 'tkun mintix għaliex ir-riċerkaturi għandhom jieħdu ħsiebhom jekk 350,000 persuna kienu fil-Kuxjenza Emozzjonali bla bżonn. Hemm żewġ karatteristiċi partikolari ta 'Kollettiva Emozzjonali li jagħmlu t-tħassib b'dimensjoni eċċessiva xierqa, u dawn il-karatteristiċi huma maqsuma f'ħafna esperimenti diġitali fuq il-post: (1) hemm inċertezza dwar jekk l-esperiment jikkawżax ħsara għal mill-inqas xi parteċipanti u (2) parteċipazzjoni ma kienx volontarju. Jidher raġonevoli li wieħed jipprova jżomm esperimenti li għandhom dawn il-karatteristiċi kemm jista 'jkun żgħar.

Biex tkun ċara, ix-xewqa li tnaqqas id-daqs ta 'l-esperiment tiegħek ma jfissirx li m'għandekx tmexxi esperimenti kbar ta' spejjeż varjabbli żero. Dan ifisser biss li l-esperimenti tiegħek m'għandhomx ikunu akbar milli għandek bżonn biex tilħaq l-għan xjentifiku tiegħek. Mod wieħed importanti biex jiġi żgurat li l-esperiment ikun daqs xieraq huwa li twettaq analiżi tal-poter (Cohen 1988) . Fl-età analoga, ir-riċerkaturi ġeneralment għamlu analiżi tal-poter biex jiżguraw li l-istudju tagħhom ma kienx żgħir wisq (jiġifieri, li ma jaħdimx). Issa, madankollu, ir-riċerkaturi għandhom jagħmlu analiżi tal-poter biex jiżguraw li l-istudju tagħhom mhuwiex kbir wisq (jiġifieri, li jaħdem iżżejjed).

Bħala konklużjoni, it-tliet R's jissostitwixxu, jirfinaw u jnaqqsu jipprovdu prinċipji li jistgħu jgħinu lir-riċerkaturi jibnu l-etika fid-disinji sperimentali tagħhom. Naturalment, kull waħda minn dawn il-bidliet possibbli għal Kollettur Emozzjonali tintroduċi kompromessi. Pereżempju, l-evidenza minn esperimenti naturali mhijiex dejjem nadifa minn dik minn esperimenti randomizzati, u t-tisħiħ tal-kontenut jista 'jkun loġistikament aktar diffiċli biex jiġi implimentat milli jimblokka l-kontenut. Allura, l-iskop li tissuġġerixxi dawn il-bidliet ma kienx biex issewwek id-deċiżjonijiet ta 'riċerkaturi oħra. Pjuttost, kien li juri kif it-tliet R's jistgħu jiġu applikati f'sitwazzjoni realistika. Fil-fatt, il-kwistjoni tal-kompromessi toħroġ il-ħin kollu fid-disinn tar-riċerka, u fl-era diġitali, dawn il-kompromessi se jinvolvu dejjem aktar konsiderazzjonijiet etiċi. Aktar tard, fil-kapitolu 6, se nibgħat xi prinċipji u oqfsa etiċi li jistgħu jgħinu lir-riċerkaturi jifhmu u jiddiskutu dawn il-kompromessi.