Onderzoekers kunnen grote enquêtes versnipperen en in het leven van mensen strooien.
Ecologische kortstondige beoordeling (EMA) houdt het nemen van traditionele enquêtes in, hakken ze in stukken en sprenkelen ze in de levens van de deelnemers. Aldus kunnen enquêtevragen op een geschikte tijd en plaats worden gesteld in plaats van in een lang interview weken nadat de gebeurtenissen zich hebben voorgedaan.
EMA wordt gekenmerkt door vier kenmerken: (1) verzameling van gegevens in reële omgevingen; (2) beoordelingen die gericht zijn op de huidige of zeer recente staten of gedragingen van individuen; (3) beoordelingen die op gebeurtenissen kunnen zijn gebaseerd, op tijd zijn gebaseerd of willekeurig zijn ingegeven (afhankelijk van de onderzoeksvraag); en (4) voltooiing van meerdere beoordelingen in de tijd (Stone and Shiffman 1994) . EMA is een benadering om te vragen dat enorm wordt vergemakkelijkt door smartphones waarmee mensen de hele dag door vaak met elkaar communiceren. Verder, omdat smartphones vol zitten met sensoren, zoals GPS en versnellingsmeters, is het in toenemende mate mogelijk om metingen op basis van activiteit te activeren. Een smartphone kan bijvoorbeeld worden geprogrammeerd om een enquêtevraag te activeren als een respondent naar een bepaalde buurt gaat.
De belofte van EMA wordt mooi geïllustreerd door het proefschriftonderzoek van Naomi Sugie. Sinds de jaren 1970 hebben de Verenigde Staten het aantal mensen dat het gevangen zet, drastisch verhoogd. Vanaf 2005 zaten ongeveer 500 op de 100.000 Amerikanen in de gevangenis, een mate van opsluiting die hoger was dan ergens anders in de wereld (Wakefield and Uggen 2010) . De toename van het aantal mensen dat de gevangenis binnenkomt, heeft ook geleid tot een toename van het aantal vertrekkende gevangenen; ongeveer 700.000 mensen verlaten elk jaar de gevangenis (Wakefield and Uggen 2010) . Deze mensen staan voor ernstige uitdagingen bij het verlaten van de gevangenis en helaas komen velen daarachter. Om recidive te begrijpen en te verminderen, moeten sociale wetenschappers en beleidsmakers de ervaring van mensen begrijpen wanneer ze opnieuw de maatschappij binnenkomen. Deze gegevens zijn echter moeilijk te verzamelen met standaard enquêtemethoden, omdat ex-delinquenten vaak moeilijk te studeren zijn en hun leven buitengewoon onstabiel is. Meetmethoden die enquêtes inzetten om de paar maanden missen enorme hoeveelheden van de dynamiek in hun leven (Sugie 2016) .
Om het re-entry proces met veel grotere precisie te bestuderen, nam Sugie een standaard kanssteekproef van 131 personen uit de volledige lijst van personen die de gevangenis verlieten in Newark, New Jersey. Ze voorzag elke deelnemer van een smartphone, die een uitgebreid datacollectieplatform werd, zowel voor opnamegedrag als voor het stellen van vragen. Sugie gebruikte de telefoons om twee soorten enquêtes te beheren. Eerst stuurde ze een "experience sampling survey" op een willekeurig gekozen tijdstip tussen 9.00 en 18.00 uur en vroeg de deelnemers naar hun huidige activiteiten en gevoelens. Ten tweede, om 19.00 uur, stuurde ze een "dagelijkse enquête" met vragen over alle activiteiten van die dag. Naast deze enquêtevragen registreerden de telefoons hun geografische locatie met regelmatige tussenpozen en hielden ze versleutelde records bij van oproep- en tekstmetagegevens. Met behulp van deze benadering - die vragen en observeren combineert - was Sugie in staat om een gedetailleerde, hoogfrequente reeks metingen te maken over de levens van deze mensen toen ze opnieuw de maatschappij binnenkwamen.
Onderzoekers geloven dat het vinden van een stabiele, kwalitatief hoogwaardige baan mensen helpt om succesvol terug te keren naar de maatschappij. Sugie ontdekte echter dat de werkervaringen van haar deelnemers gemiddeld genomen informeel, tijdelijk en sporadisch waren. Deze beschrijving van het gemiddelde patroon maskeert echter belangrijke heterogeniteit. Sugie vond met name vier verschillende patronen binnen haar deelnemerspool: "early exit" (zij die op zoek gaan naar werk maar daarna stoppen met werken), "persistent search" (zij die veel van de periode doorbrengen met zoeken naar werk) , "Terugkerende werkzaamheden" (degenen die de hele periode werken) en "lage respons" (degenen die niet regelmatig op de enquêtes reageren). De groep 'vroege exit', degenen die op zoek zijn naar werk maar deze niet vinden en stoppen met zoeken, is vooral belangrijk omdat deze groep waarschijnlijk de minste kans heeft om een succesvolle re-entry te hebben.
Je zou je kunnen voorstellen dat het zoeken naar een baan na een gevangenschap een moeilijk proces is dat kan leiden tot depressie en vervolgens terugtrekking uit de arbeidsmarkt. Daarom gebruikte Sugie haar enquêtes om gegevens te verzamelen over de emotionele toestand van deelnemers - een interne toestand die niet gemakkelijk kan worden geschat op basis van gedragsgegevens. Verrassend genoeg ontdekte ze dat de groep 'vroege uittreding' geen hogere niveaus van stress of ongeluk rapporteerde. Integendeel, het was het tegenovergestelde: degenen die bleven zoeken naar werk meldden meer gevoelens van emotionele stress. Al dit fijnmazige, longitudinale detail over het gedrag en de emotionele toestand van de ex-delinquenten is belangrijk om de barrières te begrijpen waarmee ze worden geconfronteerd en om hun overgang naar de samenleving te vergemakkelijken. Verder zou al dit fijnkorrelige detail gemist zijn in een standaardenquête.
Sugie's gegevensverzameling met een kwetsbare populatie, met name de passieve gegevensverzameling, kan ethische bezwaren opleveren. Maar Sugie anticipeerde op deze zorgen en behandelde ze in haar ontwerp (Sugie 2014, 2016) . Haar procedures werden beoordeeld door een externe partij, de Institutionele Review Board van haar universiteit, en voldeden aan alle bestaande regels. Verder ging de benadering van Sugie, in overeenstemming met de op principes gebaseerde benadering die ik in hoofdstuk 6 bepleit, veel verder dan wat de bestaande regelgeving vereiste. Ze ontving bijvoorbeeld zinvolle geïnformeerde toestemming van elke deelnemer, ze stelde deelnemers in staat om tijdelijk de geografische tracking uit te schakelen, en ze deed veel moeite om de gegevens die ze verzamelde te beschermen. Naast het gebruik van geschikte codering en gegevensopslag, verkreeg ze ook een certificaat van vertrouwelijkheid van de federale overheid, wat betekende dat ze niet gedwongen kon worden om haar gegevens aan de politie over te dragen (Beskow, Dame, and Costello 2008) . Ik denk dat het project van Sugie vanwege haar doordachte aanpak een waardevol model is voor andere onderzoekers. In het bijzonder struikelde ze niet blindelings in een ethisch moeras, noch mijdt ze belangrijk onderzoek omdat het ethisch ingewikkeld is. Integendeel, ze dacht zorgvuldig na, vroeg passend advies, respecteerde haar deelnemers en ondernam stappen om het risico-batenprofiel van haar studie te verbeteren.
Ik denk dat er drie algemene lessen zijn uit het werk van Sugie. Ten eerste zijn nieuwe benaderingen om te vragen volledig compatibel met de traditionele bemonsteringsmethoden; herinneren dat Sugie een standaard kanssteekproef nam van een goed gedefinieerde framepopulatie. Ten tweede kunnen hoogfrequente longitudinale metingen bijzonder waardevol zijn voor het bestuderen van sociale ervaringen die onregelmatig en dynamisch zijn. Ten derde, wanneer het verzamelen van enquêtegegevens wordt gecombineerd met big data-bronnen, iets waarvan ik denk dat het steeds vaker voorkomt, zoals ik later in dit hoofdstuk zal betogen, kunnen er aanvullende ethische kwesties ontstaan. Ik zal onderzoeksethiek in hoofdstuk 6 gedetailleerder behandelen, maar Sugie's werk laat zien dat deze problemen kunnen worden aangepakt door gewetensvolle en doordachte onderzoekers.