4.4.1 жарамдылығы

Әрекет ету эксперимент нәтижелері неғұрлым жалпы қорытындыны қолдау қанша жатады.

Бірде-эксперимент тамаша болып табылады, және зерттеушілер ықтимал проблемаларды сипаттау кең лексикасын әзірленді. Жарамдылығы нақты эксперимент нәтижелері тағы бірнеше жалпы қорытындыны қолдау қандай дәрежеде жатады. Статистикалық қорытынды қолданылу, ішкі қолданылу, жарамдылығын салу, сондай-ақ сыртқы қолданылу: Әлеуметтік ғалымдар төрт негізгі түрге бөлуге жарамдылығын пайдалы тапты (Shadish, Cook, and Campbell 2001, Ch 2) . Бұл ұғымдар меңгеру сізге эксперимент жобалау және талдау сыни талдау және жетілдіру үшін психикалық бақылау тізімін қамтамасыз етеді, және ол сіз басқа зерттеушілер байланысуға көмектеседі.

Статистикалық қорытынды қолданылу эксперимент статистикалық талдау дұрыс жасалды ма айналасында орталықтары. Тұрғысынан Schultz et al. (2007) , мұндай мәселе олар дұрыс, олардың P-мәндерін есептелген ма ортаға мүмкін. Статистикалық талдау Осы кітаптың аясынан тыс, бірақ мен эксперименттер жобалау және талдау үшін қажетті статистикалық принциптер Сандық заманда өзгерген жоқ деп айтуға болады. Алайда, сандық эксперимент түрлі деректер қоршаған ортаны (емдеу жақтылығы бағалауға машина оқыту әдістерін пайдалана отырып, мысалы, жаңа статистикалық мүмкіндіктер жасауға бермейді (Imai and Ratkovic 2013) ) және жаңа есептеу міндеттер (мысалы, жаппай эксперименттер блоктау (Higgins, Sävje, and Sekhon 2016) ).

Ішкі қолданылу эксперименттік рәсімдер дұрыс орындалды ма айналасында орталықтары. Экспериментке қайта оралсақ Schultz et al. (2007) , ішкі қолданылу туралы мәселелер рандомизации, емдеу жеткізу, және нәтижелерін өлшеу айналасында ортаға мүмкін. Мысалы, сіз зерттеу көмекшілері сенімді электр метр оқып емес, алаңдаушылық болуы мүмкін. Шын мәнінде, Шульц және әріптестер осы мәселе туралы алаңдаушылық болды және олар екі есе оқып метр үлгісін болды; Бақытымызға орай, айтарлықтай бірдей болды. Жалпы алғанда, Шульц және әріптестерінің эксперимент жоғары ішкі жарамдылығын болған, бірақ бұл әрдайым олай емес; кешенді далалық және онлайн эксперименттер жиі проблемаларды шын мәнінде дұрыс адамдар құқығы емдеу жеткізу және әрбір адам үшін нәтижелерді өлшеу құятын. Бақытымызға орай, сандық жасы ол оңай, оны алуға және барлық қатысушылар үшін нәтижелерді өлшеу көзделіп кім үшін арналған ретінде емдеу жеткізіледі қамтамасыз ету үшін жасайды, себебі ішкі қолданылу алаңдаушылық азайтуға көмектесе аласыз.

Деректер мен теориялық құрылымдар арасындағы матч айналасында қолданылу орталықтарын салу. 2-тарауда талқыланғандай, құратын туралы реферат ұғымдар екенін, әлеуметтік ғалымдар себебі болып табылады. Өкінішке орай, бұл абстрактілі ұғымдар әрқашан айқын анықтау және өлшеу жоқ. Оралсақ Schultz et al. (2007) , әлеуметтік нормалар электр энергиясын пайдалануды төмендетуі мүмкін СОТ шағымдар «тыйымын әлеуметтік нормалар» (мысалы, Көңіл-күй таңбасын) айлалы еді және «электр энергиясын пайдалану» өлшеу үшін емдеу жобалау зерттеушілер талап етеді. аналогтық эксперименттер, көптеген зерттеушілер өз емдеу әзірленген және өз нәтижелерін өлшенеді. Бұл тәсіл мүмкіндігінше, эксперименттер зерттелетін реферат құрылымдар сәйкес келуі, қамтамасыз етеді. компаниялар немесе үкіметтерімен зерттеушілер әріптес емдеу жеткізуге және әрдайым-пайдалану Data Systems нәтижелерін өлшеуге сандық эксперименттер, эксперимент және теориялық құрылымдар арасындағы матч кем тығыз болуы мүмкін. Осылайша, мен конструкция қолданылу аналогтық эксперименттер қарағанда сандық экспериментке үлкен алаңдаушылық болуы бейім болады деп күтіп отырмыз.

Соңында, сыртқы қолданылу осы эксперимент нәтижелерін басқа жағдайларға қорыту ма айналасында орталықтары. Оралсақ Schultz et al. (2007) ол басқаша жасалды, егер бір қарым-қатынастарда өз энергетикалық пайдалану туралы, осы идея-қамтамасыз адамы ақпараттық құрдастары мен тыйымын нормаларды сигнал (мысалы, Көңіл-күй таңбасын) -reduce энергетикалық пайдалану болады, сұрай алмады әр түрлі параметр? Ең жақсы құрастырылған, сондай-ақ іске эксперименттер үшін, сыртқы қолданылу туралы мәселелерді шешу үшін қиын болып табылады. Өткен жылы, сыртқы қолданылу туралы бұл дебаттар жиі рәсімдер басқаша, немесе басқа жерде, немесе әр түрлі адамдармен жасалды, егер орын алған еді қандай елестету тырысады бөлмеде отырған адам ғана байламы болды. Бақытымызға орай, сандық жасы бұл деректер тегін алыпсатарлық тыс жылжыту эмпирикалық сыртқы жарамдылығын бағалау үшін зерттеушілерді мүмкіндік береді.

Нәтижелері Себебі Schultz et al. (2007) , сондықтан қызықты болды, Opower атты компания кеңінен жаю үшін ем Америка Құрама Штаттарында коммуналдық серіктес. Жобалау негізінде Schultz et al. (2007) , Opower екі негізгі модульдер, Көңіл-күй таңбасын және энергия (сурет 4.6) төмендету үшін кеңестер қамтамасыз бірімен өз көршілеріне тұрмыстық электр пайдалану туысы көрсететін бір болды теңшелген Home Energy Есептер құрылды. Содан кейін, зерттеушілер бірлесе отырып, Opower Home Energy Есептер әсерін бағалау үшін рандомизацияланған бақылаулы эксперименттер жүгірді. Осы экспериментке емдеу әдетте старомодный кәдімгі пошта-нәтижесі арқылы физикалық-әдетте жеткізілді Тіпті сандық физикалық әлемде құрылғыларды (мысалы, электр метр) көмегімен өлшенеді болды. Керісінше қолмен әрбір үйін бару ғылыми қызметкерлермен осы ақпаратты жинау қарағанда, Opower эксперименттер барлық электр оқулары кіру үшін зерттеушілерді беретін электр энергетикалық компаниялармен әріптестік жасалды. Осылайша, бұл ішінара сандық далалық эксперименттер төмен айнымалы құн бойынша жаппай іске асырылды.

Сурет 4.6: Басты бет Energy Баяндамалар Allcott (2011) Әлеуметтік салыстыру модулі және әрекет қадамдарын модулі болды.

Америка Құрама Штаттарының шамамен 10 коммуналдық кәсіпорындар қызмет көрсететін 600,000 үй қатысуымен эксперименттер бірінші жиынтығы, Allcott (2011) Home Energy есеп 1,7% -ға, электр энергиясын тұтынуды төмендетті табылған. Басқаша айтқанда, әлдеқайда көп, көп географиялық түрлі зерттеу нәтижелері қорытындысы сапалы ұқсас Schultz et al. (2007) . Бірақ, әсер мөлшері аз болды: жылы Schultz et al. (2007) сипаттама және инъективных нормалар жағдайда үй шаруашылықтары (эмотикон бар бір) 5% -ға, электр энергиясын, олардың тұтыну азайтылады. Осы айырмашылықты нақты себебі белгісіз, бірақ Allcott (2011) университеттің демеушілік зерттеу бөлігі ретінде өз қолымен Көңіл-күй таңбасын қабылдау жаппай өндірілетін баяндама бөлігі ретінде басылған Көңіл-күй таңбасын қабылдау қарағанда мінез үлкен әсер етуі мүмкін деп пайымдап энергетикалық компаниясы.

Әрі қарай, кейінгі ғылыми-зерттеу, Allcott (2015) қосымша 8 млн үй қатысуымен қосымша 101 эксперименттер туралы баяндады. Осы Келесі 101 эксперименттерде Home Energy есеп адамдар өз электр қуатын тұтынуды төмендетуге себеп жалғастырды, бірақ әсері тіпті аз болды. Осы төмендеу нақты себебі белгілі, бірақ, ол Allcott (2015) , ол іс жүзінде қатысушылардың түрлі түрлеріне қолданылады, өйткені баяндама тиімділігі уақыт бойы қабылдамау керек пайда деп пайымдап. Нақтырақ айтқанда, неғұрлым эколог аудандарында коммуналдық неғұрлым ықтимал бұрын бағдарламасын қабылдауды, олардың клиенттері емдеу көбірек жауап болды. кем қоршаған ортаны клиенттермен коммуналдық бағдарламасын қабылдады, оның тиімділігін төмендей пайда болды. эксперименттерде рандомизацияны емдеу және бақылау тобы ұқсас болуын қамтамасыз етеді Осылайша, жай, ғылыми-зерттеу сайттарында рандомизацияны сметаларды (артқы сынамаларды іріктеу туралы 3-тарау ойлаймын) неғұрлым жалпы халықтың қатысушылардың бір топтан жалпылама болады қамтамасыз етеді. ғылыми-зерттеу сайттар кездейсоқ іріктемеге жоқ болса, онда қорыту-тіпті тамаша жобаланған және жүргізілген бастап проблемалы болуы эксперимент-аласыз.

Бірге, осы жылы 111 эксперименттер-10 Allcott (2011) және 101 Allcott (2015) бүкіл Құрама Штаттары шамамен 8,5 млн үй -involved. Олар дәйекті Home Energy Есептер орташа электр қуатын тұтынуды, Калифорния 300 үйлерінен Шульц және әріптестерінің бастапқы нәтижелерін қолдайтын нәтиже азайтуға екенін көрсетті. ғана осы бастапқы нәтижелерін тарату Beyond, кейінгі, сондай-ақ эксперименттер әсерін мөлшері орны бойынша өзгеріп отырады, бұл көрсетеді. эксперименттер Бұл жиынтығы, сондай-ақ ішінара сандық далалық эксперименттер туралы тағы екі жалпы ұпай көрсетеді. Біріншіден, зерттеушілер эксперименттер жұмыс істейтін құны төмен болғанда сыртқы қолданылу туралы мекен-жайы алаңдаушылық эмпирикалық алатын болады, және нәтижесі қазірдің өзінде әрқашан-туралы ақпарат жүйесін өлшенеді жатқан болса, осы орын алуы мүмкін. Сондықтан, ол ғылыми-зерттеу қазірдің өзінде жазылған, содан кейін осы қолданыстағы өлшеу инфрақұрылымын үстіне эксперименттер жобалау жүргізілуде басқа да қызықты және маңызды мінез арналған көзқарас-аут болуы тиіс деп болжайды. Екіншіден, осы эксперименттер жиынтығы сандық өрісті эксперименттер ғана онлайн емес екенін есімізге салады; барған сайын Менің ойымша, олар салынған ортада датчиктер арқылы өлшенеді көптеген нәтижелермен барлық жерде болады деп күтеміз.

төрт қолданылу-статистикалық қорытынды қолданылу түрлері, ішкі қолданылу, жарамдылығын салу, сыртқы зерттеушілер нақты эксперимент нәтижелері неғұрлым жалпы қорытындыны қолдау ма бағалау үшін психикалық бақылау тізімін негізділігі-қамтамасыз етеді. аналогтық жасы эксперименттер салыстырғанда, сандық жасы эксперимент бұл эмпирикалық сыртқы жарамдылығын шешу оңай болуы тиіс және ол ішкі жарамдылығын қамтамасыз ету үшін жеңіл болуы тиіс. (Бұл Opower эксперименттер ісі болған жоқ, дегенмен), екінші жағынан, сындарлы қолданылу мәселелері бәлкім сандық жасы эксперимент көп күрделі болады.