Мөөнөтү бир эксперимент натыйжаларын бир кыйла жалпы корутунду колдоо канча билдирет.
Эч кандай эксперимент кемчиликсиз жана изилдөөчүлөр мүмкүн болгон маселелерди түшүндүрүү үчүн көп сөз байлыгын иштелип чыккан. Мөөнөтү бир эксперимент натыйжаларын кээ бир жалпы жыйынтыкка колдоо турган даражада колдонулат. Коомдук окумуштуулардын негизги төрт түргө негиздүүлүгүн бөлүү пайдалуу экенин байкашкан: статистикалык жыйынтык мөөнөтү, ички күчүнүн, негиздүүлүгүн жана тышкы тизме куруу (Shadish, Cook, and Campbell 2001, chap. 2) . бул түшүнүктөрдү өздөштүрүү эксперименттин дизайнын иштеп чыгууда жана аны талдоо сындоого жоопкерчиликтүү жана жакшыртуу үчүн акыл-барагы менен камсыз кылат, ал эми башка изилдөөчүлөр менен байланышууга жардам берет.
Статистикалык жыйынтык мөөнөтү эксперимент статистикалык анализ туура кылган, же борборлору. Контекстинде Schultz et al. (2007) , ошондой эле суроо алар эсептелген же сөз мүмкүн \(p\) туура -values. статистикалык негиздери эксперименттер бул китептин кирбеген иштеп чыгуу жана талдоо керек, бирок алар таптакыр жаштагы өзгөргөн жок калышты. Өзгөрдү кандай, бирок, санариптик эксперименттерде маалымат чөйрөсү, мисалы, дарылоо таасирлерин эместигин аныктоо Машина үйрөнүү ыкмаларын колдонуу сыяктуу жаңы мүмкүнчүлүктөрдү жараткан деп (Imai and Ratkovic 2013) .
Ички колдонуу эксперименталдык жол-жоболору так аткарылган, же борборлору. Боюнча эксперимент кайтууда Schultz et al. (2007) , ички колдонуу тууралуу суроолор ролдоо, дарылоо жеткирүүнү жана натыйжаларын өлчөө компаниянын мүмкүн. Мисалы, илимий кызматкер ишенимдүү электр метр окуган эмес деп ойлогон чыгар. Чынында, Schultz жана кесиптештери бул көйгөй жөнүндө кабатыр болуп, алар эки жолу окуп метр үлгүсү болгон; бактыга жараша, жыйынтыгы негизинен окшош болгон. Жалпысынан алганда, Schultz жана Кесиптештердин эксперимент, ички жогорку юридикалык күчкө ээ окшойт, бирок бул дайыма эле андай боло бербейт: татаал талаа жана онлайн эксперимент көп көйгөйлөр иш жүзүндө керектүү адамдар менен туура мамиле жеткирип жана ар бир натыйжаларын өлчөө кезигишет. Бактыга жараша, санариптик жашы дарылоо, аны кабыл алууга жана бардык катышуучулар үчүн натыйжаларды өлчөө керек боло тургандар + үчүн жеткирилет камсыз кылуу үчүн, анткени ал азыр ички колдонуу кыйын тынчсыздануусун кыскартууга жардам берет.
Маалыматтар жана түшүнүктөр ортосундагы матч тегерегинде мөөнөтү борборлорун куруу. 2-бөлүмдөн билгенибиздей, Constructs жөнүндө илимпоздордун себеби абстрактуу түшүнүк. Тилекке каршы, бул абстракттуу түшүнүктөр дайыма так аныктамасы жана ченемдерди жок. Кайтууда Schultz et al. (2007) , коомдук ченемдерди электр энергиясын колдонууну азайтуу мүмкүн Тыюу доомат менен дарылоо "аркалуу коомдук ченемдерди" сүйлөгөн иштеп чыгуу (мисалы, бир смайлик) жана "электр энергиясын пайдалануу" өлчөө изилдөөчүлөр талап кылат. аналогдук эксперименттерде көптөгөн изилдөөчүлөр өз дарылоонун иштелип чыгат жана өз жыйынтыктарын ченеди. Мындай мамиле мүмкүн болушунча, камсыз кылат, эксперименттер абстракттуу Constructs изилденип жаткан дал келбейт. компаниялар же өкмөттөрү менен изилдөөчүлөр өнөктөш дарылоонун жеткирүү жана натыйжаларды өлчөө үчүн маалымат системалары ар дайым колдонула санариптик тажрыйбаларга, эксперимент жана түшүнүктөр ортосундагы матч аз бекем болушу мүмкүн. Ошентип, мен курган мөөнөтү аналогдук эксперименттерде караганда санариптик эксперименттерде көп болушу шарт түзөт күтөт.
Акыр-аягы, тышкы мөөнөтү бул эксперименттин жыйынтыгы башка кырдаалдарга жалпыланган болот, же борборлору. Кайтууда Schultz et al. (2007) , бул бир эле ой-камсыз кылуу өз курбалдаштары менен болгон мамилеси, алардын энергиясын пайдалануу тууралуу маалымат менен адамдарды жана тыюу салуу ченемдерин белги (мисалы, бир смайлик) аны ар түрдүү жол менен жасалган болсо, энергетикалык колдонулушун азайтуу жакшысын же жокпу, сурап башка жагдайда. абдан жакшы иштелип чыккан жана ошондой эле иш-тажрыйба алуу үчүн, тышкы колдонуу жөнүндө маселелерди чечүү кыйын болуп саналат. Мурун, жол-жоболору ар кандай жол менен жасалган болсо, же башка бир жерде, же башка катышуучулары менен, анда эмне болмок элестетип аракет кылган бөлмөдө тышкы колдонуу жөнүндө талаш-тартыштар көп отурган адамдардын тобу башка эч нерсе тартылган . Бактыга жараша, санариптик жашы бул маалыматтар эркин ушактарга ары жылдыруу жана эмпирикалык тышкы калыстыгын баалоо үчүн изилдөөчүлөр берет.
Жыйынтыгында Анткени Schultz et al. (2007) , дагы көп дарыланып жайгаштыруу үчүн кызыктуу, Opower аттуу компаниясы Кошмо Штаттарда коммуналдык менен биргеликте эле. Долбоорлоо боюнча Schultz et al. (2007) , Opower эки негизги модулдарды эле бет Energy отчеттор ылайыкташтырылган түзүлгөн: бир смайлик менен кошуна турган бир үй-электр энергиясын колдонуу тууганы көрсөтүү жана бир энергия колдонулушун азайтуу үчүн көрүүгү камсыз кылуу (сүрөт 4.6). Андан кийин, изилдөөчүлөр менен биргеликте, Opower бул бет Energy отчету таасирине баа берүү үчүн Эксперимент клиникалык изилдөөлөр, чуркап кетти. Мындай эксперименттердин менен дарылоо, адатта, эски модада үлүл аркылуу дене-адатта жеткирилди да почта-жыйынтык физикалык дүйнөдө санариптик каражаттар аркылуу (мисалы, электр метр) өлчөнгөн. Андан тышкары, кол менен ар бир үйдү кыдырып, изилдөө жардамчылары менен Мындай маалыматты чогултуу үчүн эмес, Opower эксперименттер бийликтин бардык окуу кирүүгө изилдөөчүлөр камсыз энергетикалык компаниялар менен биргеликте жасалган. Алсак, бул жарым-жартылай санариптик тажрыйбалар төмөн өзгөрмө наркы боюнча массалык масштабда алышкан.
10 ар башка сайттардан 600,000 чарбаны бириктирген тажрыйба биринчи жылы, Allcott (2011) Негизги бет энергетика рапорту электр керектөөсүн түшүрүлгөнү табылган. Башка сөз менен айтканда, көп, көп жерлерге ар түрдүү изилдөө натыйжалары жыйынтыгында сапаттуу окшош Schultz et al. (2007) . Андан сырткары, 101 ар кандай чекиттери сегиз миллион кошумча чарбаны бириктирген кийинки изилдөөлөрдө, Allcott (2015) кайра бет энергетика рапорту ырааттуу электр керектөөсүн түшүрүлгөнү табылган. эксперименттердин Бул көп жыйындысы, ошондой эле кандайдыр бир экспериментте көзгө болмок эмес кызыктуу жаңы үлгүсүн ачып: күчүнө көлөмү кийин эксперименттерде төмөндөгөн (сүрөт 4.7). Allcott (2015) , бул төмөндөө, убакыттын өтүшү менен улам болгон, дарылоо катышуучуларынын ар кандай түрлөрү колдонулган деп эсептешет. Тактап айтканда, экологиялык багытталган кардарлар менен коммуналдык программасы мурда кабыл алуу мүмкүн болгон, ошондой эле алардын кардарлары дарылоо үчүн жооп беришкен. азыраак экологиялык багытталган кардарлар менен коммуналдык программасы кабыл алынган, анын натыйжалуулугун баш көрүндү. Ошентип, ушул сыяктуу эксперименттердин дарылоо жана көзөмөл тобу камсыз болуп жылы ролдоо эле, илимий-изилдөө сайттарында ролдоо баа бир кыйла жалпы калктын катышуучуларынын бир тобу Жалпыланган болот (кайра тандоо тууралуу 3-бөлүмдүн ойлонуп) камсыз кылат. изилдөө сайттар туш келди тандалган эмес болсо, анда бир толук иштелип чыккан да, жалпылаштыруу жана тажрыйба-аласыз көйгөйлүү болуп өткөрүлөт.
Адатта, бул 111 эксперименттер-10 Allcott (2011) жана 101 Allcott (2015) бүтүндөй Кошмо Штаттарды кыдырып, болжол менен 8,5 миллион үй -involved. Алар дайыма бет Energy отчеттор орточо электр керектөөнү кыскартуу, California 300 үйлөрүнөн Schultz баштапкы жыйынтыктарын жана кесиптештерибизге колдогон натыйжасын көрсөтөт. Ушул алгачкы жыйынтыктарын көбөйө тышкары, тажрыйба-кийинки, ошондой эле күчүнө өлчөмү жайгашкан ар кандай экенин көрсөтүп турат. эксперименттердин бул топтому да жарым-жартылай санариптик талаа эксперименттери жөнүндө дагы эки жалпы упай турат. Биринчиден, изилдөөчүлөр эксперименттер чуркап наркы төмөн болгон учурда тышкы колдонуу жөнүндө дареги тынчсыздануусун эмпирикалык бере алат, бул жыйынтык мурунтан маалыматтар дайыма боюнча системасы менен ченегенде, айтылып жатса да пайда болушу мүмкүн. Ошондуктан, изилдөөчүлөр буга чейин жазылып жаткан башка кызыктуу жана маанилүү жүрүм-турум үчүн сак болуу керек, андан кийин бул болгон ченегич ички түзүмү үстүнө тажрыйба долбоорун сунуш кылат. Экинчиден, тажрыйба бул топтому санариптик тажрыйбалар эле онлайн эмес экенин эсибизге салат; сайын, алар курган чөйрөдө датчиктер менен ченегенде, көп натыйжалар менен бардык жерде болот деп күтүшөт.
колдонуу-статистикалык жыйынтык күчүнүн, ички күчүнүн төрт түрлөрү, изилдөөчүлөр бир эксперименттин жыйынтыгы бир кыйла жалпы корутунду колдоо баа негиздүүлүгүн жана тышкы психикалык текшерүү мөөнөтү-камсыз жардам куруу. аналогдук-курактык эксперименттери менен салыштырганда, санариптик-курактык эксперименттерде, ал эмпирикалык тышкы негиздүүлүгүн чечүү үчүн кыйын болушу керек, ошондой эле ички аныктыгын камсыз кылуу үчүн кыйын болушу керек. Башка жагынан алганда, курган колдонуу маселелери, балким, компаниялар менен шериктик тартууга санариптик-курактык тажрыйбаларды, өзгөчө, санариптик талаа эксперимент дагы кыйын болуп калат.