ஏற்றுக்கொள்ளக் கூடிய ஒரு சோதனையின் முடிவுகள் ஒரு பொது முடிவுக்கு ஆதரவு எவ்வளவு குறிக்கிறது.
எந்த பரிசோதனையும் சரியாக இல்லை, மேலும் ஆராய்ச்சியாளர்கள் சாத்தியமான பிரச்சினைகளை விவரிக்க விரிவான சொற்களஞ்சியம் உருவாக்கியுள்ளனர். ஒரு குறிப்பிட்ட பரிசோதனையின் முடிவு இன்னும் சில பொது முடிவுகளுக்கு ஆதரவு அளிக்கும் அளவிற்கு செல்லுபடியாகும் . நான்கு முக்கிய வகைகளாக செல்லுபடியாகும் வகையை பிளவுபடுத்துவதற்கு சமூக விஞ்ஞானிகள் (Shadish, Cook, and Campbell 2001, chap. 2) : புள்ளிவிவர முடிவுக்கு செல்லுபடியாகும், உள் செல்லுபடியாகும், செல்லுபடியாகும் மற்றும் வெளிப்புற செல்லுபடியாகும் (Shadish, Cook, and Campbell 2001, chap. 2) . இந்த கருத்துகளை மாஸ்டரிங் உங்களுக்கு பரிசோதிக்கும் மற்றும் ஒரு பரிசோதனையின் வடிவமைப்பு மற்றும் பகுப்பாய்வுகளை மேம்படுத்துவதற்கான ஒரு மனோவியல் பட்டியலை உங்களுக்கு வழங்குகிறது, மேலும் இது மற்ற ஆராய்ச்சியாளர்களுடன் தொடர்புகொள்வதற்கு உதவும்.
சோதனைகளின் புள்ளிவிவர பகுப்பாய்வு சரியாகச் செய்யப்படுகிறதா என்பதைப் பொறுத்து புள்ளியியல் முடிவின் செல்லுபடியாகும் மையம் அமைந்துள்ளது. Schultz et al. (2007) சூழலில் Schultz et al. (2007) , அத்தகைய கேள்விக்கு அவர்கள் \(p\) சரியாக உள்ளதா என்பதை மையமாகக் கொள்ளலாம். புள்ளிவிவரக் கோட்பாடுகள் பரிசோதனையை வடிவமைத்து ஆய்வு செய்ய வேண்டும், இந்த புத்தகத்தின் நோக்கத்திற்கு அப்பாற்பட்டவை, ஆனால் அவை டிஜிட்டல் வயதில் அடிப்படையில் மாறவில்லை. எவ்வாறாயினும், டிஜிட்டல் சோதனையின் தரவுச் சூழல், சிகிச்சை விளைவுகளின் நிலைத்தன்மையை மதிப்பிடுவதற்கான இயந்திர கற்றல் முறைகள் போன்ற புதிய வாய்ப்புகளை உருவாக்கியுள்ளது (Imai and Ratkovic 2013) .
சோதனையான நடைமுறைகள் சரியாக இயங்கினதா என்பதைச் சுற்றி உள் செல்லுதல் மையம். Schultz et al. (2007) பரிசோதனையில் திரும்புவதற்கு Schultz et al. (2007) , உள் செல்லுபடியாக்கத்தைப் பற்றிய கேள்விகள் சீரற்ற தன்மை, சிகிச்சை அளிப்பு மற்றும் விளைவுகளின் அளவீடு ஆகியவற்றை மையமாகக் கொண்டது. உதாரணமாக, ஆராய்ச்சி உதவியாளர்கள் நம்பத்தகுந்த மின்சார மீட்டர் படிக்கவில்லை என்று நீங்கள் கவலை இருக்கலாம். உண்மையில், ஷூல்ட்ஸ் மற்றும் சக ஊழியர்கள் இந்த பிரச்சினையைப் பற்றி கவலை கொண்டனர், மேலும் அவர்கள் ஒரு மீட்டர் மீட்டர் இருமுறை வாசித்தார்கள்; அதிர்ஷ்டவசமாக, முடிவுகள் அடிப்படையில் ஒரே மாதிரியானவை. பொதுவாக, ஷூல்ட்ஸ் மற்றும் சகாக்களின் சோதனைகள் உயர்ந்த அகச் செல்லுபடியைக் கொண்டிருப்பதாகத் தோன்றுகிறது, ஆனால் இது எப்போதுமே முக்கியம் இல்லை: சிக்கலான புலம் மற்றும் ஆன்லைன் சோதனைகள் பெரும்பாலும் சரியான மக்களுக்கு சரியான சிகிச்சையை வழங்குவதோடு அனைவருக்கும் ஏற்படும் விளைவுகளை அளவிடுவதில் சிக்கல் ஏற்படுகின்றன. அதிர்ஷ்டவசமாக, டிஜிட்டல் வயது உள் செல்லுபடியாகும் பற்றி கவலைகள் குறைக்க உதவும், ஏனெனில் அது சிகிச்சை பெற மற்றும் அனைத்து பங்கேற்பாளர்கள் முடிவுகளை அளவிட வேண்டும் அந்த வழங்கப்படும் என்று இப்போது எளிதாக உள்ளது.
தரவரிசை மற்றும் கோட்பாட்டு கட்டடங்களுக்கிடையிலான போட்டியை சுற்றி செல்லுபடியாகும் மையங்களை உருவாக்குங்கள். அத்தியாயம் 2 ல் விவாதிக்கப்பட்டுள்ளபடி, சமுதாய விஞ்ஞானிகள் காரணம் என்ற கருத்தாக்க கருத்தாக்கங்கள் ஆகும். துரதிருஷ்டவசமாக, இந்த சுருக்க கருத்துக்கள் எப்போதும் தெளிவாக வரையறைகள் மற்றும் அளவீடுகள் இல்லை. Schultz et al. (2007) , தடைசெய்யும் சமூக விதிமுறைகளை குறைக்க முடியும் என்ற கூற்று, ஆராய்ச்சியாளர்கள் "தடுப்பு சமூக விதிமுறைகளை" (எ.கா., ஒரு உணர்ச்சி) கையாளவும் மற்றும் "மின்சாரம் பயன்படுத்துவதை" அளவிடுவதற்கான ஒரு சிகிச்சை முறையை வடிவமைக்க வேண்டும். அனலாக் பரிசோதனையில், பல ஆராய்ச்சியாளர்கள் தங்கள் சிகிச்சையை வடிவமைத்து தங்கள் சொந்த விளைவுகளை அளந்தனர். இந்த அணுகுமுறை முடிந்த அளவுக்கு, சோதனைகள் சுருக்கமான கட்டமைப்புகளை ஆய்வு செய்யப்படும் என்பதை உறுதிப்படுத்துகின்றன. டிஜிடல் பரிசோதனையில், நிறுவனங்கள் அல்லது அரசாங்கங்களுடன் ஆராய்ச்சியாளர்கள் பரிவர்த்தனைகளை வழங்குவதோடு, முடிவுகளை அளவிடுவதற்கு எப்போதும் தரவு முறைமைகளைப் பயன்படுத்துவதன் மூலம், சோதனை மற்றும் கோட்பாட்டு கட்டமைப்புகளுக்கு இடையே உள்ள போட்டி குறைவான இறுக்கமானதாக இருக்கலாம். எனவே, அனலாக் சோதனைகள் விட டிஜிட்டல் சோதனைகள் ஒரு செல்லுபடியாகும் கட்டம் இருக்கும் என்று நான் எதிர்பார்க்கிறேன்.
இறுதியாக, இந்த பரிசோதனையின் முடிவு பிற சூழல்களுக்கு பொதுமயமாக்கப்படலாமா என்பதைச் சுற்றி வெளி செல்லுமிழ் மையம் அமைந்துள்ளது. Schultz et al. (2007) , ஒருவர் இதே கருத்தை தெரிவிக்கிறாரா இல்லையா என்பதைக் கேட்கலாம்-தங்கள் சக உறவினர்களுடனான தங்கள் ஆற்றல் பயன்பாடு பற்றிய தகவல்களையும், தடைசெய்வதற்கான விதிமுறைகளின் சமிக்ஞையையும் (எ.கா., எமோடிகான்) -ஒரு வித்தியாசமான வழியில் செய்தால் ஆற்றல் பயன்பாட்டை குறைக்க வேண்டும் வேறு ஒரு அமைப்பில். மிகவும் நன்கு வடிவமைக்கப்பட்ட மற்றும் நன்கு ரன் பரிசோதனைகள், வெளி செல்லுபடியாகும் பற்றி கவலைகள் உரையாற்ற கடினமான உள்ளன. கடந்த காலத்தில், வெளிப்புற செல்லுபடியாக்கத்தைப் பற்றிய இந்த விவாதங்கள் அடிக்கடி ஒரு அறையில் உட்கார்ந்து கொண்டிருக்கும் ஒரு குழுவினருடன் வேறு எந்த நடவடிக்கையும் எடுக்கவில்லை என்றால், வேறு வழி, அல்லது வேறு இடத்தில், . அதிர்ஷ்டவசமாக, டிஜிட்டல் வயது ஆராய்ச்சியாளர்கள் இந்த தரவு இலவச ஊகங்கள் அப்பால் செல்ல மற்றும் அனுபவம் வெளி செல்லுபடியாகும் மதிப்பீடு செயல்படுத்துகிறது.
Schultz et al. (2007) முடிவு Schultz et al. (2007) மிகவும் பரபரப்பாக இருந்தது, ஒபாமா என்ற நிறுவனம், அமெரிக்காவில் பரவலாக சிகிச்சையை பரவலாக்க உதவுகிறது. Schultz et al. (2007) , ஒபயர் இரண்டு தனித்துவமான தொகுதிகள் கொண்ட தனிப்பயனாக்கப்பட்ட முகப்பு எரிசக்தி அறிக்கைகள் ஒன்றை உருவாக்கியது: ஒரு அயோக்கியத்துடன் ஒப்பிடும்போது ஒரு வீட்டு உபயோகத்தின் மின்சாரம் பயன்பாடு மற்றும் எரிசக்தி பயன்பாட்டைக் குறைப்பதற்கான உதவிக்குறிப்புகளை வழங்குதல் (படம் 4.6). பின்னர், ஆராய்ச்சியாளர்களுடன் இணைந்து, இந்த எரிசக்தி அறிக்கையின் தாக்கத்தை மதிப்பிடுவதற்கு ஆப்பரேட்டர் ஒழுங்கமைக்கப்பட்ட கட்டுப்பாட்டு சோதனைகள் நடத்தப்பட்டன. இந்த பரிசோதனையிலான சிகிச்சைகள் வழக்கமாக உடல் ரீதியாக வழங்கப்பட்டிருந்தாலும்-வழக்கமாக பழைய-நத்தை நெயில் வழியாக அனுப்பப்பட்டாலும்-விளைவு டிஜிட்டல் சாதனங்களைப் பயன்படுத்தி உடல் உலகில் (எ.கா., மின் மீட்டர்) அளவிடப்படுகிறது. ஒவ்வொரு வீட்டையும் பார்வையிடும் ஆராய்ச்சியாளர்களுடன் இந்த தகவலை கைமுறையாக சேகரிப்பதற்குப் பதிலாக, ஆப்பரேட்டர் சோதனைகள் அனைத்துமே ஆற்றல்மிக்க நிறுவனங்களுடனும், ஆய்வாளர்கள் மின் அளவிகளை அணுகுவதற்கும் உதவுகின்றன. எனவே, இந்த பகுதி டிஜிட்டல் துறையில் சோதனைகள் குறைந்த மாறி செலவில் ஒரு பாரிய அளவில் ரன்.
Allcott (2011) தளங்களிலிருந்து 600,000 குடும்பங்களைச் சேர்ந்த சோதனைகள் முதல் தொகுப்பில், Allcott (2011) முகப்பு எரிசக்தி அறிக்கை மின்சாரம் நுகர்வு Allcott (2011) கண்டறியப்பட்டது. வேறு வார்த்தைகளில் கூறுவதானால், மிகப்பெரிய, இன்னும் புவியியல்ரீதியாக பல்வேறுபட்ட ஆய்வுகளின் முடிவுகள், Schultz et al. (2007) பலவற்றின் தரவரிசைக்கு ஒப்பானதாக இருந்தது Schultz et al. (2007) . கூடுதலாக, 101 வேறுபட்ட தளங்களில் இருந்து எட்டு மில்லியன் கூடுதல் குடும்பங்களை உள்ளடக்கிய அடுத்த ஆய்வின்படி, Allcott (2015) மீண்டும் வீட்டு எரிசக்தி அறிக்கை தொடர்ந்து மின்சாரம் நுகர்வு குறைக்கப்பட்டுள்ளது என்று கண்டறியப்பட்டது. இந்த மிகப்பெரிய சோதனைகள் ஏதேனும் ஒரு பரிசோதனையில் காணப்பட முடியாத சுவாரஸ்யமான புதிய முறைகளை வெளிப்படுத்தின: விளைவுகளின் அளவு பின்னர் சோதனைகள் (எண்ணிக்கை 4.7) குறைந்துவிட்டது. Allcott (2015) இந்த சரிவை நடந்தது என்று ஊகிக்கப்பட்டது, ஏனெனில் காலப்போக்கில், சிகிச்சை பல்வேறு வகையான பங்கேற்பாளர்களுக்குப் பயன்படுத்தப்பட்டது. மேலும் குறிப்பாக, சுற்றுப்புறச்சூழல் மையம் கொண்ட வாடிக்கையாளர்களுடனான பயன்பாடுகள் முந்தைய திட்டத்தை முன்னெடுக்க வாய்ப்புள்ளது, மேலும் அவர்களது வாடிக்கையாளர்களுக்கு சிகிச்சையளிப்பதற்கும் இன்னும் பதிலளிக்கப்பட்டன. குறைவான சுற்றுச்சூழல்-கவனம் செலுத்தும் வாடிக்கையாளர்களுடனான பயன்பாடுகள் நிரல் ஏற்றுக்கொண்டதால், அதன் செயல்திறன் குறைந்துவிட்டது. எனவே, பரிசோதனையில் சீரற்றமயமாக்கல் சிகிச்சைமுறை மற்றும் கட்டுப்பாட்டு குழு போன்றவை உறுதிபடுத்தப்பட்டால், ஆராய்ச்சி தளங்களில் சீரற்றமையாக்கல் மதிப்பீடுகள் பங்கேற்பாளர்களின் ஒரு குழுவிலிருந்து பொதுவான பொது மக்களுக்கு பொதுமதிப்பீடு செய்யப்பட முடியும் என்பதை உறுதிசெய்கிறது (மாதிரியைப் பற்றி 3-ஆம் அதிகாரத்தை மீண்டும் சிந்தியுங்கள்). ஆராய்ச்சி தளங்கள் தோராயமாக மாதிரியாக்கப்படவில்லை என்றால், பொதுமைப்படுத்தல்-ஒரு செய்தபின் வடிவமைக்கப்பட்ட மற்றும் நடத்தப்பட்ட பரிசோதனையிலிருந்தும்-சிக்கல் வாய்ந்ததாக இருக்கலாம்.
ஒன்றாக, இந்த 111 சோதனைகள் -10 Allcott (2011) மற்றும் 101 ல் Allcott (2015) - அமெரிக்காவில் முழுவதும் 8.5 மில்லியன் குடும்பங்கள் பற்றி. முகப்பு எரிசக்தி அறிக்கைகள் சராசரியாக மின்சார நுகர்வு குறைக்கின்றன என்பதை நிரூபித்து காட்டுகின்றன, இதன் விளைவாக கலிஃபோர்னியாவில் உள்ள 300 வீடுகளிலிருந்து ஷூல்ட்ஸ் மற்றும் சக ஊழியர்களின் அசல் கண்டுபிடிப்புகள் ஆதரிக்கின்றன. இந்த அசல் முடிவுகளை மீட்டெடுப்பதற்கு அப்பால் பின்தொடரும் சோதனைகள், விளைவுகளின் அளவு இடம் மாறுபடும் என்பதைக் காட்டுகிறது. இந்த சோதனை சோதனைகள் பகுதியாக டிஜிட்டல் துறையில் சோதனைகள் பற்றி இன்னும் இரண்டு பொது புள்ளிகளை விளக்குகிறது. முதலில், பரிசோதனைகள் இயங்குவதற்கான செலவு குறைவாக இருக்கும்போது வெளிப்புற செல்லுபடியாக்கத்தைப் பற்றி ஆராய்ச்சியாளர்கள் அனுபவப்பூர்வமாக உரையாற்ற முடியும், இதன் விளைவாக ஏற்கனவே தரவுத் தரவு முறை மூலம் அளவிடப்பட்டால் இது நிகழலாம். எனவே, ஆராய்ச்சியாளர்கள் ஏற்கனவே பதிவு செய்யப்பட்டுள்ள மற்ற சுவாரஸ்யமான மற்றும் முக்கியமான நடத்திகளுக்கான பார்வைக்கு இருக்க வேண்டும் என்று அறிவுறுத்துகிறது, மேலும் இந்த ஏற்கனவே இருக்கும் அளவீட்டு உள்கட்டமைப்பின் மேல் சோதனைகளை வடிவமைக்க வேண்டும். இரண்டாவதாக, இந்த சோதனைகள் தொகு டிஜிட்டல் துறையில் சோதனைகள் ஆன்லைனில் இல்லை என்று நமக்கு நினைவூட்டுகிறது; பெருகிய முறையில், நான் கட்டப்பட்ட சூழலில் சென்சார்கள் மூலம் அளவிடப்படுகிறது பல விளைவுகளை அவர்கள் எல்லா இடங்களிலும் இருக்கும் என்று எதிர்பார்க்கிறேன்.
நான்கு வகையான செல்லுபடியாகும்-புள்ளியியல் முடிவான செல்லுபடியாகும், உள் செல்லுபடியாகும், செல்லுபடியாகும் மற்றும் வெளிப்புற செல்லுபடியை-ஒரு குறிப்பிட்ட பரிசோதனையின் முடிவுகள் பொதுவாக பொதுவான முடிவை ஆதரிக்கின்றனவா என்பதை ஆராய்ச்சியாளர்களுக்கு மதிப்பளிக்க உதவும் ஒரு மனநல பட்டியல். டிஜிட்டல்-வயது சோதனையில் அனலாக்-வயது சோதனைகள் ஒப்பிடும்போது, வெளிப்புற செல்லுபடியை சந்திப்பது எளிதாக இருக்க வேண்டும், மேலும் இது உள் செல்லுபடியை உறுதிப்படுத்த எளிதாக இருக்க வேண்டும். மறுபுறம், டிஜிட்டல்-வயதில் சோதனைகள், குறிப்பாக டிஜிட்டல் துறையில் சோதனைகள் நிறுவனங்களுடன் கூட்டு ஈடுபடும் சோதனையானது, கட்டுப்பாட்டு செல்லுபடியாகும் பிரச்சினைகள் பெரும்பாலும் சவாலானதாக இருக்கும்.