4.4.1 ವಾಯಿದೆ

ವಾಯಿದೆ ಒಂದು ಪ್ರಯೋಗದ ಫಲಿತಾಂಶಗಳು ಹೆಚ್ಚು ಸಾಮಾನ್ಯ ನಿರ್ಣಯವನ್ನು ಎಷ್ಟು ಸೂಚಿಸುತ್ತದೆ.

ಯಾವುದೇ ಪ್ರಯೋಗ ಪರಿಪೂರ್ಣ, ಮತ್ತು ಸಂಶೋಧಕರು ಸಂಭಾವ್ಯ ಸಮಸ್ಯೆಗಳನ್ನು ವಿವರಿಸಲು ವ್ಯಾಪಕ ಶಬ್ದಕೋಶವನ್ನು ಅಭಿವೃದ್ಧಿಪಡಿಸಿವೆ. ವಾಯಿದೆ ಮಟ್ಟಿಗೆ ನಿರ್ದಿಷ್ಟ ಪ್ರಯೋಗ ಫಲಿತಾಂಶಗಳು ಕೆಲವು ಸಾಮಾನ್ಯ ನಿರ್ಣಯವನ್ನು ಇದು ಸೂಚಿಸುತ್ತದೆ. ಇದು ನಾಲ್ಕು ಪ್ರಮುಖ ಪ್ರಕಾರಗಳಾಗಿ ಸಿಂಧುತ್ವವನ್ನು ಬೇರ್ಪಡಿಸಲು ಉಪಯುಕ್ತ ಸಮಾಜ ವಿಜ್ಞಾನಿಗಳು ಕಂಡು: ಸಂಖ್ಯಾಶಾಸ್ತ್ರೀಯ ತೀರ್ಮಾನಕ್ಕೆ ಸಿಂಧುತ್ವ, ಆಂತರಿಕ ಸಿಂಧುತ್ವವನ್ನು ಸಿಂಧುತ್ವವನ್ನು ನಿರ್ಮಿಸಲು ಮತ್ತು ಬಾಹ್ಯ ಸಿಂಧುತ್ವವನ್ನು (Shadish, Cook, and Campbell 2001, Ch 2) . ಇಂತಹ ಪರಿಕಲ್ಪನೆಗಳನ್ನು ಮಾಸ್ಟರಿಂಗ್ ನೀವು ಟೀಕಿಸುವ ಮತ್ತು ವಿನ್ಯಾಸ ಮತ್ತು ಪ್ರಯೋಗ ವಿಶ್ಲೇಷಣೆಯನ್ನು ಸುಧಾರಿಸುತ್ತದೆ ಮಾನಸಿಕ ಪರಿಶೀಲನಾಪಟ್ಟಿ ಒದಗಿಸುತ್ತದೆ ಮತ್ತು ನೀವು ಇತರ ಸಂಶೋಧಕರು ಸಂವಹನ ಸಹಾಯ ಮಾಡುತ್ತದೆ.

ಸ್ಟ್ಯಾಟಿಸ್ಟಿಕಲ್ ತೀರ್ಮಾನಕ್ಕೆ ಸಿಂಧುತ್ವವನ್ನು ಪ್ರಯೋಗದ ಅಂಕಿಅಂಶಗಳ ವಿಶ್ಲೇಷಣೆ ಸರಿಯಾಗಿ ಎಂಬುದನ್ನು ಸುತ್ತ ತಿರುಗುತ್ತದೆ. ಸಂದರ್ಭದಲ್ಲಿ Schultz et al. (2007) ಇಂತಹ ಪ್ರಶ್ನೆ ಅವರು ಸರಿಯಾಗಿ ತಮ್ಮ ಪು ಮೌಲ್ಯಗಳು ಲೆಕ್ಕಾಚಾರ ಎಂಬುದನ್ನು ಸೆಂಟರ್ ಇರಬಹುದು. ಅಂಕಿಅಂಶಗಳ ವಿಶ್ಲೇಷಣೆ ಈ ಪುಸ್ತಕದ ವ್ಯಾಪ್ತಿಯ ಹೊರಗಿದೆ, ಆದರೆ ನಾನು ವಿನ್ಯಾಸ ಮತ್ತು ಪ್ರಯೋಗಗಳನ್ನು ವಿಶ್ಲೇಷಿಸಲು ಅಗತ್ಯವಿದೆ ಅಂಕಿಅಂಶಗಳ ತತ್ವಗಳನ್ನು ಡಿಜಿಟಲ್ ಯುಗದಲ್ಲಿ ಬದಲಾಯಿತು ಹೇಳಬಹುದು. ಆದಾಗ್ಯೂ, ಡಿಜಿಟಲ್ ಪ್ರಯೋಗಗಳನ್ನು ವಿವಿಧ ಡೇಟಾವನ್ನು ಪರಿಸರ ಹೊಸ ಅಂಕಿಅಂಶಗಳ ಅವಕಾಶಗಳನ್ನು ರಚಿಸಲು ಇಲ್ಲ (ಉದಾಹರಣೆಗೆ, ಚಿಕಿತ್ಸೆಯ ಪರಿಣಾಮಗಳನ್ನು ಹೆಟೆರೋಜೀನಿಯಿಟಿ ಅಂದಾಜು ಯಂತ್ರ ಕಲಿಕೆ ವಿಧಾನಗಳನ್ನು ಬಳಸಿಕೊಂಡು (Imai and Ratkovic 2013) ) ಮತ್ತು ಹೊಸ ಕಾಂಪ್ಯುಟೇಶನಲ್ ಸವಾಲುಗಳನ್ನು (ಉದಾ, ಬೃಹತ್ ಪ್ರಯೋಗಗಳಲ್ಲಿ ತಡೆಯುವ (Higgins, Sävje, and Sekhon 2016) ).

ಆಂತರಿಕ ಸಿಂಧುತ್ವವನ್ನು ಪ್ರಾಯೋಗಿಕ ವಿಧಾನಗಳು ಸರಿಯಾಗಿ ಎಂಬುದನ್ನು ಸುತ್ತ ತಿರುಗುತ್ತದೆ. ಪ್ರಯೋಗ ಹಿಂದಿರುಗುತ್ತಿದ್ದೀರಾ Schultz et al. (2007) , ಆಂತರಿಕ ಸಿಂಧುತ್ವವನ್ನು ಬಗ್ಗೆ ಪ್ರಶ್ನೆಗಳನ್ನು ಫಲಿತಾಂಶಗಳ ಚಿಕಿತ್ಸೆಯ ವಿತರಣೆ, ಮತ್ತು ಮಾಪನ, ಯಾದೃಚ್ಛಿಕ ಸುಮಾರು ಸೆಂಟರ್ ಸಾಧ್ಯವಾಗಲಿಲ್ಲ. ಉದಾಹರಣೆಗೆ, ನೀವು ಸಂಶೋಧನಾ ಸಹಾಯಕರು ಅಲ್ಲ ವಿಶ್ವಾಸಾರ್ಹವಾಗಿ ವಿದ್ಯುತ್ ಮೀಟರ್ಗಳನ್ನು ಓದಲು ಎಂದು ಕಾಳಜಿ ಇರಬಹುದು. ವಾಸ್ತವವಾಗಿ, ಷುಲ್ಟ್ಜ್ ಮತ್ತು ಸಹೋದ್ಯೋಗಿಗಳು ಈ ಸಮಸ್ಯೆಯನ್ನು ಚಿಂತೆ ಮತ್ತು ಅವರು ಎರಡು ಬಾರಿ ಓದಲು ಮೀಟರ್ ಮಾದರಿ ಹೊಂದಿತ್ತು; ಅದೃಷ್ಟವಶಾತ್, ಫಲಿತಾಂಶಗಳು ಮೂಲಭೂತವಾಗಿ ಒಂದೇ. ಸಾಮಾನ್ಯವಾಗಿ, ಷುಲ್ಟ್ಜ್ ಮತ್ತು ಸಹೋದ್ಯೋಗಿಗಳು 'ಪ್ರಯೋಗ ಉನ್ನತವಾದ ಆಂತರಿಕ ಸಿಂಧುತ್ವವನ್ನು ಕಂಡುಬರುತ್ತವೆ, ಆದರೆ ಯಾವಾಗಲೂ ಅಲ್ಲ; ಸಂಕೀರ್ಣ ಕ್ಷೇತ್ರ ಮತ್ತು ಆನ್ಲೈನ್ ಪ್ರಯೋಗಗಳನ್ನು ಸಾಮಾನ್ಯವಾಗಿ ಸಮಸ್ಯೆಗಳನ್ನು ವಾಸ್ತವವಾಗಿ ಜನರಿಗೆ ಸರಿಯಾದ ಚಿಕಿತ್ಸೆ ತಲುಪಿಸುವ ಮತ್ತು ಎಲ್ಲರಿಗೂ ಫಲಿತಾಂಶಗಳ ಅಳತೆ ಎದುರಾದವು. ಇದು ಸ್ವೀಕರಿಸಲು ಮತ್ತು ಎಲ್ಲಾ ಭಾಗವಹಿಸುವವರು ಫಲಿತಾಂಶಗಳ ಅಳೆಯಲು ಸೇರಬೇಕೆಂದು ಯಾರು ವಿನ್ಯಾಸಗೊಳಿಸಲಾಗಿದೆ ಚಿಕಿತ್ಸೆ ಹೆರಿಗೆಯಲ್ಲಿ ಸುಲಭವಾಗಿ ಖಚಿತಪಡಿಸಿಕೊಳ್ಳಲು ಮಾಡುತ್ತದೆ ಏಕೆಂದರೆ ಅದೃಷ್ಟವಶಾತ್, ಡಿಜಿಟಲ್ ವಯಸ್ಸು ಆಂತರಿಕ ಸಿಂಧುತ್ವವನ್ನು ಬಗ್ಗೆ ಕಡಿಮೆ ಮಾಡಲು ಸಹಾಯ ಮಾಡುತ್ತದೆ.

ಡೇಟಾ ಮತ್ತು ಸೈದ್ಧಾಂತಿಕ ಸಂಯೋಜನಗಳು ನಡುವಿನ ಪಂದ್ಯದಲ್ಲಿ ಸುಮಾರು ಸಿಂಧುತ್ವವನ್ನು ಕೇಂದ್ರಗಳು ರಚಿಸಿರಿ. ಅಧ್ಯಾಯ 2 ಚರ್ಚಿಸಿದಂತೆ, ರಚನೆಗಳು ಅಮೂರ್ತ ಸಂಗತಿಗಳನ್ನು ಸಾಮಾಜಿಕ ವಿಜ್ಞಾನಿಗಳು ಬಗ್ಗೆ ಕಾರಣವಾಗಿದೆ. ದುರದೃಷ್ಟವಶಾತ್, ಈ ಅಮೂರ್ತ ಸಂಗತಿಗಳನ್ನು ಸಾಹಿತಿಗಳು ವ್ಯಾಖ್ಯಾನಗಳು ಮತ್ತು ಅಳತೆಗಳನ್ನು ಹೊಂದಿಲ್ಲ. ಹಿಂದಿರುಗುತ್ತಿದ್ದೀರಾ Schultz et al. (2007) , ಸಾಮಾಜಿಕ ರೂಢಿಗಳನ್ನು ವಿದ್ಯುತ್ ಬಳಕೆ ತಗ್ಗಿಸಬಹುದು ಪ್ರತಿಬಂಧಕ ಹಕ್ಕು ಕುಶಲತೆಯಿಂದ ಹಾಗಾಗಿ ಅದಕ್ಕೆ "ಪ್ರತಿಬಂಧಕ ಸಾಮಾಜಿಕ ಸಂಪ್ರದಾಯಗಳು" (ಉದಾಹರಣೆಗೆ, ಒಂದು ಎಮೋಟಿಕಾನ್) ಮತ್ತು "ವಿದ್ಯುತ್ ಬಳಕೆ" ಅಳೆಯಲು ಒಂದು ಚಿಕಿತ್ಸೆ ವಿನ್ಯಾಸ ಸಂಶೋಧಕರು ಅಗತ್ಯವಿದೆ. ಅನಲಾಗ್ ಪ್ರಯೋಗಗಳಲ್ಲಿ ಅನೇಕ ಸಂಶೋಧಕರು ತಮ್ಮ ಚಿಕಿತ್ಸೆಗಳು ವಿನ್ಯಾಸ ಮತ್ತು ತಮ್ಮ ಫಲಿತಾಂಶಗಳ ಅಳತೆ. ಈ ವಿಧಾನವು ಸಾಧ್ಯವಾದಷ್ಟು ಪ್ರಯೋಗಗಳ ಅಮೂರ್ತ ರಚನೆಗಳು ಅಧ್ಯಯನ ಮಾಡಲಾಗುತ್ತಿದೆ ಪಂದ್ಯದಲ್ಲಿ, ಖಾತ್ರಿಗೊಳಿಸುತ್ತದೆ. ಕಂಪನಿಗಳು ಅಥವಾ ಸರ್ಕಾರಗಳು ಸಂಶೋಧಕರು ಸಂಗಾತಿ ಚಿಕಿತ್ಸೆಗಳು ತಲುಪಿಸಲು ಮತ್ತು ಫಲಿತಾಂಶಗಳ ಅಳೆಯಲು ಯಾವಾಗಲೂ ಆನ್ ಬಳಸಲು ಡೇಟಾ ವ್ಯವಸ್ಥೆಗಳು ಅಲ್ಲಿ ಡಿಜಿಟಲ್ ಪ್ರಯೋಗಗಳಲ್ಲಿ, ಪ್ರಯೋಗ ಮತ್ತು ಸೈದ್ಧಾಂತಿಕ ಸಂಯೋಜನಗಳು ನಡುವಿನ ಪಂದ್ಯದಲ್ಲಿ ಕಡಿಮೆ ಬಿಗಿಯಾದ ಇರಬಹುದು. ಆದ್ದರಿಂದ, ನಾನು ರಚನೆ ಸಿಂಧುತ್ವವನ್ನು ಅನಲಾಗ್ ಪ್ರಯೋಗಗಳನ್ನು ಹೆಚ್ಚು ಡಿಜಿಟಲ್ ಪ್ರಯೋಗಗಳಲ್ಲಿ ಒಂದು ದೊಡ್ಡ ಕಾಳಜಿ ಒಲವು ಎಂದು ನಿರೀಕ್ಷಿಸಬಹುದು.

ಅಂತಿಮವಾಗಿ, ಬಾಹ್ಯ ಸಿಂಧುತ್ವವನ್ನು ಈ ಪ್ರಯೋಗದ ಫಲಿತಾಂಶಗಳು ಇತರ ಪರಿಸ್ಥಿತಿಗಳಿಗೆ ಸಾಮಾನ್ಯವಾಗಿರಬಹುದು ಎಂದು ಸುತ್ತ ತಿರುಗುತ್ತದೆ. ಹಿಂದಿರುಗುತ್ತಿದ್ದೀರಾ Schultz et al. (2007) , ಒಂದು, ಕೇಳಲು ಸಾಧ್ಯವಿತ್ತು ತಿನ್ನುವೆ ತಮ್ಮ ಗೆಳೆಯರೊಂದಿಗೆ ಸಂಬಂಧ ತಮ್ಮ ಶಕ್ತಿ ಬಳಕೆ ಮತ್ತು ಪ್ರತಿಬಂಧಕ ರೂಢಿಗಳನ್ನು (ಉದಾಹರಣೆಗೆ, ಒಂದು ಎಮೋಟಿಕಾನ್) ಇದು ಬೇರೆ ರೀತಿಯಲ್ಲಿ ಮಾಡಲಾಯಿತು ವೇಳೆ -reduce ಶಕ್ತಿ ಬಳಕೆಯ ಒಂದು ಸಿಗ್ನಲ್ ಬಗ್ಗೆ ಇದೇ ಕಲ್ಪನೆಯನ್ನು ಒದಗಿಸುವ ಜನರು ಮಾಹಿತಿ ಬೇರೆ ಸೆಟ್ಟಿಂಗ್? ಚೆನ್ನಾಗಿ ವಿನ್ಯಾಸಗೊಂಡ ಅತ್ಯಂತ ಮತ್ತು ಉತ್ತಮ ರನ್ ಪ್ರಯೋಗಗಳು, ಬಾಹ್ಯ ನ್ಯಾಯಸಮ್ಮತದ ಕಾಳಜಿಗಳನ್ನು ಪರಿಹರಿಸಲು ಕಠಿಣ. ಹಿಂದೆ, ಬಾಹ್ಯ ನ್ಯಾಯಸಮ್ಮತದ ಈ ಚರ್ಚೆಗಳು ಆಗಾಗ್ಗೆ ವಿಧಾನಗಳು ಬೇರೆ ರೀತಿಯಲ್ಲಿ ಮಾಡಲಾಗುತ್ತದೆ, ಅಥವಾ ಬೇರೆ ಸ್ಥಳದಲ್ಲಿ, ಅಥವಾ ವಿವಿಧ ಜನರೊಂದಿಗೆ ಏನಾಗುತ್ತಿತ್ತು ಎಂದು ಊಹಿಸಿ ಪ್ರಯತ್ನಿಸುತ್ತೇನೆ ಒಂದು ಕೋಣೆಯಲ್ಲಿ ಕುಳಿತು ಜನರು ಕೇವಲ ಒಂದು ಗುಂಪೇ ಇತ್ತು. ಅದೃಷ್ಟವಶಾತ್, ಡಿಜಿಟಲ್ ವಯಸ್ಸು ಈ ಡೇಟಾವನ್ನು ಮುಕ್ತ ಸುದ್ದಿಯನ್ನು ಆಚೆಗೆ ಸರಿಸಲು ಮತ್ತು ಪ್ರಾಯೋಗಿಕವಾಗಿ ಬಾಹ್ಯ ಸಿಂಧುತ್ವವನ್ನು ನಿರ್ಣಯಿಸಲು ಸಂಶೋಧಕರು ಶಕ್ತಗೊಳಿಸುತ್ತದೆ.

ಫಲಿತಾಂಶಗಳನ್ನು ಏಕೆಂದರೆ Schultz et al. (2007) Opower ಎಂಬ ಕಂಪನಿಯು ಹೆಚ್ಚು ವ್ಯಾಪಕವಾಗಿ ಚಿಕಿತ್ಸೆ ನಿಯೋಜಿಸಲು ಯುನೈಟೆಡ್ ಸ್ಟೇಟ್ಸ್ ಉಪಯುಕ್ತತೆಗಳನ್ನು ಸಹಭಾಗಿ, ಆದ್ದರಿಂದ ಉತ್ತೇಜಕ ಇದ್ದರು. ವಿನ್ಯಾಸ ಆಧರಿಸಿ Schultz et al. (2007) , Opower ಕಸ್ಟಮೈಸ್ ಎರಡು ಮುಖ್ಯ ಘಟಕಗಳನ್ನು, ಒಂದು ಎಮೋಟಿಕಾನ್ ತನ್ನ ನೆರೆಹೊರೆಯವರಿಗೆ ಒಂದು ಮನೆಯ ವಿದ್ಯುತ್ ಬಳಕೆ ಸಂಬಂಧಿ ತೋರಿಸುವ ಮತ್ತು ಒಂದು ಶಕ್ತಿ ಬಳಕೆ ಕಡಿಮೆ ಸಲಹೆಗಳು ನೀಡುವ ಎಂದು ಮುಖಪುಟ ಎನರ್ಜಿ ವರದಿಗಳು (ಚಿತ್ರ 4.6) ರಚಿಸಲಾಗಿದೆ. ನಂತರ, ಸಂಶೋಧಕರು ಸಹಭಾಗಿತ್ವದಲ್ಲಿ, Opower ನಿಯಂತ್ರಿತ ಪ್ರಯೋಗಗಳು ಮುಖಪುಟ ಎನರ್ಜಿ ವರದಿಗಳು ಪ್ರಭಾವವನ್ನು ಅಳೆಯಲು ಯಾದೃಚ್ಛಿಕ ನಡೆಯಿತು. ಈ ಪ್ರಯೋಗಗಳಲ್ಲಿ ಸಂಸ್ಕರಣೆಯ ಹಳೆಯ ಶೈಲಿಯ ಬಸವನ ಮೂಲಕ ದೈಹಿಕವಾಗಿ ಸಾಮಾನ್ಯವಾಗಿ ವಿತರಣೆ ಕೂಡ ಮೇಲ್ ಫಲಿತಾಂಶದ ಭೌತಿಕ ಜಗತ್ತಿನಲ್ಲಿ ಡಿಜಿಟಲ್ ಸಾಧನಗಳನ್ನು (ಉದಾ, ವಿದ್ಯುತ್ ಮೀಟರ್) ಬಳಸಿಕೊಂಡು ಅಳೆಯಲಾಗುತ್ತದೆ ಮಾಡಲಾಯಿತು. ಬದಲಿಗೆ ಕೈಯಾರೆ ಪ್ರತಿ ಮನೆ ಭೇಟಿ ಸಂಶೋಧನಾ ಸಹಾಯಕರು ಈ ಮಾಹಿತಿಯನ್ನು ಸಂಗ್ರಹಿಸುವ ಹೆಚ್ಚು, Opower ಪ್ರಯೋಗಗಳನ್ನು ಸಂಶೋಧಕರಿಗೆ ವಿದ್ಯುತ್ ವಾಚನಗೋಷ್ಠಿಗಳು ಪ್ರವೇಶಿಸಲು ಅನುವು ವಿದ್ಯುತ್ ಕಂಪನಿಗಳು ಸಹಭಾಗಿತ್ವದಲ್ಲಿ ಮಾಡಲಾಗುತ್ತಿತ್ತು. ಆದ್ದರಿಂದ, ಈ ಭಾಗಶಃ ಡಿಜಿಟಲ್ ಕ್ಷೇತ್ರದಲ್ಲಿ ಪ್ರಯೋಗಗಳನ್ನು ಕಡಿಮೆ ವೇರಿಯಬಲ್ ವೆಚ್ಚದಲ್ಲಿ ಭಾರಿ ಪ್ರಮಾಣದ ಔಟ್ ಮಾಡಲಾಯಿತು.

ಚಿತ್ರ 4.6: ಮುಖಪುಟ ಎನರ್ಜಿ ವರದಿಗಳು Allcott (2011) ಒಂದು ಸಾಮಾಜಿಕ ಹೋಲಿಕೆ ಮಾಡ್ಯೂಲ್ ಮತ್ತು ಪ್ರಕ್ರಿಯೆಗಳು ಮಾಡ್ಯೂಲ್ ಹೊಂದಿತ್ತು.

ಯುನೈಟೆಡ್ ಸ್ಟೇಟ್ಸ್ ಸುಮಾರು 10 ಸೌಲಭ್ಯವನ್ನು ಕಂಪನಿಗಳಿಂದ ಸೇವೆಯನ್ನು 600,000 ಕುಟುಂಬಗಳು ಒಳಗೊಂಡ ಪ್ರಯೋಗಗಳ ಮೊದಲ ಸೆಟ್ನಲ್ಲಿ Allcott (2011) ಮುಖಪುಟ ಎನರ್ಜಿ ವರದಿ 1.7% ವಿದ್ಯುತ್ ಬಳಕೆ ಕಡಿಮೆ ಕಂಡುಬಂದಿಲ್ಲ. ಅರ್ಥಾತ್, ಹೆಚ್ಚಿನ, ಹೆಚ್ಚು ಭೌಗೋಳಿಕವಾಗಿ ವೈವಿಧ್ಯಮಯ ಅಧ್ಯಯನದಿಂದ ಫಲಿತಾಂಶಗಳಿಂದ ಫಲಿತಾಂಶಗಳು ಗುಣಾತ್ಮಕವಾಗಿ ಹೋಲುವಂತಿದ್ದವು Schultz et al. (2007) . ಆದರೆ ಪರಿಣಾಮದ ಗಾತ್ರ ಸಣ್ಣ ಆಗಿತ್ತು: Schultz et al. (2007) ವಿವರಣಾತ್ಮಕ ಮತ್ತು injective ರೂಢಿಗಳನ್ನು ಪರಿಸ್ಥಿತಿ (ಎಮೋಟಿಕಾನ್ ಒಂದು) ಕುಟುಂಬಗಳು 5% ತಮ್ಮ ವಿದ್ಯುತ್ ಬಳಕೆ ಕಡಿಮೆ. ಈ ವ್ಯತ್ಯಾಸಕ್ಕೆ ನಿಖರ ಕಾರಣ ತಿಳಿದಿಲ್ಲ, ಆದರೆ Allcott (2011) ಒಂದು ವಿಶ್ವವಿದ್ಯಾಲಯ ಪ್ರಾಯೋಜಿಸಿದ ಅಧ್ಯಯನದ ಭಾಗವಾಗಿ ಒಂದು ಕೈಬರಹದ ಎಮೋಟಿಕಾನ್ ಪಡೆಯುವ ಒಂದು ಸಮೂಹ ನಿರ್ಮಾಣ ವರದಿಯ ಭಾಗವಾಗಿ ಮುದ್ರಿತ ಎಮೋಟಿಕಾನ್ ಪಡೆದ ಹೆಚ್ಚು ವರ್ತನೆಯ ಮೇಲೆ ದೊಡ್ಡ ಪರಿಣಾಮ ಹೊಂದಿರಬಹುದು ಎಂದು ಊಹೆ ಪವರ್ ಕಂಪನಿ.

ಇದಲ್ಲದೆ, ನಂತರದ ಸಂಶೋಧನೆಯಲ್ಲಿ, Allcott (2015) ಹೆಚ್ಚುವರಿ 8 ದಶಲಕ್ಷ ಕುಟುಂಬಗಳನ್ನು ಒಳಗೊಂಡ ಹೆಚ್ಚುವರಿ 101 ಪ್ರಯೋಗಗಳ ಮೇಲೆ ವರದಿ. ಈ ಮುಂದಿನ 101 ಪ್ರಯೋಗಗಳಲ್ಲಿ ಮುಖಪುಟ ಎನರ್ಜಿ ರಿಪೊರ್ಟ್ ಜನರು ತಮ್ಮ ವಿದ್ಯುತ್ ಬಳಕೆ ಕಡಿಮೆ ಉಂಟುಮಾಡುವ ಮುಂದುವರೆಯಿತು, ಆದರೆ ಪರಿಣಾಮಗಳು ಸಣ್ಣವು. ಈ ಅವನತಿಗೆ ನಿಖರ ಕಾರಣ ತಿಳಿದಿಲ್ಲ, ಆದರೆ Allcott (2015) ವರದಿ ಪರಿಣಾಮಕಾರಿತ್ವವನ್ನು ಇದು ವಾಸ್ತವವಾಗಿ ಭಾಗವಹಿಸುವವರು ವಿವಿಧ ಅಳವಡಿಸಿಕೊಳ್ಳಲಿಲ್ಲ ಸಮಯ ಕಳೆದಂತೆ ಇಳಿಮುಖವಾಗುತ್ತಿರುವ ಕಾಣಿಸಿಕೊಂಡರು ಎಂದು ಊಹಿಸಲಾಗಿದೆ. ಹೆಚ್ಚು ನಿರ್ದಿಷ್ಟವಾಗಿ, ಹೆಚ್ಚು ಪರಿಸರವಾದಿ ಪ್ರದೇಶಗಳಲ್ಲಿ ಉಪಯುಕ್ತತೆಗಳನ್ನು ಸಾಧ್ಯತೆ ಹೆಚ್ಚು ಹಿಂದಿನ ಕಾರ್ಯಕ್ರಮವನ್ನು ಅಳವಡಿಸಿಕೊಂಡ ಮತ್ತು ಗ್ರಾಹಕರಿಗೆ ಚಿಕಿತ್ಸೆಗೆ ಹೆಚ್ಚು ಪ್ರತಿಕ್ರಿಯಾಶೀಲರಾಗಿರುತ್ತಾರೆ ಇದ್ದರು. ಕಡಿಮೆ ಪರಿಸರ ಗ್ರಾಹಕರು ಉಪಯುಕ್ತತೆಗಳನ್ನು ಯೋಜನೆಯೊಂದನ್ನು ಆರಿಸಿಕೊಂಡಿತು, ಅದರ ಪರಿಣಾಮವನ್ನು ನಿರಾಕರಿಸಿ ಕಾಣಿಸಿಕೊಂಡರು. ಹೀಗಾಗಿ, ಪ್ರಯೋಗಗಳಲ್ಲಿ ಯಾದೃಚ್ಛಿಕ ಚಿಕಿತ್ಸೆ ಮತ್ತು ನಿಯಂತ್ರಣ ಗುಂಪು ಹೋಲುವ ಖಾತ್ರಿಗೊಳಿಸುತ್ತದೆ ಕೇವಲ, ಸಂಶೋಧನೆ ತಾಣಗಳಲ್ಲಿ ಯಾದೃಚ್ಛಿಕ ಅಂದಾಜು (ಮತ್ತೆ ಮಾದರಿ ಬಗ್ಗೆ ಅಧ್ಯಾಯ 3 ಆಲೋಚಿಸುತ್ತೀರಿ) ಹೆಚ್ಚು ಸಾಮಾನ್ಯ ಜನರಿಗೆ ಭಾಗವಹಿಸುವವರು ಒಂದು ಒಂದು ಗುಂಪಿನಿಂದ ಸಾಮಾನ್ಯವಾಗಿರುತ್ತದೆ ಖಾತ್ರಿಗೊಳಿಸುತ್ತದೆ. ಒಂದು ಸಂಪೂರ್ಣವಾಗಿ ವಿನ್ಯಾಸಗೊಳಿಸಿದ ಮತ್ತು ನಡೆಸಿದ ಪ್ರಯೋಗ ಮಾಡಬಹುದು ಸಮಸ್ಯಾತ್ಮಕ ಸಂಶೋಧನಾ ಸೈಟ್ಗಳ ಯದ್ವಾತದ್ವಾ ಮಾದರಿಗಳನ್ನು ಅಲ್ಲದಿದ್ದರೆ, ನಂತರ ಸಾಮಾನ್ಯೀಕರಣ-ಸಹ.

ಒಟ್ಟಿಗೆ, ಈ 111 ಪ್ರಯೋಗಗಳನ್ನು 10 Allcott (2011) ಮತ್ತು 101 Allcott (2015) ಅಮೇರಿಕಾ ಸಂಯುಕ್ತ ಸಂಸ್ಥಾನದ ಸುಮಾರು 8.5 ದಶಲಕ್ಷ ಕುಟುಂಬಗಳನ್ನು -involved. ಅವರು ಸತತವಾಗಿ ಮುಖಪುಟ ಎನರ್ಜಿ ವರದಿಗಳು ಸರಾಸರಿ ವಿದ್ಯುತ್ ಬಳಕೆ ಕ್ಯಾಲಿಫೋರ್ನಿಯಾದ 300 ಮನೆಗಳಿಂದ ಷುಲ್ಟ್ಜ್ ಮೂಲ ಸಂಶೋಧನೆಗಳು ಮತ್ತು ಸಹೋದ್ಯೋಗಿಗಳು ಬೆಂಬಲಿಸುವ ಪರಿಣಾಮವಾಗಿ ಕಡಿಮೆ ಎಂದು ತೋರಿಸಲು. ಕೇವಲ ಈ ಮೂಲ ಫಲಿತಾಂಶಗಳು ಪುನರಾವರ್ತನೆ ಬಿಯಾಂಡ್, ಅನುಸರಣಾ ಪ್ರಯೋಗಗಳು ಫಲಿತಾಂಶದ ಗಾತ್ರ ಸ್ಥಳ ಬದಲಾಗುತ್ತದೆ ಎಂದು ತೋರಿಸಲು. ಪ್ರಯೋಗಗಳ ಕಟ್ಟನ್ನು ಭಾಗಶಃ ಡಿಜಿಟಲ್ ಕ್ಷೇತ್ರದಲ್ಲಿ ಪ್ರಯೋಗಗಳ ಕುರಿತಾಗಿ ಇನ್ನೂ ಎರಡು ಸಾಮಾನ್ಯ ಅಂಕಗಳನ್ನು ವಿವರಿಸುತ್ತದೆ. ಮೊದಲ, ಸಂಶೋಧಕರು ಬಾಹ್ಯ ನ್ಯಾಯಸಮ್ಮತದ ವಿಳಾಸ ಕಾಳಜಿ ಪ್ರಾಯೋಗಿಕವಾಗಿ ಯಾವಾಗ ಪ್ರಯೋಗಗಳನ್ನು ಚಾಲನೆಯ ವೆಚ್ಚವನ್ನು ಕಡಿಮೆ ಸಾಧ್ಯವಾಗುತ್ತದೆ, ಮತ್ತು ಫಲಿತಾಂಶವನ್ನು ಈಗಾಗಲೇ ಡೇಟಾ ಯಾವಾಗಲೂ ಆನ್ ಆಗಿ ಗಣಕವನ್ನು ಅಳತೆ ಮಾಡಲಾಗುತ್ತಿದೆ ವೇಳೆ ಈ ಸಂಭವಿಸಬಹುದು. ಆದ್ದರಿಂದ, ಇದು ಸಂಶೋಧನೆ ಈಗಾಗಲೇ ದಾಖಲಾಗುವುದನ್ನು ಇತರ ಆಸಕ್ತಿದಾಯಕ ಮತ್ತು ಪ್ರಮುಖ ಸ್ವಭಾವಗಳಿಗೆ ನೋಟ ಔಟ್ ಮೇಲೆ ಇರಬೇಕು, ತದನಂತರ ಈ ಅಸ್ತಿತ್ವದಲ್ಲಿರುವ ಅಳತೆ ಮೂಲಸೌಕರ್ಯ ಮೇಲೆ ಪ್ರಯೋಗಗಳನ್ನು ವಿನ್ಯಾಸ ಸೂಚಿಸುತ್ತದೆ. ಎರಡನೇ, ಪ್ರಯೋಗಗಳ ಈ ಸೆಟ್ ಡಿಜಿಟಲ್ ಕ್ಷೇತ್ರದಲ್ಲಿ ಪ್ರಯೋಗಗಳನ್ನು ಕೇವಲ ಆನ್ಲೈನ್ ಎಂದು ನಮಗೆ ನೆನಪಿಸುತ್ತಾನೆ; ಹೆಚ್ಚು ನಾನು ಅವರು ನಿರ್ಮಿಸಿದ ಪರಿಸರದಲ್ಲಿ ಸಂವೇದಕಗಳು ಅಳತೆ ಅನೇಕ ಪರಿಣಾಮಗಳ ಎಲ್ಲೆಡೆ ಎಂದು ನಿರೀಕ್ಷಿಸಬಹುದು.

ಸಿಂಧುತ್ವವನ್ನು-ಅಂಕಿಅಂಶಗಳ ತೀರ್ಮಾನಕ್ಕೆ ಸಿಂಧುತ್ವ, ಆಂತರಿಕ ಸಿಂಧುತ್ವವನ್ನು ನಾಲ್ಕು ರೀತಿಯ, ಸಿಂಧುತ್ವವನ್ನು ನಿರ್ಮಿಸಲು, ಬಾಹ್ಯ ಸಿಂಧುತ್ವವನ್ನು ಒದಗಿಸಲು ಸಂಶೋಧಕರು ನಿರ್ದಿಷ್ಟ ಪ್ರಯೋಗ ಫಲಿತಾಂಶಗಳು ಹೆಚ್ಚು ಸಾಮಾನ್ಯ ನಿರ್ಣಯವನ್ನು ಎಂಬುದನ್ನು ನಿರ್ಣಯಿಸಲು ಸಹಾಯ ಮಾನಸಿಕ ಪರಿಶೀಲನಾಪಟ್ಟಿ. ಅನಲಾಗ್ ವಯಸ್ಸು ಪ್ರಯೋಗಗಳನ್ನು ಹೋಲಿಸಿದರೆ, ಡಿಜಿಟಲ್ ವಯಸ್ಸು ಪ್ರಯೋಗಗಳಲ್ಲಿ ಇದು ಪ್ರಾಯೋಗಿಕವಾಗಿ ಬಾಹ್ಯ ಸಿಂಧುತ್ವವನ್ನು ಪರಿಹರಿಸಲು ಸುಲಭ ಹೊರತು ಅದರ ಆಂತರಿಕ ಸಿಂಧುತ್ವವನ್ನು ಖಚಿತಪಡಿಸಿಕೊಳ್ಳಲು ಸುಲಭವಾಗಿ ಇರಬೇಕು. ಮತ್ತೊಂದೆಡೆ, ರಚನೆ ಸಿಂಧುತ್ವವನ್ನು ಸಮಸ್ಯೆಗಳು ಬಹುಶಃ ಡಿಜಿಟಲ್ ವಯಸ್ಸು ಪ್ರಯೋಗಗಳಲ್ಲಿ ಹೆಚ್ಚು ಸವಾಲಿನ (ಆ Opower ಪ್ರಯೋಗಗಳನ್ನು ಸಂದರ್ಭದಲ್ಲಿ ಆಗಿರದಿದ್ದರೂ ಸಹ) ಇರುತ್ತದೆ.