4.5.2 בנה את הניסוי שלך

בניית ניסוי משלך עלולה להיות יקרה, אבל זה יאפשר לך ליצור את הניסוי רצוי.

בנוסף לניסויים המכסים על גבי סביבות קיימות, תוכל גם לבנות ניסוי משלך. היתרון העיקרי של גישה זו הוא שליטה; אם אתה בונה את הניסוי, אתה יכול ליצור את הסביבה ואת הטיפולים שאתה רוצה. אלה בסביבות הניסוי העידו יכול ליצור הזדמנויות לבדוק תיאוריות כי הם בלתי אפשריים כדי לבדוק בסביבות טבעי. החסרונות העיקריים של בניית הניסוי שלך הם שזה יכול להיות יקר, כי הסביבה שאתה יכול ליצור אולי לא ריאליזם של מערכת באופן טבעי. החוקרים הבונים את הניסוי שלהם חייבים להיות בעלי אסטרטגיה לגיוס משתתפים. כאשר עובדים במערכות הקיימות, החוקרים למעשה מביאים את הניסויים למשתתפים שלהם. אבל, כאשר החוקרים בונים את הניסוי שלהם, הם צריכים להביא את המשתתפים אליו. למרבה המזל, שירותים כגון אמזון מכני טורק (MTurk) יכול לספק לחוקרים דרך נוחה להביא את המשתתפים הניסויים שלהם.

דוגמה אחת המדגימה את סגולותיהן של סביבות מפורטות לבדיקת תיאוריות מופשטות היא ניסוי המעבדה הדיגיטלית של גרגורי הובר, סת היל וגבריאל לנץ (2012) . ניסוי זה בוחן הגבלה מעשית אפשרית על תפקוד הממשל הדמוקרטי. מחקרים קודמים שאינם ניסוייים על בחירות אמיתיות הצביעו על כך שהבוחרים אינם מסוגלים להעריך במדויק את ביצועי הפוליטיקאים המכהנים. בייחוד, מצביעים סובלים משלוש הטיות: (1) הם מתמקדים בביצועים חדשים ולא מצטברים; (2) הם יכולים להיות מניפולציה על ידי רטוריקה, מסגור, ושיווק; ו (3) הם יכולים להיות מושפעים אירועים שאינם קשורים בביצועים המכהן, כגון ההצלחה של קבוצות ספורט מקומיות ומזג האוויר. במחקרים קודמים אלה, לעומת זאת, היה קשה לבודד כל אחד מהגורמים האלה מכל שאר הדברים שקורים בבחירות אמיתיות ומבולבלות. לכן, הובר ועמיתיו יצרו סביבת הצבעה פשוטה מאוד כדי לבודד, ולאחר מכן מחקר ניסויי, כל אחת משלוש ההטיות האפשריות.

כפי שאני מתאר את הניסוי הגדרת להלן, זה הולך להישמע מלאכותי מאוד, אבל לזכור כי הריאליזם אינו מטרה ניסויים בסגנון מעבדה. במקום זאת, המטרה היא לבודד בבירור את התהליך שאתה מנסה ללמוד, ואת זה בידוד הדוק הוא לפעמים לא אפשרי במחקרים עם ריאליזם יותר (Falk and Heckman 2009) . יתר על כן, במקרה הספציפי הזה, טענו החוקרים כי אם הבוחרים לא יוכלו להעריך ביעילות את הביצועים במסגרת פשוטה זו, הם לא יוכלו לעשות זאת בסביבה מציאותית יותר, מורכבת יותר.

הובר ועמיתיו השתמשו ב- MTurk כדי לגייס משתתפים. לאחר שהמשתתפת סיפקה הסכמה מדעת ועברה מבחן קצר, נאמר לה שהיא משתתפת במשחק של 32 סיבובים כדי להרוויח אסימונים שניתן להמיר אותם לכסף אמיתי. בתחילת המשחק, נאמר לכל משתתף כי היא קיבלה "מקצה" שייתן לה אסימונים חופשיים בכל סיבוב, וכי חלק מהמקצים היו נדיבים יותר מאחרים. יתר על כן, כל משתתף נאמר גם כי תהיה לה הזדמנות לשמור על הקצאת שלה או להקצות חדש לאחר 16 סיבובים של המשחק. לאור מה שאתה יודע על מטרות המחקר של הובר ועמיתים, אתה יכול לראות כי המוקצה מייצג ממשלה בחירה זו מייצגת בחירות, אבל המשתתפים לא היו מודעים המטרות הכלליות של המחקר. בסך הכל גייסו הובר ועמיתיו כ -4,000 משתתפים ששולמו על 1.25 דולר למשימה שנמשכה כשמונה דקות.

נזכיר כי אחד הממצאים ממחקרים קודמים היה כי הבוחרים לתגמל ולהעניש את המכהנים עבור תוצאות שאינן בבירור מעבר לשליטתם, כגון ההצלחה של קבוצות ספורט מקומיות ומזג האוויר. כדי להעריך אם המשתתפים בהצבעה החלטות יכול להיות מושפע על ידי אירועים אקראיים לחלוטין בסביבתם, הובר ועמיתיו הוסיף לוטו למערכת הניסוי שלהם. בסיבוב ה -8 או בסיבוב ה -16 (כלומר, לפני הסיכוי להחליף את המקצה), המשתתפים הוצבו באקראי בהגרלה שבה זכו כמה מהם ב -5,000 נקודות, חלקם זכו ב -0 נקודות, וכמה מהם הפסידו 5,000 נקודות. ההגרלה הזאת נועדה לחקות חדשות טובות או רעות שאינן תלויות בביצוע הפוליטיקאי. למרות שהמשתתפים אמרו במפורש כי ההגרלה אינה קשורה בביצועים של המפיצים שלהם, תוצאות ההגרלה עדיין השפיעו על החלטות המשתתפים. משתתפים שהרוויחו מהגרלה היו בעלי סיכוי גבוה יותר לשמור על ההקצאה שלהם, והשפעה זו הייתה חזקה יותר כאשר ההגרלה התרחשה בסיבוב 16 - ממש לפני החלטת ההחלפה - מאשר כשזה קרה בסיבוב 8 (איור 4.15). תוצאות אלו, יחד עם אלו של כמה ניסויים אחרים בעיתון, הובילו את הובר ועמיתיו למסקנה כי גם במסגרת פשוטה, הבוחרים מתקשים בקבלת החלטות נבונות, תוצאה שהשפיעה על מחקרים עתידיים על קבלת החלטות הבוחרים (Healy and Malhotra 2013) . הניסוי של הובר ועמיתיו מראה כי MTurk ניתן להשתמש כדי לגייס משתתפים עבור ניסויים בסגנון מעבדה על מנת לבדוק בדיוק תיאוריות ספציפיות. זה גם מראה את הערך של בניית הסביבה הניסיונית שלך: קשה לדמיין איך אותם תהליכים אותו יכול היה מבודד כל כך נקי בכל סביבה אחרת.

איור 4.15: תוצאות מ Huber, Hill, and Lenz (2012) . המשתתפים שהרוויחו מהגרלה היו בעלי סיכוי גבוה יותר לשמור על ההקצאה שלהם, והשפעה זו היתה חזקה יותר כשהגרלה התרחשה בסיבוב 16 - ממש לפני החלטת ההחלפה - מאשר כשזה קרה בסיבוב 8. הסתגלו Huber, Hill, and Lenz (2012) , איור 5.

בנוסף לבניית מעבדה כמו ניסויים, החוקרים יכולים גם לבנות ניסויים כי הם יותר כמו שדה. לדוגמה, Centola (2010) בנה ניסוי שדה דיגיטלי כדי לחקור את ההשפעה של מבנה הרשת החברתית על התפשטות ההתנהגות. שאלת המחקר שלו מחייבת אותו להתבונן באותה התנהגות המתפשטת באוכלוסיות בעלות מבנה רשת חברתי שונה, אך לא ניתן להבדיל ביניהם. הדרך היחידה לעשות זאת היתה בניסוי מותאם אישית. במקרה זה, Centola נבנה קהילה מבוססת אינטרנט בריאות.

סנטולה גייסה כ -1,500 משתתפים באמצעות פרסום באתרי בריאות. כאשר המשתתפים הגיעו לקהילה המקוונת - שנקראה רשת הבריאות הבריאה - הם סיפקו הסכמה מדעת והוקצו להם אז "חברים בריאותיים". בשל הדרך שבה הקצתה Centola חברים אלה בריאות, הוא היה מסוגל לסרוג יחד שונים מבני הרשת החברתית ב קבוצות שונות. קבוצות מסוימות נבנו על מנת לקבל רשתות אקראיות (שבהן כולם היו עשויים להיות מחוברים באותה מידה), בעוד שבקבוצות אחרות נבנו רשתות מקובצות (כאשר החיבורים צפופים יותר). לאחר מכן, Centola הציג התנהגות חדשה לכל רשת: הזדמנות להירשם לאתר חדש עם מידע בריאותי נוסף. בכל פעם שמישהו נרשם לאתר החדש הזה, כל חבריה הבריאות קיבלו הודעת אימייל על התנהגות זו. סנטולה מצאה שהתנהגות זו - ההרשמה לאתר החדש - התפשטה במהירות רבה יותר ברשת המקובצת מאשר ברשת האקראית, ממצא המנוגד למספר תיאוריות קיימות.

בסך הכל, בניית הניסוי שלך נותן לך שליטה רבה יותר; זה מאפשר לך לבנות את הסביבה הטובה ביותר האפשרית לבודד את מה שאתה רוצה ללמוד. קשה לדמיין כיצד שני הניסויים שתיארתי זה עתה יכלו להתבצע בסביבה קיימת. יתר על כן, בניית המערכת שלך מקטין חששות אתיים סביב ניסוי במערכות הקיימות. כאשר אתה בונה את הניסוי שלך, אתה נתקל בבעיות רבות המתעוררות בניסויים במעבדה: גיוס משתתפים וחששות לגבי ריאליזם. החיסרון הסופי הוא כי בניית הניסוי שלך יכול להיות יקר זמן רב, אם כי, כמו דוגמאות אלה מראים, הניסויים יכולים לנוע בין סביבות פשוטות יחסית (כגון המחקר של ההצבעה על ידי Huber, Hill, and Lenz (2012) ) לסביבות מורכבות יחסית (כגון מחקר של רשתות Centola (2010) ידי Centola (2010) ).