4.6 ייעוץ

בין אם אתה עושה דברים בעצמך או עובד עם שותף, אני רוצה להציע ארבע חתיכות של עצה כי מצאתי מועיל במיוחד בעבודה שלי. שני העצות הראשונות חלות על כל ניסוי, ואילו שני השני הם הרבה יותר ספציפי לניסויי גיל דיגיטלי.

עצה ראשונה שלי עבור כאשר אתה עושה ניסוי הוא שאתה צריך לחשוב כמה שיותר לפני כל הנתונים נאספו. זה כנראה נראה ברור לחוקרים רגילים להפעיל ניסויים, אבל זה מאוד חשוב עבור אלה רגילים לעבוד עם מקורות נתונים גדולים (ראה פרק 2). עם מקורות כאלה רוב העבודה נעשית לאחר שיש לך את הנתונים, אבל הניסויים הם ההפך: רוב העבודה צריכה להיעשות לפני איסוף נתונים. אחת הדרכים הטובות ביותר לאלץ את עצמך לחשוב היטב לפני איסוף נתונים היא ליצור ולרשום מראש תוכנית ניתוח עבור הניסוי שלך שבו אתה בעצם לתאר את הניתוח שתעשה (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016) .

החלק השני של העצה הכללית שלי הוא שאף ניסוי אחד לא יהיה מושלם, ובגלל זה, כדאי לשקול עיצוב סדרה של ניסויים המחזקים זה את זה. שמעתי את זה מתואר כאסטרטגיה ארמדה ; במקום לנסות לבנות ספינת קרב אחת גדולה, אתה צריך לבנות הרבה ספינות קטנות יותר עם כוחות משלימים. מחקרים מסוגים שונים אלה הם שגרתית בפסיכולוגיה, אך הם נדירים במקומות אחרים. למרבה המזל, העלות הנמוכה של כמה ניסויים דיגיטליים עושה מחקרים רב הניסוי קל יותר.

בהינתן הרקע הכללי, ברצוני להציע שתי עצות ייעוץ ספציפיות יותר לעיצוב ניסויי גיל דיגיטלי: ליצור אפס נתוני עלות משתנים (סעיף 4.6.1) ולבנות אתיקה בתכנון שלך (סעיף 4.6.2).