Независимо от того, выполняете ли вы себя или работаете с партнером, я хотел бы предложить четыре совета, которые я нашел особенно полезными в своей работе. Первые два совета относятся к любому эксперименту, в то время как вторая вторая гораздо более специфична для экспериментов с цифровым возрастом.
Мой первый совет, когда вы делаете эксперимент, заключается в том, что вы должны думать как можно больше, прежде чем какие-либо данные будут собраны. Вероятно, это кажется очевидным для исследователей, привыкших к экспериментам, но это очень важно для тех, кто привык работать с большими источниками данных (см. Главу 2). С такими источниками большая часть работы выполняется после того, как у вас есть данные, но эксперименты противоположны: большая часть работы должна быть выполнена до сбора данных. Один из лучших способов заставить себя тщательно подумать, прежде чем собирать данные, - это создать и зарегистрировать план предварительного анализа для вашего эксперимента, в котором вы в основном описываете анализ, который вы будете проводить (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016) .
Моя вторая общая рекомендация заключается в том, что ни один эксперимент не будет совершенным, и из-за этого вы должны рассмотреть возможность разработки серии экспериментов, которые укрепляют друг друга. Я слышал, что это описывается как стратегия армады ; вместо того, чтобы пытаться построить один массивный броненосец, вы должны построить множество небольших кораблей с дополнительными сильными сторонами. Эти виды исследований с несколькими экспериментами являются обычными в психологии, но они редко встречаются в других местах. К счастью, низкая стоимость некоторых цифровых экспериментов облегчает проведение нескольких экспериментов.
Учитывая этот общий фон, я хотел бы предложить два совета, которые более конкретно относятся к разработке экспериментов с цифровым временем: создайте нулевые данные переменных затрат (раздел 4.6.1) и постройте этику в своем дизайне (раздел 4.6.2).