당신이 직접 수행 또는 파트너와 함께 작동하는지, 나는 내 자신의 작품에 특히 도움이 발견 한 조언의 두 조각을 제공하고 싶습니다. 임의의 데이터가 수집되기 전에 먼저, 가능한 한 많이 생각한다. 이 조언은 아마 실험을 실행에 익숙한 연구자들에게 분명한 것 같다,하지만 빅 데이터 소스로 작업에 익숙한 연구자 매우 중요하다 (제 2 장 참조). 큰 데이터 소스는 데이터를 이후에 대부분의 작업은 발생하지만, 실험은 반대이고; 데이터를 수집하기 전에 대부분의 작업이 발생한다. 당신의 설계 및 분석에 대해 신중하게 생각하고 자신을 강요하는 가장 좋은 방법 중 하나 만들고 실험에 대한 분석 계획을 등록하는 것입니다. 다행히, 실험 데이터의 분석을위한 모범 사례의 대부분은보고 가이드 라인으로 공식화되었으며, 가이드 라인을 분석 계획을 만들 때 시작하는 좋은 장소이다 (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011) .
충고의 두 번째 조각은 하나의 실험이 완벽하게 될 것되지 않고, 그 때문에, 당신은 서로를 강화하는 일련의 실험을 설계하도록해야한다는 것입니다. 난 이것이 함대 전략으로 설명 들었습니다; 오히려 하나의 거대한 전함을 구축을 위해 노력보다, 당신은 보완적인 강점을 가진 작은 선박의 더 나은 건물이 많이있을 수 있습니다. 여러 실험 연구의 이러한 종류의 심리학 일상,하지만 그들은 다른 곳 드물다. 다행히도, 몇몇 디지털 실험 저비용 멀티 실험 이런 종류 쉽게 연구한다.
또한, 지금은 많이 사용하지만 디지털 시대의 실험을 설계에 특히 중요한 조언의 두 조각을 제공하고 싶습니다 : 제로 한계 비용 데이터를 생성하고 디자인에 윤리를 구축 할 수 있습니다.