4.5.1.2 Создайте свой собственный эксперимент
Построение собственного эксперимента может быть дорогостоящим, но это позволит вам создать эксперимент , который вы хотите.
В дополнение к накладывания экспериментов поверх существующих сред, вы также можете создать свой собственный эксперимент. Основное преимущество этого подхода заключается в контроле; если вы строите эксперимент, вы можете создать среду и методы лечения, которые вы хотите. Эти сделанные на заказ экспериментальные среды могут создать возможности для проверки теорий, которые невозможно проверить в природных средах. Основными недостатками построения собственного эксперимента является то, что оно может быть дорогим и окружающей среды, что вы можете создать не может иметь реализм природной системы. Исследователи строят свой собственный эксперимент также должен иметь стратегию набора участников. При работе в существующих системах, исследователи, по существу, в результате чего эксперименты их участникам. Но, когда исследователи строят свой собственный эксперимент, они должны принести участников к нему. К счастью, такие услуги, как Amazon Механический турок (MTurk) может предоставить исследователям удобный способ привлечь участников своих экспериментов.
Один пример , который иллюстрирует достоинства заказных сред для тестирования абстрактные теории является цифровой лаборатории эксперимент Грегори Huber, Сет - Хилл и Габриэль Ленца (2012) . Эксперимент исследует возможные практические ограничения для функционирования демократического управления. Ранее не-экспериментальные исследования реальных выборов свидетельствуют о том, что избиратели не в состоянии точно оценить эффективность действующих политиков. В частности, избиратели, по всей видимости страдают от трех уклонов: 1) сосредоточено на недавнем, а не совокупного исполнения; 2) манипулируемой риторикой, кадрирование и маркетинга; и 3) под влиянием событий, не имеющих отношения к действующему производительности, таких как успех местной спортивной команды и погодных условий. В этих ранних исследованиях, однако, это было трудно выделить какой-либо из этих факторов, от всех других вещей, что происходит в реальной, грязных выборов. Поэтому Хубер и его коллеги создали весьма упрощенную среду голосования, с тем чтобы изолировать, а затем изучать экспериментально, каждый из этих трех возможных смещениях.
Как я описывать экспериментальное устройство под ней будет звучать очень искусственно, но помните, что реализм не является целью в экспериментах лаборатории стиле. Скорее, цель состоит в том, чтобы четко отделить процесс , который вы пытаетесь учиться, и это жесткой изоляции иногда не представляется возможным в исследованиях с более реализма (Falk and Heckman 2009) . Кроме того, в данном конкретном случае, исследователи утверждают, что если избиратели не могут эффективно оценивать работу в этой очень упрощенной настройки, то они не собираются, чтобы быть в состоянии сделать это в более реалистичной, более сложной обстановке.
Хубер и его коллеги использовали Amazon Mechanical Turk (MTurk) набрать участников. После того, как участник при условии информированного согласия и прошел короткий тест, ей сказали, что она принимала участие в 32 раунде игры, чтобы заработать жетоны, которые могут быть преобразованы в реальные деньги. В начале игры каждый участник сказали, что она была назначена "аллокатора", который даст ей свободу жетонов каждый раунд и что некоторые распределители были более щедрыми, чем другие. Кроме того, каждый из участников также было сказано, что она будет иметь возможность либо сохранить ее аллокатора или быть назначен новый после 16 раундов игры. Учитывая то, что вы знаете о Huber и исследовательских целей коллег, вы можете увидеть, что распределителем представляет правительство, и этот выбор представляет собой выборы, но участники не знали общих целей исследования. В общей сложности Хубер и его коллеги набраны около 4000 участников, которые заплатил около $ 1,25 за задачи, которая заняла около 8 минут.
Напомним, что один из выводов из предыдущих исследований было то, что вознаграждение избирателей и наказывать за результаты доминирующих операторов, которые явно вне их контроля, таких как успех местных спортивных команд и погодных условий. Для того, чтобы оценить, может ли быть под влиянием чисто случайных событий в их решения об установлении участников голосования, Хубер и его коллеги добавили лотерею к их экспериментальной системе. В любом 8-м раунде или 16-го тура (то есть непосредственно перед шанс заменить аллокатора) участники были случайным образом размещены в лотерее, где некоторые выиграл 5000 очков, некоторые выиграли 0 очков, а некоторые потеряли 5000 пунктов. Эта лотерея была предназначена для имитации хорошие или плохие новости, что не зависит от исполнения политик. Даже если участники были явно сказано, что лотерея не была связана с исполнением их распределителем, исход лотереи до сих пор влияние решений участников. Участники, которые извлекли выгоду из лотереи, более вероятно, чтобы держать их аллокатора, и этот эффект был сильнее, когда лотереи произошло в третьем раунде 16-направо до замены принятия, чем когда это случилось в 8-м раунде (рис 4,14). Эти результаты, наряду с результатами ряда других экспериментов в работе под руководством Хубера и его коллег сделать вывод , что даже в упрощенной обстановке, избиратели имеют трудности принимать мудрые решения, результат , который повлиял будущих исследований о принятии избиратель решений (Healy and Malhotra 2013) . Эксперимент Huber и коллег показывает, что MTurk могут быть использованы для набора участников для экспериментов лаборатории стиле, чтобы точно проверить очень конкретных теорий. Он также показывает ценность построения собственной экспериментальной среды: трудно себе представить, как эти же процессы могли быть изолированы так чисто в любой другой обстановке.
Рисунок 4.14: Результаты Huber, Hill, and Lenz (2012) . Участники, которые извлекли выгоду из лотереи, более вероятно, чтобы сохранить свою аллокатора, и этот эффект был сильнее, когда лотереи произошло в третьем раунде 16-направо до замены принятия, чем когда это случилось в 8-м раунде.
В дополнение к созданию лаборатории подобные эксперименты, исследователи могут также построить эксперименты, которые являются более поля типа. Например, Centola (2010) построил эксперимент цифрового поля с целью изучения влияния структуры социальной сети на распространение поведения. Его исследования вопрос требовал от него, чтобы наблюдать такое же поведение, распространение в популяциях, которые имели различные социальные сетевые структуры, но были неотличимы. Единственный способ сделать это с сделанной на заказ, заказного эксперимента. В этом случае Чентола построил веб-сообщество в области здравоохранения.
Чентола на работу около 1500 участников с рекламой на сайтах здоровья. Когда участники прибыли в онлайн-сообщество, которое называется Здоровый образ жизни Сеть-они предоставили информированное согласие, а затем были назначены "приятелям здоровья". Из-за способа Чентола присвоенного эти приятелями здоровья он был в состоянии связать воедино различные социальные сетевые структуры в разных группы. были построены Некоторые группы, чтобы иметь случайные сети (где все были в равной степени вероятно, будут подключены) и были построены другие группы, чтобы иметь кластерные сети (где соединения являются более локально плотно). Затем Чентола ввел новое поведение в каждой сети, возможность зарегистрироваться для нового веб-сайта с дополнительной информации о состоянии здоровья. Всякий раз, когда кто-то подписался на этот новый веб-сайт, все ее приятелями здоровья получили письмо, объявив это поведение. Чентола обнаружил, что такое поведение подписывания-на новый сайт-распространяться дальше и быстрее в кластерной сети, чем случайной сети, нахождения, которая была в отличие от некоторых существующих теорий.
В целом, создать свой собственный эксперимент дает гораздо больший контроль; она позволяет построить наилучшие условия, чтобы изолировать то, что вы хотите учиться. Трудно себе представить, как любой из этих экспериментов можно было бы проводить в уже существующую среду. Кроме того, строить свою собственную систему снижает этические проблемы вокруг экспериментировать в существующих системах. Когда вы строите свой собственный эксперимент, тем не менее, вы столкнетесь многие из проблем, которые встречаются в лабораторных экспериментах рекрутинг участников и озабоченности по поводу реализма. Окончательный недостатком является то, что создать свой собственный эксперимент может быть дорогостоящим и отнимает много времени, хотя , как показывают эти примеры, эксперименты могут варьироваться от относительно простых сред (например, при изучении голосования Huber, Hill, and Lenz (2012) ) в относительно сложных сред (например, исследования сетей и цепной реакции по Centola (2010) ).
