Über randomisierte Feldexperimente Randomisierte Feldexperimente ermöglichen es Forschern, die Auswirkungen einer Intervention auf ein bestimmtes Ergebnis von Interesse wissenschaftlich zu messen.
Was ist ein randomisiertes Feldexperiment? Bei einem randomisierten Experiment wird eine Stichprobe in eine Gruppe, die die untersuchte Intervention erhält (die Behandlungsgruppe), und eine andere Gruppe, die die Intervention nicht erhält (die Kontrollgruppe), aufgeteilt. Eine Stichprobe könnte zum Beispiel aus allen registrierten Wählern in einer bestimmten Stadt bestehen. Diese Stichprobe wird dann nach dem Zufallsprinzip in eine Behandlungs- und eine Kontrollgruppe aufgeteilt. Vielleicht stehen 40 % der Stichprobe auf der Get-Out-the-Vote-Liste (GOTV) einer Kampagne, und die anderen 60 % der Stichprobe erhalten die GOTV-Mailings nicht. Das gemessene Ergebnis – die Wahlbeteiligung – kann dann in den beiden Gruppen verglichen werden. Der Unterschied in der Wahlbeteiligung wird die Wirksamkeit der Intervention widerspiegeln.
Was bedeutet zufällige Zuordnung? Der Schlüssel zu einem randomisierten experimentellen Forschungsdesign liegt in der zufälligen Zuordnung von Studienobjekten – zum Beispiel einzelnen Wählern, Wahllokalen, Medienmärkten oder anderen Gruppen – zu Behandlungs- oder Kontrollgruppen. Randomisierung hat in diesem Zusammenhang eine ganz bestimmte Bedeutung. Sie bezieht sich nicht auf die zufällige Auswahl einiger Personen und nicht anderer. Randomisierung bedeutet in diesem Zusammenhang, dass sorgfältig darauf geachtet wird, dass kein Muster zwischen der Zuordnung der Probanden zu den Gruppen und den Merkmalen dieser Probanden besteht. Jede Versuchsperson hat die gleiche Wahrscheinlichkeit, der Behandlungs- (oder Kontroll-) Gruppe zugewiesen zu werden wie jede andere. Die Randomisierung wird im Allgemeinen durch ein Computerprogramm mit einem Zufallszahlengenerator erreicht. Die Randomisierungsverfahren unterscheiden sich je nach dem Forschungsdesign des Experiments. Einzelpersonen oder Gruppen können nach dem Zufallsprinzip einer Behandlungs- oder Kontrollgruppe zugewiesen werden. Bei einigen Forschungsdesigns werden die Probanden vor der Zufallszuweisung nach geografischen, demografischen oder anderen Faktoren geschichtet, um die statistische Aussagekraft der geschätzten Wirkung der Behandlung (z. B. GOTV-Intervention) zu maximieren. Informationen über das Randomisierungsverfahren sind in den Zusammenfassungen der einzelnen Experimente auf der Website enthalten.
Was sind die Vorteile randomisierter Versuchspläne? Ein randomisiertes Versuchsdesign liefert die genaueste Analyse der Auswirkungen einer Intervention (z. B. einer Telefonaktion zur Wählermobilisierung oder eines Besuchs eines GOTV-Werbers auf das Wählerverhalten). Durch die zufällige Zuteilung von Probanden zu der Gruppe, die die Behandlung erhält, oder zu der Kontrollgruppe können die Forscher die Wirkung der Mobilisierungsmethode unabhängig von anderen Faktoren messen, die möglicherweise dazu führen, dass bestimmte Personen oder Gruppen eher am politischen Prozess teilnehmen. Ein einfaches Beispiel: Angenommen, wir testen die Wirksamkeit eines Programms zur Wähleraufklärung bei Oberstufenschülern. Wenn wir den Schülern der Klasse erlauben, freiwillig an dem Programm teilzunehmen, und dann das Wahlverhalten der Freiwilligen mit dem der Nichtteilnehmer vergleichen, werden unsere Ergebnisse etwas anderes widerspiegeln als die Auswirkungen der Wählerbildungsmaßnahme. Das liegt daran, dass diese Freiwilligen zweifelsohne Eigenschaften haben, die sie von den Schülern unterscheiden, die sich nicht freiwillig gemeldet haben. Und, was für unsere Arbeit am wichtigsten ist, diese Unterschiede könnten sehr wohl mit der Wahlneigung korrelieren. Anstatt die Schüler selbst auswählen zu lassen oder sogar die Lehrer die Schüler auswählen zu lassen (da die Lehrer bei der Auswahl der Schüler möglicherweise voreingenommen sind), könnten wir alle Schüler einer bestimmten Klasse nach dem Zufallsprinzip entweder einer Behandlungs- oder einer Kontrollgruppe zuordnen. Auf diese Weise wäre sichergestellt, dass die Unterschiede zwischen den Behandlungs- und den Kontrollgruppen ausschließlich auf Zufall beruhen. Der Wert der Randomisierung zeigt sich auch bei der Verwendung von Listen für die Wahlwerbung von Tür zu Tür. Wenn die Wahlhelfer entscheiden, welche Häuser sie aufsuchen und welche sie auslassen, wählen sie möglicherweise Häuser, die einladender erscheinen, oder sie wählen Häuser, die dicht beieinander liegen, anstatt solche, die weiter auseinander liegen. Es ist denkbar, dass diese Unterschiede mit der Wahlbeteiligung korrelieren. Oder wenn die Hausnummern auf der ersten Hälfte einer zehnseitigen Liste ausgewählt werden, können sie in Vierteln liegen, die sich in wichtigen Punkten von den Vierteln in der zweiten Hälfte der Liste unterscheiden. Die zufällige Zuweisung kontrolliert sowohl bekannte als auch unbekannte Variablen, die sich bei anderen Auswahlverfahren einschleichen und die Analysen verfälschen können. Die randomisierte Versuchsplanung ist ein leistungsfähiges Instrument, um gültige Schlüsse über Ursache und Wirkung zu ziehen. Die Verwendung eines randomisierten Versuchsplans sollte ein gewisses Maß an Sicherheit bieten, dass die Forschungsergebnisse, die in Studien zitiert werden, die diese Methodik verwenden, die Auswirkungen der gemessenen Interventionen widerspiegeln und nicht irgendeine andere zugrunde liegende Variable oder Variablen.