Zufallsgenerator in Experimenten

Question

Guten Tag,
ich führe ein Online Experiment mit 2 Gruppen durch. Ich habe für jede Gruppe einen identischen Fragebogen erstellt und das Treatment jeweils am Anfang variiert. Der Link eines dritten Fragenbogens „Rondom“ wird an die Teilnehmer verschickt. Er besteht lediglich aus der Einleitungsseite und einer Seite mit dem Zufallsgenerator und dem PHP Code wie auf ihren Informationsseiten beschrieben.

Das Problem: wenn ich Gleichverteilung in abgeschlossen Fragebögen angebe, ergibt das logischerweise keinen Sinn (Random wird ja nie beendet). Gleichzeitig hat man bei Gleichverteilung nach Ziehung das Problem, dass ggf unterschiedlich häufig die einzelnen Fragebögen abgebrochen werden.

Wie löst man dieses Problem? Oder greift ab einer bestimmten Gruppengröße das Gesetz der großen Zahl, wodurch die Gruppen annähernd gleich-verteilt sind?

Vielen Dank!

Answer 1

Wie löst man dieses Problem?

Arbeiten Sie nur mit einem Fragebogen und variieren Sie in diesem den Stimulus.

Unterschiedliche Fragebögen zu verwenden hat einige Nachteile - unter anderem ist das Risiko groß, dass man am Ende noch Korrekturen vornehmen muss, diese dann aber nur in einem Fragebogen erledigt und im anderen vergisst. Damit handelt man sich sehr schnell eine Konfundierung ein.

Oder greift ab einer bestimmten Gruppengröße das Gesetz der großen Zahl, wodurch die Gruppen annähernd gleich-verteilt sind?

Das kommt darauf an, ob Sie mit systematischen Abbrechern aufgrund der Experimentalbedingung rechnen...