Randomisierung und hohe Abbruchquote

Question

Liebes Support-Team,

im Rahmen meines Online-Experimentes habe ich eine Randomisierung eingebaut, wobei ich die Option "Gleichverteilte Ziehung - Ziehen ohne Zurücklegen" ausgewählt habe.

Die Feldphase läuft bereits seit einer Woche, allerdings ist mir aufgefallen, dass die Abbruchquote sehr hoch ist. Meine Sorge ist nun, dass die Gruppen nun nicht mehr gleichverteilt sind, da die Abbrecher die Randomisierung verzerren.

Ist es sinnvoll bzw. kann man rückwirkend die Option "Gleichverteilung in abgeschlossenen Fragebögen auswählen", um dieses Problem zu umgehen?

Wie würden Sie dieses Problem handhaben?

Vielen Dank im Voraus und Liebe Grüße!

Answer 1

Vermutlich ist es sinnvoller, erst einmal zu prüfen, ob der Abbruch systematisch für eine der beiden experiementellen Bedingungen erfolgt - und wenn ja, die Ziehung vorsichtig nachzujustieren.

Eine nachträgliche Änderung der Art der Ziehung würde nur neue Fälle betreffen. Eine nachträgliche Umgewichtung würde dadurch nicht erfolgen.

Comments

Vielen Dank!
Wäre es nicht möglich sich die aktuellen absoluten Häufigkeiten der Randomisierung (gültige Fälle) ausgeben zu lassen, diese in den Zufallsgenerator einzutragen und dann die Option "Gleichverteilung in abgeschlossenen Fragebögen" auswählen?

Dann würde ich ja die Gewichtung so ändern, wie es derzeit verzerrt ist und das Problem für die Zukunft vermeiden :) oder?

Liebe Grüße und vielen Dank im Voraus!

---

Ja, das ist möglich. Allerdings ist die Gleichverteilung in abgeschlossenen Fragebögen auch nicht vollkommen sorgenfrei. Da gibt es z.B. Fragebögen mit "möchten Sie noch etwas anmerken" auf der vorletzten Seite, und wenn man da nicht mehr auf "Weiter" klickt, wird der Fall nicht als abgeschlossen gezählt. Oder die Fälle, wo viele Personen gleichzeitig auf den Fragebogen zugreifen, sodass es dann doch zu Ungleichverteilungen kommt...