Stratifizierung hat nicht geklappt

Question

Liebes scoscisurvey-support-Team,

ich habe in meinem Fragebogen randomisiert und nach Geschlecht stratifiziert. Leider hat die Stratifizierung nicht geklappt. Der Unterschied ist mit p=0.08 zwar nicht signifikant, aber doch nahe dran. Die Einstellung der Urnen war "Gleichverteilte Ziehung ohne Zurücklegen"

Dies war mein php-Code für die Stratifizierung:

if (value('SD09') == 1) {
  question('ZU01');  // Zufallsgenerator für Männer
  put('IV01_01', value('ZU01'));  // Umkopieren nach IV01_01
} else {
  question('ZU02');  // Zufallsgenerator für Frauen/divers
  put('IV01_01', value('ZU02'));  // Umkopieren nach IV01_01
}

Auf der nächsten Seite wurde dann mit folgendem php-Code randomisiert:

if (value('IV01_01') == 1) {
  text('MM_Wahrscheinlichkeiten');
  question('MM01');
} elseif (value('IV01_01') == 2) {
  text('MM_Haeufigkeiten');
  question('MM02');
}

Hätten Sie eine Idee, warum das Geschlecht den beiden Bedingungen so ungleich zugewiesen wurde?

Danke und Grüße

Comments

Könnten Sie die Kreuztabelle aus IV01_01 x SD09 bitte posten? Und zwar getrennt nach FINISHED=1 und FINISHED=0. Danke.

---

Da nur eine Person den Fragebogen nicht beendet hat (=0), wird hier keine Kreuztabelle gerechnet.

Stratifizierung_Bedingung: Wahscheinlichkeit=1, Häufigkeit=2 * Geschlecht Kreuztabelle                   
            Geschlecht        Gesamt
            1    2   
Stratifizierung_Bedingung:
Wahscheinlichkeit=1,  1    Anzahl                        28      69         97
                                    Erwartete Anzahl             34,3     62,7    97,0

Häufigkeit=2               2         Anzahl          43        61    104
                             Erwartete Anzahl           36,7      67,3    104,0

Gesamt                                  Anzahl            71       130       201
                         Erwartete Anzahl          71,0     130,0      201,0


Tut mir leid. Ich kann die Tabelle hier nicht als Bild/Tabelle einfügen. Entsprechend ist die Darstellung nicht schön. Aber ich hoffe Sie finden sich dennoch zurecht.

---

Ich kann der Tabelle noch nicht ganz folgen (insbesonere woher hier die erwartete Anzahl kommt). Könnten Sie bitte der Vollständigkeit halber (gerne auch nur für FINISHED=1) die Kreuztabelle IV01_01 x SD09 posten? Danke.

---

Anhand der erwarteten Anzahl kann ich sofort sehen, wie gut die Stratifizierung geklappt hat. Die gepostetet Tabelle ist schon diejenige für Finished (=1).

Insgesamt haben 130 Frauen und 71 Männer den Fragebogen beendet. 97 Personen wurden der Bedingung Wahrscheinlichkeit zugewiesen und 104 Personen der Bedigung Häufigkeit.

Der "Erwartungswert" ergibt sich, wenn Frauen und Männer gleich (stratifiziert) auf die beiden Bedingungen verteilt werden würden. Erwartungsgemäß hatten 62,7 Frauen in der Gruppe Wahrscheinlichkeit landen müssen - tatsächlich sind dieser Gruppe aber 69 Frauen zugewiesen worden. Außerdem hätten 34,3 Männer der Gruppe Wahrscheinlichkeit zugewiesen werden sollen - tätsächlich sind aber nur 28 Männer dort gelandet. Entsprechend sind auch der erwartete und tatsächliche Wert in der Gruppe Häufigkeiten unterschiedlich.

Die Urnen waren wie gesagt als "Ziehen ohne Zurücklegen" angelegt. Da ich die Befragung im letzten Semster mit dem identischen Fragebogen vereits einmal durchgeführt habe und die Randomisierung/Stratifizierung einwandfrei geklappt hatten, frage ich mich, ob ein spezifisches Verhalten der Versuchspersonen dazu geführt haben könnte, dass es diesmal mit der Randomisierung/Stratifizierung nicht richtig hingehauen hat.

---

> Anhand der erwarteten Anzahl kann ich sofort sehen, wie gut die Stratifizierung geklappt hat. Die gepostetet Tabelle ist schon diejenige für Finished (=1).

Heißt, Sie haben im Datensatz bei Geschlecht=1 die Bedingung "Wahscheinlichkeit" 28-mal bekommen und die Bedingung "Häufigkeit" haben Sie 43-mal bekommen?

Was wird denn im Zufallsgenerator ZU01 auf der rechten Seite als Häufigkeit für die Ziehungen angegeben? Hatten Sie ZU01 oder ZU02 vielleicht nicht nur mittels question() eingebunden, sondern auch in die Fragebogen-Seite gezogen?

---

>Heißt, Sie haben im Datensatz bei Geschlecht=1 die Bedingung "Wahscheinlichkeit" 28-mal bekommen und die Bedingung "Häufigkeit" haben Sie 43-mal bekommen?<

Genau.

>Was wird denn im Zufallsgenerator ZU01 auf der rechten Seite als Häufigkeit für die Ziehungen angegeben?<

beide Bedingungen wurden 101 mal gezogen

>Hatten Sie ZU01 oder ZU02 vielleicht nicht nur mittels question() eingebunden, sondern auch in die Fragebogen-Seite gezogen?<

Zuerst kommt der php-Code:
if (value('SD09') == 1) {
  question('ZU01');  // Zufallsgenerator für Männer
  put('IV01_01', value('ZU01'));  // Umkopieren nach IV01_01
} else {
  question('ZU02');  // Zufallsgenerator für Frauen/divers
  put('IV01_01', value('ZU02'));  // Umkopieren nach IV01_01
}
und danach die beiden Variablen ZU01 und ZU02 (als Würfel dargestellt).

Diese Programmierung hat genauso bereits zweimal funktioniert - also mit dem php-Code und den beiden Zufallsvariablen. Wie kann es sein, dass es jetzt eben nicht mehr funktioniert?

Answer 1

>> Hatten Sie ZU01 oder ZU02 vielleicht nicht nur mittels question() eingebunden, sondern auch in die Fragebogen-Seite gezogen?

und danach die beiden Variablen ZU01 und ZU02 (als Würfel dargestellt).

Da liegt das Problem ... wenn Sie die Fragen zusätzlich zum question() noch auf die Seite ziehen, dann wird immer aus beiden Zufallsgeneratoren gezogen, also nicht stratifiziert. Das spiegelt sich auch darin, dass lt. Zufallsgenerator jede Bedingung mehr als 100-mal gezogen wurde - und eben nicht 34 bzw. 67-mal. Die Anleitung zur Block-Randomisierung schreibt dazu auch explizit:

Wichtig: Platzieren Sie keinen Ihrer Zufallsgeneratoren im Fragebogen. Falls Sie schon einen Zufallsgenerator in den Fragebogen gezogen haben, dann entfernen Sie diesen unter Fragebogen zusammenstellen bitte wieder von der entsprechenden Fragebogen-Seite.