TIME_RSI und rotierte Fragebogenseiten

Question

Hallo!

In unserer Erhebung möchten wir den 'relative speed index' als Variable zur Beurteilung der Datenqualität nutzen. Im Paper von Leiner (2019) habe ich dazu gelesen, dass für dessen Kalkulation je Fragebogen-Seite die Verweildauer im Median herangezogen wird.

In unserem Fragebogen werden die Seiten jedoch rotiert, mittels Zufallsgenerator und dem Befehl 'setPageOrder'. Auf derselben Fragebogenseite bekommen manche VP also die Skalen mit 3 Items und manche die mit 34 Items.

Da die Variable TIME_RSI über alle Seiten gemittelt wird und allen VP dieselben Seiten (nur eben in unterschiedlicher Reihenfolge) präsentiert werden, sollte das Rotieren der Seiten, für mein Verständnis, kein Problem sein. Folgender Satz aus dem Paper hat mich jedoch irritiert: "An average speed factor per respondent is computed after the page factors are clipped to a maximum value of 3." Ist TIME-RSI in unserem Fall dann noch ein zuverlässiger Indikator? Ein Wert >3 pro Seite könnte ja auch entstehen, wenn durch das Rotieren eine VP die Seite mit nur 3 Items präsentiert bekommt.

Viele Dank vorab.

Answer 1

Auf derselben Fragebogenseite bekommen manche VP also die Skalen mit 3 Items und manche die mit 34 Items.

Wenn Sie nur die Seiten rotieren, dann wird auf jeder Seite immer dasselbe angezeigt - die 3 Items z.B. immer auf Seite 4 (TIME004) und die 23 Items auf Seite 5 (TIME005). Nur eben in unterschiedliche Abfolge.

SoSci Survey speichert die Bearbeitungszeiten pro Seite (wie unter Fragebogen zusammenstellen) angegeben und nicht in der Reihenfolge, wie die Seite betrachtet wurden.

Comments

Perfekt, vielen Dank für Ihre schnelle Antwort!