Plötzlicher Abbruch mitten in der Umfrage

Question

Sehr geehrtes SoSci Support-Team,

wir haben seit Anfang dieser Woche einen Online-Survey veröffentlicht und sind nun in der aktiven Datenerhebung.
Leider bekamen wir von Teilnehmenden die Rückmeldung, dass die Umfrage mittendrin abgebrochen ist und wir können leider nicht reproduzieren, was vorgefallen ist.

Allerdings haben wir einen personalisierten Link benutzt, um referenzieren zu können aus welcher Gruppe heraus die Umfrage angeklickt und beantwortet wird. Wir befürchten, dass dies zu Überschneidungen beim Aufrufen der Umfrage über den Link führt, das System dies dann nicht mehr richtig zuordnen kann und es entsprechend zum Error führt. Ist das so? Und falls ja, wissen Sie, ob es nachträglich die Möglichkeit gibt, dass das System - trotz Anklicken des personalisierten Links - den Token/die Referenz ignoriert und zum allgemeinen Link führt?

Wir bedanken uns recht herzlich für eine zeitnahe Rückmeldung!

Comments

Wie äußert sich der Abbruch denn (wird eine Fehlermeldung angezeigt? Welche?) und um welche Uhrzeit trat der Abbruch auf?

---

Danke für Ihre schnelle Rückmeldung!

Laut Teilnehmende kam der Abbruch (18.07.2024 ca. 11:45 Uhr), nachdem ca. 53% des Fragebogens bereits beantwortet waren.
Leider ist uns die exakte Fehlermeldung nicht bekannt. Es kam wohl etwas wie "Wenn diese Störung erneut auftritt sollte man sich an unsere Hauptverwaltungs IT stelle wenden". Zeitgleich kam die Teilnehmende nicht ins eigene Intranet, was uns gerade vermuten lässt, dass es sich hierbei eher um ein fremdseitiges (Verbindungs-/Server-) Problem handelt.

Allerdings fällt beim Blick in den Datensatz auf, dass fast 50% der Teilnehmenden den Survey nicht beenden. Außerdem wird nur unregelmäßig die Personenkennung sowie die Referenz des Links im Datensatz angezeit/registriert. Liegt es also evtl. doch am personalisierten Link, der nicht von mehreren Personen genutzt werden kann? Und es dadurch zu ungewollten Überschneidungen = Abbrüchen seitens SoSci Survey kommt?

Danke für Ihre Unterstützung!

Answer 1

Es kam wohl etwas wie "Wenn diese Störung erneut auftritt sollte man sich an unsere Hauptverwaltungs IT stelle wenden".

Auch die Meldung spricht für ein allgemeines Verbindungsproblem beim Teilnehmer.

Allerdings fällt beim Blick in den Datensatz auf, dass fast 50% der Teilnehmenden den Survey nicht beenden.

Wie sieht denn die Verteilung von LASTPAGE aus?

Außerdem wird nur unregelmäßig die Personenkennung sowie die Referenz des Links im Datensatz angezeit/registriert.

Das spricht dafür, dass irgendwo ein Link unterwegs ist, der keine entsprechenden Kennungen hat. Eventuell wollte Ihnen jemand helfen, und hat den Link irgendwo in den sozialen Medien geteilt. Denkbar auch, dass der Link nicht korrekt verschickt wurde - zum Beispiel: Beim Versand über Outlook vergessen viele, Text und Link separat anzupassen.

Wenn Sie mit Personenkennungen arbeiten, sollten Sie darüber nachdenken, den Zugriffsmodus für den Fragebogen so einzustellen, dass man nur mit einer gültigen Kennung zugreifen kann.

Und es dadurch zu ungewollten Überschneidungen = Abbrüchen seitens SoSci Survey kommt?

Die Personenkennung wird von SoSci Survey nur dafür genutzt, um ein eventuell schon vorhandenes Interview fortzusetzen. Die Referenz hat gar keinen Einfluss auf die Funktion. Ich denke nicht, dass es damit zusammenhängt.

Comments

Von der Teilnehmenden haben wir erneut Rückmeldung aus der hauseigenen IT erhalten:

"Seite wurde Testweise mehrere male aufgerufen. Mal ging sie direkt auf, manchmal kamen ähnliche Fehler wie im Ticket. Die Antwortzeiten der Website dauern teilweise so lange, dass es zum Timeout kommt und unser Proxy diese Meldung ausgibt. Problem liegt scheinbar bei dem Umfragen Betreiber, da können wir leider nichts machen."

LASTPAGE zeigt, dass bei 18% Seite 2 (Einwilligung), 4% Seite 3 und 12% Seite 5 die letzte bearbeitete Seite war. Also, sehr früh am Anfang die Umfrage beendet/abgebrochen wurde. Anschließend folgen vereinzelte Fälle (max. 9) für die darauffolgenden Seiten 6-23 (von insgesamt 27) als LASTPAGE-Aufzeichnung.

Was fangen wir nun damit an? Liegt es am Server von SoSci Survey?
Oder doch am personalisierten Link, der nicht zeitgleich über mehrere Teilnehmenden aufgerufen werden kann? Was ist, wenn der Link (z. B. in Krankenhäusern) nicht über verschiedene IP-Adressen aufgerufen wird, sondern zeitgleich durch mehrere Mitarbeitenden eines Hauses als "Clients". Kann es sein, dass das problematisch für die Zuordnung wird?

---

> Problem liegt scheinbar bei dem Umfragen Betreiber, da können wir leider nichts machen.

Das mit den Latenzzeiten ist äußerst unwahrscheinlich: Wir nutzen unterschiedliche Monitorings - teils auch mit Messstationen im Ausland - und nirgends wurden entsprechende Probleme bei den Latenzzeiten berichtet. Auch nicht von anderen Einrichtungen. Die IT soll bitte mal eine Routenverfolgung (trace route) laufen lassen, wenn es auf dem Kommunikationsweg einen Engpass gibt, sollte sich dieser ja gut eingrenzen lassen.

> Also, sehr früh am Anfang die Umfrage beendet/abgebrochen wurde.

Normalerweise hat man - wenn die Begrüßung gut gemacht ist - ca. die Hälfte der Abbrecher auf den ersten 1-2 Seiten. Das ist nicht unüblich. Wenn es zusem noch Probleme mit der Verbindung gibt, sürfte das weiter in die Höhe schnellen.

> Oder doch am personalisierten Link, der nicht zeitgleich über mehrere Teilnehmenden aufgerufen werden kann?

Ein Link mit Referenz ist eine Standard-Funktion und wird sehr häufig verwendet. Ich sehe keinen Grund, warum das gerade in Ihrem Fall zu Problemen führen sollte. Aber wenn Sie Ihrer IT ohnehin schon einen Test-Link bereitgestellt haben, posten Sie diesen doch gerne auch mal hier. Wenn es projektspezifische Probleme gibt, sollten sich diese ja eingrenzen lassen.