Ich habe im Rahmen meiner Masterarbeit eine quantitative Umfrage durchgeführt und muss nun noch den Datensatz aufbereiten, bevor ich mit der Auswertung starten kann. Hierbei bin ich mir bezüglich der folgenden Punkte unsicher und würde mich über ein paar Tipps / Erfahrungswerte freuen.
1) Time to Completion
Gemäss Literatur sind zu schnell beantwortete Einreichungen oftmals ein Indiz für eine schlechte Datenqualität. Doch woran wird festgemacht, was "zu schnell" ist? Prolific definiert eine zu schnelle Einreichung also solche, deren TTC 3 SD unter dem Mean liegt. Gemäss dieser Regel könnte ich alle Daten verwenden, weil längst der Nullpunkt erreicht wurde. Nun habe ich spasseshalber mal die Umfrage schnellstmöglich durchgemacht und meines Erachtens ist es utopisch, die Umfrage seriös in einer solche kurzen Zeit zu beantworten, wie es die schnellsten Einreichungen getan haben. Wie habt ihr das bei eurer Studie begründet und wo wurde die Grenze gesetzt? Mir erscheint es aktuell willkürlich.
2) Failed Manipulation Check
Ich habe einen (1) Manipulationscheck in meiner Umfrage, bei dem Teilnehmende aus 4 Antwortmöglichkeiten den Inhalt einer zuvor gesehenen Annonce auswählen mussten. Meiner Meinung nach ist dieser sehr objektiv und auch einfach zu verstehen. Gemäss Literatur wird nun aber kritisiert, dass die Entfernung von Teilnehmenden die den Check nicht bestanden haben zu einem Bias führen könnte. Insgesamt haben ca. 16 von 270 Leuten den Check nicht bestanden. Einerseits ist es für mich klar und ich würde die Leute rauswerfen, hab den "Fail" ja schwarz auf weiss. Andererseits hatte mein Prof. aber noch angedeutet, dass es auch sein kann, dass die Manipulation trotzdem funktioniert hat. Kurzum, wie habt ihr das bei euch gehandhabt?
Danke!
