Testverfahren für Experiment mit 4 Gruppen

Fragen, die sich auf kein spezielles Verfahren beziehen.

Testverfahren für Experiment mit 4 Gruppen

Beitragvon Buellend » Do 24. Jul 2014, 11:49

Hallo zusammen,

ich habe ein Problem bei der Wahl der korrekten Testverfahren für den folgenden Sachverhalt:
Es wurden 5 Experimente durchgeführt, in denen verschiedene Darstellungsvarianten (Tabelle N=52, Text N=34, Grafik N=44, Mix N=47) von Informationen in Bezug auf die Entscheidungsqualität getestet wurden. Dazu wurden in 4 Fällen ja/nein- Antworten vorgegeben und im 5. Falle vier Alternativen mit A,B,C und D. Wir haben hier also nominale (dichotome) Daten die entsprechend in SPSS ‚gecoded‘ wurden. Eine dieser Antworten war immer die richtige; die anderen waren falsch.

Wenn ich jetzt zb. eine Hypothese aufstelle für Experiment 1:

H= Tabellen erzielen bessere/präzisere Ergebnisse, als die anderen drei Gruppen.
(besser im Sinne von mehr richtige Antworten)

Welchen Signifikanztests darf ich da wie anwenden? Sollte man einen Chi-quadrat Test auf Basis der 4x2 Kreuztabelle berechnen oder eher einzelne Direktvergleiche mit Fisher’s? Wie sollte ich im ‚Vier alternativen‘ Fall vorgehen?

Die Gruppen sind

Danke für die Hilfe vorab

Gruß
B
Buellend
Grünschnabel
Grünschnabel
 
Beiträge: 2
Registriert: Do 17. Jul 2014, 20:54
Danke gegeben: 1
Danke bekommen: 0 mal in 0 Post

Re: Testverfahren für Experiment mit 4 Gruppen

Beitragvon PonderStibbons » Do 24. Jul 2014, 13:31

H= Tabellen erzielen bessere/präzisere Ergebnisse, als die anderen drei Gruppen.
(besser im Sinne von mehr richtige Antworten)

Was heißt das? Mehr als jede einzelne? Mehr als die drei Gruppen
gepoolt?
Welchen Signifikanztests darf ich da wie anwenden?

Chi² klingt schonmal nicht falsch. Die eigentlichen Fragen sind,
was soll eigentlich womit verglichen werden und wie geht man
mit dem Problem multiplen Testens um.
Wie sollte ich im ‚Vier alternativen‘ Fall vorgehen?

Du sagst doch, auch dies sei letztlich eine richtig/falsch-Frage?

Im Snne der Hypothese hätte ich übrigens eher erwartet, dass
Du die Zahl der richtigen Antworten (0 bis 5) als abhängige Variable
hernimmst und einen Test für ordinale Daten rechnest
(H-Test bzw. U-Test).

Mit freundlichen Grüßen

P.
PonderStibbons
Foren-Unterstützer
Foren-Unterstützer
 
Beiträge: 11368
Registriert: Sa 4. Jun 2011, 15:04
Wohnort: Ruhrgebiet
Danke gegeben: 51
Danke bekommen: 2504 mal in 2488 Posts

Re: Testverfahren für Experiment mit 4 Gruppen

Beitragvon Buellend » Do 24. Jul 2014, 14:47

vielen Dank für die schnelle Antwort!
Was heißt das? Mehr als jede einzelne? Mehr als die drei Gruppen gepoolt?

Mit anderen Worten: Tabellen erzielen prozentual gesehen mehr richtige Antworten,
als jeweils die Darstellungsvarianten Text, Grafik oder Mix. Tab>Text und Tab>Gra und Tab>Mix
Die eigentlichen Fragen sind, was soll eigentlich womit verglichen werden

Es soll gezeigt werden, dass verschiedene Darstellungsvarianten in unterschiedlichen
Situationen einem Entscheider eher zu einer optimalen (logischen) Lösung führen als
andere Darstellungsmöglichkeiten.
Im Snne der Hypothese hätte ich übrigens eher erwartet, dass
Du die Zahl der richtigen Antworten (0 bis 5) als abhängige Variable
hernimmst und einen Test für ordinale Daten rechnest
(H-Test bzw. U-Test).

Über den Kruskal-Wallis habe ich auch nachgedacht, ihn aber erstmal außen vorgelassen,
da sich die Ergebnisse zum Chi²- test hinsichtlich der Signifikanz unterscheiden.
Welchen wäre dann vorzuziehen?
Buellend
Grünschnabel
Grünschnabel
 
Beiträge: 2
Registriert: Do 17. Jul 2014, 20:54
Danke gegeben: 1
Danke bekommen: 0 mal in 0 Post

Re: Testverfahren für Experiment mit 4 Gruppen

Beitragvon PonderStibbons » Do 24. Jul 2014, 15:34

Im Moment hast Du 5 Chi² Tests bzw. 15 paarweise Vergleiche.
Ob das alles signifikant wird, wenn man das Signifikanzniveau
wegen multipler Testung korrigiert, weiß ich nicht.

Wie gesagt passt aus meiner Sicht die Aggregation der Antworten
besser als 5maliges berechnen des im Prinzip selben Sachverhalts.

Mit freundlichen Grüßen

P.
PonderStibbons
Foren-Unterstützer
Foren-Unterstützer
 
Beiträge: 11368
Registriert: Sa 4. Jun 2011, 15:04
Wohnort: Ruhrgebiet
Danke gegeben: 51
Danke bekommen: 2504 mal in 2488 Posts

folgende User möchten sich bei PonderStibbons bedanken:
Buellend


Zurück zu Allgemeine Fragen

Wer ist online?

Mitglieder in diesem Forum: 0 Mitglieder und 8 Gäste

cron