STATISTIK-FORUM.de

[Interrater]

Hallo liebes Forum,

für meine Masterarbeit verwende ich zwei Maße um die Übereinstimmung von Beurteilern zu messen: den Cohens's Kappa und den Krippendorff's Alpha. Dazu habe ich einige Fragen und ich würde mich sehr über Antworten freuen!!

Kappa:
- Mit welcher Irrtumswahrscheinlichkeit errechnet SPSS den Wert? (Ich bekomme ja einen p Wert, der mir sagt ob das Ergebnis signifikant ist oder nicht, aber ich weiß nicht, in welchen Konfidenzintervall sich der Wert bewegt. Oder muss ich das gar nicht angeben?)
- Lohnt es sich, noch andere Werte (aus Häufigkeitstabellen oder Ähnlichem) anzusehen und zu interpretieren?

Kalpha:
- Wozu genau dient das Bootstrapping? Wann muss man Bootstrapping anwenden, und wann nicht?
- Wenn ich kein Bootstrapping anwende, woher weiß ich, ob mein Ergebnis signifikant ist? (ein p Wert oder Konfidenzintervall wird bei Berechnung ohne Bootstrapping nicht angegeben)
- Wenn ich Bootstrapping anwende, was sagt mir das Konfidenzintervall? Muss der Wert innerhalb des Intervalls liegen?

Ich hoffe die Fragen klingen nicht allzu doof  Über eine Nachricht freue ich mich sehr.

[PonderStibbons]

Wozu soll bei einer Reliabilitätsangabe ein Signifikanztest gut sein? Die Aussage, dass die Übereinstimmung in der Grundgesamtheit, aus der die Stichprobenwerte stammen, nicht exakt 0,0000... ist, düfte doch eher wenig überraschen bzw. welchen Nutzen stiftet dies.

Nebenbei ist kappa nur zweifelsfrei brauchbar, wenn beide Randverteilungen fix sind, was aber so gut wie nie der Fall ist und zu mehr oder minder absurden Konsequenzen führt.

Mit freundlichen Grüßen

P.

P.S.
Zu Bootstrapping könnte man hier natürlich diverse Texte aus dem Netz hineinkopieren, aber vielleicht hast Du ja Lust, erstmal selber eine Suchmaschine damit zu füttern und dann etwas konkretere Fragen zu stellen.

[Interrater]

Hallo,

genau weil mir schwammig ist, wozu ein Sig Test gut ist, ist ja meine Frage, wieso SPSS mit den p Wert ausspuckt. Mir ist eben nicht klar, wie ich ihn interpretieren soll.
Mir ist darüber hinaus bewusst, dass Kappa Schwächen z.B. im Hinblick auf die Verzerrung durch Randverteilungen aufweist, deswegen vergleiche ich ihn ja mit Kalpha. Ich habe mich schon tagelang mit der Bootstrapping-Frage befasst, hätte ich eine Antwort gefunden, hätte ich mich hier nicht angemeldet.

Wenn also jemand anders Antworten auf die Fragen oben hat, freue ich mich sehr

Grüße