von bele » Fr 9. Mär 2018, 16:15
Hallo cand.med,
kleine Studien haben einen ganz eigenen Fluch bei der Nullhypothesentestung. Der Test sagt immer nur, wie unwahrscheinlich die Nullhypothese ist. Er sagt nie, wie unwahrscheinlich das Ergebnis ist. Wenn Du mit einer kleinen Fallzahl ein signifikantes Ergebnis hast, dann hast Du bestimmt eine große Hazard Ratio. Du musst Dir nun die Frage stellen, ob diese Hazard Ratio plausibel ist.
Wenn z. B. die Hazard Ratio durch Kamillentee mehr beeinflusst wird als durch fortgesetztes Rauchen, dann stimmt irgendwas nicht. Dann hast Du die Nullhypothese auf 5% widerlegt mit einer These, die weit unwahrscheinlicher ist als die 5 %.
Also: Wenn Du einen sehr starken Gruppeneffekt erwarten darfst, dann gilt mit p < 0,05, dass die Nullhypothese widerlegt ist und mehr fragt man in der Nullhypothesentestung nicht. Du musst dann halt ganz fest die Daumen drücken, dass Du nicht zufällig einen starken Ausrutscher in den Daten hast, denn ein einziger Outlier würde Dein ganzes Ergebnis massiv verändern. Wenn Du von vorneherein nur einen kleinen Gruppeneffekt hättest erwarten dürfen und trotzdem ein hochsignifikantes Ergebnis hast, dann ist Dir leider nicht zu helfen.
Ein ausführliches Beispiel für einen solchen Fall und viele weitere bedenkenswerte Aspekte der Statistik, die in Einführungskursen so oft nicht gelehrt werden, findest Du auf Youtube mit den Suchbegriffen "Andrew Gelman Crimes Against Data".
LG,
Bernhard
----
`Oh, you can't help that,' said the Cat: `we're all mad here. I'm mad. You're mad.'
`How do you know I'm mad?' said Alice.
`You must be,' said the Cat, `or you wouldn't have come here.'
(Lewis Carol, Alice in Wonderland)