Wie erstellt man nahezu glaubwürdige Statistiken?

Viele Statistiken werden ja nur durch Umfragen erstellt. Da werden nicht mal alle Leute gefragt, sondern es ist eben der Durchschnitt. Aber wie erstellt man denn wirklich nahezu glaubwürdige Statistiken, die auch wirklich die Wahrheit wieder geben? Habt ihr schon mal eine Statistik erstellt und wie seid ihr da vorgegangen? Worüber habt ihr eine Statistik erstellt und war sie wirklich aussagekräftig?

Es gibt ganze Wissenschaften, die sich mit dem Thema beschäftigen. Und selbst die besten Wissenschaftler schaffen es nicht, dass ihre Studien absolut wasserdicht sind. Die Realität ist einfach viel zu komplex, als dass man sie in einer Statistik abbilden könnte. Schließlich kann man nie die gesamte Menschheit zu einem Thema befragen und selbst wenn weiß man nie genau, ob diese Menschen alle die Wahrheit sagen.

Außerdem drücken Statistiken niemals die absolute Realität aus, sondern sind immer interpretationsfähig. Das fängt schon bei der Bewertung der Zahlen an. Wenn man zum Beispiel über ein bestimmtes politisches Thema abstimmen lässt und 60% stimmen dafür, könnte man sagen: "Die Mehrheit ist positiv dem Thema gestimmt." Man könnte aber auch sagen: "Fast die Hälfte ist dagegen". Wenn man in den Medien genauer liest, merkt man, dass viele Statistiken sehr stark durch die Meinung des Autors gefärbt sind. Ein und die Selbe Statistik können für eine komplett gegensätzliche Argumentation herangezogen werden.

Und dann gibt es noch ein Problem mit Korrelation und Kausalität. Häufig werden diese zwei Begriffe gleichgesetzt. Man könnte zum Beispiel statistisch nachweisen, dass die Anzahl der Krebserkrankten in der Nähe eines Atomkraftwerkes angestiegen sind (= Korrelation) und könnte daraus schließen, dass das Atomkraftwerk für diesen Anstieg verantwortlich ist (= Kausalität). Es könnte aber sein, dass es einen völlig anderen Grund für diesen Anstieg gibt (zum Beispiel ein genereller Anstieg der Krebserkrankungen aufgrund schlechterer Ernährung), der überhaupt nichts mit dem Atomkraftwerk zu tun hat. Eine Statistik kann das aber nicht erfassen, es liegt also nur an der Interpretation.

Auch sind Statistiken schlecht vergleichbar, wenn man die Abgrenzungsparameter ändert. So weisen Statistiken einen enormen Anstieg von psychischen Erkrankungen aus, und man schließt daraus, dass der Mensch dem heutigen Stress in der Arbeitswelt nicht mehr gewachsen ist. Es ist allerdings auch so, dass heutzutage einfach viel häufiger Verhaltensweisen als psychische Krankheiten diagnostiziert werden, die man früher nur als "wunderliches Verhalten" oder ähnliches wahrgenommen wurde.