Was ist Peer Review und warum ist es kein Gütesiegel für alles?

Peer Review verständlich erklärt

Peer Review bezeichnet ein Verfahren, bei dem wissenschaftliche Arbeiten vor oder nach ihrer Veröffentlichung von anderen Fachleuten geprüft werden. Das englische Wort „peer“ bedeutet hier eine Person aus demselben oder einem verwandten Fachgebiet. Geprüft werden können etwa ein Forschungsartikel, ein Buchbeitrag, ein Konferenzbeitrag, ein Forschungsantrag oder ein Bericht.

Die Gutachtenden untersuchen nicht nur, ob ein Text sprachlich ordentlich wirkt. Sie fragen unter anderem, ob die Forschungsfrage klar formuliert ist, ob die verwendeten Methoden zur Frage passen, ob die Schlussfolgerungen durch die Daten gedeckt sind und ob wichtige Forschung berücksichtigt wurde. Je nach Fach und Zeitschrift unterscheiden sich die Kriterien.

Das Ergebnis ist keine einfache Bescheinigung mit der Aussage „Diese Arbeit ist wahr“. Meist geben Gutachtende Empfehlungen ab: Veröffentlichung ohne Änderungen, Überarbeitung, erneute Begutachtung oder Ablehnung. Die Entscheidung trifft in der Regel eine Redaktion, ein Herausgebergremium oder eine zuständige wissenschaftliche Kommission. Peer Review ist also ein Prüfprozess, nicht das persönliche Gütesiegel einer einzelnen Person.

Wie ein Begutachtungsverfahren typischerweise abläuft

Die Abläufe sind je nach Publikationsform unterschiedlich. Ein wissenschaftlicher Zeitschriftenartikel durchläuft häufig mehrere Stationen:

1. Einreichung: Die Autorinnen und Autoren reichen den Text bei einer Zeitschrift oder einem Herausgebergremium ein.
2. Redaktionelle Vorprüfung: Die Redaktion prüft zunächst, ob das Thema zum Profil der Zeitschrift passt und ob formale Mindestanforderungen erfüllt sind. Dabei kann ein Text bereits ohne externes Gutachten abgelehnt werden.
3. Auswahl von Gutachtenden: Fachkundige Personen werden angefragt. Sie sollten über passende Kenntnisse verfügen und mögliche Interessenkonflikte offenlegen.
4. Inhaltliche Begutachtung: Die Gutachtenden bewerten beispielsweise Fragestellung, Forschungsstand, Methode, Datenanalyse, Darstellung und Schlussfolgerungen.
5. Überarbeitung: Die Autorinnen und Autoren erhalten Kommentare und können den Text überarbeiten. Häufig wird eine Antwort verlangt, in der jede wichtige Änderung erläutert wird.
6. Entscheidung: Nach einer weiteren Prüfung entscheidet die Redaktion über Annahme, Ablehnung oder eine erneute Überarbeitung.

In einem offenen Peer Review können die Namen von Autorinnen, Autoren und Gutachtenden bekannt sein oder die Gutachten veröffentlicht werden. Beim einfach anonymen Verfahren kennen die Gutachtenden die Namen der Verfassenden nicht, während die Verfassenden die Gutachtenden kennen können. Beim doppelt anonymen Verfahren bleiben beide Seiten anonym. Diese Modelle sollen unterschiedliche Formen von Befangenheit verringern, lösen das Problem aber nicht vollständig.

Was Peer Review leisten kann

Die Begutachtung erfüllt mehrere wichtige Funktionen. Sie wirkt zunächst als fachliche Qualitätskontrolle. Unklare Begriffe, fehlende Belege, ungeeignete Vergleichsgruppen oder widersprüchliche Argumente können auffallen, bevor ein Text erscheint. Gerade für Leserinnen und Leser, die nicht jedes methodische Detail selbst überprüfen können, ist diese zusätzliche Prüfung nützlich.

Peer Review kann außerdem die Qualität einer Darstellung verbessern. Ein Gutachten weist möglicherweise darauf hin, dass eine Definition fehlt, eine Tabelle nicht verständlich ist oder eine Schlussfolgerung zu weit geht. Die Überarbeitung macht einen Text dann nachvollziehbarer, ohne dass damit automatisch jede Aussage bewiesen wäre.

Auch die Einordnung in den Forschungsstand gehört dazu. Neue Arbeiten sollten zeigen, woran sie anknüpfen und worin ihr Beitrag besteht. Gutachtende können auf relevante Gegenpositionen oder bereits bekannte Ergebnisse hinweisen. Dadurch wird wissenschaftliche Kommunikation überprüfbarer.

Schließlich schafft das Verfahren eine dokumentierte Entscheidungssituation. Wer eine veröffentlichte Studie liest, kann zumindest erkennen, dass sie ein bestimmtes redaktionelles Prüfverfahren durchlaufen hat. Das ist eine Information über den Entstehungsprozess des Textes, nicht über die endgültige Wahrheit jeder einzelnen Aussage.

Warum Peer Review kein allgemeines Gütesiegel ist

Der wichtigste Unterschied lautet: Peer Review bewertet einen Beitrag nach bestimmten Kriterien in einem bestimmten Kontext. Es bestätigt nicht automatisch jede Behauptung, die in diesem Beitrag vorkommt. Auch die Qualität der Zeitschrift oder des Herausgebergremiums ist nicht mit der Richtigkeit jeder veröffentlichten Aussage gleichzusetzen.

Ein Gutachten hat außerdem einen begrenzten Umfang. Gutachtende haben nicht zwingend Zugang zu allen Rohdaten, Laborunterlagen, Programmiercodes oder internen Arbeitsschritten. Sie prüfen das, was im Manuskript beschrieben und im vorgesehenen Rahmen kontrollierbar ist. Wenn ein wichtiger Fehler in den Daten oder in der Auswertung nicht sichtbar wird, kann er trotz Begutachtung bestehen bleiben.

Wissenschaftliche Erkenntnis entwickelt sich zudem durch Kritik und Wiederholung. Eine begutachtete Einzelstudie kann eine plausible Hypothese vorlegen, ohne dass die Frage damit abschließend beantwortet ist. Spätere Untersuchungen können zu anderen Ergebnissen kommen, eine Methode in Frage stellen oder zeigen, dass ein Ergebnis nur unter bestimmten Bedingungen gilt.

Auch die Tatsache, dass ein Text nicht peer-reviewed ist, beweist nicht, dass er wertlos ist. Lehrbücher, wissenschaftliche Monografien, amtliche Statistiken, Dissertationen, Forschungsberichte und Vorabveröffentlichungen folgen unterschiedlichen Prüfwegen. Ihre Aussagekraft muss anhand ihrer Herkunft, Methode und Belege beurteilt werden. Umgekehrt ist ein peer-reviewter Text nicht automatisch für jede praktische Entscheidung geeignet.

Typische Grenzen und mögliche Fehlerquellen

Peer Review ist ein Verfahren mit menschlichen Beteiligten. Deshalb kann es Fehler, Verzerrungen und unterschiedliche Einschätzungen geben. Die folgenden Grenzen sind besonders relevant:

• Begrenzte Zeit: Gutachtende prüfen einen Text im Rahmen ihrer verfügbaren Zeit. Eine vollständige Nachrechnung aller Analysen ist nicht immer möglich.
• Unterschiedliche Fachkenntnis: Niemand beherrscht alle Methoden und Teilgebiete. Ein Gutachten kann in einem Aspekt sehr stark und in einem anderen weniger tiefgehend sein.
• Interessenkonflikte: Persönliche, institutionelle oder fachliche Interessen können eine Bewertung beeinflussen. Regeln zur Offenlegung sollen dieses Risiko vermindern.
• Konservative Effekte: Ungewöhnliche Fragestellungen oder neue Methoden können auf Widerstand stoßen, wenn sie vertraute Annahmen in Frage stellen. Das ist kein Beweis dafür, dass sie falsch sind.
• Publikationsverzerrungen: Ergebnisse mit klaren oder auffälligen Befunden können eher Aufmerksamkeit erhalten als unauffällige Ergebnisse. Die Begutachtung allein beseitigt diese Verzerrung nicht.
• Methodische Grenzen: Ein gut durchgeführtes Verfahren kann nur die Frage beantworten, für die es geeignet ist. Aus einer Korrelation folgt beispielsweise nicht automatisch eine Ursache.
• Nachträgliche Korrekturen: Auch veröffentlichte Artikel können später korrigiert, zurückgezogen oder durch neue Forschung relativiert werden.

Die Deutsche Forschungsgemeinschaft beschreibt gute wissenschaftliche Praxis als Aufgabe, die über die Begutachtung einzelner Texte hinausgeht. Dazu gehören unter anderem nachvollziehbare Dokumentation, sorgfältiger Umgang mit Daten und eine transparente Darstellung von Unsicherheiten.

Vorabveröffentlichungen und endgültige Publikationen unterscheiden

Ein Preprint ist eine wissenschaftliche Arbeit, die öffentlich zugänglich gemacht wird, bevor sie ein vollständiges Peer-Review-Verfahren einer Zeitschrift durchlaufen hat. Preprints können Forschung schnell verfügbar machen und eine frühe Diskussion ermöglichen. Sie sind jedoch nicht deshalb falsch, weil sie noch nicht begutachtet wurden. Leserinnen und Leser sollten lediglich wissen, dass eine bestimmte externe Prüfung noch aussteht.

Auch nach der Veröffentlichung bleibt Aufmerksamkeit wichtig. Manche Zeitschriften kennzeichnen Korrekturen oder Rücknahmen. Eine seriöse Quellenprüfung fragt deshalb nicht nur: „Ist der Artikel peer-reviewed?“, sondern auch: „Welche Version lese ich? Wurde der Text später geändert? Gibt es Reaktionen oder Replikationsstudien?“

Bei Nachrichten, Unterrichtsmaterialien oder Beiträgen in sozialen Netzwerken wird „peer-reviewed“ gelegentlich verkürzt verwendet. Ein Text kann auf eine peer-reviewte Studie verweisen und ihre Ergebnisse trotzdem ungenau zusammenfassen. Das Prüfsiegel der ursprünglichen Studie überträgt sich nicht automatisch auf jede spätere Darstellung.

Peer Review von anderen Prüfungen unterscheiden

Im Alltag werden verschiedene Formen von Kontrolle miteinander verwechselt. Die folgende Übersicht hilft bei der Einordnung:

Diese Prüfungen können sich ergänzen. Keine einzelne Kategorie ersetzt die genaue Frage, welche Aussage geprüft werden soll und welche Belege dafür erforderlich sind.

So bewerten Lernende eine peer-reviewte Quelle

Für Referate, Hausarbeiten und selbstständiges Lernen reicht der Hinweis „peer-reviewed“ selten aus. Eine kurze Prüfung in mehreren Schritten ist hilfreicher:

1. Die konkrete Aussage markieren: Geht es um eine Beschreibung, eine Ursache-Wirkung-Behauptung, eine Prognose oder eine Empfehlung? Je genauer die Aussage, desto gezielter lässt sich die Quelle prüfen.
2. Publikationsart feststellen: Handelt es sich um einen Forschungsartikel, einen Kommentar, ein Editorial, einen Konferenzbeitrag, einen Preprint oder eine Übersichtsarbeit? Nicht jeder Text in einer wissenschaftlichen Zeitschrift ist ein Originalforschungsartikel.
3. Forschungsfrage und Methode lesen: Welche Personen, Texte, Daten oder Fälle wurden untersucht? Passt die Methode zur Frage? Welche Grenzen nennen die Autorinnen und Autoren selbst?
4. Ergebnisse von Deutungen trennen: Eine Tabelle oder statistische Auswertung ist nicht identisch mit der Interpretation im Diskussionsteil. Prüfe, ob die Schlussfolgerung über die Ergebnisse hinausgeht.
5. Aktualität und Forschungsstand einordnen: In manchen Bereichen verändern sich Begriffe, Technologien oder Forschungslagen schnell. Ein älterer Artikel kann weiterhin wichtig sein, beantwortet aber nicht automatisch aktuelle Fragen.
6. Weitere Quellen vergleichen: Suche nach Übersichtsarbeiten, Gegenpositionen oder Studien mit anderer Methode. Übereinstimmung stärkt die Einordnung, während Widersprüche genauer untersucht werden sollten.
7. Transparenz beachten: Sind Daten, Materialien, Auswertungsschritte und mögliche Interessenkonflikte ausreichend beschrieben? Nicht jede fehlende Information macht eine Arbeit unbrauchbar, sie begrenzt aber die Sicherheit der Bewertung.

Ein nützlicher Satz für eine Hausarbeit lautet beispielsweise: „Die Studie wurde peer-reviewed veröffentlicht und berichtet unter den beschriebenen Bedingungen ein bestimmtes Ergebnis.“ Diese Formulierung ist präziser als: „Die Studie beweist endgültig, dass die Behauptung stimmt.“

Was Eltern und Lehrkräfte Jugendlichen erklären können

Bei Jugendlichen entsteht leicht der Eindruck, ein wissenschaftliches Siegel mache eine Quelle automatisch richtig. Hilfreich ist eine Unterscheidung zwischen Vertrauen und Prüfbarkeit. Peer Review kann das Vertrauen in den Prüfweg erhöhen. Prüfbarkeit verlangt zusätzlich, dass die Aussage, die Methode und die Belege zusammenpassen.

Eine Unterrichtsaufgabe kann deshalb zwei Texte vergleichen: einen populärwissenschaftlichen Beitrag, der auf eine peer-reviewte Studie verweist, und die Studie selbst. Die Lernenden markieren, welche Aussagen direkt aus den Ergebnissen stammen und welche aus der Interpretation oder der journalistischen Zusammenfassung. Anschließend formulieren sie die Aussage mit einer angemessenen Sicherheit um.

Für die Recherche helfen drei Fragen:

• Wer veröffentlicht den Text und welche Prüfungen sind erkennbar?
• Welche genaue Behauptung wird durch welche Daten oder Quellen gestützt?
• Welche Einschränkung würde die Aussage verändern?

So entsteht wissenschaftliches Denken nicht als blindes Vertrauen in ein Etikett, sondern als begründete Einschätzung. Das ist für Sprachlernen, gesellschaftliche Themen und naturwissenschaftliche Fragen gleichermaßen relevant, weil in allen Bereichen zwischen Behauptung, Beleg und Interpretation unterschieden werden muss.

FAQ: Häufige Fragen zu Peer Review

Ist ein peer-reviewter Artikel automatisch wahr?

Nein. Peer Review zeigt, dass ein Beitrag ein bestimmtes fachliches Prüfverfahren durchlaufen hat. Es ist kein Beweis dafür, dass jede Aussage korrekt, endgültig bestätigt oder auf andere Situationen übertragbar ist.

Kann ein nicht peer-reviewter Text trotzdem nützlich sein?

Ja. Lehrmaterialien, Forschungsberichte, Dissertationen oder Preprints können wertvolle Informationen enthalten. Ihre Entstehung und ihre Grenzen müssen jedoch anders bewertet werden. Besonders wichtig sind Autorenschaft, Methode, Belege, Transparenz und die Einordnung in weitere Quellen.

Warum werden peer-reviewte Artikel später korrigiert oder zurückgezogen?

Die Begutachtung findet unter begrenzten Bedingungen statt. Spätere Prüfungen können Fehler in Daten, Methoden oder Darstellungen sichtbar machen. Korrekturen und Rücknahmen sind daher kein Widerspruch zur Wissenschaft, sondern Teil eines Verfahrens, in dem Erkenntnisse überprüft und bei Bedarf berichtigt werden.

Ist eine systematische Übersichtsarbeit immer besser als eine Einzelstudie?

Nicht automatisch. Eine systematische Übersichtsarbeit kann mehrere Studien strukturiert zusammenfassen, hängt aber von der Qualität, Vergleichbarkeit und Auswahl der einbezogenen Arbeiten ab. Für eine konkrete Frage kann eine gut passende Einzelstudie ergänzende Informationen liefern.

Welche Kurzformel hilft bei der Quellenbewertung?

Frage nicht nur „Ist die Quelle peer-reviewed?“, sondern auch: „Was wurde genau geprüft, mit welcher Methode, unter welchen Bedingungen und mit welchen Grenzen?“ Diese Fragen machen die Aussagekraft einer Quelle deutlich genauer.