KI-Bias in der Literatursynthese vermeiden: Ein Leitfaden für Forschende

Praktische Schritte zur Minderung spezifischer Verzerrungen

Selektionsbias beim Screening vermeiden

Large Language Models (LLMs) können systematisch bestimmte Studientypen, Sprachen oder Ergebnisse bevorzugen oder ausschließen. Forschende sollten KI-Entscheidungen mit einem Goldstandard menschlicher Entscheidungen vergleichen, um das System zu kalibrieren .

Bestätigungs- und Publikationsbias beachten

Maschinelle Lernsysteme werden oft mit konventionellem Wissen und publizierter Literatur trainiert, die bereits zu positiven Ergebnissen neigt. Das kann bestehende Verzerrungen in der Evidenzbasis unbemerkt verstärken .

KI-Ergebnisse gegen menschliche Beurteilung validieren

Übernehmen Sie KI-vorgeschlagene Studien, extrahierte Daten oder Risk-of-Bias-Bewertungen nicht blind. Überprüfen Sie eine substanzielle Zufallsstichprobe manuell .

KI nur für Aufgaben nutzen, für die sie entwickelt und validiert wurde

Holen Sie niemals Rat außerhalb des trainierten Bereichs ein, und überprüfen Sie die Ergebnisse immer .

Transparenz und Berichtsstandards

Jedes verwendete KI-Tool inklusive Version und Rolle offenlegen

2025 veröffentlichten Cochrane, die Campbell Collaboration, JBI und die Collaboration for Environmental Evidence eine gemeinsame Erklärung, die eine transparente Berichterstattung über den KI-Einsatz in Evidenzsynthesen fordert .

Neue Berichtsrichtlinien befolgen

Eine Drei-Säulen-Richtlinie für verantwortungsvolle KI in systematischen Übersichtsarbeiten setzt auf Retrieval-Augmented Generation (RAG) mit überprüfbarer Quellenangabe und positioniert KI als „kalibrierten Partner“ statt als Ersatz .

Lücken in Schulung und Standards schließen

Verbesserte Transparenz, klarere Berichtsstandards und eine bessere Schulung der Anwender sind nötig, um die verantwortungsvolle Einführung von KI in der Evidenzsynthese zu unterstützen .

Fazit

KI kann den manuellen Arbeitsaufwand beim Literaturscreening, der Datenextraktion und der Risk-of-Bias-Bewertung um 50–75 % senken, ohne die PRISMA-Genauigkeit zu beeinträchtigen – wenn sie mit der Aufsicht durch Forschende einhergeht . Dieselben Studien bestätigen jedoch, dass KI eigene Verzerrungen einführt (Selektionsbias, Bestätigungsbias, Trainingsdaten-Bias). Das Gegenmittel lautet: menschliche Aufsicht, transparente Berichterstattung und rigorose Validierung. Outsourcen Sie kritisches Denken niemals an das Werkzeug.