Hintergrund
Ein Team von Forschern hat in einer Simulation untersucht, inwieweit etablierte Replikationsmetriken die Übersetzung von Ergebnissen aus Tierstudien in menschliche Studien zuverlässig quantifizieren können. Die Analyse richtet sich an das anhaltende Problem, dass vielversprechende Tierbefunde häufig nicht in klinischen Prüfungen reproduziert werden können.
Methodik
Die Autoren nutzten Parameter einer Metaanalyse zu pränataler Aminosäure‑Supplementierung und mütterlichem Blutdruck, um 648 Szenarien zu simulieren. Dabei variierten sie Effektgrößen, Heterogenität, Stichprobengrößen der Tierstudien sowie die Anzahl zusammengefasster Tierstudien.
Bewertete Metriken
Neun Kennzahlen wurden analysiert: die Zwei‑Versuche‑Regel, klassische Metaanalyse, Replikations‑Bayes‑Faktor, ungewichtete und gewichtete Edgington‑Methoden, der goldene skeptische p‑Wert sowie drei Versionen des kontrollierten skeptischen p‑Werts.
Ergebnisse zu Fehlerraten
Unter Bedingungen ohne Heterogenität kontrollierten die meisten Metriken die Fehlalarm‑Rate, während die Metaanalyse und der Replikations‑Bayes‑Faktor dies nicht taten. Steigt die Heterogenität, insbesondere zwischen den menschlichen Studien, werden die Fehlalarm‑Raten liberaler.
Übersetzungs‑Power
Die Übersetzungs‑Power, also die Wahrscheinlichkeit eines wahren positiven Übersetzungserfolgs, wurde durch die schwächere Evidenz einer der beiden Arten begrenzt. Kleine Stichproben in den Tierstudien reduzierten die Power signifikant. Die Metaanalyse zeigte häufig Erfolg, sobald eine Art starke Evidenz lieferte, während skeptische p‑Werte konservativer reagierten.
Stabile Metriken
Der skeptische p‑Wert, der den Gesamt‑Typ‑I‑Fehler kontrolliert, sowie die gewichtete Edgington‑Methode erwiesen sich über die meisten Szenarien hinweg als relativ konsistent.
Empfehlungen
Kein einzelnes Verfahren erwies sich als durchgängig optimal. Die Autoren empfehlen, mehrere Metriken gleichzeitig zu verwenden und deren jeweilige Stärken und Grenzen zu berücksichtigen, um die Übertragung von Tierbefunden auf menschliche Ergebnisse fundierter zu bewerten.Dieser Bericht basiert auf Informationen von eLife, lizenziert unter Creative Commons BY 4.0 (Open Access). Wissenschaftliche Inhalte, offen zugänglich.
Ende der Uebertragung