Die Lance Armstrongs der Tour de Science

3. Februar 2016 von Laborjournal

Und wieder ein Zitat aus einer E-Mail an unsere Redaktion. Ein Bio-Emeritus im aktiven Unruhestand prangert darin mit deutlichen Worten einige „Unsitten“ im aktuellen Forschungsbetrieb an:

Da die Zahl der für das öffentliche und private Leben relevanten Skandale meine Fähigkeit zu kotzen weit überfordert […], bemühe ich mich schon seit einiger Zeit um eine gewisse pragmatische Rangordnung. Im Hinblick auf Wissenschaftsskandale heißt das für mich, dass ich nach den Lance Armstrongs der internationalen Tour de Science und vor allem nach den Strukturen frage, die diesen Figuren zur Verfügung stehen.

Da komme ich dann auf Fragen zum Wahnsinn der Impact Faktoren und CNS-Publikationen als Kriterium wissenschaftlicher Befähigung. CNS hat nichts mit Gehirn zu tun, sondern steht für Cell, Nature, Science — und damit gleichsam für den Glauben an die Weisheit der Editoren von Journalen, deren Hauptziel darin besteht, den Impact Faktor ihres Journals zu steigern oder wenigstens zu halten.

Ich beschäftige mich weiter mit dem Problem, was alles „behind the scenes“ passiert und offenbar möglich ist. Ich frage mich, warum ich immer wieder auf Arbeiten stoße, die in High Impact-Journalen veröffentlicht wurden und die völlig perfekt erscheinen — abgesehen davon, dass sich die Hauptergebnisse nicht reproduzieren lassen.

Ich frage mich, warum viele Wissenschaftler das Gefühl haben, dass man in einem Manuskript die — oftmals ja leider berechtigten — eigenen Sorgen wegen der Grenzen der verwendeten Methoden, beispielsweise aufgrund unerwünschter, schwer zu kontrollierender Artefakte, besser gar nicht erst andiskutieren sollte.

Ich frage mich, warum es üblich scheint, Ergebnisse besser wegzulassen, die nicht ins Schema der perfekten Reproduzierbarkeit passen und die möglicherweise die Beweisführung für oder gegen eine bestimmte Hypothese untergraben könnten.

Ich frage mich, wie es dazu kommt, dass heute umgehend immer nur nach einem molekularen Mechanismus gefragt wird, selbst wenn die phänomenologischen Grundlagen des untersuchten biologischen  Systems noch weitgehend ungeklärt sind.

Ich frage mich, wie das Begutachtungssystem verändert werden sollte — und vor allen Dingen, wie es öffentlich gemacht werden kann. Ich für meinen Teil habe seit etwa einem Jahr begonnen, alle meine Zeitschriftengutachten mit meinem Namen zu zeichnen.

Ich frage mich, wie es kommt, dass Gutachter ihren Auftrag dahingehend missbrauchen, dass sie die Autoren eingereichter Arbeiten zwingen, eine To-do-Liste abzuarbeiten, nach der die geforderten zusätzlichen Experimente gar nichts mehr mit notwendigen Kontrollen zu tun haben, sondern lediglich willkürliche Erweiterungen nach dem Geschmack des Gutachters darstellen.

Fragen, die viele zwar schon lange kennen — die deswegen aber nicht aufhören zu schmerzen. Antworten und Meinungen dazu, wie immer, direkt unten als Kommentar zu diesem Blog-Beitrag, oder auch per E-Mail an redaktion@laborjournal.de.

(Foto: Fotolia/erkamit)

x

Alles falsch (Positive)!

2. April 2013 von Laborjournal

Auch Falsch Positive

Was ist das Schlimmste, das einem Forscher widerfahren kann? Vielleicht abgesehen davon, dass ein Mitarbeiter betrügt und Daten manipuliert. Wie wäre es etwa damit, dass sich herausstellt, dass das letzte Dutzend Veröffentlichungen komplett auf falsch positiven Befunden basiert? Ein ziemlicher GAU, oder? Den Gruppen von Harriet de Wit und Abraham Palmer, beide Neuroforscher an der Universität Chicago, ist jetzt genau das passiert.

Seit Jahren fahndeten die Beiden nach spezifischen genetischen Variationen, die mit den differenziellen Antworten auf Amphetamin-Einnahme gekoppelt sind. In einer Basisstudie hatten sie zunächst die subjektiven psychiatrischen wie auch die physiologischen Antworten auf Amphetamin-Gabe von bis zu 162 gesunden Freiwilligen aufgezeichnet. Anschließend suchten sie in Proben von denselben Probanden nach genetischen Assoziationen, die jeweils mit ganz bestimmten Antworten aus dem Response-Spektrum korrelieren. Mit Erfolg, wie es schien. Diesen Beitrag weiterlesen »

Kaum Schrott im Genom?

11. September 2012 von Laborjournal

Puh, da ist man erstmal sprachlos. Mit der puren Masse von gleich 30 Artikeln auf einmal in mehreren Journals erschlagen uns förmlich die über 440 Forscher des internationalen ENCODE-Konsortiums (Nature hat dazu einen speziellen „ENCODE-Explorer“ eingerichtet).

ENCODE steht für „Encyclopedia Of DNA Elements“ und der Name war und ist durchaus Programm: Nicht weniger, als sämtliche Abschnitte des Humangenoms funktionell zu katalogisieren, war Ziel des Projekts. Oder wie Brendan Maher in Nature schreibt:

The project’s aim is to catalogue the ‚functional‘ DNA sequences that lurk there, learn when and in which cells they are active and trace their effects on how the genome is packaged, regulated and read.

Ist dieses Ziel mit diesem Paper-Paukenschlag erreicht?

Wie üblich bei solchen Projekten, hat man jetzt erstmal eine Riesenmenge Daten produziert, die fortan Stoff für jede Menge eingehendere Analysen bieten. Und — wie ebenfalls üblich — wird dabei sicher auch noch ordentlich „falsch positives Datenrauschen“ aussortiert.

Vor allem eine pauschale Schlüsselerkenntnis proklamieren die ENCODE-Protagonisten jedoch schon jetzt: Im Humangenom gibt es fast keinen Müll, nahezu jede Base spielt offenbar irgendwie mit in der Orchestrierung des jeweils spezifischen Zellgeschehens. Diesen Beitrag weiterlesen »

Zitat des Monats (11)

18. Mai 2012 von Laborjournal

Chris Said, Center for Neural Science an der New York University, warnt in seinem Blog The File Drawer vor zunehmender Voreingenommenheit bei Erstellung, Interpretation und Publikation von Forschungsergebnissen:

Scientific journals favor surprising, interesting, and statistically significant experimental results. When journal editors give preferences to these types of results, it is obvious that more false positives will be published by simple selection effects, and it is obvious that unscrupulous scientists will manipulate their data to show these types of results. These manipulations include selection from multiple analyses, selection from multiple experiments (the “file drawer” problem), and the formulation of ‘a priori’ hypotheses after the results are known. While the vast majority of scientists are honest individuals, these biases still emerge in subtle and often subconscious ways.

Falsch positive Blindgänger

2. April 2012 von Laborjournal

Die größten Feinde der experimentellen Forschung sind „Falsch Positive“. Man kann gar nicht scharf genug darauf drängen, Bedingungen und Kontrollen der jeweiligen Untersuchung so stringent zu planen, dass diese lästigen „Trittbrettfahrer-Daten“ weitmöglichst ausgeschlossen werden können. Nicht zuletzt auch zum Selbstschutz. Schließlich ist es jedes Mal höchstpeinlich, wenn einem die Kollegen hinterher nachweisen, dass man in seinem Paper vor allem Artefakten auf den Leim gegangen ist.

Vor diesem Grund erstrahlt gerade ein Science-Paper aus dem Sommer letzten Jahres in ziemlich unangenehmem Scheinwerferlicht. Mit dem Titel „Widespread RNA and DNA Sequence Differences in the Human Transcriptome“ (Li et al., Science 333:53-58) schlug es damals äußerst geräuschvoll nicht nur in der RNA-Editing-Szene ein. Diesen Beitrag weiterlesen »