Preprint- statt Journal-Clubs

8. November 2023 von Laborjournal

Die Zahl der Vorab-Ver­öf­fent­li­chungen von Forschungsergebnissen auf Preprint-Servern hat zuletzt rasant zugenommen – unter anderem auch stark befeuert durch die COVID-19-Pandemie. Zugleich betreiben die meisten akademischen Institutionen seit vielen Jahrzehnten die guten, alten „Journal Clubs“, in denen bereits begutachtete und publizierte Studienresultate kritisch besprochen werden. Warum angesichts dessen nicht zwei Fliegen mit einer Klappe schlagen, dachten sich offenbar vor drei Jahren eine Handvoll Jungforschende: Warum nicht gewisse Synergien erzeugen, indem man den „Journal Club“ in einen „Preprint Club“ umwandelt?

Ungefähr so entstand 2020 die Idee zu einem institutionsübergreifenden Preprint Club (preprintclub.com), um via Online-Treffen neue immunologische Studien zu bewerten, die auf den Preprint-Servern bioRxiv und medRxiv erschienen waren. Keimzelle waren junge Immunologinnen und Immunologen an der Icahn School of Medicine at Mount Sinai in New York City und der University of Oxford, später kamen weitere vom Stockholmer Karolinska-Institut und der University of Toronto hinzu.

Fünf von ihnen haben den Gründungsprozess und die Idee dahinter gerade in Nature (doi: 10.1038/d41586-023-01819-y) genauer beschrieben. Darin halten sie fest:   Diesen Beitrag weiterlesen »

Nervige Zeit- und Geldverschwendung für Manuskripte

17. Mai 2023 von Laborjournal

„Mein Vollzeitjob besteht gerade darin, abgelehnte Manuskripte für eine andere Zeitschrift neu zu formatieren – und mich dabei superproduktiv zu fühlen.“

Viele werden sich wiederfinden in diesem nicht ganz ironiefreien Tweet, den der Ernährungsphysiologe Katsu Funai von der University of Utah Anfang des Jahres abschickte. Und er ist bei weitem nicht der Einzige, der auf Twitter über den enormen Zeitaufwand klagt, den es kostet, wenn man ein Manuskript, das man gemäß den Anforderungen einer Zeitschrift formatiert hat, für die Zweiteinreichung bei einer anderen Zeitschrift in ein völlig anderes Format umarbeiten muss.

„Haben Sie sich schon einmal gefragt, wie lange es dauert, Artikel für Zeitschrifteneinreichungen neu zu formatieren?“, fragte daher Megan Davies, Postdoc in der Epidemiologie der Universität Kopenhagen, ebenfalls auf Twitter. Und fuhr fort: „Wir haben uns das gefragt und beschlossen, darüber zu schreiben! Wir haben die verlorene Zeit und das verlorene Geld berechnet sowie Editoren und Forscher befragt – und einige neue Vorschläge für Formatierungsrichtlinien entwickelt.“

Das Ergebnis ist jetzt nachzulesen in dem Paper mit dem Titel „Saving time and money in biomedical publishing: the case for free-format submissions with minimal requirements“ (BMC Medicine 21: 172), bei dem Megan Davies als Co-Autorin fungiert. Demnach registrierten Seniorautor Tibor Varga und sein Team zunächst einmal unter „302 führenden biomedizinischen Fachzeitschriften […] eine große Vielfalt an Enreichungsanforderungen“. Und stellten nachfolgend fest: Diesen Beitrag weiterlesen »

Publizieren Editoren allzu leicht im eigenen Journal?

25. Januar 2023 von Laborjournal

 

 

Veröffentlichungen sind das Brot des Wissenschaftlers. Doch wer bestimmt, was veröffentlicht wird? In erster Linie die Editoren der betreffenden Forschungsblätter.

Über diese schreiben die fünf Autoren eines frischen Artikels mit dem Titel „Gender inequality and self-publication are common among academic editors“ (Nat Hum Behav, doi: 10.1038/s41562-022-01498-1):

Die Editoren spielen in diesem Prozess eine Schlüsselrolle, da sie das letzte Wort darüber haben, was veröffentlicht wird – und somit den Kanal kontrollieren, über den Wissenschaftler Prestige und Anerkennung erhalten. Darüber hinaus gehören die Herausgeber selbst zu den wissenschaftlichen Eliten, die von ihrer Community als Experten auf ihrem Gebiet anerkannt sind.

Editoren seien auf diese Weise nicht nur die „Gatekeeper“ der Wissenschaft, sondern suchen vielmehr selbst aktiv nach Möglichkeiten zur Veröffentlichung, führen die Autoren weiter aus. Schließlich arbeite die überwiegende Mehrheit von ihnen als aktive Forscher. Und da die Bewertung von Wissenschaftlern in hohem Maße von bibliometrischen Ergebnissen abhänge, stünden sie selbst unter einem gewissen Zwang, weiterhin eigene Originalarbeiten zu veröffentlichen.

Und wo tun sie das? Oftmals in den von ihnen herausgegebenen Zeitschriften. Was fast genauso oft zu Kontroversen führt. Denn wie die Autoren schreiben:

Solche Kontroversen werden durch die Möglichkeit angeheizt, dass die Beiträge der Editoren bevorzugt behandelt werden.

Und dies könne man durchaus als „Missbrauch des wissenschaftlichen Publikationssystems“ werten.  Diesen Beitrag weiterlesen »

Apropos Fehlerkultur bei wissenschaftlichen Verlagen

9. November 2022 von Laborjournal

Wie ein Verlag partout nicht zugeben wollte, dass er bei einem Manuskript einen Fehler gemacht hatte – und damit wissentlich riskierte, den Ruf der Autoren zu beschädigen.

 

 

(Die folgende „Story“ erzählen wir zwar ohne Namen, hat sich aber genau so ereignet.)

Eines Tages erhielt ein Physiologie-Professor die Einladung eines bestimmten Journals, einen umfassenden Review über sein Fachgebiet zu schreiben. Tatsächlich war er einer der Wegbereiter dieses gesamten Gebiets, dem sich mittlerweile auch viele andere verschrieben hatten. Zu dem Review hatte er jedoch zu dieser Zeit nicht die rechte Lust. Trotzdem stimmte er zu.

Zwei Monate später waren er und seine Koautoren fertig mit dem Werk. Und zu seiner eigenen Überraschung war unser Professor sehr zufrieden. Ja, er hielt es am Ende gar für eines der besten Stücke, das er bislang als Autor gezeichnet hatte. Glücklich schickte er also das Manuskript an den Verlag.

Die Reviewer forderten schließlich zwei Runden an Revisionen. Kein Problem für unseren Professor – er kannte das Geschäft lange genug und wusste, dass das eben mal so lief. Schließlich waren seine Manuskripte auch gar nicht selten wirklich besser geworden auf diese Art. „Peer Review at its best“, hatte er dann öfter gedacht.

Doch dann liefen die Dinge schief.   Diesen Beitrag weiterlesen »

Die Unlust zum Datenteilen

3. August 2022 von Laborjournal

Was treibt den wissenschaftlichen Fortschritt an? Alles Mögliche könnte man hier nennen: Neugier, ein offener Geist, auch harte Arbeit, … Nehmen wir es hier aber mal ganz pragma­tisch: Zumindest in der heutigen modernen Wissenschaft sind es zuerst und vor allem die Daten, die sie immer weiter voranbringen.

Nicht zuletzt deshalb ist eine der größten Forderungen der Open-Science-Bewegung, die Rohdaten aus Experimenten jederzeit für alle frei verfügbar zu machen. Und nicht zuletzt deshalb fordern inzwischen die meisten Journals von den Autoren, die Rohdaten der im Manuskript beschriebenen Resultate der Forschungsgemeinde stets zur freien Verfügung zu halten. Weshalb inzwischen auch die meisten Paper das starke Statement ziert: „Data available on request.“

Doch wie stark ist das Statement in der Praxis? Ist es mit robuster Substanz gefüllt? Oder bleibt es als notgedrungene Absichtserklärung eher eine leere Luftnummer?

Bereits in Laborjournal 3/22 (S. 10) berichteten wir von einer nicht gerade hoffnungsvollen Stichprobe zum Thema. Ein Team hatte bei den Autoren von 53 Veröffentlichungen in der Krebsforschung Rohdaten angefordert – ein Drittel antwortete überhaupt nicht, und nur ein Viertel teilte die Daten vollständig und in brauchbarer Form.    Diesen Beitrag weiterlesen »

Irgendwie ein Corona-Paper

13. April 2022 von Laborjournal

In unserer Reihe „Forscher Ernst und die Corona-Pandemie“:

 

(Gezeichnet von Rafael Florés. Jede Menge weiterer Labor-Abenteuer von „Forscher Ernst“ gibt es hier.)

 

Milliarden-Spende Peer Review

14. Dezember 2021 von Laborjournal

Der Peer Review ist das Herzstück der wissenschaftlichen Qualitätskontrolle. Egal, ob Publikationen, Evaluationen oder Förderanträge – stets zerbrechen sich Fachkollegen die Köpfe über den jeweiligen Inhalt, um abschließend ihre Daumen darüber zu heben oder zu senken.

Als Gutachter im Rahmen eines Peer Reviews tätig zu sein, gilt daher als Ehrensache. Die meisten Forscherinnen und Forscher begreifen es gar als inhärenten Teil ihrer Dienstpflicht – auch wenn Juristen dies formal verneinen. Wie auch immer, unter dem Strich opfern sie auf diese Weise viel von ihrer wertvollen Zeit, um der Wissenschaft das Begutachtungswesen letztlich als große, selbstlose Spende zu überreichen.

 

 

Welchem Betrag diese „Spende“ der Forscherinnen und Forscher an das System entspricht, haben unlängst die drei Psychologen Balazs Aczel, Barnabas Szaszi (beide Budapest) und Alex O. Holcombe (Sydney) abgeschätzt. Schon der Titel ihrer Publikation lässt die Dimension erahnen: „A billion-dollar donation: estimating the cost of researchers’ time spent on peer review“ (Res. integr. peer rev. 6: 14). Ihr Abstract startet denn auch:

Umfang und Wert der Peer-Review-Arbeit von Forschern sind für die Wissenschaft und die Veröffentlichung in Zeitschriften von entscheidender Bedeutung. Jedoch wird diese Arbeit zu wenig anerkannt. Überdies ist ihr Ausmaß unbekannt. Und zu selten werden alternative Wege zur Organisation der Peer-Review-Arbeit in Betracht gezogen.

Mit diesem Statement zog das Trio los, um „auf der Grundlage öffentlich zugänglicher Daten […] eine Schätzung des Zeitaufwands von Forschern und des gehaltsbezogenen Beitrags zum Peer-Review-System von Zeitschriften“ zu liefern. Also nur für die Begutachtung von zur Veröffentlichung eingereichten Manuskripten!

Ihre Ergebnisse fassten sie dann folgendermaßen zusammen:

Wir fanden, dass im Jahr 2020 die Gutachter weltweit über 100 Millionen Stunden mit Peer Reviews verbrachten – was mehr als 15.000 Jahren entspricht. Der geschätzte monetäre Wert der Zeit, die die Reviewer allein in den USA für die Begutachtung aufwenden, betrug 2020 über 1,5 Milliarden US-Dollar. Für in China tätige Gutachter liegt die analoge Schätzung bei über 600 Millionen US-Dollar, und für die Kollegen im Vereinigten Königreich bei fast 400 Millionen US-Dollar.

So gesehen entspricht also allein schon die Begutachtung von Manuskripten innerhalb eines Jahres einer Milliarden-Spende der Forschergemeinde! Wobei die Autoren sogar noch einschränken:

Es ist sehr wahrscheinlich, dass unsere Ergebnisse zu niedrig angesetzt sind, da sie nur einen Teil aller Zeitschriften weltweit widerspiegeln.

Und sie machen zum Abschluss nochmals klar:

Die Zahlen verdeutlichen den enormen Arbeits- und Zeitaufwand, den Forscher für das Publikationssystem aufbringen. Und sie machen deutlich, wie wichtig es ist, über alternative Möglichkeiten der Strukturierung und Bezahlung von Peer Reviews nachzudenken.

Oder man reformiert das Peer-Review-System gleich komplett von Grund auf. So wie es unser Wissenschaftsnarr beispielsweise gerade im Zusammenhang mit der breitflächigen Etablierung von Preprints vorschlägt – siehe seine Kolumne „Heilsbringer oder apokalyptische Reiter“. Und wie man überdies die ebenso aufwendigen Peer-Review-Verfahren bei der Verteilung von Fördergeldern eindampfen könnte, hatte er ja zuvor schon im Visier – siehe „Werden Sie Forschungsförderer!“ oder „Liebe DFG, verlost doch Eure Fördergelder!“.

Nur ein Beispiel, dass schon längst über Alternativen nachgedacht wird.

Ralf Neumann

(Illustr.: AdobeStock / jesussans)

 

Manuskript verbessern? Muss nicht wirklich sein!

27. Oktober 2021 von Laborjournal

Peer-Review soll bekanntlich die Qualität und Klarheit der Forschungsberichte verbessern. Doch Hand auf’s Herz – adressieren Sie bei der Überarbeitung eines zurückgeschickten Manuskripts tatsächlich in diesem Sinne alle substantiellen Einwände und Vorschläge der Reviewer, um es besser zu machen? Damit das Journal es im zweiten Anlauf womöglich akzeptiert?

Oft kommt es gar nicht so weit, weil viele das Manuskript gar nicht mehr zur selben Zeitschrift schicken, sondern es gleich beim nächsten Journal unterzubringen versuchen. Das muss zwar nicht automatisch heißen, dass die Reviewer-Vorschläge zur Verbesserung der Erstversion dafür gar nicht aufgegriffen werden. Allerdings liegt es schon nahe, dass viele Manuskripte genau aus diesem Grund bei einem anderen Journal zweiteingereicht werden: Um sich die Zeit und die Mühe von teilweise aufwendigen Änderungen zu sparen.

Ein Chirurgen-Trio von der University of Texas in Austin hat dieses Thema mal genauer untersucht – und die Ergebnisse in Accountability in Research vorgestellt („The effect of peer review on the improvement of rejected manuscripts“, Vol 28(8): 517-27). Zum Studiendesign schreiben sie im Abstract:

Zunächst haben wir alle umsetzbaren Vorschläge in den Ablehnungsschreiben von 250 zufällig ausgewählten Manuskripten einer bekannten orthopädischen Fachzeitschrift aus dem Jahr 2012 identifiziert. Danach durchsuchten wir PubMed und Google Scholar und verglichen den letztlich veröffentlichten Text mit der ursprünglichen Einreichung, um festzustellen, ob die Vorschläge der Gutachter berücksichtigt wurden.

Die Ergebnisse fassen sie zunächst wie folgt zusammen:  Diesen Beitrag weiterlesen »

„Mein“ Paper musst du selber schreiben!

14. Juli 2021 von Laborjournal

Zählen wir mal alle diejenigen zusammen, die die akademische Welt sofort nach der Doktorarbeit oder dem ersten Postdoc ein für allemal verlassen. Oder gar mittendrin die Segel streichen. Damit wäre sicherlich bereits die klare Mehrheit all derer beisammen, die jemals eine Doktorarbeit oder einen Postdoc begonnen haben.

Und jetzt überlegen wir mal weiter, wie viele potenzielle Paper deswegen niemals geschrieben worden sind. Es dürften ziemlich viele sein!

Bei den Abbrechern ist es klar: Sie haben eine Weile Daten produziert, bis sie aus verschiedenen Gründen der Forschung plötzlich Knall auf Fall „Adieu“ sagen. Nur die allerwenigsten dürften danach noch erhebliche Zeit des neu begonnenen Lebensabschnitt dafür opfern, um dem Ex-Chef die „alten“ Daten für ein Manuskript aufzubereiten. Mit welcher Motivation auch?

Dummerweise haben aber ebenso oft diejenigen, die gleich nach abgeschlossenem „Doktor“ oder abgelaufenem „Postdoc“ umschwenken, noch genug selbstproduziertes und spannendes Daten-Rohmaterial für die eine oder andere weitere Veröffentlichung übrig. Doch haben diese Umsteigerinnen und Umsteiger jetzt noch genug Motivation, damit „posthum“ noch das eine oder andere Paper-Manuskript zu verfassen? Neben dem neuen und womöglich völlig anders gelagerten Job? In ihrer Freizeit? Sicherlich sehr selten!

Oftmals hilft dann auch kein Bitten und kein Flehen – vehementes Fordern oder gar Drohen sowieso nicht. Und auch ein schlechtes Gewissen lassen sich die Abwandernden kaum noch einreden – nach dem Motto: „Sowohl die Forschergemeinde als auch die Öffentlichkeit, die dich finanziert hat, haben ein Recht darauf, deine Erkenntnisse mitgeteilt zu bekommen.“

Also bleibt den Bossen und Chefinnen schließlich nichts, als über ehrlose Ex-Mitarbeiterinnen und -Mitarbeiter zu jammern und deren Daten selbst zu einem Manuskript zusammen zu puzzeln.

Doch wie kommt es überhaupt soweit? Vielleicht, weil erstere das Manuskriptverfassen nie mit in die Vertragslaufzeiten einplanen? Weil sie stattdessen alle und jeden bis zum Vertragsende experimentieren lassen – und darauf bauen, dass man die Paper ja irgendwie auch danach noch schreiben kann? Und dies wiederum, weil sie davon ausgehen, dass ihre Schützlinge selbstverständlich auch danach noch in der Forschung weitermachen – und die Veröffentlichungen daher für die eigenen Karriere brauchen?

So gesehen könnte es also durchaus sein, dass mancher Boss und manche Chefin selber schuld an dem Dilemma sind.

Ralf Neumann

 

Gleich und Gleich gesellt sich … nicht immer gern

12. August 2020 von Laborjournal

Eine logische Konsequenz aus der stetigen Zunahme von Interdisziplinarität und Daten­vo­lu­men in wissenschaftlichen Publikatio­nen ist, dass immer öfter zwei oder mehr gleichwertige „Equally Contributing Authors“ die entspre­chen­den Autorenlisten anführen — meist durch Sternchen hinter den jeweiligen Namen gekennzeichnet. Da aber fast nichts in der Forschung eine derart heikle Angelegenheit darstellt wie die richtige Reihenfolge und Gewichtung der Autoren auf einem Paper, lauert durchaus hohes Konfliktpotenzial hinter der Abwägung, ob jemand jetzt etwa gleich viel dazu beigetragen hat — oder eben gerade nicht mehr.

Besonderes Konfliktpotenzial ist jedoch nur das eine, dazu kommt leider noch ein ebenfalls beträchtliches Missbrauchspotenzial. Denn wer weiß etwa schon, wie oft die Chefs ihren Lieblings-Postdoc mit einem „Gleichwertigkeits-Sternchen“ an Position 2 oder 3 einer Veröffent­li­chung hieven, zu der dieser nichts beigetragen hat, außer mal ein paar Röhrchen neben seinen eigenen Proben mitzuzentrifugieren? Nur um dessen Karriere noch ein kleines bisschen stärker anzuschieben…

Dass solch ein Szenario leider nicht nur reine Fantasie ist, bestätigte uns ein „Betroffener“ unlängst mit der folgenden E-Mail:    Diesen Beitrag weiterlesen »