Lohnen sich Zitierkartelle?

27. März 2024 von Laborjournal

 

Neben Politik und Wirtschaft ist sicherlich die Wissenschaft das dritte große Seilschaften-Dorado.

…, so stand es unlängst in einem Essay zu lesen.

Da ist sicher was dran. Denn wo man hinsichtlich Begutachtungen, Berufungen, Fördermitteln, Evaluationen, Zitierungen et cetera derart von „Peers“ abhängig ist, da wird man wohl förmlich gedrängt zu Cliquenbildung, Gschaftlhuberei, Günstlingswirtschaft, … Und eine Ausprägung davon sind bisweilen Zitierkartelle.

Nehmen wir zunächst den aufrichtigen Wissenschaftler. Wenn er seine Resultate veröffentlicht, sieht er es als seine ehrenhafte Pflicht an, sämtliche relevanten Vorarbeiten zu zitieren. Auch solche von Personen, mit deren Inhalten er ansonsten nicht übereinstimmt – schließlich werden womöglich gerade dadurch fruchtbare Diskussionen befördert. Ordnungsgemäßes und gründliches Zitieren ist für ihn somit ein klares Qualitätsmerkmal seiner Forschungs­tätigkeit.

Doch so denken bei weitem nicht alle. Für andere sind Zitate vielmehr ein schnödes Mittel, das gewinnbringend für die eigene Karriere genutzt werden kann. Von daher zitieren sie ausschließlich die Arbeiten ihrer Freunde und Kollegen, die im Gegenzug wiederum sie selbst zitieren. Auf diese Weise entstehen Gruppen gleichgesinnter Kollegen, in denen jeder jeweils die Karrieren der anderen fördert – Zitierkartelle eben.  Diesen Beitrag weiterlesen »

Zur Filterkraft von Literatur-Datenbanken

24. Januar 2024 von Laborjournal

Raub-Verlage (Predatory Publishers), gekaperte Zeitschriften (Hijacked Journals), Papiermühlen (Paper Mills), Citation Delivery Vehicles, … – schon oft berichteten wir, wie immer mehr „Unternehmen“ mit diesen und anderen windigen Manövern Profit aus den Zwängen und Nöten des wissenschaftlichen Publikationssystems schlagen. Siehe etwa hierhierhier
oder hier. Die Folge davon: Der Anteil an Publikationen von zumindest zweifelhafter Qualität, die diese Machenschaften in den Scientific Record spülen, schwillt immer stärker an.

Könnten die einschlägigen Literatur-Datenbanken für wissenschaftliche Publikationen hier nicht als Filter fungieren?

Ein internationales Autoren-Quartett hat in diesem Sinne Clarivate’s Web of Science und Google Scholar zumindest hinsichtlich eines Teilaspekts stichprobenartig  verglichen: Wie viele Zitierungen listen beide in ihren Datenbanken, die zu gekaperten Zeitschriften (Hijacked Journals) führen? (Equilibrium. Quarterly Journal of Economics and Economic Policy 18: No. 4).

Dazu halten die Vier zunächst einmal fest:  Diesen Beitrag weiterlesen »

Neues von den Zombies

12. Juli 2023 von Laborjournal

Öfter schon haben wir über „Zombie-Paper“ gemeckert. Artikel also, die trotz erfolgter Retraction munter weiter zitiert werden. Beispielsweise hier, hier und hier.

Um das Problem klarzumachen, schrieben wir etwa:

Eigentlich ist man sich grundsätzlich einig in der Wissenschaft: Wird ein publiziertes Paper zurückgezogen („retracted“) – egal, ob aus ehrenhaften oder unehrenhaften Gründen –, dann gilt es augenblicklich als aus dem Scientific Record entfernt. Mit all seinen Daten und Schlussfolgerungen. Als hätte es nie existiert, als wären die Experimente nie gemacht worden.

Doch leider sieht die Realität gar nicht selten anders aus. Hartnäckig geistern zurückgezogene Veröffentlichungen als putzmuntere Zombies weiter durch den Wissenschaftsbetrieb – und treiben ihr Unwesen vor allem in den Referenzlisten nachfolgender Publikationen. Meist werden sie noch Jahre später zitiert, manche nach der Retraction sogar noch häufiger als vorher.

Jetzt präsentiert ein Team von fünf Informationswissenschaftlerinnen und -wissenschaftlern wieder eine neue Studie zum Thema: „Evolution of retracted publications in the medical sciences: Citations analysis, bibliometrics, and altmetrics trends“ (Account. Res., doi.org/kjfk). Dazu identifizierten sie in der Datenbank Scopus 840 Publikationen, die in den medizinischen Wissenschaften zwischen 2016 bis 2020 zurückgezogen wurden. Diese wurden bis August 2021 insgesamt 5.659 Mal zitiert, 1.559 dieser Zitierungen datierten deutlich nach der Retraktion des zitierten Artikels. Die Rate der „Zombie-Referenzen“ beträgt damit satte 27,5 Prozent.  … Hier geht’s weiter »

Retractions: Bei Corona nichts Neues!

2. November 2022 von Laborjournal

Es ist traurige Tatsache: Viele zurückgezogenen Veröffentlichungen werden nach wie vor zitiert, als ob deren Inhalt weiterhin gültig wäre. Erst vor einem halben Jahr prangerten wir diese Unsitte folgendermaßen an:

Wird ein publiziertes Paper zurückgezogen („retracted“) – egal, ob aus ehrenhaften oder unehrenhaften Gründen –, dann gilt es augenblicklich als aus dem Scientific Record entfernt. Mit all seinen Daten und Schlussfolgerungen. Als hätte es nie existiert, als wären die Experimente nie gemacht worden.

Doch leider sieht die Realität gar nicht mal so selten anders aus. Hartnäckig geistern zurückgezogene Veröffentlichungen als putzmuntere Zombies weiter durch den Wissenschaftsbetrieb – und treiben ihr Unwesen vor allem in den Referenzlisten nachfolgender Veröffentlichungen.

Weitere Auswüchse dieses Elends hatten wir kurz danach in diesem Beitrag thematisiert. Und jetzt kommt frisch der Bericht eines australischen Teams, nach dem die Corona-Pandemie das ganze Übel sogar nochmals extra befeuert: 212 Veröffentlichungen nahmen sich die Autoren vor, die aus dem Gesamtwerk von weit über 200.000 Artikeln zur Corona-Forschung seit Pandemiebeginn zurückgezogen wurden – 2.697 Mal wurden diese insgesamt bis zum Sommer zitiert, im Durchschnitt also sieben Mal pro Publikation.

Insbesondere interessierte das Autorenteam indes der Anteil klinischer Studien an den Retractions. Also nahm es 1.036 Zitierungen entsprechender Veröffentlichungen in eine genauere Analyse – und berichtet folgende Ergebnisse:  Diesen Beitrag weiterlesen »

Typos mit in die Referenzen?

10. August 2022 von Laborjournal

Wie listet man in der Referenzliste ein zitiertes Paper, das einen Druckfehler im Titel hat? Interessante Frage, die Timothy McAdoo von APA Style im gleichnamigen Blog stellt.  Soll man offensichtliche Rechtschreibfehler, Buchstabendreher oder neuerdings gar die unbemerkten Streiche, die einem die Autokorrektur spielt, beim Referenzieren im eigenen Paper korrigieren?

McAdoo schreibt, dass solche Fehler generell selten vorkommen, da ja Reviewer und Editoren das Manuskript vorab kritisch lesen. Aber es kommt vor! Auch wir selbst hatten mal nach mehr oder weniger lustigen „Verschreibern“ in Forschungsartikeln gefahndet – und die Ergebnisse hier publiziert.

Zwei der betreffenden Paper hatten die Fehler tatsächlich im Titel – wir fassten sie damals folgendermaßen zusammen: Diesen Beitrag weiterlesen »

Anschwellender Forschungsmüll

19. Januar 2022 von Laborjournal

Wie identifiziert man die best available science insbesondere in Zeiten, in denen der schon vorher beein­druckende wissen­schaftliche Müllberg durch „Covidi­za­tion“ noch weiter anschwillt? In denen durch die Inflation von hastig produzierten, teilweise per Presse­konferenz kommunizierten Ergebnissen eine Trennung von Signal und Rauschen immer schwerer wird – und Evidenz­synthese schon deswegen zum Scheitern verurteilt ist. Denn wo man Müll oben reinsteckt, kommt unten auch wieder Müll raus.

So schrieb unser Wissenschaftsnarr unter dem Titel „Wissenschaft berät Politik oder Survival of the Ideas that fit“ in unserem Heft 11/2020.

 

 

Veröffentlicht die Wissenschaft tatsächlich so viel Müll? Und dies auch schon vor und ganz ohne Corona?

Schaut man sich das Abstract des Papers „Slowed canonical progress in large fields of science“ der beiden US-Forscher Johan Chu und James Evans an, muss man das wohl unterschreiben (PNAS 118 (41): e2021636118). Darin heißt es:  Diesen Beitrag weiterlesen »

Zitierungen — Kein Maß für Qualität oder Einfluss

7. Juli 2020 von Laborjournal

„Warum (fast) alles, was wir über Zitierungen wissen, falsch ist“ — so lautet die Überschrift eines bereits vor Monaten veröffentlichten Tagungsbeitrags von vier Mitgliedern des Laboratory for Innovation Science an der Harvard University (STI 2018 Conference Proceedings 1488-92).

Wie kommen die Vier zu dieser Behauptung?

Zunächst wählten sie aus allen Veröffentlichungen, die die Datenbank Web of Science für das Jahr 2010 in sechs verschiedenen Disziplinen listete, einige derart aus, dass das Spektrum der verschiedenen Zitierhäufigkeiten ordentlich abgedeckt war. Anschließend fragten sie für jedes einzelne Paper bei zehn Autoren nach, warum genau sie es später in ihren eigenen Arbeiten zitierten.

Nach Meinung der Studienleiter sei nämlich nicht wirklich verstanden, worauf genau Autoren ihre Entscheidung jeweils gründen, ob sie ein bestimmtes Paper zitieren. Dazu geben sie zwei unterschiedliche Haupt-Stoßrichtungen vor:    Diesen Beitrag weiterlesen »

Peer Review überflüssig, Preprint ist bestätigt

12. Februar 2020 von Laborjournal

Es dauert einfach zu lange! So lautet ein Standardvorwurf an das klassische Peer-Review-Verfahren. Und das ist nur zu verständlich. Denn es ärgert tatsächlich, dass es manchmal ein ganzes Jahr dauert, bis man nach allem Hin und Her zwischen Editoren, Reviewern und Autoren die längst vorhandenen Ergebnisse end­lich lesen kann. „Frisch“ sind sie dann schon lange nicht mehr — gerade angesichts des heut­zu­tage maximal beschleunigten Forschungs­trei­bens.

Das Dilemma ist also offensichtlich: Einerseits sollen frische Resultate schnellstmöglich in den wissenschaftlichen Erkenntnisfluss gelangen — andererseits will man aber auch an einer Quali­täts­kon­trolle vor deren offizieller Präsentation festhalten.

Hier allerdings bilden bekanntermaßen Preprints schon länger eine Lösung. Sobald Forscher ihre Manuskripte fertig haben, stellen sie diese umgehend online — etwa auf speziellen PreprintServern wie arXiv oder bioRxiv —, sodass jeder die Ergebnisse während des laufenden Peer Reviews schon mal Open Access einsehen kann.

Doch ganz problemfrei ist das auch nicht. Eine Frage ist etwa, ob man Preprints überhaupt zitieren kann? Schließlich sind sie zu diesem Zeitpunkt ja in aller Regel noch unbegutachtet.

Aus diesem Grund untersagten die meisten Journals erst einmal, dass die Autoren Preprints in den Referenzlisten ihrer eingereichten Manuskripte zitieren. Doch da diese inzwischen auch mit di­gi­ta­len Identifikationssystemen à la Digital Object Identifier (DOI) oder arXiv Identifier versehen werden, lassen viele Journals dies heute zu.

So mancher Forscher scheint dagegen jedoch weiterhin Probleme mit dem Zitieren von Preprints zu haben. Vor kurzem berichtete etwa einer in einem Forum, dass er erfolgreich eine Methode angewendet habe, die bis dahin lediglich auf einem Preprint-Server einzusehen war. Laut seinem Verständnis handelte es sich demnach um eine „unpublizierte Methode“, welche die Qua­li­täts­kon­trolle (noch) nicht bestanden hatte. Und als solche wollte er sie eben nicht zitieren.

Wen aber dann, denn seine Methode war es ja nicht?

Wie er das Problem letztlich löste, ist nicht bekannt. Interessant war aber der folgende Kom­men­tar dazu im Forum:

Ist die erfolgreiche Anwendung der Methode in einem ganz anderen Projekt nicht eine viel bessere Qualitätskontrolle, als wenn zwei Reviewer sie einfach nur durchlesen? Ist damit vielmehr nicht sogar bewiesen, dass sie funktioniert?

Wahre Worte! Falls das Methoden-Manuskript also immer noch in der Begutachtungsschleife irgendeines Journals rotiert: Eigentlich braucht’s das jetzt nicht mehr.

Ralf Neumann

(Foto: ASAPbio)