StartseiteAstrodicticum Simplex

Fünf Artikel und Schluß: Soll die Publikationstätigkeit von Wissenschaftlern begrenzt werden?

Von / 30. Januar 2014 / 32 Kommentare / Seite 3 von 3 / Auf einer Seite lesen
Mehr

Ich bin froh, dass ich bei diesem ganzen Spiel mittlerweile nicht mehr mitspielen muss. Aber es wäre trotzdem wichtig, dass sich die Dinge langsam ein wenig ändern. Die Ära der gedruckten Zeitschriften ist zumindest in der Wissenschaft schon lange vorbei. Sie erfüllen den Zweck, den sie früher erfüllt haben, schon lange nicht mehr. Es wäre an der Zeit, das zu akzeptieren und die veralteten Strukturen an die digitale Realität anzupassen!

1 / 2 / 3
Stichworte: , , , , , , , ,
Mehr

Kommentare (32)

  1. #1 strahlenbiologe
    30. Januar 2014

    Schön geschrieben. Gerade die Nature/Sience-Manie ist mMn absolut kontraproduktiv.
    Ein kleiner Schritt um die Publish-or-Perish-Spirale abzuweichen wäre schon gegeben wenn nicht nur die Gutachter anonym blieben, sondern auch die Autoren. Es passiert leider viel zu oft dass Paper angenommen werden nur weil ein “berühmter” (weil schon er/sie schon viele Nature/Science-paper aufzuweisaen hat) Letztautor auf dem Paper steht. Frei nach dem Motto :” Wenn DER das eingereicht hat MUSS es ja gut sein”

  2. #2 Florian Freistetter
    30. Januar 2014

    @strahlenbiologie: “Ein kleiner Schritt um die Publish-or-Perish-Spirale abzuweichen wäre schon gegeben wenn nicht nur die Gutachter anonym blieben, sondern auch die Autoren. “

    Ja, das sollte eigentlich Standard bei den Journals sein. Aber selbst wenn, wird es noch schwierig. Denn so speziell wie die Spezialgebiete mittlerweile sind, kann man meistens schon anhand des Themas erkennen, wer da geforscht haben muss…

  3. #3 Jürgen Schönstein
    30. Januar 2014

    Ein Paper, das am MIT erarbeitet wurde, zeigt zudem, dass es den so genannten Matthäus-Effekt tatsächlich gibt: darüber, ob eine wissenschaftliche Arbeit weite Anerkennung findet, entscheidet nicht (nur) ihre wissenschaftliche Qualität, sondern vor allem (auch) das Renommee ihrer AutorInnen.

  4. #4 Markus
    30. Januar 2014

    Ich stimme dem ganzen zwar größtenteils zu, aber ich finde man sollte auch die Seite der Investoren betrachten.
    Ich kann wohl kaum erwarten das jeder potentielle Investor sich zu 100% mit dem Thema auskennt. Da helfen halt die großen Peer-Review Zeitschriften, da man weis das Wissenschaftler die dort etwas veröffentlicht haben wohl ansatzweise Ahnung von dem haben was sie machen.
    Wenn man aber in Zukunft jede Studie in der BILD Zeitung veröffentlicht ist die gefahr wohl größer das man im schlimmsten Fall irgendeinem Esoteriker das Geld in den hintern pustet.
    Wobei das bei Seiten wie ArXiv wohl eher nicht der Fall sein dürfte.

  5. #5 Florian Freistetter
    30. Januar 2014

    @Markus: “Ich stimme dem ganzen zwar größtenteils zu, aber ich finde man sollte auch die Seite der Investoren betrachten.
    Ich kann wohl kaum erwarten das jeder potentielle Investor sich zu 100% mit dem Thema auskennt. Da helfen halt die großen Peer-Review Zeitschriften, da man weis das Wissenschaftler die dort etwas veröffentlicht haben wohl ansatzweise Ahnung von dem haben was sie machen.”

    Investoren?? Was haben Investoren damit zu tun? Hier gehts um Wissenschaft? Und warum sollten Wissenschaftler, die nicht in “wichtigen” Zeitschriften veröffentlicht haben, keine Ahnung haben? Ich hab im Artikel ja lang und breit erklärt, dass der Impact Factor nichts mit der Qualität der Arbeit zu tun hat.

    “Wenn man aber in Zukunft jede Studie in der BILD Zeitung veröffentlicht ist die gefahr wohl größer das man im schlimmsten Fall irgendeinem Esoteriker das Geld in den hintern pustet.”

    Warum sollte jemand auf die absurde Idee kommen, wissenschaftliche Arbeiten in einer Boulevardzeitung zu veröffentlichen? Kann es sein, dass du von einer völlig anderen Art der Veröffentlichung sprichst bzw. dir unter “wissenschaftlicher Arbeit” es völlig anderes vorstellst?

  6. #6 ulfi
    30. Januar 2014

    Das Problem sehe ich ähnlich. Ich bin jetzt 1 Jahr dabei, arbeite an meiner 2. Publikation und fühle mich so im Vergleich, als dass das schon zu wenig war Ich würde gerne auf arxiv veröffentlichen, aber die Koautoren und mein Chef wollen lieber zu den großen Konferenzen. Da hieß es mal: “du kannst jetzt bei X einreichen, aber da haben wir schon was. Reich besser bei Y ein, dann kann ich das abhaken.”

    Das mit der Finanzierung ist auch ganz schlimm. Wir werden nach Anzahl Paper(!) bezahlt, also nichtmal impact factor oder irgendeinem qualitativ sinnvollen Maß. Naja, aber da hörts noch nicht auf, wir werden auch nach der Anzahl der Studenten bezahlt, die pro Semester bestehen(kine Qualitätsanfordrungen) und ein Teil unserer Finanzierung ist davon abhängig, wieviel Drittmittel wir kriegen. Drittmittel werden auch vorgeschrieben, wieviele MillionenEUR wir da jedes Jahr sammeln müssen (nicht im Sinn von: soviel brauchen wir jetzt, sondern: soviel müssen wir mehr kriegen als letztes Jahr.) Üblicherwise wird einfach der Wert alle 2 Jahre verdoppelt, damit irgendwlche corporate goals wie “wachstum” umgesetzt werden können.

  7. #7 Tobias
    30. Januar 2014

    Ich stimme Dir in weiten teilen zu. Mit Datenbanken hat man potentiell alle Veroeffentlichungen zur Verfuegung und Science/Nature etc. veroeffentlichen viel, was sich spektakulaerer anhoert als es dann tatsaechlicht ist.

    Publish or perish bedeutet, dass ich als PostDoc heute viel mehr produzieren muss um eine Professur zu ergattern als das meine Chefs damals mussten. Viele Berufungskommissionen bewerten Kandidaten nach Metriken, die Quantitaet stark gewichten.

    “Double blind review” funktioniert nur in einigen Feldern, z.B. Medizin oder Soziologie. In meinem Feld der Umweltwissenschaften, wo Feldexperimente durchgefuert werden kann man das abhaken, weil der Ort und damit die Gruppe zentral im Manuskript ist.

    Trotzdem wuerde ich den Impact-Faktor nicht als ueberflussig bezeichnen, weil er immerhin aussagt, dass Paper aus einen Journal gelesen und zitiert werden. Wenn mir in einer Datenbanksuche alle Artikel angezeigt werden, dann sollten sich, wenn man Reputation eines Journals ausser acht laesst, die IF ueber Zeit angleichen, wenn die Qualitaet der Paper die gleiche ist. Ausserdem haben high-impact Journals auch einen besseren Zugriff auf Reviewer…

    Mein Eindruck ist, dass wir in der Wissenschaft ein gewaltiges Problem mit der Qualitaetskontrolle haben, aber bislang habe ich noch keine Loesung gehoert, die mich in der Praxis ueberzeugt.

  8. #8 Florian Freistetter
    30. Januar 2014

    @ulfi ” Ich würde gerne auf arxiv veröffentlichen, aber die Koautoren und mein Chef wollen lieber zu den großen Konferenzen. Da hieß es mal: “du kannst jetzt bei X einreichen, aber da haben wir schon was. Reich besser bei Y ein, dann kann ich das abhaken.””

    Aber bei arxiv kannst du die papers doch trotzdem immer noch einstellen, oder?

  9. #9 Florian Freistetter
    30. Januar 2014

    @Tobias: “Trotzdem wuerde ich den Impact-Faktor nicht als ueberflussig bezeichnen, weil er immerhin aussagt, dass Paper aus einen Journal gelesen und zitiert werden. “

    Wenn, dann würde es höchstens Sinn machen, Impact-Faktoren für einzelne papers zu berechnen. Denn natürlich ist es interessant zu wissen, wie oft ein paper zitiert wird oder nicht. Aber bei Zeitschriften machts keinen Sinn. Ein paper wird nicht automatisch wichtig, nur weil die Zeitschrift wichtig ist. Ein paper ist wichtig, wenn es selbst wichtig ist. Oder denkst du dir “Hey, diese Zeitung hat einen hohen Impact-Faktor. Da les ich jetzt mal ALLE artikel, die dort erscheinen!” – das macht doch heutzutage keiner mehr…

  10. #10 Tobias
    30. Januar 2014

    Impact Faktoren eines einzenlen Paper sind ja nur die Nummer der Zitationen. Das macht bei Papern die 2 und mehr Jahre alt sind ja auch Sinn. Bis dahin braucht man aber schon einen Proxy um herauszufinden welche 20-30 von den 12000 Papern die mir meine Web of Science Suche ausspuckt ich als erstes lese.

  11. #11 Florian Freistetter
    30. Januar 2014

    @Tobias: “Bis dahin braucht man aber schon einen Proxy um herauszufinden welche 20-30 von den 12000 Papern die mir meine Web of Science Suche ausspuckt ich als erstes lese.”

    Die, die für deine Arbeit relevant sind oder die, die dich interessieren?
    Ich weiß ja nicht auf welchem Gebiet du arbeitest und ob die Dinge da so ganz anders ablaufen als in der Astronomie. Aber ich würde nicht auf die Idee kommen, einen Artikel nur deswegen als “wichtig” genug für die Lektüre einzuschätzen, weil er bei Nature/Science erschienen ist. Ich lese die Artikel, die für mich relevant sind – egal in welchen Journal sie erschienen sind.

  12. #12 Tobias
    30. Januar 2014

    @Florian: natuerlich lese ich alles was fuer mich wichtig ist. Ich bin Meteorologe und habe auf dem Tibetischen Plateau gearbeitet. Deswegen habe ich viel z.B. aus chinesischen und japanischen Journals gelesen und auch zitiert.
    Wobei man meiner Meinung nach schon bei einigen Journals einen Unterschied in der Qualitaetskontrolle sieht.
    Was ich meinte, ist dass wenn ich eine Suche in einer Datenbank starte, dann bekomme ich i.d.R. mehrere hundert Treffer und muss dann selber entscheiden, was ich davon lese. IF oder Reputation des Journals ist dann fuer mich auch eines der Auswahlkriterien, wenn ich mehr Paper mit interessanten Abstracts habe als ich lesen kann (Nature und Science sind im uebrigen fuer mich fast voellig uninteressant, weil mein Forschungsgebiet nicht global genug ist).

  13. #13 enbeh
    31. Januar 2014

    Florian, ehrlich gesagt verstehe ich die Argumentation hier nicht.

    Du beschreibst zunächst, warum der Journal Impact Factor kein gutes Maß ist, um die Qualität eines Papers oder eines Autors zu bewerten. Ok, sehe ich auch so. Weiterhin argumentierst Du, wenn ich richtig verstehe, dass auch die Bewertung eines Jpurnals über den Impact Factor belanglos ist, weil heutzutage niemand mehr Journals in Papierformat von vorne bis hinten liest. Deshalb seien Autoren frei, ihre Paper zu publizieren wie und wo es ihnen günstig erscheint. Für das Ansehen des Papers sollte das keine Rolle spielen, da die Qualitätskontrolle (d.h. Peer Review) überall gleich ist. Dem kann ich nur eingeschränkt zustimmen. Es mag ja sein, dass das Review bei Nature/Science nicht besser ist als bei soliden Durschniuttsjournals. Aber am unteren Ende der Skala tummeln sich durchaus viele Journals, deren Review eher lasch ist.

    Was ich überhaupt nicht verstehe, ist Dein Argument zu Ende des Posts: “So lange die Anzahl der Publikationen und deren Impact Factor weiterhin die Karrieren in der Wissenschaft dominieren, ist die Versuchung groß, bei den Veröffentlichungen mehr auf Quantität als auf Qualität zu achten.”

    Was hat die bedauerliche Fixierung auf den Impact Factor mit der ebenfalls bedauerlichen Fixierung auf Quantität zu tun? Ich weiß ja nicht, wie das in der Astronomie so ist. In den Feldern, in denen ich mich einigermaßen auskenne (Neurobiologie, Psychologie) ist es eher umgekehrt: kaum eine Publikation in den ganz großen (Nature, Science, Neuron, Current Biologogy, etc.) oder mäßig großen Journals (Journal of Neuroscience, Cerebral Cortex, Psychological Science) besteht aus einem einzigen Experiment; meistens wird eine ganze Versuchsreihe vorgestellt. Ich finde es eher typisch for Low-Impact Journals, dass dort “smallest publishable units” veröffentlicht werden. Ich verstehe nicht, warum die Fixierung auf Impact Factors die Leute dazu bringen soll, kleinteiliger und weniger substantiell zu publizieren.

    Umgekehrt verstehe ich nicht, wie eine Begrenzung der Paper, die ein Wissenschaftler veröffentlichen darf, die Fixierung auf Impact Factors reduzieren soll. Würde nicht eher das Gegenteil eintreffen? Wenn ich im Leben nur 10 Paper publizieren dürfte, würde dan nicht meine Motivation steigen, dass diese Paper ein Impact-Feuerwerk sein müssen?

  14. #14 CM
    31. Januar 2014

    Aber bei arxiv kannst du die papers doch trotzdem immer noch einstellen, oder?

    Die Arbeit von und bei arXiv ist verdammt gut und wichtig – doch leider ist die Plattform nicht für alle Fächer offen (und das Anmeldeprozedere etwas lästig, aber das ist nebensächlich). Daneben gibt es viele andere Initiativen die Qualität und Verfügbarkeit von Publikationen wieder zu steigern (immer mal wieder Thema auch hier auf SBs).

    Leider aber sind es oft nicht die Doktoranden (oder manchmal sogar die PostDocs), die entscheiden ob, was und wo publiziert wird (und in Firmen ist die Entscheidung noch mal eine andere). Professoren spielen oft immer noch: Nature/Science -> PNAS/EMBO/Lancet/oder so -> “normales Journal” -> low impact. Und darüber vergeht so viel Zeit, dass der eine oder andere Doktorand/PostDoc längst weiter gezogen ist – und vielleicht schon (weil nicht genug publiziert, sic!) aus der Wissenschaft draussen.

    Das wird langsam weniger, aber der Generationswechsel zu einer offeneren Sicht ist noch nicht vollzogen.

    Im Übrigen teile ich die Sicht von enbeh (#13) – abgesehen davon, dass für das “Impact-Feuerwerk” nicht in jeder Lebensphase die Zeit ist.

  15. #15 Florian Freistetter
    31. Januar 2014

    @enbeh: “Was hat die bedauerliche Fixierung auf den Impact Factor mit der ebenfalls bedauerlichen Fixierung auf Quantität zu tun? “

    Ich hab nicht behauptet, dass sie etwas miteinander zu tun hätten. Das ist kein Artikel über den Impact Factor, sondern einer über die Publikationstätigkeit in der Wissenschaft. Es geht darum, dass Publikationen die Karrierebewertung in der WIssenschaft dominieren. Je mehr Publikationen, um so besser. Je mehr Publikationen in “high-impact” Journals, um so besser. Ich habe allerdings nicht gesagt, dass der Impactfactor was mit der Quantität zu zun hat.

  16. #16 TN
    31. Januar 2014

    Sehe das ebenfalls differenziert: Klar sind die großen Journals mit ihren immensen IF völlig überbewertet, aber auch das andere Ende der Skala ist nicht zu vergessen. Allein bei uns (Geowissenschaften) gibt es so dermaßen viele “kleine” Journals, fast schon Hausjournals von den jeweiligen geologischen Diensten oder “regionale” (was auch mal ein Land oder Kontinent betrifft) Journals, wo dann der Editor auch mal schneller Paper durchwinkt.
    Ein offenes,(entweder doppelt anonymisiertes [schwierig, weil je nach Berufsfeld meist doch klar ist, wer da publizieren will] oder völlig offenes System [keine Anonymisierung der Reviewer, die sich gerne wegen Häme oder Engstirnigkeit verstecken]) ist schön, aber schweirig, weil die Qualität der Begutachtung NICHT überall gleich ist (auch in Abhängigkeit der Editoren). Aber du hattest ja eine Alternative erwähnt: Einen “Peer” als Editor vorschlagen. Ist aber auch nicht ohne, weil auch damit eine Menge (unbezahlter) Arbeit einhergeht.
    Ne Menge los im Publikationsbusiness. Bin gespannt, wann endlich die Nachvollziehbarkeit von Experimenten durch die (Teil-)Veröffentlichung der Daten fundiert wird. Selbst “Größen” wie Science/Nature haben ja des öfteren mal Sachen zurückziehen müssen, weil die Daten gefälscht/erfunden waren.

  17. #17 Compuholic
    1. Februar 2014

    Die Gutachter werden ausgewählt, weil sie in der Lage sind, das Thema des Artikels zu verstehen […] die Gruppe potentieller Gutachter bei einem Artikel der bei einer “guten” Zeitschrift eingereicht wird [, ist] identisch mit der Gruppe der Gutachter aus denen eine “schlechte” Zeitschrift auswählen kann

    Da ist auch noch ein anderes Problem, das beim Peer Review häufig auftritt: Die Reviewer haben oft nicht wirklich Ahnung von dem Thema des Papers. Ist zumindest mir schon ein paar Mal passiert, dass ich Papers bekommen habe, für deren Beurteilung ich nicht wirklich qualifiziert bin. Man versucht dann halt nach besten Kräften ein faires Gutachten zu geben aber das ändert halt nichts an der Tatsache, dass man eigentlich nicht genügend über das Thema weiß um eine qualifizierte Einschätzung zu geben.

  18. #18 Florian Freistetter
    1. Februar 2014

    @Compuholic: “Die Reviewer haben oft nicht wirklich Ahnung von dem Thema des Papers. Ist zumindest mir schon ein paar Mal passiert, dass ich Papers bekommen habe, für deren Beurteilung ich nicht wirklich qualifiziert bin. “

    Ja, sowas passiert leider immer wieder. Ich hab auch schon öfter Artikel/Projekte abgelehnt bekommen, weil der Reviewer offensichtlich ahnungslos war und irgendeinen “Fehler” gefunden hat, der nicht da war, sondern nur aus mangelndem Verständnis des Themas resultiert ist. Das ist dann halt ne Frage des Editors: Wenn der schlecht ist, dann wählt er auch schlechte Gutachter aus…

  19. #19 Tobias
    1. Februar 2014

    @Compuholic und Florian
    Da spielt dann meiner Meinung nach zum Teil wieder die Reputation des Journals eine Rolle. Ein Class A journal ist eher in der Lage das Paper einem Editor zu geben der was von dem Thema versteht und dann auch gute Reviewer findet.
    Class A heisst übrigens nicht zwangsläufig “Closed. Access.” Gerade z.B. die Euroean Geosciences Union hat richtig gute OA journals, die auch mit die hoechsten IF haben (zumindest für Meteorologie und Klima). Im Endeffekt stimme ich TN zu.

  20. #20 Florian Freistetter
    1. Februar 2014

    @Tobias: “Ein Class A journal ist eher in der Lage das Paper einem Editor zu geben der was von dem Thema versteht und dann auch gute Reviewer findet.”

    Da würde ich nicht unbedingt zustimmen. Ein Journal, dass sich auf irgendein Thema spezialisiert hat – und damit i.A. keinen großen Impact Factor hat – hat in dem jeweiligen Spezialgebiet oft eine viel bessere Übersicht und viel bessere Kontakte als ein “wichtiges” Journal das über alle möglichen Themen berichtet. In meinem Arbeitsgebiet hat zB “Celestial Dynamics and Dynamical Astronomy” kein Problem damit, die führenden Leute auf dem Gebiet als Referees/Editoren zu gewinnen. Wohingegen man bei unter den Mitarbeitern von Nature/Science keine Himmelsmechanik-Experten findet…

  21. #21 Tobias
    1. Februar 2014

    @ Florian:
    Ok, ich glaube wir sind hier bei Unterschieden zwischen Disziplinen und bei Definitionen. In meinem Feld (Meteorologie) gibt es eine große Gruppe von Journals, die die komplette Meteorologie abbilden (z.B. Journal of Geophysical Research: Atmosphere) und dann noch eine Reihe von Journals, die sich auf eine Untergruppe spezialisiert haben (z.B. Boundary-Layer Meteorology oder Agricultural and Forest Meteorology). Für mich sind das jedoch alles A-Journals, weil sie gelesen werden, auch wenn der IF der Spezialjournals kleiner ist.
    Es ist sowieso unseriös IF über Disziplinen zu vergleichen, da der Publikationszyklus und damit auch der 2-year IF von Fach zu Fach unterschiedlich ist.
    In Biosciences sind IF=10 gut, in meinem Feld ist IF=2-5 exzellent.
    Nature und Science überfliege ich persönlich nur und würde die in meinem Feld auch nicht als besser bewerten als die oben genannten Journals.

  22. #22 Gerrit
    2. Februar 2014

    Ich denke schon, dass die European Geoscience Union in die richtige Richtung geht. Deren Journals (z..B. Atmospheric Chemistry and Physics, ACP) haben eine sehr geringe “rejection rate” ( 70%) und die Editoren pruefen hauptsaechlich die grundlegende Qualitaet und stellen dann das Manuskript zur oeffentlichen Diskussion (plus zwei anonyme Referee). Das kommt einer Datenbank, wie Florian sie sich vorstellt, eigentlich recht nahe.

    Fuer Professorenstellen wuerde ich es mir auch wuenschen, dass man nur z.B. fuenf Paper einrechen darf. Ich habe es erlebt, dass gute Paper geviertel wurden, weil dann der gesamte IF hoeher ist.

  23. #23 swage
    3. Februar 2014

    Tja… ich schätze die Wissenschaftler sind auch irgendwie die Opfer der renomierten Magazine. Nein, ich finde nicht das man die Anzahl der Publikationen begrenzen sollte. Das ist zu restriktiv, das eigentliche Problem sitzt aber an einer anderen Stelle: monopolisierung von Wissen; Paywalls. Das Schlimmste ist das es auch den Austausch von Wissen behindert. Die… sagen wir mal… den äußeren Gegebenheiten angepasste Arbeitsweise (sprich Beeinflussung der Art und weise wie gearbeitet wird um maximalen Profit zu erziehlen) ist ebenfalls eine logische Folge dieser Vorgehensweise. Ich bin der Meinung wenn es die Arbeit negativ beeinflusst, so ist es an der Zeit sich über eine neue Vorgehensweise Gedanken zu machen.

  24. #24 Christoph
    5. Februar 2014

    Ach, ich denke die Kritik ist überzogen. Letztlich funktioniert das Publikationssystem wie es ist doch ganz gut – insbesondere auch die Mischung aus Fachjournalen, Fachübergreifenden Journalen (wie eben Science/Nature), ,Open Access, arXiv und – was oft vergessen wird – den Homepages der Autoren.

    Ich habe weder den Eindruck (falls falsch: Bitte Belege), dass wichtige wissenschaftliche Erkenntnisse wegen des Publikationssystems nicht bekannt geworden sind, noch dass die Top-Journale ihre Blätter mit unwichtigem Zeug von prominenten Autoren zumüllen.

    Eine Begrenzung? Naja, das ist sicherlich nicht sinnvoll. Wie soll das schon praktisch funktioniert: Das die ATLAS-Kollaboration dann nur noch 5 Artikel veröffentlichen (WRINT: CMS & ATLAS nicht ALICE 😉 )? Warum soll man Autoren, die einfach einen hohen Output haben (Edward Witten, Theodor Hänsch, J. Ignacio Cirac…) künstlich einschränken? Zensur ist immer falsch. Das die Publikations/Zitationszählung allerlei ungute Anreize für Wissenschaftler setzt: Klar. Dennoch funktioniert es ja ganz gut.

    Aus meiner kurzen wissenschaftlichen Laufbahn kann ich selbst sagen: Ja, das Einreichen von Zeitschriftenartikeln und Konferenzbeiträgen ist extrem mühsam. Man fühlt sich zum Teil unfair behandelt und es kann sehr demotivierend sein. Nur: Auch Forscher müssen “Marketing” betreiben. Wenn ich denke, dass ich wichtige Erkenntnisse gewonnen habe, dann muss ich als Wissenschaftler eben als Teil meiner Arbeit auch darum kämpfen, dass diese bekannt werden.
    Ich denke nicht, dass ein System funktionieren kann, in dem alle ihre Arbeiten bei arXiv abwerfen und darauf vertrauen, dass die wichtigen Arbeiten durch Schwarmintelligenz schon nach oben gespühlt und bekannt werden.

    Was ich noch als am problematischsten Ansehe, das sind Zitationszählungen und Zitationsrankings. Vor allem, weil diese oft durch grosse Kollaborationen (CERN, die SCP/High-z Supernova Search), die Anbieter von Tools (eklatant in der Molekularbiologie durch Bioinformatik-Tools, aber auch in den Materialwissenschaften) oder durch Review-Artikel (z.B. PDG in der Elementarteilchenphysik) dominiert werden und damit stark verzerrt werden.

  25. #25 Florian Freistetter
    5. Februar 2014

    @Christoph: “. Letztlich funktioniert das Publikationssystem wie es ist doch ganz gut “

    Nun, wenn du das meinst… Du sagst, deine wissenschaftliche Laufbahn ist noch kurz. Vielleicht kommt ja dann bei dir irgendwann noch der Punkt, wo du das nicht mehr so siehst. Wenn du dich irgendwo bewirbst und merkst, dass nur die Anzahl der Papers auf der Publikationsliste zählt und nicht der Inhalt. Oder wenn dein Kollege mit dem Nature-Paper den Job kriegt und nicht du, obwohl du eigentlich besser qualifiziert wärst, usw.

    Das Problem am Publikationssystem ist der immer stärkere Drang, die Qualität des wissenschaftlichen Outputs durch eine simple Kennzahl zu beschreiben. Deswegen wird der ganze Unsinn von Impact Factor, Zitationsindex, etc ja immer noch so zelebriert und der Nature/Science/Cell-Wahn wird immer stärker. Und dem muss man entgegen wirken.

    Und von der ganzen Open-Access-Sache haben wir hier noch gar nicht geredet…

  26. #26 Christoph
    5. Februar 2014

    @Florian #25

    Nein, wissenschaftliche Laufbahn – zumindest im akademischen Bereich – war kurz. Zum einen bin ich in der glücklichen Lage in einem Bereich zu arbeiten – der Informatik – wo es auch ausseruniversitär gute Möglichkeiten gibt und diese auch noch gut bezahlt werden.

    Ja, ich hätte problemlos eine Postdoktorandenstelle bekommen, alleine schon, weil ich einen in meinem Feld prominenten Doktorvater hatte, der mich dann auch noch an einer international Top-Uni betreut hat. Natürlich ist solch ein akademischer CV erstmal ein Pfund mit dem man wuchern kann – ich denke aber auch zu Recht. Natürlich hat das bei einer Bewerbung Gewicht, noch bevor sich jemand überhaupt irgendeine Publikationsmetrik geschweige denn eine Publikation selbst angeschaut hat. Dennoch bin ich ausgerechnet an meinen beiden Wunsch-Arbeitsgruppen nicht angenommen worden – ja, da gibt es eben dutzende Bewerber auf 2-3 Stellen. Ja, andere hatten in prominenteren Journals publiziert und evtl. das etwas “hippere” (was hoffentlich in vielen Fällen auch “wichtigere” bedeutet) Themengebiet beackert. Ich denke aber – im Gegensatz zu Dir – dass diese Personen die Stellen ebenso verdient haben – vielleicht habe die einfach etwas besser gepasst. Es ist nunmal ein harter Wettbewerb. That’s life. Als ich meine Wunschstellen nicht bekommen habe, habe ich die Uni eben verlassen- aber ohne Groll. Warum auch: Ich habe ja keinen Anspruch darauf, dass mich irgendwann eine Universität auf eine W2/3-Stelle setzt, die mir doch mehr oder weniger himmlische Freiheiten böte. Und wenn mir die Chancen darauf zu gering erscheinen, dann muss ich mich halt anderweitig umsehen.

    Gerade den Impact-Factor halte ich nicht für grundsätzlich schlecht. Ich würde schon die These in den Raum stellen, dass in Nature absolut wie relativ mehr bedeutende Arbeiten erscheinen als im Hintertupfinger Journal für allgemeine Wissenschaften oder in einem Journal ohne jegliches Review (so kommen ja Esoteriker auf Publikationen in “Fachjournalen”). Dass eine einzelne Nature-Publikation der “Jackpot” sein kann, das mag bitter sein. Aber eine Leistung ist es imho trotzdem dort eine Publikation unterzubringen. Klar: Wie immer findet man Einzelfälle, in denen irgendwas nicht funktioniert. Klar werden teilweise falsche Anreize gesetzt (z.B. zu Slicing).

    Ich sage nicht, dass alles rosig ist. Aber deine Artikel und Statements scheinen mir aus der persönlichen Enttäuschung heraus doch etwas sehr einseitig. Du wirkst auf mich im Augenblick wie ein Fussballer, der nach einer Niederlage alle Schuld beim Schiedsrichter abladen will. Das mag ungerecht gegenüber Dir sein, aber so kommt der Artikel und auch die WRINT-Folge für mich im Augenblick rüber.

  27. #27 Gerrit
    6. Februar 2014

    Ich sehe das Problem auch nicht umbedingt bei den Journals, sondern bei den Univerisitaeten. Die machen es sich meiner Meinung zu einfach, bei der Bewertung von wissenschaftlicher Arbeit.

    Meine Erfahrung aus Hong Kong (die das US-System kopieren) ist, dass bei Einstellung und Befoerderung von Professoren erstmal nur eine Kennzahl zaehlt, die aus IF, Publikationszahl und Zitierungen bestimmt wird. Nur wenn du es damit an die Spitze der langen Liste schaffst, wirst du weiter wahrgenommen.

    Die Formel zur Berechnung ist bekannt und es lohnt sich NICHT qualitativ hochwertige Forschung (IF ~5) zu betreiben, sondern ist am besten viele einfache Paper (IF ~1) zu produzieren. Das wissen natuerlich auch unsere jungen Professoren und handeln danach.

    Das “System” verhindert also hochwertige Forschung anstatt sie zu foerdern. Ich finde das Schade, da ich gerne hochwertige Arbeit ablieferen moechte, aber dafuer im Moment bestraft werde.

    Aus der Erfahrung halte ich es fuer sinnvoll, bei der Bewertung von wissenschaftlicher Arbeit nur die 5 besten Paper zu bewerten. Das waere meiner Meining nach besser fuer die Forschung (und eventuell auch fuer mich, da ich mich im Moment weigere Paper wie am Fliessband zu produzieren).

  28. #28 Christoph
    6. Februar 2014

    “Das “System” verhindert also hochwertige Forschung anstatt sie zu foerdern.”

    Das sehe ich nicht unbedingt so. Es führt aber zu dem von mir angesprochenen “Slicing”: Man veröffentlicht seine Ergebnisse Häppchenweise um bei gleichem Ergebnis den Output an Publikationen zu steigern (Der zu eher unrühmlicher Bekanntheit gelangte Prof. Lichtenthaler war wohl ein Meister darin).
    Zum Zweiten denke ich, dass das dazu führt, dass auch viel völlig Unbedeutendes publiziert wird. Ich denke nicht, dass das System “hochwertige” Forschung zu verhindern, wohl aber starke Anreize setzt jeden “Furz” zu Veröffentlichung zu bringen.

    “Aus der Erfahrung halte ich es fuer sinnvoll, bei der Bewertung von wissenschaftlicher Arbeit nur die 5 besten Paper zu bewerten.”

    Dem stimme ich zu. Auch wenn es durchaus mehr als 5 sein können – manchmal auch weniger. Ich sass als Student und Doktorant in ein paar Berufungskommisionen: Ich hatte mir von den Bewerbern immer gerne erklären lassen, was an ihren 3-10 neu und wegweisend war, was der persönliche Beitrag war etc.
    Aber es stimmt schon: Insbesondere in den unteren Hälften (nach Zitierungen) der Publikationslisten findet man fast nie etwas, was irgendwie bedeutsam wäre: Oft gefüllt mit Publikationen, die max. 3 Zitierungen haben, die dann auch noch aus der gleichen Forschungsgruppe stammen (siehe auch oben).

  29. #29 Florian Freistetter
    6. Februar 2014

    @Christoph: ” Es führt aber zu dem von mir angesprochenen “Slicing”: Man veröffentlicht seine Ergebnisse Häppchenweise um bei gleichem Ergebnis den Output an Publikationen zu steigern “

    Und deswegen der Titel dieses Artikels…

  30. #30 Florian Freistetter
    7. Februar 2014

    Hier ist noch ein aktueller Artikel zu genau diesem Thema: https://www.theguardian.com/science/occams-corner/2014/jan/06/radical-changes-science-publishing-randy-schekman

  31. #31 Eric
    4. März 2015

    Bin auf diesen Beitrag gestoßen und wollte noch anmerken:

    “Aber mittlerweile laufen die Dinge ja anders. Niemand mehr geht in die Bibliothek um dort in Zeitschriften zu blättern. Die Wissenschaftler benutzen verschiedene Online-Datenbanken um dort per Stichwort nach neuer Literatur zu suchen.”

    Dies ist eine Dienstleistung, die Bibliotheken anbieten, die dafür Geld bezahlen, um es ihren Nutzern zur Verfügung zu stellen. Hinzu kommen Recherchekurse (Information Literacy und Teaching Library), um sich überhaupt im immer größer werdenden Djungel zurecht zu finden.

    Auch der Zugang und Aufbau von Repositorien wird ganz massiv von Bibliotheken gefördert, bei ArXiv.org ist es z.B. die Cornell University Library.

    Zudem fördern gerade Bibliotheken Open Access massiv, auch innerhalb der Institution (z.B. mit Open Access Fonds oder Open Access Policies,…).

    Ich wollte nur darauf hinweisen, weil zu oft der Eindruck entsteht, man bräuchte Bibliotheken aufgrund ihrer veralteten Printbestände nicht mehr.

    Viele Grüße
    Eric

  32. #32 Florian Freistetter
    4. März 2015

    @Eric: “ch wollte nur darauf hinweisen, weil zu oft der Eindruck entsteht, man bräuchte Bibliotheken aufgrund ihrer veralteten Printbestände nicht mehr.”

    Ich bin weit davon entfernt, Büchereien für überflüssig zu halten: https://scienceblogs.de/astrodicticum-simplex/2013/02/08/die-ganze-welt-in-einem-haus/