lmu-osc

Download

lmu-osc@lists.lrz.de

July 2020

1 participants
2 discussions

Letter for requesting missing code & data supplements as a reviewer
by LMU Open Science Center News July 29, 2020

July 29, 2020

Hi all, pasted below is a letter I've been sending to editors that ask me to do blinded reviews of (statistics) papers without code & data supplements. I was hoping that this might be useful for some of you as well or inspire you to take similar action. I would also be grateful for feedback and suggestions on how to make this more persuasive. Best, Fabian -------------------------------------------- This submission does not include a code and data supplement that would allow peers to replicate results or investigate details of the algorithm that was used to generate them -- in my opinion, this is not acceptable for a methodological contribution such as this one. At least the code used for the simulation study should be made available to reviewers as early as possible. Could you ask the authors to supply the missing material on my behalf and forward it to me and the other reviewers? I hope you do not feel unduly burdened by my request -- I am convinced that our field has to take the issues surrounding replicability of results, availability of code and data, and code quality much more seriously going forward and I am trying to do my part to change scientific standards in that direction, even if many journals have not yet made the decision to require mandatory code and data supplements. The document available at https://staff.washington.edu/rjl/pubs/topten/topten.pdf summarizes my viewpoint on this very well: Just as we would never publish theoretical papers containing a theorem without a peer-reviewed proof, we should not publish papers claiming methodological advances without a publicly available, peer-reviewed implementation that was used to create the results in the paper, in my opinion. In the absence of such a supplement, I am not willing to review the content of this submission and my automatic recommendation would be to revise & resubmit accompanied by suitable supplementary material.

1 0

DFG-Schwerpunktprogramm "Replicability in the Behavioural, Social, and Cognitive Sciences"
by LMU Open Science Center News July 6, 2020

July 6, 2020

Liebe Kolleginnen, liebe Kollegen, der Senat der DFG hat kürzlich der Einrichtung eines neuen Schwerpunktprogramms mit dem Titel „META-REP: A Meta-scientific Programme to Analyse and Optimise Replicability in the Behavioural, Social, and Cognitive Sciences” (SPP 2317) zugestimmt. Ziel dieses neuen SPP ist es zu erforschen, (1) was Replizierbarkeit in unterschiedlichen wissenschaftlichen Disziplinen bedeutet und wann eine Replikation als „gelungen“ oder „gescheitert“ gelten kann, (2) ob niedrige Replikationsraten auf zu viele Falsch-Positiv-Befunde in der Literatur, auf Schwächen in der Replikationsmethodik oder vielmehr auf einen bislang unterschätzten Einfluss von Kontextfaktoren zurückzuführen sind, und (3) wie ein ausreichend hohes Maß an Replizierbarkeit in den Verhaltens-, Sozial- und Kognitionswissenschaften wirksam und nachhaltig gesichert werden kann. Heute wurde der Ausschreibungstext für individuelle Projekte veröffentlicht -- ab sofort ist es also möglich, Anträge auf Sachbeihilfen unter dem Schirm des SPP 2317 einzureichen. Detaillierte Informationen zur Antragstellung finden Sie im Ausschreibungstext: https://www.dfg.de/foerderung/info_wissenschaft/2020/info_wissenschaft_20_3… Weitere Informationen zum SPP „META-REP“ (einschließlich einer abgespeckten Version des Einrichtungsantrages) finden Sie auf der META-REP-Webseite: https://leibniz-psychology.org/metarep/ Für individuelle Rückfragen stehen Ihnen die Mitglieder des Programmausschusses zur Verfügung (Kontaktinformationen finden Sie ebenfalls auf der META-REP-Webseite). Bitte beachten Sie die Frist zur Einreichung von Projektanträgen: diese endet am 02. Dezember 2020. Die Begutachtung der Projekte ist für das Frühjahr 2021 vorgesehen; die bewilligten Projekte werden dann aller Voraussicht nach im Herbst 2021 an den Start gehen. Für alle, die eine Antragstellung ins Auge fassen, werden wir (d.h. der Programmausschuss) einen virtuellen Vorbereitungsworkshop organisieren; vorgesehener Termin hierfür ist der 28. September 2020 (mehr Infos im Ausschreibungstext). Ich darf Sie herzlich einladen, sich für diesen Workshop zu registrieren -- auch dann, wenn Sie noch nicht sicher sind, ob Sie einen Antrag stellen werden. Umgekehrt ist die Teilnahme an diesem Workshop keine Voraussetzung für die Antragstellung. Ich hoffe, die Ausschreibung motiviert möglichst viele von Ihnen, sich mit einem Antrag an unserem neuen SPP „META-REP“ zu beteiligen! Herzliche Grüße Mario Gollwitzer Programmausschuss des SPP 2317: * Sprecher: Prof. Dr. Mario Gollwitzer (LMU München; Psychologie; mario.gollwitzer(a)psy.lmu.de) * Prof. Dr. Katrin Auspurg (LMU München; Soziologie: katrin.auspurg(a)lmu.de) * Dr. Susann Fiedler (MPI Bonn; Psychologie/Verhaltensökonomie: fiedler(a)coll.mpg.de) * Dr. Tina Lonsdorf (UKE Hamburg; Kognitive Neurowissenschaften: t.lonsdorf(a)uke.de) * PD Dr. Felix Schönbrodt (LMU München; Psychologie: felix.schoenbrodt(a)psy.lmu.de) For updates, follow [@meta_rep](https://twitter.com/meta_rep)! ----------------------------------- Prof. Dr. Mario Gollwitzer Lehrstuhl für Sozialpsychologie Ludwig-Maximilians-Universität München Department Psychologie Leopoldstraße 13 80802 München www.psy.lmu.de/soz

1 0