Universiteit Leiden

nl en

Universitaire Bibliotheken Leiden en Elsevier seminars over Reproducible Research

Universitaire Bibliotheken Leiden (UBL) organiseert in samenwerking met Elsevier een reeks online seminars over de uitdagingen rond Reproducible Research. Tijdens de seminars delen internationale sprekers hun ervaringen met reproduceerbaarheid van onderzoek en worden richtlijnen besproken die kunnen helpen bij het transparant en verifieerbaar maken van onderzoeksresultaten. Naast meer theoretische aspecten worden tijdens de seminars diverse case studies gepresenteerd. De seminars vinden plaats op donderdag 22 april, 29 april en woensdag 12 mei.

Reproducible Research

Het streven naar Reproducible Research vormt een van de centrale drijfveren van de open science beweging. Wanneer onderzoekers hun data beschikbaar stellen en hun methoden documenteren, stelt dit hun collega’s meestal in staat om analyses te repliceren en conclusies te verifiëren. Reproducible Research is van belang voor een breed scala belanghebbenden binnen de academische wereld. Voor onderzoekers zorgt reproduceerbaarheid voor transparantie en het stelt collega’s in staat om de betrouwbaarheid van academische bevindingen te beoordelen. Door onderzoek op een reproduceerbare manier te verrichten kunnen onderzoekers hun verantwoordingsplicht en hun reputatie versterken.

Reproducible Research is ook van belang voor studenten en jonge onderzoekers. Door onderzoeksmethododen van ervaren onderzoekers te bestuderen en te repliceren, raken ze vertrouwd met de conventies en de details van specifieke onderzoeksmethoden. Dit kan studenten inspireren om deze voorbeelden na te volgen. Een grotere controleerbaarheid van academische bevindingen is ook van belang voor academische uitgevers, aangezien dergelijke inspanningen kunnen worden gezien als een vorm van peer review. Door bepaalde resultaten te repliceren, konden uitgevers de betrouwbaarheid van de bevindingen die ze verspreiden waarborgen. Reproducible Research is ook van belang voor onderzoeksfinanciers omdat dit het hergebruik van onderzoeksgegevens bevordert. Wanneer gegevens kunnen worden hergebruikt buiten de context waarin ze zijn gemaakt, kunnen financiële middelen op een veel effectievere manier worden gebruikt.

Uitdagingen

In velden als Geneeskunde, Biologie en Psychologie wordt er soms gesproken over een ‘replicatie crisis’. In de afgelopen jaren is er veel aandacht geweest voor de stappen die nodig zijn om de transparantie en de betrouwbaarheid van onderzoeksrssultaten te verbeteren. Desondanks zijn er nog verschillende uitdagingen. Het publiceren van gegevens in overeenstemming met de FAIR-datamanagement principes kan zeer arbeidsintensief zijn, en de noodzaak om workflows en methoden te documenteren vereist veel discipline. Voor onderzoekers die hun onderzoek volledig reproduceerbaar willen maken is het vaak onduidelijk welke concrete stappen moeten worden gevolgd. Onderzoekers die specifieke onderzoeken proberen te reproduceren moeten vaak vaststellen dat de datasets waarnaar in publicaties wordt verwezen vaak ontoegankelijk of onvolledig zijn, en dat de artikelen vaak de details missen die nodig zijn om bepaalde analyses te herhalen. In het geval van ouder onderzoek kan ook verouderde software een rol spelen. Zelfs als de gegevens en de methoden volledig transparant zijn, kan herhaald onderzoek toch resultaten opleveren die afwijken van de oorspronkelijke bevindingen. 

Deze video kan niet worden getoond omdat u geen cookies heeft geaccepteerd.

Verlaat onze website om deze video te bekijken.

Programma

Seminar 1: Rationale and benefits (Donderdag 22 april - 15:00-17:00 CEST)

Dit seminar behandelt de algemene uitgangspunten van Reproducible Research. De sprekers verkennen de wetenschappelijke en maatschappelijke voordelen van Reproducible Research, en de acties die moeten worden ondernomen om de culturele verandering te bespoedigen die nodig is om Reproducible Research mogelijk te maken.

  • Welkom (15 min): Introduction to the lecture series.
  • Presentatie (30 min): Dorothy Bishop, Professor of Developmental Neuropsychology, University of Oxford. Reproducibility: A crisis for scientists or society?
  • Pauze (5 min)
  • Presentatie (30 min): Brian Nosek, co-Founder and Executive Director of the Center for Open Science and Professor in the Department of Psychology at the University of Virginia. Improving reproducibility of research.
  • Paneldiscussie (40 min): Actions need to effectuate a cultural change. Panel discussion focusing on stakeholder analysis: Researchers, Publishers, Funders.

Seminar 2: Theoretical session (Donderdag 29 april - 15:00-17:00 CEST)

Tijdens het tweede seminair wordt reproduceerbaarheid voornamelijk op conceptueel niveau  besproken. Dit seminar richt zich onder meer op de reikwijdte en de grenzen van reproduceerbaarheid. Moet de oproep Reproducible Research vooral gericht zijn op die disciplines die een kwantitatieve of kwalitatieve benadering volgen?

  • Welkom (20 min): Recapitulation of session 1 and introduction of the topic.
  • Presentatie (30 min): Christof Schöch, Professor of Digital Humanites, Trier Center for Digital Humanities. A Typology of Reproducible Research: Concepts, Terms, Examples.
  • Pauze (5 min)
  • Presentatie (30 min): Bart PendersAssociate Professor Metamedica, School for Public Health and Prim Care, Fac. Health, Medicine and Life Sciences, Maastricht University. Scope and limitations of replication research.
  • Pauze (5 min)
  • Presentatie (30 min): Peter Verhaar, Lecturer at Book & Digital Media Studies, Leiden University. Illustration: accountability and reproducibility in the digital humanities.  

Seminar 3: Practical session (Woensdag 12 mei - 15:00-17:00 CEST)     

De sprekers in het derde seminair lichten de concrete stappen toe die onderzoekers kunnen zetten om hun onderzoek reproduceerbaar te maken. Het seminair biedt inzicht in de aspecten van een onderzoeksproject die gedocumenteerd moeten worden en in de manier waarop gegevens beschikbaar moeten worden gesteld.  

  • Welkom (15 min): Recapitulation of session 1 & 2 and introduction of the topic.
  • Presentatie (20 min): Catriona Fennell, Director Journal Services, Elsevier. Role of the publisher.
  • Presentatie (30 min): Vicky Rampin, Reproducibility librarian, New York University. Which actions can researcher take to make their research more reproducible?
  • Pauze (15 min)
  • Presentatie (30 min): Kristina Hettne, Digital Scholarship Librarian, Centre for Digital Scholarship, Leiden University Libraries. Introduction: What does a replication study entail on a concrete level? 
  • Presentatie (30 min): Kristina Hettne. Information on version control, data cleaning (e.g. OpenRefine), documentation in Jupyter Notebook; FAIRification.
  • Pauze (10 min)
  • How to ‘ReproHack’ (30 min): Kristina Hettne. Workshop in which participants are explained how to reproduce the results of a study + discussion of challenges.

Samenwerking Elsevier

In 2019 organiseerden UBL en Elsevier gezamenlijk een symposium over Tools Criticism en een openbare lezing door Scaliger Professor Ted Underwood, Professor of Information Sciences and of English, University of Illinois at Urbana-Champaign: "The Role of the Humanities in an Information Age". Elsevier sponsort ook het UBL Fellowship Program for Digital Scholarship. Dit fellowship biedt onderzoekers de gelegenheid om onderzoek te doen in nauwe samenwerking met het Center for Digital Scholarship (CDS) van de UBL. Het fellowship-programma ondersteunt onderzoekers tijdens een verblijf van twee maanden in Leiden. In het fellowship wordt speciale aandacht besteed aan de manieren waarop onderzoeksresultaten reproduceerbaar en FAIR kunnen worden gemaakt. Zo heeft Paolo Rossini dankzij een Elsevier Fellowship for Digital Scholarship twee maanden bij het CDS onderzoek kunnen doen. Met behulp van digitale tools reconstrueerde hij aan de hand  van brieven de netwerken van René Descartes en zijn volgelingen.

Deze website maakt gebruik van cookies.