Nieuws en agenda

De Tilburg ‘Truth Squad’ in Science

Het prestigieuze wetenschappelijk tijdschrift Science besteedt deze week in haar special issue over meta-research ruim aandacht aan de onderzoeksgroep rond de Tilburgse methodologen Jelte Wicherts en Marcel van Assen. Onder de kop ‘The Truth Squad’ wordt de hele Tilburgse meta-research groep, onderdeel van het departement Methodology & Statistics van TSB, in het zonnetje gezet. Wat doen ze, waarom, en hoe?

Afgelopen jaar vielen drie promovendi uit de ‘Squad’ reeds op met hun meta-bevindingen: Michèle Nuijten, Robbie van Aert en Paulette Flore. Onderzoek over onderzoek. De ‘Truth Squad’ bestaat inmiddels uit een dozijn medewerkers.

Statcheck

Zo werd onder meer een algoritme, genaamd Statcheck, ontwikkeld om mogelijke statistische onvolkomenheden in psychologie-onderzoek te ontdekken. Statcheck werd uitgevoerd op tienduizenden papers waarna de verontrustende resultaten op PubPeer werden geplaatst, een website waarop wetenschappelijke artikelen worden besproken. Die openbaring viel niet overal in goede aarde.

Misstanden

Hoogleraar Jelte Wicherts startte de groep en vroeg zich af waarom slimme onderzoekers, zoals bijvoorbeeld Stapel, domme dingen doen met statistiek. Meta-researchers onderzoeken hoe wetenschappers opereren en hoe ze mogelijk ontsporen. Wicherts zag dingen in publicaties die niet door de methodologische beugel konden. Hij nam zich voor om die wetenschappelijke misstanden te bestuderen, aan te kaarten en uit de weg te ruimen.

Robuust

Het Tilburgse meta-team heeft dan ook als missie om de wetenschap te verbeteren, verder te brengen. Door problemen kritisch onder de loep te nemen probeert men wetenschappers te helpen robuuster onderzoek uit te voeren. Dankzij een subsidie van € 2 miljoen van de European Research Council (ERC) bouwt de groep software die onderzoekers kan helpen data te analyseren met minder kans op vooringenomenheid.

Meer lezen

  • Erik Stokstad: The Truth Squad, in: Science, 21 september 2018
  • Tilburg University Meta-researchgroep
  • Jop de Vrieze: Meta-analyses were supposed to end scientific debates. Often, they only cause more controversy, in: Science, 18 september 2018
  • Robbie van Aert ontwerpt met meta-analyse nieuwe methoden om groeiende publicatieberg te analyseren, persbericht Tilburg U (cum laude dissertatie)
  • Michèle Nuijten: How to improve psychological science? PhD Defence 
  • Michèle Nuijten: Crisis in de psychologie: statistische inconsistenties, te kleine steekproeven en overschatte effecten, Persbericht n.a.v. proefschrift
  • Psychologisch onderzoek kan betrouwbaarder, interview met Nuijten in Univers
  • Grants and Awards Department Methodology and Statistics