Bristen i vetenskapen: Bara hälften av studierna kunde återskapas
Att forskningsresultat ska gå att återskapa är en grundprincip i vetenskapen. Ändå visar en ny omfattande genomgång att verkligheten inte motsvarar kraven.
I en studie publicerad i Nature har forskare analyserat 600 artiklar inom samhälls- och beteendevetenskap från åren 2009–2018. Resultatet visar att bara drygt hälften av studierna – 53,6 procent – kunde exakt reproduceras när samma analys gjordes på samma data.
När forskarna tillät mindre avvikelser steg andelen till 73,5 procent. Men långt ifrån alla studier kunde ens testas. Endast 24 procent av artiklarna hade tillgängliga bakomliggande data, vilket kraftigt begränsar möjligheten att kontrollera resultaten.
Ökar osäkerheten
Skillnaderna mellan ämnen är också stora. Statsvetenskap och nationalekonomi har en högre grad av både datadelning och reproducerbarhet, medan exempelvis pedagogisk forskning ligger betydligt lägre. En viktig förklaring tycks vara de akademiska tidskrifternas krav: när data och kod måste delas ökar både transparensen och därmed möjligheten att återskapa resultaten.
När både data och analyskod fanns tillgängliga kunde över 90 procent av resultaten reproduceras, åtminstone ungefärligt. När forskare i stället tvingades återskapa analyser från grunden sjönk andelen kraftigt.
Forskarna betonar att bristande reproducerbarhet inte nödvändigtvis betyder att resultaten är fel. Men osäkerheten ökar och mer öppenhet, tydligare dokumentation och striktare krav från tidskrifter kan stärka tilliten till forskningen. I dag är det långt ifrån självklart att samma data ger samma svar.
Följ taggar
