Tudomány

Hogyan Működik a Reprodukálhatósági Válság – és Miért Rázza Meg a Tudományt

A társadalomtudományi eredmények fele nem reprodukálható független kutatók által, ami mély strukturális problémákat tár fel a tanulmányok publikálásának, finanszírozásának és ösztönzésének módjában – és reformokat ösztönöz, amelyek átalakíthatják a tudományos tevékenységet.

R
Redakcia
4 perc olvasás
Megosztás
Hogyan Működik a Reprodukálhatósági Válság – és Miért Rázza Meg a Tudományt

A Címlapok Mögötti Probléma

A tudománynak önjavítónak kellene lennie. Egy kutató publikál egy eredményt, más tudósok megismétlik a kísérletet, és az eredmény vagy helytálló, vagy nem. A gyakorlatban azonban ez a visszacsatolási hurok évek óta megszakadt. A reprodukálhatósági válság – más néven megismételhetőségi válság – arra a széles körben elterjedt képtelenségre utal, hogy független kutatók reprodukálják a publikált tudományos eredményeket. Ez érinti a pszichológiát, az orvostudományt, a közgazdaságtant és szinte minden empirikus tudományágat.

A mérték elképesztő. Az Open Science Collaboration 2015-ös mérföldkőnek számító erőfeszítése 100 publikált pszichológiai tanulmányt próbált meg reprodukálni. Bár az eredeti tanulmányok 97%-a statisztikailag szignifikáns eredményekről számolt be, a reprodukálás során csak 36% bizonyult helytállónak. A rákkutatásban az Amgen gyógyszeripari cég tudósai 53 mérföldkőnek számító preklinikai tanulmányt próbáltak megerősíteni, és mindössze hat esetben jártak sikerrel – ez 89%-os kudarcrátát jelent.

Egy Hatalmas Új Teszt

Az eddigi legátfogóbb erőfeszítés, a SCORE projekt (Systematizing Confidence in Open Research and Evidence), 2026 áprilisában jelent meg a Nature folyóiratban. Az Egyesült Államok Védelmi Minisztériumának Fejlett Kutatási Projektek Ügynöksége (DARPA) által közel 8 millió dollárral finanszírozott hétéves program 865 kutatót vont be mintegy 3900, 2009 és 2018 között 62 folyóiratban megjelent társadalomtudományi tanulmány elemzésébe, amelyek a közgazdaságtan, a pszichológia, a politikatudomány, az oktatás és más területeket ölelték fel.

Az eredmények kijózanítóak voltak. A közvetlen reprodukálásnak alávetett 274 állítás közül csak 55,1% hozott statisztikailag szignifikáns eredményeket az eredeti irányban. A tanulmányok szintjén mindössze 49,3% reprodukálódott sikeresen. A reprodukálási arányok mérsékelten változtak a tudományágak között – egyes területeken 42,5%-tól más területeken 63,1%-ig –, de egyetlen tudományág sem maradt ki. Ami még rosszabb, még azok a tanulmányok is, amelyek reprodukálódtak, az eredetileg közölt értékeknek kevesebb mint a felét mutatták.

Miért Bukik Meg Oly Sok Tanulmány

Számos strukturális erő hajtja a válságot:

  • Publikációs torzítás. A folyóiratok történelmileg a regényes, pozitív eredményeket részesítették előnyben. Egy tanulmány, amely drámai hatást talál, megjelenik; egy tanulmány, amely nem talál semmit, a „fiókban” sorvad el. Ez egy olyan irodalmat hoz létre, amely a feltűnő, de törékeny eredmények felé torzít.
  • Alacsony statisztikai erő. Sok tanulmány túl kicsi mintaméretet használ a valós hatások megbízható kimutatásához. A becslések szerint a pszichológiában az átlagos statisztikai erő 35% körül mozog, ami azt jelenti, hogy a legtöbb tanulmány már a kezdetektől fogva alultervezett.
  • A kutatók szabadságfoka. A hipotézisalkotástól az adatelemzésig minden szakaszban a tudósok olyan döntésekkel szembesülnek, amelyeket a legjobb gyakorlatok nem korlátoznak teljes mértékben. A rugalmas döntések arról, hogy mely adatokat zárják ki, mely változókat teszteljék, és mikor hagyják abba az adatgyűjtést, növelhetik a téves pozitív arányokat, néha akaratlanul is.
  • Publikálj vagy pusztulj ösztönzők. A karrier előrelépése a magas impakt faktorú folyóiratokban való gyakori publikálástól függ, ami a gyorsaságot és az újdonságot jutalmazza a szigor és a reprodukálás helyett.

Mi Valójában Jósolja Meg a Reprodukálhatóságot

A SCORE projekt feltárt egy olyan tényezőt, amely erősen korrelált azzal, hogy egy tanulmány reprodukálható-e: az adatok elérhetősége. A mintában szereplő tanulmányoknak csak körülbelül egyharmada tette könnyen hozzáférhetővé a mögöttes adatokat és számítógépes kódot. Azok, amelyek ezt megtették, szignifikánsan nagyobb valószínűséggel reprodukálódtak. A transzparencia tehát a megbízhatóság legjobb előrejelzője.

Gyökeret Verő Reformok

A válság már elkezdte átalakítani a tudományos gyakorlatot. A regisztrált jelentések – egy olyan publikációs formátum, amelyben a kutatók a módszereiket és elemzési terveiket a mielőtt adatgyűjtés megkezdése előtt szakmai lektorálásra nyújtják be – ma már több száz folyóiratban elérhetők. Mivel a publikálás az eredménytől függetlenül garantált, ez kiküszöböli a pozitív eredmények hajszolásának ösztönzőjét.

Az nyílt tudományos gyakorlatok is terjednek. A nagy finanszírozók, mint például az Egyesült Államok Nemzeti Egészségügyi Intézete és az Európai Kutatási Tanács, egyre inkább megkövetelik az adatok megosztását. Az olyan eszközök, mint a StatCheck, automatikusan átvizsgálják a tanulmányokat a statisztikai következetlenségek szempontjából. A helyi közösségek, köztük a Center for Open Science, képzést és infrastruktúrát biztosítanak az átlátható kutatáshoz.

Ezek a reformok nem jelentenek csodaszert. Az ösztönző struktúrák megváltoztatása – hogyan értékelik a felvételi bizottságok a jelölteket, hogyan ítélik oda a támogatásokat – továbbra is lassú. De az irány egyértelmű: a tudomány megtanulja ellenőrizni a saját munkáját, egyszerre egy reprodukálással.

Ez a cikk más nyelveken is elérhető:

Kapcsolódó cikkek