Mennyire megbízhatóak a tudományos következtetések?
A társadalom- és viselkedéstudományos kutatások eredményei gyakran szubjektívnek és vitathatónak tűnnek. Ennek az egyik oka, hogy egy kutatás során sok döntési pont adódik: hogyan tisztítják az adatokat, miként definiálják a változókat, milyen statisztikai modellt vagy szoftvert használnak, és milyen keretben értelmezik az eredményeket. Ezek együtt adják a végső következtetéseket.
Ezt a jelenséget vizsgálta egy nagyszabású nemzetközi együttműködés Aczél Balázs (ELTE) és Szászi Barnabás (Corvinus Egyetem) vezetésével. A kutatásban 457 független elemző 100, véletlenszerűen kiválasztott, korábban publikált tanulmány adatait elemezte újra, összesen 504 módon. Az elemzők ugyanazt az adatállományt és kutatási kérdést kapták meg, mint amivel az eredeti tanulmány dolgozott, de teljes szabadságuk volt abban, hogyan végzik el az elemzést.
Az eredmények nagyon különbözőek lettek,
bár az újraelemzések többsége nagy vonalakban megerősítette az eredeti tanulmányok fő állításait. A hatásméretek, a statisztikai becslések és a bizonytalanság mértéke ugyanakkor gyakran érdemben eltért. Az eseteknek mindössze körülbelül egyharmadában jutott minden elemző pontosan ugyanarra a következtetésre, mint az eredeti szerzők.
„A tapasztalt, statisztikában jártas kutatók ugyanolyan gyakran jutottak eltérő eredményekre, mint mások. Ugyanakkor a megfigyeléses vizsgálatok kevésbé bizonyultak robusztusnak, mint a kísérleti tanulmányok, ami arra utal, hogy a komplexebb adatstruktúrák nagyobb elemzési szabadságot — és ezzel nagyobb bizonytalanságot — engednek meg”.
A szerzők hangsúlyozzák: eredményeik nem a korábbi kutatások hitelességét kérdőjelezik meg. Épp ellenkezőleg. Arra hívják fel a figyelmet, hogy egyetlen elemzés bemutatása gyakran nem tükrözi a valós empirikus bizonytalanságot, és az elemzési variabilitás figyelmen kívül hagyása indokolatlan magabiztossághoz vezethet.
A tanulmány ezért a több elemzőt bevonó és a „multiverse” típusú elemzések szélesebb körű alkalmazását javasolja, különösen a tudományos vagy társadalmi szempontból kiemelten fontos kérdések esetében. Ezek a megközelítések nem egyetlen „igaz” választ keresnek, hanem láthatóvá teszik, mennyire stabilak — vagy éppen törékenyek — a tudományos következtetések.
Köszönjük, ha megosztod ezt a cikket! Hozzászólásokhoz gördülj a kapcsolódók alá! | ITT KÉRJ INGYENES HÍRLEVELET ✉️ | Forrás: MTI | Borítókép: Pexels
Kedves olvasó,
lépj be a Klubba ITT, hogy elérhess minden támogatói tartalmat! Alkalmi támogatásra Paypalon keresztül van lehetőség (kattints a kis gombra!).
Ha másként szeretnéd támogatni a Cenwebet és a rezervátumot, akkor keress minket mailben a centauri16@gmail.com címen. Segítségedet előre is köszönjük!
még több tudomány
