(Ez az írás nem egy konkrét kutatás vagy módszer értékeléséről szól, hanem arról, hogy milyen kérdéseket érdemes feltennünk, amikor tudományosnak hangzó állításokkal találkozunk.)

Az utóbbi időben egyre több olyan bejegyzéssel, előadással és módszerbemutatással találkozom, amely tudományosnak ható kifejezésekkel és százalékos eredményekkel próbál meggyőző erőt adni egy-egy állításnak. Idegrendszeri érettség, reflexintegráció, validált módszer, mérhető javulás… Ezek a szavak önmagukban is komolyságot sugallnak, ezért az olvasó könnyen érezheti úgy, hogy itt már bizonyított összefüggésekről van szó.

Közben sokszor éppen azok az alapvető információk hiányoznak, amelyek nélkül egy ilyen eredményt szakmailag egyáltalán értelmezni lehetne. Nem derül ki pontosan, mit mértek, milyen eszközzel, mit fejez ki a közölt százalék, hogyan választották ki a résztvevőket, milyen más körülmények hathattak az eredményekre, és hogy a bemutatott adatokból egyáltalán milyen következtetések vonhatók le.

Ez azért különösen problémás, mert a tudomány nyelvének használata könnyen kelti a tudományos bizonyítottság látszatát. Egy szakkifejezés, egy grafikon vagy egy külföldi folyóiratban megjelent cikk önmagában még nem mutatja meg, hogy az adott állítás mennyire megalapozott, és milyen következtetések vonhatók le belőle.

Az ilyen leegyszerűsítő üzenetek nagyon gyorsan utat találnak a közbeszédbe, és rövid időn belül már nem feltételezésként, hanem tényként ismétlődnek tovább: „az ADHD-t a telefon okozza”, „az autizmus a sok képernyőtől van”, vagy „csak többet kellene mozognia, és rendbe jönne az idegrendszere”.

Ezek az állítások tudományosan pontatlanok, és társadalmi szinten is komoly károkat okozhatnak.

Ha egy veleszületett neurofejlődési állapotot olyan tényezőkkel magyarázunk, mint a képernyőhasználat vagy a mozgáshiány, akarva-akaratlanul azt az üzenetet közvetítjük a szülők felé, hogy ők rontottak el valamit: ha másként neveltek volna, kevesebb mesét engedtek volna, vagy többet vitték volna játszótérre a gyermeküket, mindez elkerülhető lett volna.

Ez igazságtalan, és a jelenlegi tudományos bizonyítékok sem támasztják alá. Közben háttérbe szorul mindaz, ami valóban segíthet: a korai felismerés, a megfelelő támogatás, az alkalmazkodó környezet, az elfogadás és a családok tehermentesítése.

De akkor honnan tudhatjuk, hogy egy állítás valóban tudományosan megalapozott?

Minden kutatás egy jól megfogalmazott kutatási kérdéssel kezdődik. Mit szeretnénk megtudni? Milyen feltételezésből indulunk ki? Mi az, amit valóban vizsgálni szeretnénk? Ezt követi a kutatási terv kidolgozása. Ki vesz részt a vizsgálatban? Hány résztvevőre van szükség? Hogyan választjuk ki őket? Milyen szempontok alapján kerülhetnek be vagy maradhatnak ki? Hogyan kezeljük azokat a tényezőket, amelyek befolyásolhatják az eredményeket?

Ha embereken végzett kutatásról van szó, a munka még itt sem kezdődhet el. Szükség lehet etikai engedélyre, intézményi együttműködésekre, a résztvevők vagy törvényes képviselőik tájékozott beleegyezésére, adatkezelési szabályok kidolgozására és számos egyéb előkészítő lépésre. Ezután következik a mérőeszköz kérdése. Valóban azt méri, amit állítunk róla? Megbízható? Érvényes? Alkalmas arra, hogy a kapott eredményekből tudományos következtetéseket vonjunk le?

Csak ezután kezdődhet maga az adatfelvétel.

De az adatok összegyűjtése önmagában még nem jelent eredményt. Ellenőrizni kell azok minőségét, el kell végezni a megfelelő statisztikai elemzéseket, majd az eredményeket a kutatás módszertanának és korlátainak figyelembevételével kell értelmezni. Csak ezután lehet felelősen következtetéseket levonni, és világosan elkülöníteni azt, amit a vizsgálat valóban alátámaszt attól, amit már nem. Az is fontos kérdés, hogy az eredményekből egyáltalán milyen állítások következnek. Egy vizsgálat kimutathat együttjárást két jelenség között, de ez még nem jelenti azt, hogy az egyik okozza a másikat.

Az együttjárás még nem bizonyít ok-okozati kapcsolatot

Két jelenség változhat egyszerre úgy is, hogy egyik sem okozza közvetlenül a másikat. Ha egy gyermekcsoportnál egy adott időszakban csökken a képernyőhasználat, miközben több lesz a mozgás, a közös családi program, a személyes figyelem, a strukturált napirend és valamilyen fejlesztő foglalkozás is elindul, akkor egy később mért változásból nem lehet egyszerűen kiválasztani egyetlen elemet, és azt mondani, hogy ez okozta az eredményt.

Az is számít, hogy kik kerültek a vizsgálatba, milyen volt a családi hátterük, milyen támogatást kaptak korábban, hogyan változott közben a pedagógiai környezetük, és ugyanazzal a módszerrel, ugyanazok a személyek végezték-e a méréseket. Egy kisebb csoportnál már néhány eltérő eredmény is látványosan módosíthatja az átlagot vagy a százalékos értéket.

Oksági következtetéshez ezért jóval több kell annál, hogy két adat egymás mellett változik. Szükség van megfelelő összehasonlításra, lehetőleg kontrollcsoportra, előre rögzített mérési tervre, egységes feltételekre és olyan elemzésre, amely számol a többi lehetséges magyarázattal is.

Ez különösen fontos akkor, amikor összetett emberi működésekről beszélünk. A figyelem, a viselkedésszabályozás, a mozgás, az alvás, a társas kapcsolatok és az idegrendszeri fejlődés egymással is kapcsolatban állnak. Egyetlen beavatkozás hatását ezek közül elkülöníteni komoly kutatásmódszertani feladat.

És még akkor is óvatosan kell fogalmazni, ha a vizsgálat valóban változást mutat. Abból, hogy egy program résztvevőinél javult egy mérési eredmény, még nem következik automatikusan, hogy maga a program okozta a változást, hogy minden gyermeknél hasonló eredmény várható, vagy hogy a módszer más környezetben is ugyanígy működik.

Mit bizonyít egy tudományos publikáció?

Sokan úgy gondolják, hogy ha egy állítás mögött ott van egy angol nyelvű tudományos cikk, akkor az már bizonyítottnak tekinthető. A valóság ennél jóval árnyaltabb.

A tudományos publikációk között ugyanis óriási különbségek vannak. Egy cikk lehet egy érdekes ötlet vagy elmélet bemutatása, egy-két eset részletes leírása, egy kisebb pilotvizsgálat, egy új mérőeszköz ismertetése, de lehet egy nagyszabású, kontrollcsoporttal végzett kutatás vagy akár több száz vizsgálat eredményeit összegző metaanalízis is.

Ezeknek a bizonyító ereje messze nem ugyanaz. Ráadásul a kutatók maguk is nagyon óvatosan fogalmaznak. Egy jól megírt tudományos cikk szinte mindig kitér arra, hogy mik a vizsgálat korlátai, milyen tényezők befolyásolhatták az eredményeket, és milyen további kutatásokra lenne szükség.

A tudományban ritkán hangzik el az, hogy „bebizonyítottuk”. Sokkal gyakrabban olvashatjuk azt, hogy „eredményeink arra utalnak”, „összefüggést találtunk”, vagy „további vizsgálatok szükségesek”.

Éppen ezért érdemes óvatosnak lenni akkor is, amikor egy tudományos publikációra hivatkozva nagyon határozott kijelentések jelennek meg a közösségi médiában vagy a sajtóban. Nem azért, mert a kutatás értéktelen lenne, hanem mert a nyilvánosságban megfogalmazott üzenet sokszor jóval messzebbre megy annál, mint amit maga a vizsgálat valójában alátámaszt.

Mindez nem azt jelenti, hogy minden új módszer rossz, vagy hogy minden kutatási eredményben kételkednünk kell. Éppen ellenkezőleg. A tudomány attól fejlődik, hogy új kérdéseket tesz fel, új hipotéziseket vizsgál, és folyamatosan pontosítja a korábbi ismereteinket. A probléma akkor kezdődik, amikor egy előzetes eredményből, egy kisebb vizsgálatból vagy egy tudományos hipotézisből a nyilvánosság előtt már kész tény lesz. Amikor az óvatos kutatói megfogalmazásból határozott ígéret, az összefüggésből ok-okozati kapcsolat, a lehetőségből pedig bizonyosság válik.

Éppen ezért érdemes időnként megállni, és feltenni néhány egyszerű kérdést: Mit mértek? Hogyan mérték? Valóban ezt bizonyítja a kutatás? És legalább ilyen fontos: mit nem bizonyít?

A tudomány válaszai ritkán feketék vagy fehérek. Inkább valószínűségekről, bizonyítékokról és azok korlátairól szólnak. Talán ezért is érdemes óvatosnak lennünk azokkal az állításokkal, amelyek mindenre egyszerű és egyértelmű választ ígérnek. Mert a tudomány egyik legfontosabb ismérve éppen az, hogy ismeri a saját határait.