Kā kļūdaina zinātne palīdzēja pārvērst šokolādi par veselīgu pārtiku
Neliels un provizorisks pētījums tika ierosināts, lai apgalvotu, ka šokolāde cīnās ar Alcheimera slimību.
Tu esi dzirdējis? Tumšā šokolāde darīs visu, sākot no jūsu izziņas uzlabošanas līdz sirds un asinsvadu slimību riska samazināšanai un pat palīdzot zaudēt svaru! Vai tā jums pateiks šokolādes zinātnes hype mašīna.
Pirms vairākiem mēnešiem mums radās jautājums, kā šokolādes konfektes bija nopelnījis tik spēcīgu veselības oreolu . Tāpēc mēs iedziļinājāmies zinātnē, kas slēpjas aiz šiem apgalvojumiem par šokolādi un kakao, lai uzzinātu vairāk.
In an oriģinālā Vox analīze , mēs to atklājām pārtikas uzņēmumi patīk Nestlé, marts , Barijs Kalebo , un Hershey's — viens no pasaules lielākajiem šokolādes ražotājiem — ir ieguldījis miljoniem dolāru zinātniskiem pētījumiem un pētniecības stipendijām, kas atbalsta kakao zinātni. No 100 Marsa sponsorētajiem pētījumiem par kakao, šokolādi un veselību 98 bija secinājumi, kas kaut kādā veidā bija labvēlīgi konfekšu ražotājam.
Tas ir neticami augsts skaitlis. Un tas rada jautājumus par pētījumu kvalitāti, ņemot vērā, ka Marss un citi šokolādes ražotāji var izmantot pozitīvos atklājumus, lai pārdotu savus produktus. Nozares sponsorēti pētījumi ir lielāka iespēja nekā neatkarīgi pētījumi sniegt secinājumus, kas ir labvēlīgi finansētāja produktiem.
Pārskatot pētījumu, mēs atklājām pētījumus, kas bija labi izstrādāti, labi izpildīti un sniedza šķietami ticamus rezultātus. (Tas jo īpaši attiecās uz zinātni par kakao ietekmi uz asinsspiedienu.) Taču daži citi apgalvojumi neattaisnojas, ja rūpīgi aplūko pierādījumus.
Viens pētījums, jo īpaši par kakao, kas novērš kognitīvās funkcijas samazināšanos, pārsteidza mūs jo tas PubMed Commons bija izraisījis nelielu šķelšanos , vietne, kurā pētnieki var komentēt publicētos pētījumus. Vairāki pētnieki veltīja laiku, lai kritizētu visu, sākot no pētījuma dizaina un statistiskās analīzes līdz tam, kā tas tika ziņots žurnālā, kurā tas tika publicēts. Dabas neirozinātne .
Šis Marsa sponsorētais pētījums, kuru vadīja pētnieki no Kolumbijas universitātes, tika publicēts 2014. gadā. Pētnieki vēlējās pārbaudīt, vai kakao piedevu lietošana var uzlabot smadzeņu reģionu, ko sauc par dentate gyrus, kas pasliktinās līdz ar vecumu un ir saistīts ar vecumu. atmiņas zudums. Viņi secināja ka kakao piedevas, jo īpaši tajos esošie mikroelementi, ko sauc par flavanoliem, patiešām var uzlabot vecāku cilvēku izziņu.
Pētījums nenāca no vakuuma. Iepriekšējie pētījumi , jo īpaši tiem, kas koncentrējas uz novecošanās žurkām , ieteiktie flavanoli var novērst kognitīvās funkcijas samazināšanos. Taču, rūpīgāk izpētot, kļuva skaidrs, ka šis konkrētais pētījums bija ļoti mazs un provizorisks un ka tā izstrādē bija vairākas problēmas, kas padarīja tā rezultātus neuzticamus. Tomēr tas neapturēja šokolādes ažiotāžu. Šo rakstu izteica Kolumbijas Universitātes preses birojs un lielie plašsaziņas līdzekļi, lai pierādītu, ka kakao un šokolāde var cīnīties ar Alcheimera slimību.
Galu galā pētījums parāda, kā zinātnieki un plašsaziņas līdzekļi ir izmantojuši stāstījumu, ka šokolāde ir veselīgs ēdiens, pat ja tikai vājākie pierādījumi apstiprina vēlmju apgalvojumu.
Kakao pētījums bija īss, neliels un koncentrējās uz šauriem rezultātiem, kas reālajai pasaulei nav svarīgi
Pirms iedziļināmies tajā, kas to radīja Dabas neirozinātne pētīt aizdomīgu, paskatīsimies, par ko tas bija. Pētnieki nejauši iedalīja 37 cilvēkus vienā no četrām grupām uz trīs mēnešiem:
- Grupa, kas saņēma lielu dienas devu (900 mg) kakao flavanola piedevas, kā arī vienu stundu aerobos vingrinājumus četras reizes nedēļā
- Grupa, kas saņēma tādu pašu lielu kakao flavanola piedevu devu, bet bez vingrinājumiem
- Kontroles grupa, kas saņēma mazu kakao flavanolu devu (10 mg), veicot vienu stundu aerobos vingrinājumus četras reizes nedēļā
- Vēl viena kontroles grupa, kas saņēma zemu kakao flavanola devu, bet bez vingrinājumiem
Tātad būtībā pētījuma dalībnieki vai nu saņēma daudz kakao flavanolu, vai ne, un pievienoja savam dzīvesveidam regulāras fiziskās aktivitātes vai nē.
Pētnieki vēlējās pārbaudīt, vai kakao flavanola piedevas varētu novērst kognitīvās funkcijas samazināšanos smadzeņu zobainā reģionā, kas ir saistīts ar ar vecumu saistītu atmiņas zudumu. Viņi arī vēlējās noskaidrot, vai vingrinājumiem ir kāda ietekme uz atmiņu, jo iepriekšējie pētījumi liecina, ka tā varētu būt.
Pētījumā viņi atklāja, ka vingrinājumi neietekmē smadzeņu darbību, bet kakao flavanoli to ietekmēja. Viņi secināja, ka kakao flavanola patēriņš uzturā uzlaboja [dentate gyrus] funkciju novecojošā cilvēka hipokampu ķēdē. Viņi arī sniedza ārkārtīgi drosmīgus paziņojumus rakstā, pat liekot domāt, ka efekti, ko viņi redzēja grupā ar augstu flavanola saturu, liecina, ka kakao var novērst ar vecumu saistītu atmiņas pasliktināšanos pat par trim desmitgadēm.
Kolumbijas universitātes ziņu telpa izteicās, ka pētījums parāda, ka uztura flavanoli novērš ar vecumu saistītu atmiņas pasliktināšanos. Pēc tam pētījumu pārtvēra plašsaziņas līdzekļi, tostarp Ņujorkas Laiks , kas taurēja šokolāde — ne tikai kakao uztura bagātinātājus — kā atmiņas palīglīdzekļus.
Bet šeit ir lieta: pētījums nekad nav pierādījis, ka kakao piedevas, un jo īpaši ne šokolāde, varētu novērst atmiņas pasliktināšanos. Tas bija pārāk mazs, pārāk šauri fokusēts un pārāk īslaicīgs, lai pastāstītu mums kaut ko svarīgu par īstu atmiņas zudumu novecošanas dēļ. Henrijs Drisdeils , ārsts un līdzstrādnieks Oksfordas Universitātes Uz pierādījumiem balstītas medicīnas centrā.
Lai izsekotu atmiņas pasliktināšanās, galvenie rezultāti, ko pētnieki izmantoja 12 nedēļu periodā, bija fMRI tests, kas pētīja smadzeņu asins tilpuma palielināšanos, kā arī kognitīvo funkciju tests. Modificēts Benton — kas tika izstrādāts Kolumbijā, lai izmērītu zobaino zaru funkciju. Pētnieki, kas apstiprināja testu, atklāja, ka cilvēku veiktspēja ar ModBent pasliktinājās līdz ar vecumu, tāpēc viņiem bija pamats uzskatīt, ka šis tests būs labs marķieris, lai noskaidrotu, vai flavanoli šeit varētu kaut ko mainīt.
Sakot, ka, ja tagad ēdat kakao piedevas, jums pēc trīs mēnešiem uzlabosies atmiņa, nav nozīmes reālajai pasaulei [ar vecumu saistīta atmiņas pasliktināšanās], sacīja Drisdeils, Oxford’s līdzdibinātājs. Salīdzināt Izmēģinājumu projekts, kas pārbauda klīnisko pētījumu kvalitāti.
Ja jūs patiešām vēlaties atbildēt uz šo jautājumu, jums vajadzētu vadīt izmēģinājumu vairākus gadus un jums būtu nepieciešama pētījuma dalībnieku grupa, kas ir lielāka par 37 cilvēkiem. Tā vietā, lai tikai izsekotu pētījuma dalībnieku smadzeņu viļņus MRI aparātā (kas nav kognitīvo spēju mērs) vai izmantotu objektu atpazīšanas uzdevumu (ModBent), lai pārbaudītu atmiņu, jūs arī vēlaties izmērīt rezultātus, kas ir svarīgi. cilvēku dzīvi, piemēram, vai tie, kas lietoja kakao, varēja atcerēties, ko viņi darīja tajā rītā, vai ka viņiem nākamnedēļ bija vizīte pie ārsta labāk nekā cilvēki, kuri nelietoja kakao, piebilda Drisdeils.
Šis pētījums tikai parādīja, ka uztura bagātinātāji, šķiet, uzlabo smadzeņu darbību vairāku nedēļu laikā, un tikai saskaņā ar ļoti specifisku (un ne pārāk plaši izmantotu) kognitīvās funkcijas testu. Tas nebūt nav derīgs pierādījums tam, ka kakao ir atmiņas uzlabotājs.
Pētnieki darīja citas lietas, kas padarīja rezultātus neuzticamus
Drysdale un citi pētnieki, kuri nebija iesaistīti šajā pētījumā, arī to apšaubīja daudz gudrāku iemeslu dēļ. Ir problēmas ar to, kā tika ziņots par pētījumu, kas padarīja tā rezultātus mazāk ticamus un vēl mazāk ažiotāžu cienīgus.
Pirmkārt, publicētā pētījuma versija atšķiras no tā, ko pētnieki sākotnēji teica, ka viņi bija iecerējuši veikt šo izmēģinājumu.
Lai saprastu, kāpēc tas ir svarīgi, atkāpsimies uz brīdi.
Pirms pētnieki uzsāk klīniskos pētījumus, viņiem publiskā datubāzē ir jānosauc (vai iepriekš jānorāda), kuri veselības rezultāti viņus visvairāk interesē, piemēram, ClinicalTrials.gov .
Antidepresantu gadījumā tie var ietvert cilvēku ziņojumus par viņu garastāvokli vai to, kā zāles ietekmē miegu, seksuālo vēlmi un pat domas par pašnāvību. Pēc tam pētnieki sagrupē rezultātus primārajās un sekundārajās kategorijās — primārie rezultāti ir tie, kas, viņuprāt, ir vissvarīgākie, un precīzi apraksta, kā un kad viņi gatavojas izmērīt šīs lietas.
Pēc tam zinātniekiem ir jāturas pie šī plāna, veicot izmēģinājumu, un ziņo par saviem atklājumiem žurnālā. Ja viņi novirzās no sava plāna, viņiem par to ir jābūt atklātam un jāpaskaidro, kāpēc viņi to izdarīja pēdējā žurnāla rakstā.
Ideja ir tāda, ka pētnieki ne tikai mainīs savus plānus vai publicēs pozitīvus vai labvēlīgākus rezultātus, kas atklājas pētījuma laikā, vienlaikus ignorējot vai slēpjot svarīgus rezultātus, kas neīstenojas tā, kā viņi cerēja. (Tā ir viltīga prakse, ko sauc par rezultātu maiņu, un tā ir liela problēma zinātnē.) Veicot šīs darbības, palielinās arī iespēja, ka pētnieku ziņotie atklājumi ir patiesi, nevis pētījuma plāna pielāgošanas rezultāts, lai iegūtu plašākus secinājumus.
Bet šajā gadījumā tas nenotika kakao pētījums .
ClinicalTrials.gov ir ērta versiju kontroles funkcija kas ļauj skatīt visas izmaiņas, kas laika gaitā veiktas klīnisko pētījumu reģistrā. Tas parāda, ka šī kakao pētījuma pētnieki laika gaitā mainīja savus rezultātus un arī nevarēja tos skaidri iepriekš norādīt pirms izmēģinājuma uzsākšanas. Pēc tam viņi neziņoja par izmaiņām, ko viņi veica savā galīgajā pētījumā, kas tika publicēts prestižajā žurnālā Dabas neirozinātne .
Piemēram, ja paskatās uz agrākā versija viņu ClinicalTrials.gov 2010. gada ziņojumā pētnieki norādīja, ka viņus interesējošais primārais rezultāts bija fMRI tests, kas mēra smadzeņu asins tilpumu. Sekundārais rezultāts, ko viņi meklēja, bija neirokognitīvā funkcija, taču viņi neteica, kuru testu viņi izmantos neirokognitīvās funkcijas noteikšanai. Publicētajā izmēģinājumā ModBent parādījās kā otrs primārais rezultāts kopā ar fMRI.
Ja jūs iepriekš nenorādījāt savu iznākuma mērīšanas metodi - šajā gadījumā 'neirokognitīvo funkciju' -, jūs varat brīvi apzināti vai neapzināti izvēlēties no vairākiem iespējamiem rezultātiem, sacīja Drisdeils. Pēc tam varat izvēlēties rezultātu, kas padara jūsu šokolādi labi izskatīgu. Tas nenozīmē, ka autori vienmēr to darīs ar neskaidri iepriekš noteiktiem rezultātiem, taču iespēja pastāv. Šajā gadījumā pētnieki izvēlējās ModBent uzdevumu kā primāro rezultātu (papildus fMRI).
Es jautāju pētījuma autoriem, kāpēc viņiem neizdevās pilnībā iepriekš precizēt savus rezultātus un kāpēc viņi ziņojuma galīgajā versijā neziņoja par visām sākotnējā plānā veiktajām izmaiņām, kā viņiem vajadzētu darīt. Viņi teica, ka viņi ir jauni, lai ievadītu klīnisko pētījumu datus reģistros, un ka viņi neapzinās, ka viņiem ir jādeklarē izmaiņas, ko viņi ir veikuši pētījuma plānā. Neatkarīgi no iemesla, šīs kļūdas ziņošanā, visticamāk, padarīs to rezultātus mazāk ticamus, sacīja Drisdeils.
Ja paskatās uz viņu klīnisko pētījumu reģistra jaunāko versiju, tā tika publicēta 2015. gada janvārī, trīs mēnešus. pēc viņi publicēja savu Dabas neirozinātne rakstu. Tāpēc viņi atgriezās pēc raksta publicēšanas Daba un mainīja savu klīnisko pētījumu reģistru. Izmēģinājuma ziņojumā tas nav minēts, Drysdale piebilda.
Lai būtu skaidrs, šis kakao pētījums nav unikāls. Ažiotāža pētniecībā pieaug, un rezultātu maiņa pieaug kopīgs — kā izplatīta nozares sponsorētajos pētījumos, tāpat kā neatkarīgos akadēmiskajos pētījumos . Taču dokumentā parādīts, kā apzināti vai neapzināti pētījumus var pielāgot un pārspīlēt tā, lai tie varētu radīt maldinošus secinājumus.
Lielākās bažas rada tas, ka cilvēki cenšas labāk pārdot pašu pētījumu, nevis tikai pateikt, kāda ir tieša atbilde, sacīja Toronto Universitātes uztura pētnieks Ričards Bazinets. Šis pētījums tikai parādīja, ka trīs mēnešu laikā nelielā grupā saskaņā ar ļoti šauru testu, kas aptver ļoti specifisku smadzeņu reģionu, kakao papildina izziņu. Tas kļuva par šokolādi, kas cīnās ar atmiņas pasliktināšanos — ziņu, ko Marss noteikti novērtēja.
