Come leggere uno studio scientifico senza essere uno scienziato
Introduzione
"Uno studio ha dimostrato che..." è l'esordio di buona parte dei contenuti su allenamento e nutrizione oggi in circolazione. Ed è una formula che funziona, perché suona autorevole e perché quasi nessuno andrà mai a verificare la fonte primaria.
Non serve avere una formazione scientifica per valutare se un'affermazione stia in piedi o meno. Bastano una manciata di domande mirate e la disponibilità a porsele prima di stravolgere qualsiasi abitudine della propria routine.
Il fatto che esista uno studio non significa affatto che dica ciò che ti stanno raccontando.
Non tutti gli studi hanno lo stesso peso
Questo è il punto di partenza fondamentale, quello che mette in ordine quasi tutto il resto. Dal livello di prova più debole a quello più solido:
Studi su animali o su colture cellulari. Sono preziosi per comprendere i meccanismi biologici, ma del tutto inutili per decidere cosa fare in palestra il martedì. Se il titolo termina con "nei topi", l'applicazione all'essere umano rimane una mera ipotesi speculativa.
Studi osservazionali. Misurano le associazioni statistiche all'interno di una popolazione. Sono eccellenti per formulare nuove domande, ma incapaci di dimostrare un nesso di causa-effetto. Il classico esempio: le persone che assumono integratori godono di migliore salute, ma tendono anche ad allenarsi con maggiore costanza, fumano di meno e si sottopongono più spesso a visite mediche di controllo.
Trial clinici controllati randomizzati (RCT). È qui che cominciano le prove autentiche sulla causalità: chi riceve il trattamento e chi il controllo viene stabilito a sorte. È questo il disegno sperimentale che consente di affermare che "questo intervento produce quel risultato".
Revisioni sistematiche e meta-analisi. Raccolgono e confrontano l'insieme di tutti i trial disponibili sul tema. Rappresentano il livello massimo di evidenza, con una sola avvertenza fondamentale: una meta-analisi di studi metodologicamente scadenti rimane una meta-analisi scadente.
Regola pratica: una meta-analisi recente ha sempre un peso nettamente superiore rispetto al singolo studio appena apparso sul tuo feed, per quanto clamoroso possa sembrare il titolo.
Le sei domande da farsi
1. Su chi è stato condotto lo studio? È la domanda più importante e, al tempo stesso, la più trascurata. Un risultato ottenuto su atleti d'élite di sollevamento pesi difficilmente si applicherà alla tua situazione; e altrettanto vale per uno studio su principianti non allenati: chi non si è mai allenato ottiene progressi con qualsiasi stimolo, rendendo difficile distinguere la reale superiorità di un metodo rispetto a un altro.
2. Quante persone hanno partecipato e per quanto tempo? Dodici partecipanti seguiti per sei settimane costituiscono uno studio piccolo e di breve durata. È un segnale interessante, non una prova definitiva. E nell'allenamento, sei settimane sono pochissime: gran parte dei miglioramenti iniziali è dovuta all'apprendimento neurale e tecnico, non a un reale adattamento muscolare profondo.
3. Che cosa hanno misurato esattamente? Ecco la trappola più frequente. Moltissimi studi misurano un marcatore intermedio anziché l'esito reale che ti interessa davvero.
Il caso più lampante: la sintesi proteica muscolare misurata nelle ore immediatamente successive all'allenamento. Viene continuamente sbandierata per promuovere protocolli miracolosi, ma il lavoro di Mitchell e colleghi ha dimostrato inconfutabilmente che questa risposta acuta non predice affatto l'ipertrofia che la stessa persona svilupperà dopo mesi di allenamento reale. Un protocollo può impennare il marcatore acuto senza modificare minimamente il risultato finale.
4. Quanto è grande l'effetto osservato? "Statisticamente significativo" non significa "grande". Significa semplicemente che il risultato con ogni probabilità non è dovuto al caso. Un metodo può risultare significativamente superiore a un altro, ma quel vantaggio può essere dell'1%, il che nella vita pratica non cambia assolutamente nulla.
5. Rispetto a che cosa? Un protocollo che si dimostra migliore del non fare nulla non ha affatto dimostrato di essere superiore a quello che stai già facendo tu. È il termine di paragone che più spesso viene omesso nei titoli sensazionalistici.
6. Chi ha finanziato la ricerca? Un finanziamento privato non invalida automaticamente i risultati, ma costituisce un'informazione preziosa. Se uno studio su un integratore è sponsorizzato dall'azienda che lo commercializza, attendere una replica indipendente è semplicemente buonsenso.
Due concetti che evitano inutili discussioni
L'assenza di prove non è una prova di assenza. Il fatto che qualcosa non sia ancora stato dimostrato scientificamente può indicare che non funziona, oppure semplicemente che nessuno l'ha ancora studiato con il dovuto rigore. Sono due condizioni completamente diverse e non vanno confuse.
Un singolo studio non cambia quasi mai le carte in tavola. Risultati isolati entrano continuamente in contraddizione reciproca: è così che procede normalmente la scienza, non è un suo fallimento. Ioannidis lo ha spiegato chiaramente in un saggio celebre: una percentuale considerevole dei risultati pubblicati non regge alla prova della replicazione. Per questo motivo l'autorevolezza risiede nel corpo complessivo delle evidenze, non nella novità dell'ultima ora.
Come verificare una notizia in cinque minuti
1. Trova lo studio originale, non l'articolo divulgativo che ne parla. Il titolo della ricerca si trova quasi sempre citato nel testo. 2. Leggi l'abstract completo, non fermarti al titolo. Spesso l'abstract è infinitamente più cauto e misurato di chi lo ha citato sui social. 3. Esamina la metodologia: chi, quanti soggetti, per quale durata, a confronto con quale gruppo di controllo. 4. Verifica se esiste già una meta-analisi su quell'argomento specifico. Se esiste, è quella a fare testo. 5. Chiediti se questo studio cambierebbe davvero una tua decisione. Se la risposta è no, hai già finito.
Errori comuni
Citare il riassunto di un riassunto. Nella catena titolo → post social → articolo web → studio originale si perde una sfumatura di significato a ogni passaggio, quasi sempre a favore dell'iperbole e dell'esagerazione.
Confondere un meccanismo con un risultato pratico. "Ha senso a livello fisiologico" è una bella ipotesi, non un fatto dimostrato. La storia della preparazione atletica è costellata di meccanismi fisiologici elegantissimi che nella pratica non hanno prodotto alcun risultato.
Usare la scienza come un'arma anziché come un criterio di giudizio. Andare a caccia solo dello studio che conferma ciò che già fai è l'esatto opposto dell'informarsi con obiettività.
Liquidare tutto sostenendo che "la scienza si contraddice continuamente". Lo scetticismo assoluto e disfattista è comodo e infruttuoso esattamente quanto la credulità ingenua.
Applicare al proprio caso uno studio condotto su una popolazione completamente diversa. È l'errore in assoluto più diffuso.
Conclusione
Valutare le evidenze scientifiche non richiede competenze da laboratorio: richiede semplicemente di chiedersi su chi è stato fatto lo studio, quanto è durato, cosa è stato misurato, quale fosse l'entità dell'effetto e rispetto a cosa è stato confrontato.
Mettiti alla prova con la prossima affermazione che ti fa dubitare della tua routine: prima di toccare qualsiasi cosa, rintraccia lo studio e rispondi a queste cinque domande. Nella maggior parte dei casi scoprirai che la portata del risultato è molto più ridotta, specifica o provvisoria di quanto ti era stato riferito — e che il tuo programma attuale non aveva alcun bisogno di essere modificato.
Riferimenti bibliografici
- Ioannidis, J. P. A. (2005). Why most published research findings are false. PLoS Medicine, 2(8).
- Mitchell, C. J., et al. (2014). Acute post-exercise myofibrillar protein synthesis is not correlated with resistance training-induced muscle hypertrophy in young men. PLoS ONE, 9(2).
- Greenhalgh, T. (2019). How to Read a Paper: The Basics of Evidence-Based Medicine (6th ed.). Wiley-Blackwell.
- Schoenfeld, B. J., & Aragon, A. A. (2018). A commentary on the effects of protein supplementation. Journal of the International Society of Sports Nutrition, 15.
- Guyatt, G., et al. (2011). GRADE guidelines: A new series of articles in the Journal of Clinical Epidemiology. Journal of Clinical Epidemiology, 64(4).