Bias di Pubblicazione — la metà degli studi che non leggerai mai
Su un insieme di studi registrati presso l'autorità regolatoria americana, la letteratura pubblicata mostrava il 91% di studi positivi. L'insieme completo ne conteneva il 51%. Non erano studi diversi: erano gli stessi, meno quelli che non erano stati pubblicati.
Questo non è un argomento contro la ricerca ma una descrizione di un suo problema noto, documentato dalla ricerca stessa. Le contromisure esistono e sono descritte più avanti: la difficoltà è che funzionano solo in parte.
Simula la distorsione
I due numeri che contano sono le probabilità di pubblicazione: se sono uguali, non c'è distorsione.
Risultato
| Su 100 studi condotti | Quanti |
|---|
Il calcolo è avvenuto nel tuo browser. Nessuno di questi valori è stato inviato o salvato.
Il caso che mostra la meccanica
Uno studio del 2008 ha confrontato due insiemi: gli studi su una classe di farmaci registrati presso l'autorità regolatoria americana, e quelli effettivamente pubblicati nella letteratura scientifica.
| Insieme | Quota di studi positivi |
|---|---|
| Letteratura pubblicata | 91% |
| Insieme completo registrato | 51% |
Il 31% degli studi registrati non era mai stato pubblicato. E la selezione non era casuale: degli studi con risultati positivi praticamente tutti erano stati pubblicati, mentre di quelli con risultati negativi la maggior parte no.
Il punto essenziale è che nessuno dei due numeri è falso. Chi leggeva la letteratura pubblicata vedeva un quadro accurato di quello che era stato pubblicato — e un quadro sbagliato di quello che era stato scoperto.
Quanto è grande il problema
La stima più completa disponibile viene da una revisione che ha messo insieme 204 studi sul fenomeno, riguardanti la pubblicazione o mancata pubblicazione dei risultati di 165.135 studi clinici.
- Il 47% dei risultati non viene reso pubblico.
- Limitando l'analisi agli studi condotti meglio, la probabilità di pubblicazione saliva leggermente, al 57% — cioè poco più della metà.
Le singole stime variano molto secondo il campo e il periodo: le ricerche disponibili riportano che tra il 23% e il 68% degli studi registrati resta non pubblicato anche diversi anni dopo la conclusione.
Il fattore che quantifica la selezione: gli studi con risultati statisticamente significativi hanno una probabilità di essere pubblicati pari a 2,8 volte quella degli altri, con intervallo di confidenza tra 2,2 e 3,5.
Perché non basta fare una metanalisi
La risposta naturale a un singolo studio poco affidabile è cercarne una sintesi. Contro questo problema, però, la sintesi non protegge.
Una revisione sistematica raccoglie tutto ciò che è stato pubblicato. Se la letteratura è già selezionata, sommarla con più rigore restituisce una stima più precisa dello stesso quadro distorto: quando vengono pubblicati solo risultati positivi, le revisioni e le metanalisi gonfiano l'apparente efficacia degli interventi.
È la stessa struttura del problema visto altrove in questa sezione: aggiungere dati non corregge una selezione, la rende più solida.
Le contromisure, e i loro limiti
Il problema è noto da decenni e sono stati costruiti strumenti per affrontarlo. Vale la pena conoscerli, insieme al motivo per cui non hanno chiuso la questione.
| Anno | Misura |
|---|---|
| 2005 | Il comitato internazionale degli editori di riviste mediche adotta la politica di pubblicare solo studi registrati preventivamente in un registro pubblico |
| 2007 | Una legge statunitense estende l'obbligo di registrazione agli studi che ricevono fondi federali |
| 2013 | Nasce un'iniziativa globale che chiede la registrazione di tutti gli studi e la pubblicazione dei risultati entro un anno dalla conclusione |
Negli Stati Uniti e nell'Unione Europea esiste oggi l'obbligo di riportare i risultati nei registri entro dodici mesi dalla conclusione. Ma le fonti sono esplicite sui risultati: ci sono prove crescenti che queste leggi e linee guida siano aggirate da scappatoie e da una scarsa conformità.
Un dato sulla conformità: in un'analisi di 738 studi soggetti all'obbligo di comunicazione, solo 163 — il 22% — aveva riportato i risultati. E i ricercatori non sono comunque necessariamente obbligati a rendere pubblici i risultati degli studi che registrano.
Chi ha partecipato
C'è una dimensione di questo problema che non è statistica. Le persone che partecipano a uno studio clinico lo fanno da volontarie, accettando un'incertezza in cambio della prospettiva che quello che si scoprirà sia utile a qualcuno.
La formulazione usata nella letteratura è netta: la mancata pubblicazione non incide soltanto sulla pianificazione e sull'erogazione dell'assistenza sanitaria, ma è anche un venir meno all'obbligo verso i partecipanti che si sono offerti volontari.
Un dato dà la misura concreta: in uno studio sugli studi pediatrici in violazione degli obblighi di comunicazione, i bambini che avevano partecipato agli 81 studi esaminati erano 5.803. Il 66,7% di quegli studi è rimasto completamente non pubblicato.
Che cosa questo strumento non fa
- Non stima la distorsione di un campo specifico: simula con i parametri che inserisci.
- Non permette di correggere una stima pubblicata, cosa che richiede metodi statistici dedicati.
- Non dice che la letteratura sia inaffidabile: dice che è selezionata, e che la selezione ha una direzione nota.
- Non riguarda la qualità dei singoli studi, che è un problema distinto.
- Non copre le altre forme di distorsione nella rendicontazione, come la selezione degli esiti riportati all'interno di uno studio pubblicato.
Domande frequenti
Come possono 91% e 51% riferirsi agli stessi studi?
Perché il primo numero riguarda gli studi pubblicati e il secondo tutti quelli condotti. In un'analisi del 2008 su una classe di farmaci, la letteratura pubblicata mostrava il novantuno per cento di studi positivi mentre l'insieme completo registrato presso l'autorità regolatoria ne conteneva il cinquantuno per cento. Il trentuno per cento degli studi registrati non era mai stato pubblicato, e la selezione non era casuale: degli studi con risultati positivi praticamente tutti erano stati pubblicati, di quelli negativi la maggior parte no. Nessuno dei due numeri è falso: descrivono insiemi diversi.
Quanti studi restano non pubblicati?
La stima più completa viene da una revisione che ha messo insieme duecentoquattro studi sul fenomeno, riguardanti la pubblicazione o mancata pubblicazione dei risultati di 165.135 studi clinici: il quarantasette per cento dei risultati non viene reso pubblico. Limitando l'analisi agli studi condotti meglio, la probabilità di pubblicazione saliva al cinquantasette per cento, cioè poco più della metà. Le singole stime variano molto per campo e periodo, con ricerche che riportano quote non pubblicate tra il ventitré e il sessantotto per cento anche diversi anni dopo la conclusione degli studi.
Una metanalisi non risolve il problema?
Contro questa distorsione specifica no, ed è un punto importante. Una revisione sistematica raccoglie tutto ciò che è stato pubblicato: se la letteratura è già selezionata, sommarla con più rigore restituisce una stima più precisa dello stesso quadro distorto. La formulazione documentata è che quando vengono pubblicati solo risultati positivi, le revisioni e le metanalisi gonfiano l'apparente efficacia degli interventi. È la stessa struttura di altri problemi statistici: aggiungere dati non corregge una selezione, la rende più solida.
Non ci sono leggi che obbligano a pubblicare?
Ci sono, e sono state costruite proprio per questo. Dal 2005 il comitato internazionale degli editori di riviste mediche pubblica solo studi registrati preventivamente in un registro pubblico; una legge statunitense del 2007 ha esteso l'obbligo di registrazione; e negli Stati Uniti e nell'Unione Europea esiste l'obbligo di riportare i risultati nei registri entro dodici mesi dalla conclusione. Ma le fonti sono esplicite: ci sono prove crescenti che queste leggi e linee guida siano aggirate da scappatoie e da una scarsa conformità. In un'analisi di settecentotrentotto studi soggetti all'obbligo, solo il ventidue per cento aveva riportato i risultati.
Perché uno studio negativo non viene pubblicato?
Le ragioni si sommano e nessuna richiede malafede. Gli editori sono più propensi a pubblicare risultati positivi e gli autori più propensi a proporli; un risultato che non conferma nulla è meno citabile e meno utile alla carriera di chi lo ha prodotto; e la soglia di significatività statistica funziona in molti campi come guardiano della pubblicabilità. Il fattore che quantifica l'insieme di queste pressioni è stato misurato: gli studi con risultati statisticamente significativi hanno una probabilità di pubblicazione pari a 2,8 volte quella degli altri. Va aggiunto che gli studi con risultati negativi, quando vengono pubblicati, escono anche significativamente più tardi.
Da leggere insieme a questo
La soglia di significatività è uno dei meccanismi attraverso cui questa selezione opera: è lì che si decide che cosa è pubblicabile.
Fonte e metodo
- Definizione
- Fenomeno per cui gli autori sono più propensi a proporre e gli editori a pubblicare studi con risultati positivi rispetto a quelli con risultati negativi
- Il caso documentato del 2008
- Su una classe di farmaci registrati presso l'autorità regolatoria americana: 31% degli studi mai pubblicato; letteratura pubblicata con 91% di studi positivi contro il 51% dell'insieme completo
- Direzione della selezione
- Degli studi con risultati positivi praticamente tutti pubblicati; della maggior parte di quelli negativi no
- Stima complessiva
- Revisione di 204 studi sul fenomeno, riguardanti 165.135 studi clinici: 47% dei risultati non reso pubblico; 57% di probabilità di pubblicazione limitando l'analisi agli studi condotti meglio
- Variabilità
- Le ricerche riportano quote non pubblicate tra il 23% e il 68% anche diversi anni dopo la conclusione
- Fattore di selezione
- Gli studi con risultati statisticamente significativi hanno una probabilità di pubblicazione pari a 2,8 volte quella degli altri (IC 95% 2,2-3,5)
- Tempi
- Gli studi con risultati negativi, inconcludenti o non significativi vengono pubblicati significativamente più tardi
- Effetto sulle sintesi
- Quando vengono pubblicati solo risultati positivi, revisioni sistematiche e metanalisi gonfiano l'apparente efficacia degli interventi
- Contromisure
- 2005: politica degli editori di riviste mediche di pubblicare solo studi registrati preventivamente. 2007: legge statunitense che estende l'obbligo di registrazione. 2013: iniziativa globale per la pubblicazione dei risultati entro un anno. Obbligo di comunicazione nei registri entro 12 mesi in Stati Uniti e Unione Europea
- Conformità
- Prove crescenti che leggi e linee guida siano aggirate da scappatoie e da scarsa conformità; in un'analisi di 738 studi soggetti all'obbligo, solo il 22% aveva riportato i risultati
- Dimensione etica
- La mancata pubblicazione è indicata anche come un venir meno all'obbligo verso i partecipanti che si sono offerti volontari; in uno studio su 81 studi pediatrici in violazione degli obblighi, 5.803 bambini avevano partecipato e il 66,7% degli studi è rimasto completamente non pubblicato
- Limiti
- Non stima la distorsione di un campo specifico; non permette di correggere stime pubblicate; non riguarda la qualità dei singoli studi né la selezione degli esiti all'interno di uno studio
- Pubblicato
- 28 agosto 2026
- Ultima revisione
- 28 agosto 2026
- Prossima revisione
- febbraio 2027
Questo strumento non formula diagnosi e non sostituisce il parere del medico. Vedi l'avviso medico.