Quando nessuno fuori dal sistema è autorizzato a controllarlo, la certezza diventa un monopolio.
Claim: «La scienza ufficiale non può giudicare»
«La revisione tra pari protegge il sistema. I laboratori non possono replicare ciò che non comprendono. Le istituzioni difendono i propri interessi. Quella che chiamate scienza è soltanto l’opinione ufficiale.»
Questa è una formula esemplificativa, non una citazione attribuita a qualcuno. Le quattro frasi compiono un’operazione precisa: privano di legittimità ogni osservatore indipendente prima che possa esaminare la tesi. Il promotore conserva il diritto di dichiarare il successo; chi potrebbe accertare un errore viene escluso dal giudizio.
Qui il problema è la distribuzione del potere di verifica. Una credenza può anche presentare una previsione apparentemente precisa, ma renderla inutilizzabile vietando a terzi di controllarla. L’affermazione «il risultato deve essere questo» non costituisce un impegno reale se soltanto l’autore può decidere chi misura, quali dati mostrare e quale responso ammettere.
La svalutazione del controllo esterno chiude così un passaggio essenziale della conoscenza: la possibilità che una conclusione sopravviva all’esame di persone che non dipendono dal suo successo. Non occorre supporre una frode intenzionale. Basta osservare chi conserva il diritto di dire che cosa è accaduto.
Definizioni: quattro controlli che non sono intercambiabili
Controllo esterno. Esame svolto da soggetti che possono accedere agli elementi necessari, applicare criteri espliciti e formulare conclusioni anche sfavorevoli. L’indipendenza non coincide automaticamente con un’affiliazione diversa: contano finanziamenti, rapporti personali, dipendenza dai materiali e libertà di pubblicare il risultato.
Revisione tra pari, o peer review. Valutazione critica di un lavoro da parte di specialisti pertinenti, generalmente nel processo editoriale. Esamina la domanda, il disegno, le analisi e la proporzione fra dati e conclusioni. Di norma non ripete materialmente ogni esperimento e non certifica l’assenza di frode.
Riproducibilità e replicabilità. Adottando la distinzione del rapporto delle National Academies del 2019, la riproducibilità computazionale riguarda risultati coerenti ottenuti con gli stessi dati e passaggi di analisi; la replicabilità riguarda la coerenza fra studi che raccolgono nuovi dati sulla stessa domanda. La terminologia varia fra discipline: occorre dichiarare quale controllo è stato realmente eseguito.
Consenso scientifico. Convergenza del giudizio competente su un insieme di evidenze. Il suo valore dipende dalla qualità e dall’indipendenza delle prove, dalla critica affrontata e dalla stabilità dei risultati. Una dichiarazione istituzionale può riassumerlo, ma non lo crea semplicemente impartendo un ordine.
Queste distinzioni impediscono scorciatoie in entrambe le direzioni. Un articolo revisionato non è automaticamente replicato. Una replica non verifica necessariamente il meccanismo proposto. Ricalcolare correttamente dati sbagliati non corregge la loro origine. Una maggioranza di esperti non sostituisce il dossier delle evidenze.
Compatibilità con la scienza: rendere il giudizio trasferibile
Una tesi sul mondo diventa controllabile quando la procedura non richiede l’adesione preventiva dell’osservatore. Chi controlla deve poter comprendere che cosa fare, registrare ciò che osserva e distinguere il risultato promesso dalle alternative. La competenza tecnica può essere necessaria; la fedeltà alla conclusione non può esserlo.
Per una pretesa fisica occorrono grandezze, unità, strumenti calibrati e una relazione causale esplicita. Se si promette un trasferimento di energia, bisogna specificare sorgente, destinatario e quantità in joule; se si invoca una frequenza, bisogna identificare il fenomeno periodico e il valore in hertz. Un effetto statistico richiede invece una misura pertinente, non un’unità fisica inventata per sembrare più rigoroso.
Ma definire le variabili non basta. Deve essere trasferibile anche la facoltà di giudicare. Un protocollo serio chiarisce:
- quali materiali e istruzioni permettono a un altro gruppo di eseguire il controllo;
- quali qualifiche tecniche sono richieste e come accertarle senza chiedere appartenenza;
- quale misura distingue l’effetto dichiarato dagli errori dello strumento;
- chi conserva i dati e chi può verificarli;
- quali vincoli legittimi limitano l’accesso e quale verifica alternativa è possibile;
- chi è libero di comunicare un risultato contrario alla promessa.
Se una condizione dipende dall’operatore, va studiata come condizione: formazione, procedura e prestazioni devono essere descrivibili. Dichiarare che soltanto gli «iniziati» riescono non spiega la dipendenza. Occorre mostrare che cosa abbiano appreso, come venga valutato e se quell’apprendimento possa essere trasferito.
Un effetto documentato può precedere la piena comprensione del meccanismo. Questo permette di studiarlo; non autorizza ad attribuirgli una causa arbitraria. Se la catena causale proposta non è controllabile, resta una narrazione non verificabile anche quando l’osservazione iniziale merita attenzione.
Confutazione: quattro modi di espellere il controllo
1. Diffidenza verso la revisione tra pari
«I revisori fanno parte del sistema» sostituisce una valutazione del lavoro con un sospetto sulla categoria. La revisione può essere debole, conservatrice, incoerente o condizionata da conflitti. Il punto è dimostrare il difetto concreto: un’obiezione metodologica sbagliata, un rapporto non dichiarato, una richiesta priva di pertinenza. Il solo rifiuto editoriale non dimostra né la falsità della tesi né la sua genialità.
Le linee guida del Committee on Publication Ethics richiedono ai revisori di dichiarare conflitti pertinenti. È un’indicazione operativa: l’indipendenza si deve esaminare, non presumere. Ma dall’esistenza di conflitti possibili non segue che ogni revisore sia corrotto, né che il promotore sia immune da interessi.
La critica legittima chiede revisori competenti, motivazioni verificabili, possibilità di risposta e procedure migliori. La svalutazione chiede che nessuna valutazione esterna possa contare. Il primo percorso aumenta l’esposizione della tesi; il secondo consegna all’autore l’ultima parola per definizione.
La prova decisiva è la coerenza del criterio. Se una pubblicazione favorevole viene esibita come riconoscimento della scienza e una valutazione sfavorevole viene esclusa come censura senza esaminarne gli argomenti, la revisione è accettata soltanto quando conferisce prestigio.
2. Rifiuto della replicabilità
La replica domanda se il risultato dipenda dalle condizioni dichiarate o da elementi rimasti nascosti nella prima osservazione. Un protocollo può essere descritto male; un operatore può commettere errori; una misura può essere rumorosa. Queste possibilità richiedono verifiche, non verdetti automatici.
Una mancata replica, come sottolinea il rapporto delle National Academies, non identifica da sola la causa dell’incoerenza. Può dipendere anche da variabilità e differenze pertinenti fra studi. Occorre confrontare procedure, qualità delle misure e incertezza. Il controllo resta necessario proprio per distinguere queste possibilità.
Il rifiuto compare quando non viene proposta alcuna versione controllabile del test: gli esterni sarebbero inadatti per natura, l’effetto non tollererebbe osservatori indipendenti oppure i materiali sarebbero disponibili soltanto a chi accetta già la teoria. La competenza viene ridefinita come adesione.
La stessa obiezione va applicata al risultato favorevole: se la presenza dell’autore è indispensabile, come si separa il fenomeno dalla sua influenza sulla procedura? Il fatto che un laboratorio sia «esterno» non ne garantisce la qualità. Il fatto che sia esterno non è però un difetto metodologico.
Neppure gli eventi irripetibili obbligano ad abolire il controllo. Non possiamo rifare una determinata eruzione o un evento astronomico passato, ma possiamo confrontare osservazioni, strumenti, tracce e previsioni conseguenti. L’indipendenza della verifica non richiede di ricreare la storia.
3. Discredito preventivo delle istituzioni scientifiche
Un’istituzione può commettere errori. Una decisione può essere condizionata da incentivi, gerarchie e interessi. La contestazione acquista forza quando identifica persone responsabili, documenti, passaggi e conseguenze. «Sono tutti venduti» non fornisce nessuno di questi elementi: rende superfluo esaminarli.
Il meccanismo retorico è il trasferimento del sospetto. Si parte da una scorrettezza documentata in un contesto e si pretende di invalidare ogni risultato prodotto da università, laboratori e riviste differenti. La conclusione eccede la premessa. Un errore locale non dimostra un coordinamento globale.
Soprattutto, anche una corruzione accertata non produce prove a favore dell’alternativa. Se una bilancia è guasta, una pesata diventa inaffidabile; non per questo il peso dichiarato dal venditore diventa corretto. Serve un’altra misura. Il passaggio «loro hanno sbagliato, quindi io ho ragione» rimane invalido.
Bisogna inoltre valutare la reale indipendenza fra le fonti: dieci comunicati che riprendono lo stesso studio non sono dieci conferme. La risposta razionale alla dipendenza è ricostruire le catene di evidenza, cercare verifiche autonome e rendere espliciti i conflitti. Escludere ogni istituzione lascia invece il pubblico dipendente dalla fonte che ha formulato l’accusa.
4. Scienza ridotta a «opinione ufficiale»
Un’opinione può essere sostenuta da preferenze. Una conclusione empirica deve rispondere a osservazioni che pongono vincoli. Chiamare entrambe «narrazioni» cancella questa differenza senza affrontarla.
Se due modelli prevedono esiti diversi, possiamo confrontarli con misure pertinenti. Che una previsione fallisca non dipende dall’orientamento dell’istituzione che ha proposto il modello. Gli errori e le assunzioni devono essere controllati, ma l’esistenza di un contesto sociale non rende facoltativo il risultato.
La parola «ufficiale» sposta così la domanda dalla prova all’appartenenza. Il dissenso acquista valore per il fatto di essere dissenso; la convergenza perde valore per il fatto di essere condivisa. È una gerarchia rovesciata dell’autorità, non un metodo di verifica. Anche una voce isolata deve dimostrare la propria tesi.
Il consenso non rende un’affermazione infallibile. Costituisce un riferimento ragionevole quando riflette evidenze solide che il singolo lettore non può ricontrollare integralmente. Per contestarlo occorre affrontare quelle evidenze. Non basta cambiare il nome del consenso.
Un caso documentato: misurare i difetti della ricerca
Nel 2015 l’Open Science Collaboration pubblicò un progetto di replica di 100 studi di tre riviste di psicologia. Il 97% degli studi originali aveva risultati statisticamente significativi; nelle repliche la quota era il 36%. Gli effetti replicati avevano, in media, circa metà dell’ampiezza originale. Sono dati riferiti a quel campione e a quei criteri, non una percentuale universale di «scienza falsa».
Il progetto impiegava più indicatori: superare una soglia statistica non esaurisce il significato di replicare. Il dato storico rilevante, qui, è che ricercatori sottoposero risultati già pubblicati a un controllo pubblico capace di mostrarne la fragilità. La conclusione operativa è aumentare la verifica, non dispensarne le affermazioni alternative.
Perché convince: sottrarre il giudizio sembra restituire autonomia
La rassegna di Ziva Kunda sul ragionamento motivato distingue la ricerca di accuratezza dalla ricerca di una conclusione desiderata. La motivazione può orientare i processi con cui si recuperano e valutano gli argomenti, entro il limite di riuscire a costruire giustificazioni apparentemente plausibili. Questo modello aiuta a capire una possibilità, non consente di diagnosticare le intenzioni di un singolo interlocutore.
Applicato al controllo esterno, il percorso può essere questo: un giudizio contrario viene percepito come minaccia; un difetto possibile del giudice permette di respingerlo; l’esclusione produce sollievo; il sollievo rende credibile la giustificazione. La conclusione resta intatta e l’atto di proteggerla viene vissuto come indipendenza.
Esiste anche un incentivo comunicativo. Esaminare un protocollo richiede lavoro; raccontare un conflitto fra ricercatore libero e apparato ostile offre ruoli immediatamente riconoscibili. Il pubblico può schierarsi prima di conoscere i dati. Il sospetto verso il controllore prende il posto dell’esame del controllo.
Il risultato può essere l’opposto dell’autonomia promessa. Espulse tutte le fonti capaci di contraddire, rimane un’unica autorità ammessa: chi vende la spiegazione, la pratica o il dispositivo. Non si elimina la dipendenza. Si elimina la possibilità di confrontare chi la esercita.
Come distinguere: checklist sul diritto di controllare
- La critica identifica un difetto? Chiedere pagina, procedura, dato o conflitto documentato. Un’accusa alla categoria non basta.
- Propone un controllo migliore? Se respinge i revisori attuali, quali competenze e procedure alternative accetta?
- Le qualifiche sono verificabili? Saper usare lo strumento è una condizione; credere nella teoria è un filtro di appartenenza.
- È ammesso un risultato contrario? Gli esterni possono comunicarlo senza autorizzazione del promotore?
- Le regole valgono anche per le conferme? Una rivista non può diventare autorevole soltanto quando pubblica ciò che piace.
- La dipendenza delle fonti è ricostruita? Affiliazioni diverse non bastano se dati, finanziamenti e analisi provengono dalla stessa origine.
- I vincoli di accesso hanno alternative concrete? Riservatezza e sicurezza possono richiedere accesso controllato; non giustificano automaticamente l’impossibilità di qualsiasi audit.
- L’accusa resta proporzionata? Un problema specifico viene generalizzato a tutte le istituzioni senza nuove prove?
- L’alternativa paga lo stesso costo? Anche il promotore dichiara interessi, materiali, procedure e limiti?
- Esiste qualcuno autorizzato a dissentire dopo la verifica? Se ogni controllore indipendente viene escluso, la verifica non ha più un giudice autonomo.
La presenza di un singolo segnale non dimostra una frode. La convergenza dei segnali mostra invece una struttura riconoscibile: il controllo viene accettato come decorazione e respinto quando può cambiare il giudizio.
Mini-case: il dispositivo che può essere valutato soltanto dal venditore
Un’azienda dichiara che un apparecchio rileva un «campo biologico». Un laboratorio chiede specifiche, campioni di riferimento e una procedura per distinguere il segnale dal rumore. Il venditore risponde che il principio è troppo avanzato per la scienza convenzionale e che soltanto i suoi operatori sono capaci di usarlo. Questo è un caso ipotetico, non un’accusa a un’impresa reale.
La domanda successiva è concreta: quegli operatori possono eseguire il test con campioni codificati da terzi e risposte registrate prima di conoscere i codici? L’analisi può essere controllata da un gruppo libero di pubblicare un risultato sfavorevole? Se sì, una dipendenza dall’operatore resta studiabile. Se no, l’obiezione ha soltanto preservato il monopolio del verdetto.
Il nome «campo» non fornisce una specifica fisica. Occorrono grandezza misurata, unità, sensibilità, calibrazione e un’interazione identificabile. Ma il punto peculiare di questo caso è precedente al risultato: chi propone il fenomeno rivendica anche il diritto esclusivo di certificarlo. Nessun dato può acquisire valore indipendente finché l’autore controlla tutte le condizioni del giudizio.
Scheda strumenti: trasformare la sfiducia in un audit
Annotare una contestazione in quattro campi: risultato contestato; difetto indicato; documento che lo dimostra; controllo proposto per risolverlo. «Non mi fido» descrive una posizione iniziale. Compilare questi campi la trasforma in una domanda verificabile.
Un esempio di riforma concreta sono i Registered Reports: domanda e piano metodologico vengono revisionati prima di raccogliere i dati; l’accettazione di principio della pubblicazione dipende dal rispetto del protocollo e dei requisiti di qualità, non dal conseguimento dell’esito preferito. Questo formato non garantisce risultati corretti, ma separa almeno una parte della decisione editoriale dall’attrattiva del risultato.
Il criterio generalizzabile è altrettanto chiaro: una proposta che denuncia i difetti della scienza deve indicare come limita quei difetti nella propria ricerca. Se reclama trasparenza dagli altri e segretezza per sé, ha trasformato una critica in un privilegio.
FAQ
Contestare la peer review significa fare pseudoscienza?
No. È una critica metodologica quando documenta un difetto e propone una procedura controllabile. Diventa svalutazione del controllo quando ogni valutazione indipendente è dichiarata inammissibile a prescindere dal suo contenuto.
Un preprint può contenere una scoperta valida?
Sì. Il suo stato editoriale indica quali controlli ha attraversato, non decide da solo la verità. Occorre valutare il metodo e le verifiche disponibili; l’assenza di revisione non è un certificato di falsità, né un segno di superiorità.
Un’istituzione autorevole può sbagliare?
Sì. Il prestigio non sostituisce l’evidenza. Per correggerla occorre però un’analisi pertinente o un risultato migliore: l’errore dell’istituzione non conferma automaticamente il concorrente.
La replica deve restituire numeri identici?
Non necessariamente. Con nuovi dati contano coerenza con la domanda, qualità del disegno e incertezza. Esigere identità perfetta può essere un criterio improprio; accettare qualunque differenza come conferma è altrettanto improprio.
Chi non è scienziato può valutare un conflitto?
Può controllare provenienza delle fonti, accesso ai materiali, dichiarazioni di interessi e coerenza delle risposte. Le questioni tecniche richiedono competenze pertinenti. L’impossibilità di verificare tutto personalmente rende utile scegliere fonti che espongono il proprio lavoro alla critica.
Chiusura: il controllo non è obbedienza
La revisione tra pari non è un sacramento, una replica non è un tribunale infallibile e un’istituzione non possiede la verità per decreto. Proprio per questo nessuna tesi deve ottenere il privilegio di sottrarsi al controllo indipendente. I difetti dei controllori richiedono controlli migliori e responsabilità documentabili.
Chi scredita ogni controllore non ha superato la verifica: ha espulso chi poteva farlo fallire.
Il criterio operativo è chiedere quale verifica indipendente venga accettata, chi possa eseguirla e se un risultato contrario possa modificare pubblicamente la conclusione. Dove la risposta è «nessuno fuori da noi», la certezza non ha conquistato una prova. Ha conquistato l’esclusiva sul verdetto.