Sintesi
”L’articolo di Lee et al. (2024), pubblicato su Nature Human Behaviour, riferisce che l’entrata in vigore di leggi statali statunitensi “anti-trans” avrebbe provocato un aumento statisticamente significativo — dal 7 al 72% — dei tentativi di suicidio nell’ultimo anno tra i giovani transgender e non binari (TGNB) …, sulla base dell’analisi di cinque tornate di raccolta dati (ondate) di un’indagine trasversale con partecipanti reclutati tramite social media. …Il commento Matters Arising di Cohn et al. (2026) … puntualizza tre cose. Primo: l’aumento percentuale stimato … è dedotto da un singolo stato (Idaho) …; secondo: le due leggi dell’Idaho in questione sono state sospese in via giudiziaria prima che venisse raccolta qualsiasi osservazione post-trattamento; infine: rifacendo l’analisi con impostazioni diverse, l’effetto scompare …Lee et al. (2026) hanno replicato, difendendo l’impostazione dello studio e aggiungendo due nuove analisi di sensibilità. Poiché il formato del Matters Arising consente un solo ciclo di interventi, il confronto si conclude qui. …Questa revisione paritaria pone tre questioni. Primo, gli argomenti statistici portati dalla replica a difesa dello studio sono errati… Secondo, il problema che Cohn et al. descrivono come dipendenza da un singolo stato è meglio caratterizzato come inferenza non valida: con un unico cluster trattato, gli intervalli di confidenza e i valori del Paper non sono misure valide dell’incertezza, e l’analisi che potrebbe quantificare correttamente l’evidenza — l’inferenza per randomizzazione — non è mai stata eseguita. Terzo, diversi problemi indipendenti dalla questione del singolo stato non sono stati sollevati da nessuna delle due parti. … Per i ragazzi tra i 13 e i 17 anni al “tempo 2”, lo studio riporta un coefficiente di 0,38 … identificato a partire da circa sessanta minori in un solo stato… Un intervallo così stretto afferma una quasi-certezza su una media di base che potrebbe essere ribaltata da uno spostamento da valore nullo … al massimo … in appena quattro risposte all’indagine. …Lee et al. (2026) offrono due difese… La prima sostiene che “campioni statali più piccoli, se insufficienti, distorcerebbero le stime verso lo zero” … Questo è errato… stime statisticamente significative provenienti da contesti rumorosi e con scarsa potenza statistica sovrastimano sistematicamente l’effetto reale… l’errore di esagerazione, o errore di Tipo M… La quota di persone transgender e non binarie (TGNB) nel campione reclutato aumenta in modo significativo nel corso dello studio, passando dal 32% nell’ondata 1 al 48% nelle ondate 4 e 5… Poiché il reclutamento si è basato su annunci mirati sui social media… questo spostamento demografico crea una distorsione fatale… nessun conteggio dei rispondenti rimossi e nessuna analisi di sensibilità… Un cambiamento in chi ha cliccato sull’inserzione è dunque strutturalmente indistinguibile da un impatto reale della legge. …L’Idaho — l’unica fonte delle stime al ‘tempo 2’ e al ‘tempo 3’ — ha approvato una legge sullo sport e una sui certificati di nascita. Nessuna legge in materia sanitaria concorre alla variazione identificante delle stime principali — poiché queste derivano esclusivamente dall’Idaho, dove una tale legge non è stata approvata. Eppure la discussione dello studio conclude che aumentare l’accesso alle cure di affermazione di genere ‘potrebbe salvare vite’… a prescindere dai meriti di tale affermazione su altre basi, essa non è supportata dalla variazione identificante di questo studio… Ciò che lo studio dimostra ha una portata decisamente più limitata rispetto a quanto si afferma nel titolo: in due ondate dell’indagine, i rispondenti auto-identificatisi come TGNB in un solo stato, hanno riportato più tentativi di suicidio nell’ultimo anno rispetto alla media di controllo a effetti fissi… Finché non verranno effettuate le necessarie correzioni, la proposizione di nessi di causalità da parte dello studio rimane una affermazione che non può considerarsi supportata dalla struttura metodologica dello studio stesso… Quando non reggono alla verifica, risultati causali sovrastimati richiedono una sovracorrezione…”.
Citazioni in lingua originale
"Lee et al. (2024), published in Nature Human Behaviour, report that the enactment of state-level laws characterized as anti-transgender caused statistically significant increases — 7–72% — in past-year suicide attempts among transgender and non-binary (TGNB) young people … applied to five waves of a social-media-recruited cross-sectional survey. …A Matters Arising by Cohn et al. (2026)… established three facts. First, the paper’s largest estimates… are identified from a single treated state, Idaho …Second, Idaho’s two relevant laws were judicially enjoined before any post-treatment observation was collected. Finally, the paper’s alternative specifications… yield null results. …Lee et al. (2026) replied, defending the design and reporting two new sensitivity analyses. Because the Matters Arising format permits a single round, the exchange ends there. …This peer review makes three arguments. First, the reply’s central statistical defenses are incorrect… Second, the problem Cohn et al. describe as reliance on one state is better characterized as invalid inference: with a single treated cluster, the paper’s confidence intervals and P values are not valid measures of uncertainty, and the analysis that could properly quantify the evidence — randomization inference — was never run. Third, several problems independent of the single-state issue were raised by neither party. …For 13–17-year-olds at time 2, the paper reports a coefficient of 0.38 … identified from roughly sixty minors in one state… An interval this tight asserts near-certainty about a baseline cell average that could be overturned by a shift from null… to maximum… values in just four survey responses. …Lee et al. (2026) offer two defenses… The first asserts that “smaller state samples, if insufficient, would bias the estimates towards zero”… This is incorrect… statistically significant estimates from noisy, underpowered settings systematically overstate the true effect… the exaggeration, or Type M, error… The transgender and non-binary (TGNB) share of the recruited sample increases significantly across the study, shifting from 32% in wave 1 to 48% in waves 4 and 5… Because recruitment relied on targeted social-media advertisements… this demographic shift creates a fatal distortion… A change in who clicked the advertisement is thus structurally indistinguishable from a change in the law’s real-world impact. … no criteria, no counts of removed respondents, and no sensitivity analyses appear… young adults exposed to the identical statewide political climate exhibit no increase—and potentially a decrease—in suicide attempts. This structural divergence directly undermines the authors’ causal mechanism. …Idaho — the sole source of the time-2 and time-3 estimates — enacted a sports law and a birth-certificate law. No healthcare law contributes identifying variation to the headline estimates. Yet the paper’s discussion concludes that increasing access to gender-affirming care “could be life-saving”… whatever the merits of that claim on other evidence, it is not supported by this study’s identifying variation… What the study establishes is vastly narrower than its title asserts: in two survey waves, self-identified TGNB respondents in a single state reported more past-year suicide attempts than a fixed-effects control average … Until the necessary corrections and tests are carried out, the paper’s causal claim remains an assertion its design cannot support … Overstated causal findings invite overcorrection when they fail scrutiny...".