Il rischio di bias viene dopo l’estrazione — e non si finge
La valutazione giudica se uno studio estratto può sostenere un’inferenza. LitSynth non implementa Cochrane RoB 2, ROBINS-I né GRADE. Riferite l’ordine, usate la tabella come foglio di lavoro e non coniate etichette basso/alto.
Le istituzioni chiedono del rischio di bias perché è il punto in cui i fornitori esagerano di più. Lo screening chiede se un record è eleggibile. L’estrazione registra che cosa ha fatto lo studio. La valutazione chiede se quello studio estratto può essere distorto in un modo che cambia la risposta. Mischiare quei tre giudizi è il modo in cui un punteggio di rilevanza diventa un distintivo falso di «basso rischio di bias».
Un collegio di dottorato e un referee di un PRIN conoscono lo schema. Per questo il confine è netto: LitSynth non implementa Cochrane RoB 2, ROBINS-I, QUADAS-2, AMSTAR né GRADE. È intenzionale. Un’etichetta generata Low / Some concerns / High senza domande di segnalazione per dominio sarebbe più dannosa di un vuoto onesto.
La pagina citabile è rischio di bias. Questo saggio è l’argomento che vi serve quando il protocollo, la biblioteca o una valutazione di acquisto insistono.
Un paragrafo per i Metodi
La validità degli studi è stata considerata a partire dal disegno estratto, dal livello di evidenza e dai limiti dichiarati dalle autrici e dagli autori. LitSynth non ha eseguito una valutazione formale per domini del rischio di bias (per esempio Cochrane RoB 2 o ROBINS-I) né una classificazione di certezza GRADE. Salvo che si descriva una valutazione autonoma, questa rassegna non deve essere interpretata come se quegli strumenti fossero stati completati.
Lasciate stare quella frase. Cancellarla perché una rassegna rapida suoni da revisione sistematica è l’errore su cui sono addestrati i revisori di metodi. Se la valutazione formale non era mai in ambito, scrivetelo come scelta di disegno. È legittimo. Fingere che lo strumento abbia girato, no.
Perché la valutazione non può stare nello screening
Non potete valutare uno studio che non avete ancora ridotto a disegno, esiti e limiti. Lo screening di titolo e abstract decide l’eleggibilità. L’estrazione produce gli ingressi. Solo allora uno strumento di rischio di bias ha senso, e anche allora di solito serve il testo integrale.
Fare RoB sugli abstract inventa certezza su occultamento dell’allocazione, dati di esito mancanti e reporting selettivo che l’abstract non contiene. Fare RoB su risultati non ancora selezionati valuta ricerca ineleggibile. Entrambi i gesti sembrano diligenza. Entrambi sono rumore. In una tesi, assegnare «basso rischio di bias» al titolo è etichettare, non leggere.
Separate tre giudizi che il software tende a fondere
| Giudizio | Domanda | Ciò che registra LitSynth |
|---|---|---|
| Rilevanza | Questo record riguarda la domanda della rassegna? | Punteggio di rilevanza e decisione di screening |
| Direttezza | Quanto è vicino il PICO estratto? | Popolazione, confronto, esito, follow-up |
| Validità interna | Il bias può cambiare la risposta? | Disegno, livello di evidenza, limiti — non un’assegnazione RoB 2 |
Un lavoro può essere altamente rilevante e insieme ad alto rischio di bias. Un lavoro può avere basso rischio di bias per un esito che a voi non interessa. Comprimere tutto in un semaforo è il modo in cui gli strumenti di rassegna assistita mettono in difficoltà comitati e acquisti.
Rilevanza non è inclusione, e inclusione non è basso rischio di bias. Quella distinzione appartiene ai Metodi, non solo alla guida del prodotto.
Se il protocollo esige RoB 2, la tabella è il foglio di lavoro
Terminate screening ed estrazione in LitSynth. Esportate la tabella di evidenza. Completate Cochrane RoB 2 sugli studi randomizzati inclusi, o ROBINS-I sugli studi non randomizzati, in un modulo a parte e sul testo integrale. Citate entrambi i passi. Non scrivete che LitSynth ha eseguito RoB 2.
Potete portare con voi: disegno, indizi di randomizzazione, confronto, esito, follow-up e limiti dichiarati dalle autrici e dagli autori. Non rietichettate quei limiti come domini RoB 2. «Le autrici hanno annotato un follow-up breve» non è il dominio dei dati mancanti.
In una rassegna rapida, lasciare il RoB formale fuori ambito è una scelta di disegno; allora quella frase deve restare a stampa. Se il titolo pretende una revisione sistematica, dovete completare lo strumento fuori oppure abbassare il titolo.
Che cosa non scrivere
- «basso rischio di bias», salvo che uno strumento nominato abbia prodotto quell’etichetta;
- «abbiamo valutato la qualità con l’intelligenza artificiale»;
- linguaggio di certezza GRADE (alta / moderata / bassa / molto bassa) se non avete eseguito GRADE;
- che i limiti estratti equivalgono a uno strumento di bias validato.
In una tesi di dottorato, e in un PRIN, il confine onesto pesa più di un paragrafo gonfiato. Il collegio verifica se chi scrive conosce i limiti del proprio metodo. Il referee verifica se il progetto promette ciò che il software non fa.
Dove sta questo saggio nella serie
- Selezionare titoli e abstract in modo difendibile
- Estrarre una tabella di evidenza
- Questa pagina — valutare, oppure declinare con onestà
- Trasformare i vuoti residuali nella prossima domanda di ricerca
Le lacune senza estrazione sono marketing. Il rischio di bias senza estrazione è teatro. La biblioteca dei metodi e la guida al flusso esistono perché queste frasi si citino, invece di essere indovinate da una pagina di funzioni.