Misurare Le Performance di Test Diagnostici e Modelli Predittivi

Il corso si propone di fornire una rassegna degli strumenti utilizzati per la valutazione dei test diagnostici e per la valutazione della capacità predittiva di modelli per la predizione del rischio. Verranno presentati strumenti che rispondono a quesiti che si pongono frequentemente al personale statistico coinvolto in studi dal dato di laboratorio, dove si identificano biomarcatori promettenti, e in studi sul dato clinico, dove la sfida della disponibilità di queste nuove variabili richiede di valutare il miglioramento della performance della predizione e delle conseguenti regole di decisione.

Verranno discusse le seguenti rappresentazioni grafiche ed i relativi indicatori riassuntivi: recevier operating characteristic (ROC) curve, grafici delle probabilità di classificazione, area sottesa dalla curva, predictivness curve, calibration plot, Brier Score, Youden function, Mean risk difference, integrated discrimination improvement, continuous net reclassification improvement, Net benefit.

Si ragionerà sul razionale di ogni strumento, mostrando come gli indici di riclassificazione possano portare a risultati fuorvianti, si individueranno gli strumenti adatti a seconda del quesito clinico, l’applicabilità degli stessi a seconda del tipo di studio, l’implementazione in Stata e l’interpretazione dei risultati in esempi con l’individuazione di cut-point operative. L’ordine di presentazione dei metodi sarà coerente con un processo di valutazione che dall’identificazione del biomarcatore promettente lo porta alla sua inclusione in un modello di predizione.

In linea con la filosofia generale dei nostri corsi di formazione, ogni sessione è composta sia da una componente teorica (in cui sono spiegate le tecniche e i principi che ne sono alla base), sia da un segmento applicato (hands-on), durante il quale i partecipanti hanno l’opportunità di implementare le tecniche, che utilizzano dati reali, sotto l’occhio vigile del docente del corso. Le sessioni teoriche sono rafforzate da esempi di casi di studio, in cui il docente discute gli attuali problemi di ricerca, evidenziando potenziali insidie e i vantaggi delle singole tecniche. L’intuizione dietro la scelta e l’implementazione di una tecnica specifica è della massima importanza. In questo modo, il docente del corso e’ in grado di colmare il divario tra le metodologie teoriche astratte e le questioni pratiche che si incontrano quando si tratta di dati reali. Alla fine del corso, i partecipanti saranno in grado, con l’aiuto delle routine di Stata sviluppate durante le sessioni, di implementare autonomamente le metodologie utilizzate, nel proprio specifico contesto di ricerca.

Il corso è rivolto a ricercatori clinico-epidemiologici interessati ai principi di analisi e all’applicazione della metodologia per lo studio dei rischi competitivi comprendendo anche gli errori comunemente presenti in letteratura, utilizzando il software Stata. E’ disegnato per medici ed operatori in sanità pubblica provenienti da istituzioni pubbliche e private ma è anche indicato per Studenti, Dottorandi, Specializzandi e Assegnisti di Ricerca.

Conoscenza adeguata dei principi di base della biostatistica, della statistica e degli strumenti di base dell’analisi della sopravvivenza e della regressione, nonché una conoscenza base del Software Stata.

SESSIONE I

Misurare l’accuratezza di un test a risposta binaria

Sensibilità, specificità
Costruzione di intervalli di confidenza singoli e congiunti

Misurare l’accuratezza di un test a risposta continua

Curva ROC

Misure riassuntive di performance
Indentificazione del cut-point operativo
Confronto di test alternativi

SESSIONE II

Misurare l’accuratezza di un modello di predizione

Predictivness curve
Calibration plot
Brier Score
Mean risk difference
Cut-point operativo e Net benefit

Misurare il miglioramento dell’accuratezza di un modello di predizione

Misure ottenute dal confronto di modelli annidati
(e.g. incremento del Brier Score…)
Integrated discrimination improvement
Continuous net reclassification improvement
Cut-point operativo e Net benefit

Al momento non sono inserite date 2024 per questo corso. L’offerta formativa è comunque in continua evoluzione; suggeriamo pertanto di contattare la segreteria organizzativa formazione@tstat.it per segnalare il vostro interesse ed essere ricontattati non appena sarà inserita una data in calendario.