Incontro dei referenti e coordinatori Passi Roma, 13 Febbraio 2008 Aggiornamenti su Passi Valutare insieme il sistema e progettare la messa a regime S. Baldissera per il Gruppo Tecnico PASSI Gli argomenti della giornata •rinnovo del progetto – valutazione •monitoraggio – nuova funzionalità di correzione del dataset •questionario: il punto della situazione sui moduli opzionali •analisi dei dati: i piani sviluppati – alcuni risultati preliminari (fumo, alimentazione) •comunicazione: un bilancio delle attività svolte I prossimi Passi prosecuzione della raccolta delle interviste, sino al raggiungimento della numerosità minima stabilita analisi dei dati ed elaborazione delle stime produzione di rapporti e comunicazione dei risultati formulazione di una proposta di rinnovo del progetto valutazione • in itinere • finale (parametri stabiliti dal CCM) Il futuro della sorveglianza Passi Supporto stabile per le esigenze informative della sanità pubblica? garantirne la sostenibilità nel tempo e nei diversi contesti locali In che modo? progettare una nuova iniziativa per mettere a regime la sorveglianza Su quali basi? valutare le esperienze sinora fatte, con il coinvolgimento degli attori del sistema (Regioni, CCM, ISS) e di istituzioni e professionisti interessati Valutare e monitorare •valutare = misurare e dar valore alle cose – implicito un giudizio che dipende da interessi, priorità, scelte – analisi dei motivi che hanno condotto ai risultati osservati e dei percorsi attraverso cui sono stati prodotti •monitoraggio = controllo dei processi durante il loro svolgimento, per fornire elementi utili al governo del sistema Tipi di valutazione per Passi • valutazione finale – una delle principali linee di lavoro del progetto – da completare al termine della sperimentazione – criteri previsti dal documento di progetto CCM/CNESPS, integrati dalle osservazioni e suggerimenti dei diversi portatori di interesse • valutazione in itinere – fare un bilancio delle attività sinora svolte, per capire meglio i problemi e guidare le tappe successive – fornire un orientamento, per concepire un nuovo progetto per la messa a regime del sistema Valutazione in itinere Caratteristiche: –scopo preciso, ben definito: contribuire all’ideazione del nuovo progetto –peculiarità della situazione: progetto attuale non ancora portato a compimento –necessità di economizzare tempo e risorse: focalizzare l’attenzione sui pochi punti su cui è indispensabile disporre di evidenze Il percorso di valutazione • obiettivo: la sostenibilità del sistema, nel tempo (anni futuri) e nello spazio (ASL e Regioni) • scelta dei contenuti e dei metodi di valutazione: –aspetti da valutare, indicatori –metodi di misura (qualitativi/quantitativi) –campione, tempi, partecipanti • analisi dei risultati: –cogliere gli aspetti strutturali, che determinano criticità multiple –tenere in secondo piano i problemi organizzativi e tecnici, che possono essere risolti con risorse interne al sistema • formulazione di proposte: –descrizione dei requisiti minimi del sistema, ai diversi livelli –proposta di iniziative in grado di garantirli Esempi di aspetti da valutare • tecnici: dotazione informatica, software • risorse umane: numero degli intervistatori, tempo disponibile per Passi, competenze • finanziari: fondi per acquisti, servizi • di supporto politico: delibere, decisioni amministrative • scientifici: solidità metodologica, strumenti di indagine idonei • culturali: utilità/adeguatezza di Passi per le azioni di sanità pubblica • sociali: risposta dell’opinione pubblica, collaborazione degli operatori sanitari • ecc., ecc…. Scelta degli indicatori: avvertenze Non è agevole valutare, ai fini della sostenibilità, un sistema nella fase sperimentale: – alcuni tipi di problemi si concentrano fisiologicamente durante l’avvio, ma tendono ad evolvere favorevolmente (es. disfunzioni del sistema informativo) – altre criticità rimangono in secondo piano, perché non hanno ancora dato manifestazioni diffuse, ma in prospettiva sono più importanti (es. formazione, motivazione del personale) – il breve periodo di osservazione non consente di evidenziare trend affidabili – le valutazioni e le percezioni degli operatori sul campo possono -in questo contesto- risultare più informative degli indicatori oggettivi Strumenti di misura, fonti dei dati: alcuni esempi •attività di monitoraggio –tasso di risposta/rifiuto (accettabilità da parte degli intervistati) –numero di interviste per intervistatore (carico di lavoro) –% di interviste caricate rispetto a quelle effettuate (tempestività) •ricerche campionarie, focus group intervistati (domande in coda al questionario) operatori (indagini qualitative) –percezione dei problemi e delle priorità –aspettative sui futuri sviluppi Valutazione della sostenibilità Alcune ipotesi Domanda di valutazione Indicatori di valutazione Esiste un carico di lavoro eccessivo degli intervistatori? Percezione degli interessati Idem Rapporto intervistatori/ intervistati Qual è il rapporto ottimale intervistatori/ intervistati? Percezione degli interessati L’intervista è ritenuta accettabile da intervistati e intervistatori? -Tasso di rifiuto -% interviste condotte a termine La formazione iniziale ha prodotto sufficienti livelli di performance? Percezione degli interessati Metodo di misura Fonte di dati Campione Qualitativo Questionario semistrutturato -Di convenienza -Random fra tutti gli intervistatori PASSI Quantitativo Monitoraggio automatico (archivio Passi) Tutte le ASL partecipanti Qualitativo Focus group -Di convenienza -Random fra tutti i coordinatori PASSI Quantitativo Monitoraggio automatico Tutte le ASL partecipanti Qualitativo Questionario semistrutturato -Di convenienza -Random fra tutti gli intervistatori PASSI Altri argomenti Presentazione di Passi a convegni • Convegno “Verso una società libera dal fumo” organizzato da CCM e Ministero, a tre anni dall’applicazione della Legge 3/03, 24 gennaio 2008 • 14o congresso nazionale AIMEF "Prevenzione e promozione della salute: un ruolo guida per il medico di famiglia“, Abano, 4-5 aprile 2008 • Prossimo convegno del CCM (SANIT, giugno 2008) La formazione di lungo periodo Corsi dedicati agli operatori Passi: il corso sull’analisi ed utilizzo dei dati Passi e sull’integrazione delle fonti informative è stato spostato a marzo (3-7) data la rilevanza degli argomenti trattati e l’utilità operativa sono invitati a partecipare non solo gli iscritti al Master ma anche tutti i referenti e coordinatori regionali I moduli opzionali del questionario •riproposizione dei moduli opzionali nella versione più recente •discussione delle proposte di modifica •ricognizione della disponibilità delle Regioni ad adottarli, per le conseguenti decisioni operative Incontri dei rappresentanti regionali PASSI Calendario provvisorio per il 2008 MESI GEN Incontri gruppo referenticoordinatori FEB Incontri gruppo referenticoordinatori Altri momenti di incontro/ Formazione APR mercoledì 13 MAG LUG AGO GIU mercoledì 7 6 : giornata per i Referenti 9-13: formazione degli adulti 3-7: Corso su analisi ed integrazione dei dati Passi Altri momenti di incontro/ Formazione MESI MAR SET data da definire OTT NOV DIC data da definire Grazie per l’attenzione!