All. 1 Incontro Gruppo Ricerca Codau con ANVUR (Scheda SUA-RD: evoluzione e analisi dei dati) Padova, 5 dicembre 2013 PARTECIPANTI ANVUR – Proff. Massimo Castagnaro e Sergio Benedetto (Consiglio Direttivo) CODAU- Dott. Enrico Periti (Presidente) GdL CODAU su Scheda SUA-RD: Polimi - Paola Butelli Unibo - Giuseppe Conti, Claudia Serra, Luciana Sacchetti Unicatt - Guido Castelli Unime – Carlo Costanzo Unimi - Paola Galimberti, Loredana Rollandi Unimib - Bonaria Biancu Unipd – Andrea Berti, Maria Luisa Furlan Unipv – Sofia Baggini, Elena Albera Unito - Maria Schiavone, Giorgio Longo Presenti per l'Università di Padova: Prof. Silverio Bolognani (Prorettore alla ricerca), Prof. Federico Menegazzo (Coordinatore Osservatorio della Ricerca), Prof. Moreno Meneghetti (Presidio della qualità); .Andrea Sciandra e Simone Teso (Servizio Supporto Osservatorio Ricerca), Cristina Stocco (Segretaria del Presidio della qualità). CONSIDERAZIONI PRELIMINARI - - ANVUR ha ricordato che la scelta di definire una scheda unica annuale anche per la ricerca risponde all’esigenza di implementare a tutto tondo la logica ESG, che prevede l’autovalutazione come punto imprescindibile di partenza. Questa funzione non può essere svolta dalla VQR, che è a tutti gli affetti un esercizio di valutazione esterna. ANVUR ha quindi definito un percorso di autovalutazione rivolto alle università e ai dipartimenti, che sono chiamati a riflettere sugli esiti VQR, e, sulla base delle proprie strategie, pianificare obiettivi e azioni di miglioramento. L’impatto della Scheda SUA-RD sarà su: · riparto quota premiale del FFO (una parte della quota riservata alla ricerca verrà calcolata sugli indicatori desunti dalla SUA-RD) N.B. ANVUR distinguerà indicatori di qualità (normalizzati rispetto alla dimensione dell’Ateneo – ad esempio quelli che hanno al denominatore il personale) e indicatori da usare per il FFO che invece devono tenere conto della componente dimensionale perché devono consentire di arrivare alla definizione di un peso sul totale. · - sulla valutazione del sistema di AQ degli Atenei a partire dalle visite periodiche che saranno effettuate dal 2015, in quanto chi ha sotto controllo i corsi di studio deve avere sotto controllo anche la ricerca · verrà richiesto ai dipartimenti di definire i propri obiettivi relativi all’attività di ricerca (su base pluriennale) e di effettuare un riesame. Analogamente alla didattica, si potrebbe pensare a due tipi di riesame: uno annuale (di “manutenzione ordinaria”) e uno più esteso, nel caso in cui ci siano stati cambiamenti significativi (vedi ad esempio l’ingresso di un gruppo di ricerca o una linea nuova di ricerca nel dipartimento) Dati richiesti e loro gestione: la scheda risponde anche all’esigenza di razionalizzare il flusso attuale dei dati verso il MIUR, fortemente eterogeneo e talora svolto da attori (es. Nucleo di Valutazione tramite la rilevazione “Nuclei”) ai quali non può esserne ragionevolmente ascritta la responsabilità. Rispetto alla prima formulazione dell’Allegato IV del documento finale ANVUR, la SUA-RD è stata ripensata mettendo meglio a fuoco alcuni aspetti non evidenti un anno fa. In particolare, la scheda ora risulta più chiaramente articolata in due parti: Pagina 1 di 3 - · una parte per la gestione in qualità della ricerca; · un'altra di aggiornamento rivolto alla VQR. Alcune sezioni della SUA RD saranno relative a dati rilevati a livello di ateneo (ad es. infrastrutture), altre conterranno informazioni rilevate a livello di dipartimento. L’analisi della relazione di queste informazioni con il set di dati VQR, tuttora in corso, ha l’obiettivo di garantire la piena coerenza dei due insiemi, anche per ridurre il carico di lavoro richiesto ad atenei e dipartimenti. I dati verranno letti su una finestra di tre anni scorrevole e gli indicatori saranno tutti calcolati su base triennale. Nel primo anno di attivazione, gli atenei dovranno caricare i dati relativi a 3 anni (2011-2013), per garantire piena continuità informativa rispetto alla VQR. A regime, il conferimento dei dati riguarderà solamente un anno. L’attività di raccolta dati sarà avviata nella primavera del 2014 su base sperimentale e la sperimentazione riguarderà solo alcuni dipartimenti per Ateneo. ANVUR prevede scadenze diversificate per il conferimento dei dati utili per la SUA-RD: avvio a - - gennaio e chiusura entro fine marzo. Ciò consentirebbe di conciliare le esigenze di tempestività e di precisione: · comunicando dati completi e ragionevolmente stabili (ad es. anche le pubblicazioni degli ultimi mesi di un anno) · in tempo utile per permettere anche la corretta gestione del riesame e la pianificazione degli obiettivi dell’anno in corso (la scheda relativa all’anno X-1, supporto informativo per il riesame e per le proposte di miglioramento dell’anno X, non può essere disponibile solamente ad anno X inoltrato...) A differenza di quanto previsto inizialmente (SUA-RD residente nei sistemi informativi dei singoli atenei e accessibile agli attori della valutazione) sia la scheda sia l’applicativo per la sua alimentazione saranno realizzati dal CINECA. Sul ‘congelamento’ dei dati di ateneo conferiti annualmente (ossia sulla possibilità di loro eventuali rettifiche in sede di rilevamento VQR) in generale, saranno possibili correzioni minori alla SUA-RD (per refusi o lievi scostamenti) successivamente alla sua chiusura, a fronte di motivata richiesta ad ANVUR. Per quanto riguarda il calcolo degli indicatori e in particolare le pesature differenziate, ANVUR ha ricordato che i pesi relativi agli indicatori della scheda saranno oggetto di decisione politica (MIUR); si può considerare orientativamente il set di indicatori/pesi utilizzato per la VQR. ANALISI DELLA SCHEDA (V. DETTAGLIO NEL FILE ALLEGATO) - - Non è stata analizzata la parte V della scheda (dati di terza missione), per la quale ANVUR attende gli esiti dei lavori condotti dal GdL dedicato. Per l’utilizzo nella valutazione di Ateneo, i dati (salvo poche eccezioni) dovranno essere mappati sui 16 ambiti disciplinari identificati da ANVUR per la VQR e l’ASN, ossia le 14 aree CUN con sdoppiamento dell’area 8 e dell’area 11 rispettivamente in 8A, 8B, 11A e 11B. Per quanto riguarda l’analisi delle pubblicazioni, ANVUR si riserva di esaminare alcuni temi specifici: 1. tipologie ammissibili (anche se non verrà chiesta una selezione individuale, come per VQR, non saranno comunque richieste tutte le tipologie censite in loginmiur). Questa scelta ha ricadute anche sulla definizione del set di docenti inattivi. 2. valutazione annuale delle pubblicazioni: ipotizzando l’utilizzo di indicatori bibliometrici per le aree in cui ciò è previsto, si dovrà definire un metodo per sostituire la peer review nelle aree non bibliometriche; 3. attribuzione della produzione scientifica di ricercatori provenienti da altri Atenei (potenziale dicotomia tra logica VQR e valutazione annuale del Dipartimento). 4. modalità di attribuzione del SSD ai fini della valutazione (dato generalmente non inserito nel catalogo locale e non univoco nel caso di pubblicazioni multidisciplinari); Pagina 2 di 3 N.B. Al riguardo gli Atenei segnalano che l’attribuzione dell’SSD alle pubblicazioni ai fini della valutazione interna (o come subject per altri tipi di analisi) non è prassi generalizzata e può avvenire con modalità diverse rispetto alla VQR (forma multipla, con regola di Ateneo e non mediante attribuzione da parte degli autori…). Eventuali modalità specifiche definite da ANVUR e non basate su automatismi richiederanno verosimilmente un impegno considerevole per la raccolta retrospettiva dei dati. 5. richiesta di eventuali dati aggiuntivi, a oggi non presenti in loginmiur, ritenuti necessari per la valutazione dei prodotti (quali, ad es., i c.d. ‘dati aggiuntivi’ compilati in sede VQR) Il problema della raccolta retrospettiva si pone anche per eventuali ulteriori dati aggiuntivi che non sono attualmente oggetto di rilevazione sistematica (ad es. PACS o classificazione dei matematici. PROSSIME ATTIVITÀ - Prevedere un ulteriore incontro per la messa a punto della scheda nella versione pilota per le sperimentazioni locali; Istituzione di un GdL misto ANVUR, CINECA e Codau Ricerca, affinché la messa a punto dell’applicativo CINECA tenga conto, oltre ai requisiti informativi richiesti, delle possibili ricadute sulle modalità organizzative di raccolta dati da parte degli atenei, con particolare attenzione per: 1. interoperabilità con i sistemi locali (web service, upload/download); 2. attori della compilazione; 3. test funzionali. In particolare gli atenei che hanno (o avranno) un CRIS interno hanno chiesto la possibilità di invio automatico dei dati all’applicativo Cineca, secondo gli stessi criteri di interoperabilità già in atto per l’invio delle pubblicazioni al sito docente. ANVUR esprime parere favorevole su questa richiesta, che dovrà essere oggetto di approfondimenti tecnici da parte del GdL e del Cineca. Pagina 3 di 3