PROF.SSA ENRICA AMATURO
LA RICERCA VALUTATIVA
Anno
accademico
2012/13
METODOLOGIA DELLA
RICERCA SOCIALE
GLI APPROCCI
Positivista sperimentale
• Fondato sul metodo
scientifico
• Utilizza l’esperimento
• Genera forti perplessità
sull’eticità della
sperimentazione sui
gruppi di soggetti
• Esempio: NSWD
Pragmatista della qualità
o costruttivista del
processo sociale
• Fondato sulla
valutazione partecipata
• Utilizza metodi di analisi
in profondità e interattivi
• Non mette in campo
questioni di etica
• Esempio: il reddito di
cittadinanza in
Campania
LA RICERCA VALUTATIVA: LA
VALUTAZIONE
negoziazione,
stimolo alla partecipazione,
gestione dei gruppi,
Il contesto
in cui si
cala la
ricerca
valutativa:
la
valutazione
nel senso
ampio di
comunicazione,
prefigurazione di azioni di
cambiamento possibili,
ma anche dar conto,
fare chiarezza,
produrre trasparenza.
LA RICERCA VALUTATIVA: IL
VALUTATORE
abile ed esperto nella
ricerca,
ma anche buon
ascoltatore del campo,
Il buon
valutatore:
attivatore di risorse,
comunicatore esperto,
negoziatore di posizioni e
conflitti,
regista esperto.
MA COSA SI INTENDE PER VALUTARE?
Dare valore , costruire significato, diverso da verificare o
controllare
Funzioni:
learning, o apprendimento in vista del
miglioramento della situazione di partenza,
accountability, o rendicontazione.
Valutare come espressione di un giudizio, fondato
empiricamente, su un certo oggetto. Un lavoro scientifico
rigoroso, controllabile e allargato.
L’OBIETTIVO
Esprime un giudizio su un oggetto (politica, intervento) e sulla
realizzazione del cambiamento che questo intende raggiungere.
Elementi di criticità:
• scarto tra obiettivi prefissati e risultati raggiunti,
• cattiva progettazione,
• lettura errata dei bisogni collettivi,
• confusione tra buone politiche e politiche per il consenso.
Scopo ultimo:
• stimolare l’apprendimento di tutti gli attori coinvolti per fare in modo che imparino
dall’esperienza.
I DISEGNI DELLA RICERCA
VALUTATIVA E SOCIALE A
CONFRONTO: LE 9 TAPPE DI BEZZI
Accertamento delle risorse
Stipulazione dei valori valutativi
Esplorazione dello spazio semantico
Esplorazione dello spazio
semantico dei concetti al
centro della ricerca
Scelta degli indicatori
Costruzione delle definizioni
operative
Definizione del disegno specifico (offerta
tecnica)
Definizioni operative specifiche
Raccolta dei dati
Raccolta e analisi dei dati
Analisi dei dati
Sostegno all’uso della valutazione
La ricerca sociale
Analisi degli obiettivi dell’evaluando e
formulazione delle domande valutative
La ricerca valutativa
Definizione del mandato
IL CONCETTO DI SUCCESSO
Spendere bene:
•usare il denaro pubblico per ottenere gli
effetti desiderati sia dal punto di vista degli
amministratori sia dal punto di vista dei
cittadini.
Insidie dell’approccio positivistasperimentale:
•valutazione centrata sugli obiettivi dichiarati
ex-ante,
•valutazione legata alle definizioni a tavolino.
Una politica, un servizio, un intervento,
possono essere considerati un successo
quando rispondono agli obiettivi stabiliti,
quando realizzano nella loro
implementazione ciò che si erano proposti in
termini di effetti attesi o desiderati.
Soluzione pragmatista-della qualità
(Scriven):
Soluzione costruttivista-del processo
sociale:
•successo=aderenza a standard di qualità
esterni al progetto; differenza tra merit e
worth.
•traduzione empirica concertata del concetto
direttamente sul campo, valutazione
orientata all’utilizzatore e empowerment
evaluation.
EFFICACIA ED EFFICIENZE
Efficacia:
Efficienza:
Il
confronto
tra
approcci:
Efficacia interna:
Efficacia esterna:
• confronto dei risultati
ottenuti dal programma o
intervento con gli obiettivi
iniziali.
• confronto dei risultati ottenuti con il
contesto economico e sociale e i suoi
bisogni (bisogno collettivo che ha
generato il programma/intervento).
Marginale
Istituzionale
Approccio
positivista
sperimentale:
Approccio
pragmatista
della qualità:
• trovare indicatori
che trasformino gli
obiettivi in variabili
per valutare il
successo(variabile
-risultato e
variabiletrattamento).
• definire gli
standard cui i
risultati devono
tendere per
valutare il
successo.
Approccio
costruttivista
del processo
sociale:
• il successo è la
sintesi di ciò che
pensano gli
stakeholder
coinvolti (processo
metodologico dal
basso).
PARTECIPAZIONE E TECNICHE DI
RICERCA
Partecipazione:
Punti problematici:
Tecniche di costruzione
del dato in comune
con la ricerca sociale:
Scelte:
Tecniche specifiche:
•non scelta ideologica ma necessità metodologica.
•tempi,
•ruolo del valutatore,
•rigore scientifico.
•questionari e interviste,
•documenti personali e istituzionali,
•fonti statistiche.
•analisi primaria o secondaria?
•Approccio standard, non standard o mix?
•Modello sperimentale o theory based evaluation?
•tecniche che coinvolgono gruppi reali (Brainstorming,
Focus Group) o nominali (Delphy) esperti dell’evaluando.
