Le linee guida per la valutazione di leader a livello locale Roma 24 ottobre 2017 A cura di Carlo Ricci

Valutazione del CLLD nel 14-20: due livelli in(ter)dipendenti? Livello Programma di Sviluppo Rurale Locale SSL Oggetto Misura 19 Strategia di Sviluppo Locale Responsabile Autorità di Gestione PSR (tramite il valutatore indipendente incaricato) GAL (tramite personale coinvolto nell’attuazione e/o valutatore indipendente incaricato) Focus della valutazione (elementi obbligatori) Valutazione di efficacia ed efficienza misura 19 e delle sue contribuzioni primarie e secondarie alle Focus Area e ad Europa 2020 Valutazione della strategia di sviluppo locale (cosa include?)

Riferimenti legali della valutazione delle SSL: Reg. 1303 Art. 34 (paragrafo 3, lettera g) Compiti dei Gruppi di Azione Locale CLLD: Verificare l'attuazione della strategia di sviluppo locale di tipo partecipativo e delle operazioni finanziate e condurre attività di valutazione specifiche legate a tale strategia Reg. 1303 Art. 35 Sostegno dei fondi SIE: I costi di esercizio connessi alla gestione dell'attuazione della SSL di tipo partecipativo consistenti in costi operativi, costi per il personale, costi di formazione, costi relativi alle pubbliche relazioni, costi finanziari nonché costi connessi alla sorveglianza e alla valutazione di detta strategia di cui all'articolo 34, paragrafo 3, lettera g);

Valutazione delle Strategie di Sviluppo Locale: Quattro questioni Valutazione o autovalutazione? Cosa si valuta (ovvero qual è l’oggetto della valutazione)? Quale processo devono mettere in campo i GAL/FLAG e che tipo di supporto e orientamento sarebbe utile fornire? È opportuno valutare il valore aggiunto e cosa significa?

Valutazione indipendente o autovalutazione? Reg. 1303 Art. 54 paragrafo 3: «Le valutazioni sono effettuate da esperti interni o esterni funzionalmente indipendenti dalle autorità responsabili dell'attuazione del programma.» L'obbligo giuridico di valutazioni da parte di esperti funzionalmente indipendenti di cui all'articolo 54, paragrafo 3, si applica ai Programmi Operativi e ai Programmi di Sviluppo Rurale. Esso non si riferisce alle "strategie di sviluppo locale CLLD".

Oggetto della valutazione delle SSL: Cosa si valuta? La logica di intervento della Strategia di Sviluppo Locale Rilevanza rispetto alle esigenze ed al potenziale locale e coerenza con le politiche di riferimento. Obbligatorio 2 L’efficacia e l’efficienza delle operazioni realizzate ed il loro contributo al raggiungimento dei risultati (e degli impatti?) previsti dalla strategia In che misura e a quale costo gli obiettivi sono stati raggiunti? La gestione delle risorse (umane, finanziarie e tecniche) e dei rapporti con fornitori e beneficiari 3 Il sistema di delivery della Strategia Le modalità con cui le 7 caratteris-tiche specifiche dell’ approccio CLLD sono state applicate 4 L’attuazione del metodo CLLD (applicazione combinata dei sette principi). Esternalità positive e benefici ottenuti grazie al metodo CLLD 5 Il valore aggiunto prodotto Influenza di fattori interni ed esterni al progetto sui risultati 6 I fattori di successo e di insuccesso

1 (Revisione del) Piano di Valutazione La gestione processo: 1 (Revisione del) Piano di Valutazione Formalizzazione di un indirizzo politico Approvazione di Documento di indirizzo che individua obiettivi e scopo, responsabilità, modalità di condivisione e guida della valutazione. Tempi Requisiti minimi ed eventuali elementi comuni Orientamento Supporto Training per capacity building Linee guida per pianificare la valutazione Piano della valutazione Completa l’indirizzo con il quadro di domanda valutativa e tutti gli elementi del mandato valutativo. Il Piano di Valutazione viene approvato dal C. di A.

Gli obiettivi spiegano perché bisogna effettuare la valutazione ovvero a chi dovrà servire per fare cosa (quali sono le intenzioni di utilizzazione dei risultati). A chi dovrà servire? Per fare cosa? A. Di G. ed i principali interlocutori locali Verificare i risultati raggiunti Comprendere come ed in quale misura l’azione del CLLD è efficace rispetto ad altri strumenti Amministratori e direzione GAL Dare conto di come sono state utilizzate le risorse Capire la percezione dei beneficiari Capire cosa funziona bene e cosa no GAL e A.diG. Rispondere ad un adempimento obbligatorio?

Definire lo scopo della valutazione significa rispondere alla domanda: cosa voglio valutare? Per specificare lo scopo bisogna: Definire l’ambito della valutazione che può essere settoriale (quale target o settore specifico) geografico istituzionale (relativo al contesto di programmazione) temporale (intervallo temporale considerato) Nella pratica l’ambito si definisce esprimendo una o più domande valutative. Ad esempio: «In quale misura la SSL ha rafforzato le imprese esistenti nel settore prodotti locali ed ha stimolato la creazione di nuove?»

Circoscrivendo gli aspetti su cui l’analisi valutativa deve concentrarsi per rispondere a ciascuna domanda attraverso l’individuazione di specifici criteri di giudizio. Questi, sostanzialmente, definiscono le questioni valutative «chiave» che focalizzano il successo degli interventi. In quale misura la SSL ha rafforzato le imprese esistenti nel settore prodotti locali ed ha stimolato la creazione di nuove? Domanda valutativa • Le imprese hanno diversificato la propria attività e sviluppato funzioni «a valle» • Sono state create nuove piccole imprese legate alle produzioni tipiche dell’area • La reputazione delle produzioni locali è aumentata Criteri di giudizio

La gestione processo al livello di GAL: Come è articolato un piano di valutazione? Obiettivi e scopo Completamento del quadro di domanda valutativa In quale misura la SSL ha rafforzato le imprese esistenti nel settore prodotti locali ed ha stimolato la creazione di nuove? Domanda valutativa • Le imprese hanno diversificato la propria attività e sviluppato funzioni «a valle» • Sono state create nuove piccole imprese legate alle produzioni tipiche dell’area • La reputazione delle produzioni locali è aumentata Criteri di giudizio Nr. di imprese finanziate Nr. di investimenti «a valle» Nr. di prog. per nuove imprese Nr. di persone raggiunte Indicatori di realizzazione Imprese rafforzate Imprese create Posti di lavoro (eq. TP) creati Incremento del tasso di notorietà Indicatori di risultato

La gestione processo al livello di GAL: Come è articolato un piano di valutazione? Modalità di gestione di valutazione e monitoraggio Obiettivi e scopo Completamento del quadro di domanda valutativa Attività di valutazione previste Informazioni e dati Tempistica Risorse (umane ed economiche) e capacità Comunicazione

Scelta del valutatore Approvazione di un Metodo di individuazione/selezione ed un Incarico Formale a personale già coinvolto nel PSL e/o indipendente. Requisiti minimi del valutatore e del progetto Tempistica e caratteristiche dei report Set indicatori Orientamento Supporto Collegamento a basi di dati Modelli di strumenti Modelli di operational database Progettazione della valutazione Individuazione di metodi e tecniche da applicare e costruzione dei relativi strumenti per la raccolta di informazioni. Progettazione del data management Costruzione del sistema di raccolta e gestione di dati di monitoraggio e informazioni statistiche e sull'attuazione per la produzione di rapporti di avanzamento e analisi valutative

Riflessione sul processo al livello di GAL: Quali fattori critici? Flussi di dati: è indispensabile disporre dei dati sull’attuazione delle operazioni e molto utile individuare indicatori baseline Coordinamento: ogni gruppo è autonomo, ma è un peccato perdere l’occasione di avere una base minima di informazioni aggregabili Tempistica: rischio di «arrangiare» una valutazione finale all’ultimo minuto. Capacity building: la capacità tecnica di gestione della valutazione e la «motivazione» del mandato politico

Quadro generale della valutazione di una SSL Regole di ammissibilità della spesa ecc. Tecnici Finanziari Investimenti previsti per le diverse tipologie di operazione Inputs Fisici Realizzazioni fisiche materiali ed immateriali Output Effetti diretti generati dagli investimenti Risultati Circa 75% Costi e modalità di realizzazione degli investimenti locali Regole e orient. su 7 car. specifiche del CLLD Tecnici Finanziari Costi di gestione ed animazione Comportament Applicazione delle 7 car. specifiche tramite gest. e animazione Effetti generati dal metodo CLLD: risultati, capitale sociale e governance Circa 25% Costi e modalità di applicazione dell’approccio CLLD

Valutare il valore aggiunto del CLLD: Perché? Rapporto speciale n.5/2010 della Corte dei Conti Europea I GAL hanno implementato l’approccio Leader in modi che limitano il potenziale valore aggiunto in termini di caratteristiche LEADER; La Commissione e gli Stati Membri non sono stati sufficientemente esigenti e condividono con I GAL la responsabilità di aver limitato il potenziale valore aggiunto; La Commissione e gli Stati Membri non possono dimostrare il valore aggiunto conseguito dall’implementazione di LEADER e non hanno valutato I costi ed i rischi aggiuntivi legati all’adozione dell’approccio

Valutare il valore aggiunto di LEADER: Cosa si valuta?

Valutare il valore aggiunto di LEADER: Tre tipologie di effetti?

GRAZIE PER L’ATTENZIONE! ca.ricci@tin.it A cura di Carlo Ricci