U.O. MONITORAGGIO E ANALISI Gli esiti occupazionali delle attività formative finanziate dal Fondo Sociale Europeo La valutazione degli esiti occupazionali in Liguria: acquisizioni e proposte per la nuova programmazione A cura di Elisabetta Garbarino Firenze – 22 aprile 2008

Levoluzione Le esigenze di monitoraggio e valutazione delle politiche attive del lavoro sono profondamente mutate, negli ultimi anni, in virtù di almeno due fenomeni significativi. –ampliamento della gamma degli interventi di politica attiva del lavoro in generale e in particolare di quelli cofinanziati dal Fondo Sociale Europeo –progressiva integrazione tra sistemi di istruzione e formazione U.O. MONITORAGGIO E ANALISI

ampliamento della gamma degli interventi di politica attiva del lavoro formazione come parte principale se non esclusiva peso crescente degli interventi di politica attiva del lavoro altri rispetto alla formazione –informazione, –orientamento, –servizi dincontro tra domanda e offerta di lavoro, –work experience, ecc. –formazione continua Fondi Interprofessionali lifelong learning e widelife learning, che rendono ancor più riduttivo limitare la rilevazione ai soli esiti occupazionali dei corsi per inoccupati norme nazionali entrate in vigore nel periodo –politiche dirette del lavoro: legge 30/2003, –politiche aventi finalità primarie diverse (ad es. in materia di immigrazione) politiche di tipo trasversale, –pari opportunità –politiche di inclusione U.O. MONITORAGGIO E ANALISI

progressiva integrazione tra sistemi di istruzione e formazione modifiche al Titolo V della Costituzione, consolidamento degli IFTS Istituzione ITS (e modifica del ruolo degli IFTS) percorsi sperimentali triennali di istruzione e formazione percorsi integrati innalzamento dellobbligo scolastico a 16 anni, fermo restando il limite per il diritto dovere allistruzione e formazione a 18 anni U.O. MONITORAGGIO E ANALISI

Quali esigenze conoscitive necessità di un piano di rilevazione degli esiti delle politiche attive del lavoro molto pi ù ampio di quello fin qui attuato, essenzialmente ma non esclusivamente, attraverso la tradizionale indagine sugli esiti occupazionali della formazione (per disoccupati) U.O. MONITORAGGIO E ANALISI

Quali esigenze operative La rete (perché aumentano i soggetti implicati) La regia regionale (la Regione non può fare tutto direttamente o tramite Enti strumentali) La necessità di produrre indicatori (omogenei nazionali e specifici per la Regione)

La rete numerosità dei soggetti istituzionali interessati titolari di competenze concorrenti e non, subordinate o delegate dalla Regione, necessit à di creare una rete tra i quanti sono interessati alle rilevazioni e al loro uso –Province, –Università –Ufficio Scolastico Regionale. U.O. MONITORAGGIO E ANALISI

La regia Regione regista di una complessa operazione di rilevazione degli esiti, in una logica di governance multilivello, al cui interno la Regione deve, –rilevare (direttamente o indirettamente) gli esiti delle attività di istruzione e formazione cui partecipa direttamente con finanziamenti propri e, –Coordinare le rilevazioni gestite da altri soggetti, anche confinanziandole nei casi in cui non siano ancora state avviate, ovvero vadano potenziate per garantire livelli minimi di comparabilità e di copertura delluniverso. U.O. MONITORAGGIO E ANALISI

Il quadro nazionale Avvio di un processo di omogeneizzazione degli indicatori di monitoraggio regionali. Obiettivo ambizioso, perché diversi fattori differenziano gli stili di monitoraggio regionali; in particolare: –la pluralità dei soggetti coinvolti nei processi di formazione con diverse collocazioni (es. enti erogatori / soggetti fruitori); –la pluralità degli enti che si occupano di diversi aspetti e/o di diversi oggetti dei monitoraggi (ISFOL, ISTAT, MIUR, MLPS); –la parziale opacità di alcune procedure di rilevazione condotte a livello regionale; –la difficoltà di relazione interna tra Centri per lImpiego Provinciali e Regioni. U.O. MONITORAGGIO E ANALISI

Completezza e qualità delle informazioni statistiche sulla Formazione professionale U.O. MONITORAGGIO E ANALISI Fonte: PRESIDENZA DEL CONSIGLIO DEI MINISTRI, COMMISSIONE PER LA GARANZIA DELLINFORMAZIONE STATISTICA, Completezza e qualità delle informazioni statistiche sulla Formazione professionale

Il lavoro svolto Ricognizione stato dellarte: - target oggetto della rilevazione - censuaria o campionaria - intervista telefonica o altro - curata da chi Il caso ligure

Una prima ricognizione a livello nazionale U.O. MONITORAGGIO E ANALISI Quali sistemi di monitoraggio regionali? Invio schede conoscitive ad alcuni referenti regionali Emilia Romagna Friuli Venezia Giulia Lazio Piemonte Provincia Autonoma Bolzano Provincia Autonoma di Trento Toscana Valle dAosta Veneto prima base informativa in merito alle dimensioni fondamentali delle rilevazioni condotte: universo di riferimento e relativo campione di indagato, strumento di indagine modalità di rilevazione, soggetti titolari dellindagine.

Universo di riferimento U.O. MONITORAGGIO E ANALISI Fonte: Elaborazioni su dati indagine diretta Agenzia Liguria Lavoro – UO Monitoraggio I dati attualmente disponibili mostrano una discreta omogeneità dei bacini di indagine considerati nei diversi territori: i corsi per disoccupati vengono monitorati in tutte le regioni e, ad eccezione di una, lindagine è estesa anche ad alcune tipologie di corsi per occupati (es. buoni formativi); 2 Regioni includono come oggetto di analisi anche i corsi svolti nellambito dellassolvimento degli obblighi formativi.

Campione U.O. MONITORAGGIO E ANALISI Fonte: Elaborazioni su dati indagine diretta Agenzia Liguria Lavoro – UO Monitoraggio In prevalenza le indagini sono censuarie; In alcuni casi la rilevazione viene effettuata con modalità di campionamento differenti: Censuaria per i corsi per disoccupati, campione stratificato sulla base di alcune caratteristiche degli altri corsi Nel caso delle indagini campionarie, i criteri di estrazione rimandano alla misura FSE, al genere Al target

Strumento U.O. MONITORAGGIO E ANALISI Fonte: Elaborazioni su dati indagine diretta Agenzia Liguria Lavoro – UO Monitoraggio In prevalenza viene condiviso il questionario ISFOL adattato alle specificità locali

Modalità di rilevazione U.O. MONITORAGGIO E ANALISI Fonte: Elaborazioni su dati indagine diretta Agenzia Liguria Lavoro – UO Monitoraggio In prevalenza i questionari sono somministrati telefonicamente

Chi si occupa della rilevazione U.O. MONITORAGGIO E ANALISI Fonte: Elaborazioni su dati indagine diretta Agenzia Liguria Lavoro – UO Monitoraggio

Il quadro regionale U.O. MONITORAGGIO E ANALISI Dal 1996 la Regione Liguria ha sviluppato una propria metodologia di rilevazione diretta (interviste agli allievi della FP) e dal 2000 ha adottato la scheda di rilevazione ISFOL (Gruppo Placement). strumento di rilevazione: questionario somministrato telefonicamente (metodo CATI, come da metodologia adottata dalle altre Regioni). universo di indagine:gli interventi formativi rivolti a disoccupati Le fasi dell indagine: 1.costruzione banca dati allievi, a partire dalla banca dati corsi (FP2000) 2.somministrazione censuaria del questionario telefonico [1]. [1] tempi di rilevazione – nel modello previsto da ISFOL – a 12 mesi dalla chiusura dell intervento. In questi anni l Agenzia è riuscita ad allinearsi, ma questo elemento rappresenta ancora un elemento di criticit à.

Le criticità dellattuale sistema di rilevazione U.O. MONITORAGGIO E ANALISI creazione della banca dati allievi: difficoltà di reperimento del materiale cartaceo nelle diverse Province e presso gli Uffici Regionali ( impossibile ricostruire luniverso di riferimento, ossia rintracciare tutti i verbali oggetto di indagine); modulistica adottata, non sempre omogenea (ha reso impossibile per rintracciare il telefono di tutti gli allievi. i tempi della rilevazione: senza una banca dati aggiornata in tempo reale, il momento del contatto con la persona è ritardato e comunque con un intervallo non omogeneo rispetto alla conclusione del corso (i 12 mesi appunto), elemento invece essenziale per la comparabilità interna ed interregionale dei dati stessi. Gli elementi di criticità riferiti alla costruzione della banca dati stanno via via diminuendo in relazione al sempre maggior uso in linea di FP2000, alimentato dagli Enti.

U.O. MONITORAGGIO E ANALISI ridisegnare larchitettura generale dellindagine sugli esiti a. messa a regime del sistema in tempo utile per lavvio della nuova programmazione b. ridefinizione dei compiti dei diversi soggetti implicati, anche nella prospettiva di valorizzare e razionalizzare le attività avviate nel tempo dalla Province Prospettive di lavoro nel medio periodo estendere la rilevazione alle politiche attive del lavoro regionali e provinciali a.individuazione delle politiche e degli interventi b.Individuazione dei titolari delle rilevazioni e dei loro contenuti c.Avvio sperimentale delle rilevazioni e messa a regime in tempi brevi

U.O. MONITORAGGIO E ANALISI Presupposto è la condivisione con il partenariato istituzionale e sociale PROCESSO

U.O. MONITORAGGIO E ANALISI 1. QUANTITATIVA 2. QUALI/QUANTITAVA 3. QUALITATIVA TIPI DI RILEVAZIONE

U.O. MONITORAGGIO E ANALISI o integrazione tra database esiti e Rubens (compatibilità con FP 2000) o Confronto/integrazione dati su Occupati Tipici e atipici Disoccupati No lavoro autonomo e soggetti IVA, individuabili con INPS (ma ad oggi non sembra possibile integrazione banche dati) 1. QUANTITATIVA: CONNESSIONI DA APPROVARE E VERIFICARE o Verifica tempistica estrazioni datawarehouse e rilevazioni provinciali: allineare tempi scarico dati DWH con bd allievi corsi o ipotesi integrazione banca dati tirocini e workexperiences o integrazione con procedure di Accreditamento (coinvolgimento Enti, collegato a processo di accreditamento: esiti come dati richiesti per accreditamento) o integrazione con le Province o Integrazione con altre Regioni o Confluenza progetto esiti e laboratorio delle professioni di domani, in particolare rispetto al Datawarehouse in fase di costruzione, che prevede lintegrazione di fonti per la lettura del contesto e delle tendenze, attualmente in fase di progettazione e sperimentazione

U.O. MONITORAGGIO E ANALISI 1. QUANTITATIVA: AZIONI Soggetto attuatore: realizzazione delle interviste allintero universo, attraverso il ricorso alle strutture formative con queste specifiche: definizione del set minimo di dati che dovranno essere inseriti nel sistema ed effettuazione delle conseguenti modifiche su FP2000, utilizzando una scheda di rilevazione derivata dallattuale questionario ISFOL fortemente semplificato avvio contestuale delle procedure di addestramento rilevatori degli Enti e delle ISA alla rilevazione dati e allutilizzo delle procedure informatiche affiancamento degli Enti nellavvio della rilevazione effettuazione di interviste di controllo su di un campione casuale, in concomitanza con lavvio di rilevazioni in profondità da parte dellAgenzia, che annualmente potrebbe utilizzare questionari più approfonditi su ambiti professionali o territoriali di interesse

U.O. MONITORAGGIO E ANALISI 1. QUANTITATIVA: PUNTI DI ATTENZIONE La rilevazione attraverso gli Enti costituisce laspetto che più di altri modifica la progettazione: o il ritorno al sistema di rilevazione attraverso gli Enti: maggiore tempestività del dato e copertura pressoché totale delluniverso (perché gli allievi mantengono il contatto con le sedi formative e si attendono dagli Enti un supporto anche dopo la conclusione del percorso formativo). o presuppone una progettazione condivisa con le Province e lindividuazione di incentivi, motivazioni e forme di controllo a campione della rilevazione. punti di forza o tempi più rapidi di effettuazione, o copertura maggiore delluniverso, con minor numero di rifiuti o mancate interviste; punti di debolezza: o minore certezza sullaffidabilità dei dati o rischio che non tutte le strutture dispongano di persone capaci di effettuare la rilevazione, o resistenza delle strutture ad accollarsi un compito aggiuntivo

U.O. MONITORAGGIO E ANALISI 1. QUANTITATIVA: UNIVERSO DI RIFERIMENTO E STRUMENTI DI RILEVAZIONE o Universo di riferimento o estensione delle rilevazioni alle politiche attive del lavoro regionali e provinciali, con priorità a quelle ritenute più rilevanti da Regione e Province o individuazioni di quali politiche o Strumento di rilevazione: o predisposizione di strumenti di rilevazione informatizzati che prevedano linvio del tracciato record allAgenzia, che dopo una verifica di congruenza e pulizia dei dati invia a FP2000 o riflessione critica e operativa sul questionario ISFOL attualmente in uso o comparabilità con le altre Regioni o per le politiche altre da FP, predisposizione degli strumenti e delle procedure di rilevazione, anche perché in questo caso potranno essere individuate delle buone pratiche provinciali da diffondere

U.O. MONITORAGGIO E ANALISI 1.QUANTITATIVA: RESTITUZIONE DEI RISULTATI o elaborazione dei dati con produzione di report articolati per Provincia, ed eventuale filiera formativa, tipo di formazione (prima formazione, alta formazione, ecc.) o messa a disposizione delle Province dei dati di sintesi, attraverso FP 2000; matrice dei dati resa anonima e solo per motivi di studio.

U.O. MONITORAGGIO E ANALISI 2. QUALI/QUANTITATIVA: VALUTAZIONE DELLA QUALITA DEGLI OUTPUT FORMATIVI o Rilevazione qualità degli output con i beneficiari intermedi e le imprese (schede stage, schede di gradimento) o individuazione del possibile concorso dei beneficiari intermedi (imprese e istituzioni) alla valutazione della qualità degli output formativi; o eventuale rilevazione sulla qualità percepita e sullutilità della formazione presso i soggetti che danno occupazione ai formati dagli interventi cofinanziati. o predisposizione, nel medio periodo, di rilevazione quantitativa campionaria sulla soddisfazione dei datori di lavoro o Creazione di sedi di discussione (laboratorio professioni e poli formativi) per una riflessione critica sulle attività formative rivolta alla loro migliore programmazione.

U.O. MONITORAGGIO E ANALISI 3. QUALITATIVA: ESITI DELLA FORMAZIONE CONTINUA avvio di una prima riflessione sulle modalità di rilevazione degli esiti della formazione continua (e permanente), in relazione con gli Enti Bilaterali, le Associazioni di categoria e le imprese o esplorazione presso le altre regioni virtuose per analizzare estensione e modalità di eventuali rilevazioni, per la formazione continua e permanente o successive riunioni tecniche con le Parti sociali e alcuni Enti bilaterali per valutare le possibilità di sviluppo della rilevazione o una prima fase sperimentale e pilota o approfondimento su alcuni strumenti, considerati buone prassi, sperimentati nella passata programmazione e riproposti in quella attuale, quali i voucher individuali