La cultura della valutazione Disegno e finalità delle rilevazioni internazionali e nazionali degli apprendimenti.

Slides:



Advertisements
Presentazioni simili
PIANO DI INFORMAZIONE E FORMAZIONE SULL’INDAGINE OCSE-PISA E ALTRE RICERCHE NAZIONALI E INTERNAZIONALI Seminario provinciale rivolto ai docenti della scuola.
Advertisements

Misurazione e valutazione
Obbligo e Riordino dei Cicli
PROVA NAZIONALE a.s Risultati in Matematica PISA 2003 e voti: Fonte: Rapporto Regionale del Veneto PISA 2003 Angela Martini –
I NIZIATIVA NELL AMBITO DELLE ATTIVITÀ REALIZZATE DALL U.S.R. DEL F RIULI V ENEZIA G IULIA IN TEMA DI VALUTAZIONE DEGLI APPRENDIMENTI Prove Invalsi tra.
Il quadro di riferimento di matematica: INVALSI e TIMSS a confronto
La cultura della valutazione
Due esempi di valutazione per competenze nella matematica.
per il miglioramento degli esiti
RELAZIONI INTERNAZIONALI Angela Vegliante Responsabile Frascati, 8 novembre 2005.
INVALSI OCSE-PISA 2009 Programme for International Student Assessment Studio principale.
CURRICOLO D’ISTITUTO IPOTESI DI LAVORO ZELO BUON PERSICO.
OCSE-PISA 2009 Programme for International Student Assessment Studio principale.
Quadro di riferimento INValSI Scienze I livelli di competenza
I risultati di PISA 2006 Qualità ed equità del sistema scolastico italiano Bruno Losito Università Roma Tre.
Che cosa è OCSE – PISA Che cosa è INVALSI
DIFFICOLTA’ DEL LINGUAGGIO
Modena – USR Progetto Elle – Seminario provinciale conclusivo Progetto ELLE Restituzione dati DIARI DI BORDO EVENTI.
III°I.C.”VERGA” PACHINO
La costruzione e lo sviluppo delle competenze a scuola
L’indagine OCSE-PISA: il framework e i risultati per la matematica
SERVIZIO NAZIONALE DI VALUTAZIONE a.s – Le prove SNV : finalità Marzo
PIANO DI INFORMAZIONE E FORMAZIONE SULLINDAGINE OCSE-PISA E ALTRE RICERCHE NAZIONALI E INTERNAZIONALI PIANO DI INFORMAZIONE E FORMAZIONE SULLINDAGINE OCSE-PISA.
Quadri di Riferimento per la Matematica
Certificazione delle competenze
PIANO DI INFORMAZIONE E FORMAZIONE SULLINDAGINE OCSE-PISA E ALTRE RICERCHE NAZIONALI E INTERNAZIONALI PIANO DI INFORMAZIONE E FORMAZIONE SULLINDAGINE OCSE-PISA.
La matematica nelle indagini internazionali e nella prova nazionale: riflessioni sui risultati degli studenti italiani Giorgio Bolondi Università degli.
SERVIZIO NAZIONALE DI VALUTAZIONE
International Association for the Evaluation of Educational Achievement L’indagine IEA TIMSS Stefania Pozio.
Da Pisa 2003 a Pisa 2006: elementi di valutazione e prospettive Bruno Losito Università di Roma Tre NPM PISA 2006.
Rapporto sui risultati delle prove Invalsi
Servizio Nazionale di Valutazione
La prova di lettura nelle indagini IEA PIRLS e OCSE-PISA
Il contributo della valutazione esterna al miglioramento educativo
Le indagini internazionali e la valutazione delle competenze
PIANO DI INFORMAZIONE E FORMAZIONE SULLINDAGINE OCSE-PISA E ALTRE RICERCHE NAZIONALI E INTERNAZIONALI PIANO DI INFORMAZIONE E FORMAZIONE SULLINDAGINE OCSE-PISA.
PIANO DI INFORMAZIONE E FORMAZIONE SULLINDAGINE OCSE-PISA E ALTRE RICERCHE NAZIONALI E INTERNAZIONALI PIANO DI INFORMAZIONE E FORMAZIONE SULLINDAGINE.
Servizio Nazionale di Valutazione: il mandato Art. 1, c. 5, Legge 25 ottobre 2007, n. 176: dallanno scolastico 2007/08 il Ministro della Pubblica Istruzione.
COMMISSIONE VALUTAZIONE
PROGETTO REGIONALE ELLE – EMERGENZA LINGUA- II SEMINARIO DISTRETTUALE DI RAVENNA – Ravenna, 22 novembre 2010 Pianificazione attività di Istituto Parte.
PROGETTO ELLE EMERGENZA LINGUA. MOTIVAZIONI DELLINIZIATIVA NUMEROSI RISCONTRI CIRCA I LIVELLI DI CRITICITA DELLE COMPETENZE DEGLI ALLIEVI ITALIANI NEL.
Progetto di Formazione
PIANO DI INFORMAZIONE E FORMAZIONE SULLINDAGINE OCSE-PISA E ALTRE RICERCHE NAZIONALI E INTERNAZIONALI PIANO DI INFORMAZIONE E FORMAZIONE SULLINDAGINE OCSE-PISA.
CONFRONTO TRA QUADRI DI RIFERIMENTO.
USR Liguria Anna Maria Parodi I RISULTATI DI ITALIANO e altri strumenti utili SEMINARI PROVINCIALI SNV 2011/12.
PIANO DI INFORMAZIONE E FORMAZIONE SULLINDAGINE OCSE-PISA E ALTRE RICERCHE NAZIONALI E INTERNAZIONALI DISEGNO E FINALITÀ DELLE INDAGINI INTERNAZIONALI.
OBBLIGO SCOLASTICO: UNA SFIDA? ASSE MATEMATICO. Il nuovo obbligo scolastico come opportunità Opportunità per cosa? Opportunità per chi?
In questa lezione  Alcune caratteristiche del sistema scolastico italiano alla luce dei risultati di alcune indagini internazionali e nazionali  Prime.
OCSe-PISA e Veneto. PISA Programme for International Student Assessment ): fu avviato nel 1997 da parte dei paesi aderenti all’OCSE.
Il contributo della valutazione esterna al miglioramento educativo Stefania Pozio.
Finalità generale della scuola: sviluppo armonico e integrale della persona all’interno dei principi della Costituzione italiana e della tradizione culturale.
PROVE OCSE-PISA OCSE Organizzazione per la Cooperazione e lo Sviluppo Economico È un'organizzazione internazionale di studi economici per i paesi membri,
Grottaferrata 24 marzo 2015 Esami di Stato a conclusione del primo quinquennio di applicazione delle Indicazioni Nazionali Gestire il cambiamento.
 INVALSI  International Association for the Evaluation of Educational Achievement E’ una associazione di Enti di ricerca non governativi;
 INVALSI   Sviluppato da: Organizzazione per la Cooperazione e lo Sviluppo Economico (OECD – OCDE – OCSE)  PISA-Programme for International.
I risultati delle indagini INVALSI: strumenti per la scuola Laboratorio di lettura e analisi dei risultati Invalsi Giampaolo Grechi ICS “Guido Monaco”,
LA VALUTAZIONE ESTERNA DEGLI APPRENDIMENTI: LE RILEVAZIONI DELL’INVALSI Dino Cristanini Direttore generale INVALSI.
Istituto Comprensivo Ivrea 1
I.C. “A. MANZONI” MESOLA (FE)
SCUOLA STATALE SECONDARIA DI PRIMO GRADO C. COLOMBO (TA) RELAZIONE SUI RISULTATI DELLE PROVE INVALSI DI ITALIANO E MATEMATICA A. S CLASSI TERZE.
Il rendimento scolastico. Le rilevazioni su larga scala Il rendimento scolastico nelle rilevazioni nazionali e internazionali Alcuni risultati che si ripetono.
II seminario tematico a invito sulla valutazione Che cos’è l’ESCS e come si valuta Roberto Ricci INVALSI Roma, 1 marzo 2016.
LA NUOVA NORMATIVA SUL SISTEMA NAZIONALE DI VALUTAZIONE.
ATTIVITÀ DI RILEVAZIONE E DI TESTING NAZIONALE E INTERNAZIONALE.
Quadro di Riferimento INVALSI: elementi di confronto e continuità fra ordini di scuola.
Corso di formazione Scuole “Polo” ITALIANO Carla Galdino131/05/2016.
PROVA NAZIONALE a.s Punteggi prova Matematica PISA 2003 e voti di matematica in pagella, Veneto e Italia Fonte: Rapporto Regionale del Veneto.
ESAME DI STATO CONCLUSIVO DEL I CICLO DI ISTRUZIONE Anno scolastico Inizio: da stabilire Termine: entro il 30 giugno 2010.
Cosa studia la Pedagogia?
AVVIO DEL SISTEMA NAZIONALE DI VALUTAZIONE USR dell’Emilia-Romagna Roberto Ricci INVALSI Salsomaggiore (PR), 4 marzo 2015.
Transcript della presentazione:

La cultura della valutazione Disegno e finalità delle rilevazioni internazionali e nazionali degli apprendimenti

I fattori a monte della diffusione di forme di valutazione esterna degli apprendimenti (1)  Grande espansione dei sistemi d’istruzione nel secondo dopoguerra, con conseguente esplosione della spesa pubblica Grande espansione dei sistemi d’istruzione nel secondo dopoguerra, con conseguente esplosione della spesa pubblica  Crisi dell’istruzione e messa in discussione dell’esistenza di una relazione semplice e diretta fra risorse investite nell’istruzione (input) e risultati ottenuti (output) e conseguentemente delle politiche scolastiche basate sul semplice aumento della spesa Crisi dell’istruzione e messa in discussione dell’esistenza di una relazione semplice e diretta fra risorse investite nell’istruzione (input) e risultati ottenuti (output) e conseguentemente delle politiche scolastiche basate sul semplice aumento della spesa  Tendenza al passaggio da modelli burocratici di governo della scuola a modelli “post-burocratici”, in un quadro di decentralizzazione dei poteri e delle competenze Tendenza al passaggio da modelli burocratici di governo della scuola a modelli “post-burocratici”, in un quadro di decentralizzazione dei poteri e delle competenze

Risultati in Matematica PISA 2003 e spesa per studente Fonte: Rapporto Internazionale PISA 2003

Spesa totale per studente per tutto il percorso scolastico (2008) Fonte: Education at a Glance 2011: OECD Indicators - © OECD 2011

I fattori a monte della diffusione di forme di valutazione esterna degli apprendimenti (2)  La massificazione dell’istruzione ha fatto venir meno le condizioni che un tempo assicuravano, entro certi limiti, la confrontabilità dei voti scolastici e dei titoli di studio all’interno di un paese La massificazione dell’istruzione ha fatto venir meno le condizioni che un tempo assicuravano, entro certi limiti, la confrontabilità dei voti scolastici e dei titoli di studio all’interno di un paese  Esigenza di trasparenza sul valore dei titoli e delle certificazioni, considerato che le valutazioni degli insegnanti non sono comparabili Esigenza di trasparenza sul valore dei titoli e delle certificazioni, considerato che le valutazioni degli insegnanti non sono comparabili  Questa esigenza è resa più forte dalla apertura dei confini e dalla conseguente necessità di favorire la mobilità della forza lavoro e il riconoscimento delle qualificazioni nel mercato comune Questa esigenza è resa più forte dalla apertura dei confini e dalla conseguente necessità di favorire la mobilità della forza lavoro e il riconoscimento delle qualificazioni nel mercato comune

Fonte: Elaborazione sul dataset PISA 2003 dell’Italia Relazione tra voti scolastici in Matematica e risultati in matematica PISA 2003

Indagini internazionali: di sistema  offrono dati sulle prestazioni degli studenti comparabili a livello internazionale  permettono di individuare punti di forza e di debolezza del proprio sistema scolastico  ricercano fattori antecedenti e correlati del profitto scolastico (e in che misura operano nello stesso modo in diversi contesti) … Indagini nazionali: dal sistema alle singole scuole  accertano i livelli di apprendimento degli studenti italiani in italiano e in matematica  offrono dati comparabili a livello nazionale, regionale e a livello di singola scuola e classe Indagini internazionali e nazionali: diversi obiettivi

Le determinanti: risorse, organizzazione, valutazione Quali fattori concorrono a migliorare i risultati della scuola?  esami centralizzati e standardizzati  autonomia delle scuole, se accompagnata da monitoraggio e valutazione  superamento di soglie minime di spesa per attrezzature e materiali educativi  forme integrative della retribuzione di base (in un contesto di autonomia)  livello di qualificazione degli insegnanti  ….. il peso del combinato disposto di “talento” e “impegno” di ogni insegnante. Secondo le evidenze internazionali e italiane appaiono poco rilevanti o incerti gli effetti di:  numero di ore di insegnamento curricolare  dimensione delle classi  livello retributivo degli insegnanti Mentre hanno un peso significativo positivo:

La finalità della rilevazione L’INVALSI ritiene che la finalità ultima della misurazione degli apprendimenti risieda nel fornire alle singole scuole uno strumento di diagnosi per migliorare il proprio lavoro. L’INVALSI si pone dunque come Istituto al servizio della singola scuola. Da ciò derivano alcune indicazioni molto precise circa la natura e la finalità del processo di rilevazione.

I dati I dati appartengono alla singola scuola alla quale verranno restituiti nel modo più disaggregato possibile, cioè secondo la distribuzione delle risposte domanda per domanda. Questo modello permetterà a ciascuna scuola di individuare all’interno di ogni disciplina le aree di eccellenza e quelle problematiche che necessitano di una particolare cura. La pubblicazione di ulteriori analisi sarà effettuata da parte dell’INVALSI solo ed esclusivamente su dati aggregati in modo tale che sia pienamente garantito l’anonimato degli allievi e delle singole scuole.

Il valore aggiunto: come si calcola 1)con la differenza tra il punteggio medio grezzo di tale scuola e quello medio generale di un certo territorio, 2)mediante la misurazione dei progressi medi che gli allievi realizzano in un determinato arco di tempo (guadagni cognitivi), 3)per mezzo della differenza media tra i punteggi osservati ed i punteggi attesi in relazione alle caratteristiche degli allievi (condizione socio-economico-culturale, attitudini, ecc.), 4)mediante il guadagno cognitivo medio netto rispetto a tutti i fattori di contesto che non sono controllati dalla scuola.

Un esperimento di valore aggiunto (1)

Un esperimento di valore aggiunto (2)

Perché misurare Scopo delle misurazioni:  Le prove INVALSI hanno lo scopo principale di misurare i livelli di apprendimento raggiunti dagli studenti italiani relativamente ad alcuni aspetti di base di due ambiti fondamentali: la comprensione della lettura e la matematica.  La letteratura dimostra che la conoscenza in alcune discipline fondamentali (lettura, matematica) ha un ruolo di primo piano nell’ avanzamento individuale e dell’intera società  gli ambiti oggetto di misurazione delle prove INVALSI non esauriscono di certo i saperi e le competenze prodotte dalla scuola. NON Valutare!!!

Alla base delle rilevazioni Quadro teorico di riferimento:  definisce gli ambiti, i processi cognitivi e i compiti oggetto di rilevazione, delimitando quindi il campo rispetto al quale sono costruite le prove.  permette di definire e circoscrivere il valore informativo delle prove che in base ad esso vengono costruite, chiarendone la portata e i limiti.  Costituisce il documento fondamentale per gli autori delle prove, per gli esperti che ne curano la revisione, per i docenti che sono chiamati a interpretare i risultati dei loro allievi e per i cosiddetti stakeholder che utilizzano i risultati delle rilevazioni standardizzate nazionali per valutare i livelli di apprendimento garantiti dal sistema educativo nel suo complesso.

La struttura del Quadro di Riferimento Quadro di riferimento per la valutazione Quadro di riferimento per i curricoli Quadri di riferimento per le valutazioni internazionali Esiti delle rilevazioni precedenti Prassi scolastica 16

STRUTTURA del Quadro di Riferimento (Matematica) PROCESSI CONTENUTI AMBITI COMPITI 17

Ambito: Spazio e figure Processo: n.8: Saper riconoscere forme nello spazio Contenuto: Equivalenza tra figure piane Compito: Saper scomporre figure equivalenti

1.Conoscere e padroneggiare contenuti specifici della matematica ( oggetti matematici, proprietà, strutture... ) 2.Conoscere e padroneggiare algoritmi e procedure ( in ambito aritmetico, geometrico... ) 3.Conoscere e utilizzare diverse forme di rappresentazione e saper passare da una all'altra ( verbale, scritta, simbolica, grafica, tabellare,... ) 4. Saper risolvere problemi utilizzando gli strumenti della matematica (individuare e collegare informazioni utili, confrontare strategie di risoluzione, individuare schemi, esporre il procedimento risolutivo,...) PROCESSI COGNITIVI

5.Riconoscere in contesto il carattere misurabile di oggetti e fenomeni e saper utilizzare strumenti ( stimare una misura, individuare l’unità di misura appropriata, …) 6. Acquisire progressivamente forme tipiche del pensiero matematico ( congetturare, verificare, giustificare, definire, generalizzare, …) 7. Utilizzare la matematica appresa per il trattamento quantitativo dell'informazione in ambito scientifico, tecnologico, economico e sociale (descrivere un fenomeno in termini quantitativi, interpretare una descrizione di un fenomeno con strumenti statistici o funzioni, costruire un modello...) 8. S aper riconoscere le forme nello spazio ( riconoscere forme in diverse rappresentazioni, individuare relazioni tra forme, immagini o rappresentazioni visive, visualizzare oggetti tridimensionali a partire da una rappresentazione bidimensionale e, viceversa, rappresentare sul piano una figura solida, saper cogliere le proprietà degli oggetti e le loro relative posizioni, …). PROCESSI COGNITIVI

Struttura del Quadro di riferimento di Italiano Competenze di padronanza linguistica Ambiti Testi Processi cognitivi - aspetti della lettura Grammatica Oggetti linguistici specifici

In una prova nazionale, che deve essere di semplice somministrazione e semplice correzione, per motivi tecnici è possibile valutare solo: –le competenze di lettura –le conoscenze (e competenze) grammaticali Che cosa si può valutare riguardo la padronanza linguistica  La lettura è una competenza che serve per tutta la vita, anche per continuare ad apprendere  Risultati di una prova di lettura ben fatta sono fortemente predittivi del successo scolastico

Le competenze di lettura nel Quadro di riferimento INVALSI Per competenza si intende nel Quadro la capacità di selezionare, far interagire ed elaborare conoscenze per la comprensione e la valutazione di un testo: continuo, non continuo, misto. Testuali Grammaticali Lessicali Le competenze di lettura verificate nella prima sezione della prova sono quelle:

Competenza pragmatico-testuale: capacità di ricostruire, a partire dalla lettura del testo e da conoscenze enciclopediche, l’insieme di significati che il testo veicola, assieme al modo in cui essi sono veicolati Competenza lessicale relativa alla lettura: capacità di individuare il significato, pertinente a un determinato contesto, di un vocabolo (anche non conosciuto) e le relazioni di significato tra vocaboli in vari punti del testo. Competenza grammaticale relativa alla lettura: capacità di individuare le strutture morfosintattiche della frase e le strutture interpuntive in funzione della loro pertinenza testuale, cioè dal punto di vista del loro apporto alla costruzione dei significati del testo. Definizione dell’ambito

Classificazione quesiti QdR INVALSI: aspetti della lettura

Aspetto 2 Individuare informazioni date esplicitamente nel testo

Tipi di testo nel QdR INVALSI Scuola primaria classe 2°Narrativo continuo (o misto) Scuola primaria classe 5° Scuola secondaria 1° grado: classe 1° Narrativo continuoInformativo /espositivo (anche misto) Oppure Brevi testi non continui Scuola secondaria 1° grado: classe 3° (prova nazionale) Narrativo continuoInformativo /espositivo e parzialmente o Informativo/argomentativo (anche misto) Oppure Brevi testi non continui Scuola secondaria 2° grado classe 2° Narrativo continuo (anche più di 1) Oppure poetico Argomentativo (anche misto) e/o Brevi testi non continui

Organizzazione delle rilevazioni  Formulazione dei quesiti (numero di quesiti tre o quattro volte superiore a quello che effettivamente compare nella prova stessa somministrata agli allievi) –200 docenti ed esperti provenienti dal mondo della scuola e dell’università. –il consistente numero di autori rende possibile disporre di un’ampia varietà di quesiti sia rispetto alla modalità di formulazione sia rispetto ai contenuti. –se si vuole evitare che si inducano nella scuola fenomeni non desiderabili di addestramento alle prove standardizzate è necessario che queste siano molto varie da un anno all’altro, sia rispetto ai contenuti sia alle modalità con le quali i quesiti sono formulati.

Organizzazione delle rilevazioni Messa a punto delle prove (ricercatori Invalsi, esperti):  prima valutazione qualitativa in funzione di  rispondenza delle domande al QdR  al livello scolastico per il quale devono essere proposte le prove  composizione del fascicolo che dovrà essere inviato al pre-test.  Pre-test:  campione casuale di classi con rappresentatività nazionale (circa 5000 studenti)  Studenti dell’anno successivo  Analisi risultati pre-test: calibrazione delle domande – Capacità misuratoria di ogni domanda: viene analizzata mediante modelli statistici in grado di stabilire la coerenza di ciascuna opzione di risposta rispetto: al costrutto oggetto di valutazione al livello di abilità/competenza del rispondente alla difficoltà specifica della domanda stessa...

Organizzazione delle rilevazioni  Messa a punto dei fascicoli: sono composti in base:  tempi di compilazione  livello complessivo di difficoltà  equilibrio degli ambiti e dei processi  ATTENZIONE: La composizione di una prova standardizzata rivolta all’accertamento su scala nazionale dei livelli di apprendimento non risponde agli stessi criteri che guidano la costruzione delle verifiche di classe. Una prova standardizzata nazionale deve essere in grado di misurare i risultati degli studenti all’interno di una scala di abilità/competenza molto lunga, dai livelli più bassi a quelli di eccellenza.

Valutazione caratteristiche misuratorie di una prova  1. valutazione generale di affidabilità della prova mediante l’indice α di Cronbach (dà un’indicazione se le domande che compongono la prova sono tra loro coerenti e volte alla misurazione dello stesso oggetto);  2. la Rasch Analysis per la stima della difficoltà delle domande 3. placement relativo delle domande rispetto al punteggio di Rasch assegnato a ciascun allievo (distribuzione della difficoltà delle domande in grado di coprire tutto l’intervallo della scala su cui insistono i livelli di apprendimento degli allievi);  4. l’indice di discriminazione statistica.

Difficoltà delle domande

Placement delle domande V primaria - matematica

Discriminatività delle domande  più una domanda è discriminativa, tanto più essa è in grado di misurare la variazione di probabilità di fornire la risposta corretta anche per piccole variazioni di abilità del rispondente.

CLASSEITALIANOMATEMATICA II primaria 69,2 (0,31) 60,3 (0,31) V primaria 73,1 (0,20) 68,4 (0,15) I sec. di I gr. 62,4 (0,20) 46,6 (0,31) III sec. di I gr. 66,4 (0,46) 56,1 (0,31) II sec. di II gr. 69,8 (0,26) 47,9 (0,32) Percentuali di risposte corrette nelle prove SNV e PN

Seconda Primaria : ITALIANO

Seconda Primaria : MATEMATICA

Seconda sec. di secondo grado: ITALIANO

Seconda sec. di secondo grado: MATEMATICA

Le differenze negli indirizzi di studio (Italiano) ROMA – 28 luglio 2011

Le differenze negli indirizzi di studio (Matematica) ROMA – 28 luglio 2011

ITALIANO: Differenza percentuale nei risultati medi ROMA – 28 luglio 2011

MATEMATICA: risultati medi ROMA – 28 luglio 2011

IEA  IEA – PIRLS (Progress in International Reading Literacy Study)  IEA – TIMSS (Trends in International Mathematics and Science Study)OCSE  OCSE – PISA (Programme for International Student Assessment)  OCSE – ALL (Adult Literacy and Life Skills ) Le indagini internazionali

le indagini internazionali – IEA PIRLS  è un progetto internazionale promosso dalla IEA ( International Association for the Evaluation of Educational Achievement ) per iniziativa di ricercatori e pedagogisti  misura i livelli di comprensione della lettura di alunni al quarto anno di scolarità (quarta classe della scuola primaria)  effettua rilevazioni periodiche ogni 5 anni (2001, 2006 e … 2011)  prevede prove con domande a scelta multipla; domande a risposta aperta breve; domande a risposta aperta estesa  utilizza test cognitivi e questionari rivolti agli studenti, alla famiglia, agli insegnanti e alle scuole  ha coinvolto 40 paesi nel 2006

le indagini internazionali – IEA TIMSS  è un progetto internazionale promosso dalla IEA ( International Association for the Evaluation of Educational Achievement ) per iniziativa di ricercatori e pedagogisti  rileva gli apprendimenti degli studenti in matematica e in scienze di alunni sia al quarto sia all’ottavo anno di scolarità (quarta classe della primaria e terza classe della secondaria di primo grado)  effettua rilevazioni periodiche degli apprendimenti ogni 4 anni (1995, 1999, 2003, 2007 e … 2011)  prevede prove con domande a scelta multipla; domande a risposta aperta breve; domande a risposta aperta estesa  utilizza questionari rivolti agli studenti, agli insegnanti e alle scuole  ha coinvolto 59 paesi nel 2007

le indagini internazionali – IEA TIMSS (strumenti)

le indagini internazionali – OCSE PISA  è un progetto internazionale promosso dall’OCSE (Organizzazione per la Cooperazione e lo Sviluppo Economico) per iniziativa dei governi, ed è gestito e coordinato da un consorzio tecnico internazionale  Misura l’acquisizione da parte di quindicenni scolarizzati di alcune competenze giudicate essenziali per svolgere un ruolo consapevole e attivo nella società, negli ambiti della lettura, della matematica e delle scienze  approfondisce, ogni tre anni, uno in particolare dei tre ambiti di competenza (2000 e 2009: lettura; 2003 e 2011: matematica; 2006: scienze)  prevede prove con quesiti a scelta multipla semplice e complessa e quesiti aperti a risposta univoca e articolata  utilizza questionari per rilevare informazioni di contesto, rivolti agli studenti, alle scuole e ai genitori  ha coinvolto 67 paesi nel 2009

Risultati in Lettura: Paesi OCSE 486

Punteggi medi in Lettura: regioni/prov.au.

Punteggi medi in Lettura: tipo di scuola

Trend Lettura - Italia

PISA 2003 Questionario studenti - alcuni risultati  Ambiente socio-economico e culturale  Motivazioni e atteggiamenti nei confronti della scuola

54 Indice dello status socioeconomico e culturale (ESCS) ISCED (International Standard Classification of Education) HOMEPOSS HOMEPOSS (Home Possession) HISEI (Highest Parental Occupation Status) ESCS Stefania Pozio _ Centro Nazionale PISA Qual è il lavoro principale di tua madre/padre? Qual è il titolo di studio più alto conseguito da tua madre/padre?

55 HOME POSSESSION - A casa tua ci sono: una scrivania per fare i compiti? una camera solo per te? un posto tranquillo per studiare? un computer che puoi usare per lo studio? software didattici? un collegamento a Internet? una tua calcolatrice? libri di letteratura classica libri di poesia? opere d’arte (ad esempio, quadri)? libri da consultare per fare i compiti? un dizionario? una lavastoviglie? un lettore DVD o un videoregistratore? mobili d’antiquariato? un televisore al plasma? un impianto di aria condizionata?

56 PISA 2009 Questionario studenti- indice dello status socio-economico e culturale

57 PISA 2003 – Autoefficacia e risultati in matematica degli studenti italiani Stefania Pozio _ Centro Nazionale PISA

58 PISA 2009 Piacere nella lettura e rendimento degli studenti italiani

59

60

61

62

63

Difficoltà Livello 1 Formato Domanda aperta Area dei contenuti Quantità Situazione e Contesto Pubblico Competenze Riproduzione Punteggio pieno Codice 1: ZAR (l’unità di misura non è richiesta) Nessun punteggio Codice 0:Altre risposte Codice 9:Non risponde CORRETTE: Italia 70% OCSE 78,7% OCSE-PISA – le prove di matematica OMESSE: Italia 11,3% OCSE 6,5%

DifficoltàLivello 3 FormatoDomanda aperta a risposta breve Area dei contenuti Cambiamento e relazioni Situazione e Contesto Personale CompetenzeConnessioni Punteggio pieno Codice 1:Le 10 di mattina o le 10:00 Nessun punteggio Codice 0:Altre risposte Codice 9:Non risponde OCSE-PISA – le prove di matematica CORRETTE: Italia 42,00% OCSE 50,7% OMESSE: Italia 26,80% OCSE 18,7%

Difficoltà Livello 4 Formato Scelta multipla Area dei contenuti Incertezza Situazione e Contesto pubblica Competenze riproduzione Punteggio pieno Codice 1: E Nessun punteggio Codice 0: Altre risposte Codice 9: Non risponde OCSE-PISA – le prove di matematica CORRETTE Italia 37,1% OCSE 46,9% OMESSE Italia 15,2% OCSE 6,7%

Classe IV Primaria Formato Aperta Dominio di contenuto Numero Dominio cognitivo Conoscenza Benchmark Alto IEA-TIMSS – le prove di matematica CORRETTE: Italia 51,1% TIMSS 38.7% OMESSE: Italia 10,1% TIMSS 10,5%

Classe IV Primaria Formato Scelta multipla Dominio di contenuto Visualizzazione dati Dominio cognitivo Ragionamento Benchmark Avanzato IEA-TIMSS – le prove di matematica CORRETTE: Italia 25,6% TIMSS 32,3% OMESSE: Italia 5,7% TIMSS 5,4%

Classe III sec. I grado Formato Scelta multipla Dominio di contenuto Numero Dominio cognitivo Conoscenza Benchmark Intermedio IEA-TIMSS – le prove di matematica CORRETTE: Italia 70,3% TIMSS 62,5% OMESSE: Italia 0,6% TIMSS 2,1%

IEA-TIMSS – le prove di matematica Classe III sec. I grado Formato Aperta Dominio di contenuto Dati e Probabilità Dominio cognitivo Applicazione Benchmark Intermedio CORRETTE: Italia 63,7% TIMSS 54,5% OMESSE: Italia 18,2% TIMSS 20,5%

Risultati I risultati conseguiti dagli studenti italiani in termini di comparazione e rispetto alle medie internazionali sono:  buoni a livello di scuola primaria (con alcune eccezioni)  meno buoni a livello di scuola secondaria di primo grado  decisamente non buoni a livello di scuola secondaria superiore Sostanziale “stabilità” nel tempo di questi risultati - 1 quali informazioni ci danno i risultati - 1

quarto anno di scolarizzazione  comprensione della lettura: risultati nettamente al di sopra della media internazionale, in posizione che potremmo definire di eccellenza (551 vs 500) risultati PIRLS (2006)

risultati TIMSS (2007) quarto anno di scolarizzazione  matematica: risultati superiori alla media internazionale (con il Nord-Est significativamente al di sopra e il Sud-Isole significativamente al di sotto)  scienze: risultati superiori alla media internazionale (con Nord- Est, Nord-Ovest, Centro, Sud significativamente al di sopra e Sud- Isole nella media) ottavo anno di scolarizzazione  matematica: risultati al di sotto della media internazionale (solo Nord-Est nella media)  scienze: risultati di poco sotto la media internazionale (Nord-Est al di sopra, Nord-Ovest e Centro nella media)

risultati PISA (2000, 2003, 2006) studenti quindicenni studenti quindicenni (prevalentemente al 10° anno di scolarizzazione, ma non solo)  risultati al disotto delle medie internazionali in tutte e tre le aree  risultati al disotto delle medie internazionali in tutte e tre le aree (lettura, matematica e scienze)

 Ampie differenze tra i livelli di prestazioni degli studenti (varianza maggiore del 50%) in confronto con gli altri paesi (OCSE 33,8%)  Differenze legate alla frequenza di scuole diverse e a tipi di scuola diversi più che a differenti livelli interni alle scuole  Scarsa incidenza dell’indice ESCS sulla varianza all’interno delle scuole: nei vari tipi di scuola e nelle singole scuole i livelli socio- economico-culturali degli studenti tendono ad essere abbastanza omogenei - 2 quali informazioni ci danno i risultati - 2

I livelli di prestazione degli studenti italiani variano in rapporto:  alle macroaree geografiche (indipendentemente dal livello scolastico): il Nord-Est ha risultati nettamente migliori  nella scuola secondaria superiore, al tipo di indirizzo di studio seguito: i livelli risultano canalizzati in ingresso sulla base delle differenze socio-economico-culturali (occupazioni e ai livelli di scolarizzazione dei genitori degli studenti) - 3 quali informazioni ci danno i risultati - 3

Un problema di equità: differenze tra scuole maggiori che all’interno delle scuole  Influenza del tipo di scuola su varianza tra scuole Italia 26,4%, OCSE 17,8%  Tipo di scuola + ESCS (studenti e scuole) su varianza tra scuole Italia 31,9% OCSE 24,3% La frequenza ad un certo tipo di scuola diventa predittore di livello Considerazioni sui risultati delle indagini

 Ogni misurazione ha alla base scelte precise rispetto alle variabili individuate e ai costrutti utilizzati  Non si può chiedere alle indagini internazionali quanto è fuori dai loro obiettivi e dalla loro logica (comparazione fra diversi sistemi)  Necessità di confrontare questi risultati con quelli delle rilevazioni nazionali, di sviluppare approfondimenti mirati, di affiancare alle indagini su larga scala altre metodologie di indagine e di ricerca alcuni problemi aperti