Le carriere universitarie degli studenti in matematica Chiara Andrà Guido Magnano Progetto TARM Le carriere universitarie degli studenti in matematica 21 novembre 2008

L’analisi Scuole superiori (diploma) Ingresso all’università TARM Scuole superiori (diploma) Ingresso all’università OSSERVAZIONE: il voto di diploma non dice nulla a proposito delle competenze/conoscenze in matematica degli immatricolati, il TARM sì, perché le domande hanno contenuto matematico. 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Il voto di diploma La distribuzione dei voti di diploma degli immatricolati a matematica: Le tipologie di diploma degli immatricolati a matematica: 19 novembre 2008 Le carriere universitarie degli studenti di matematica 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Il TARM ed il voto di diploma Non ha senso correlare linearmente i risultati del diploma e del TARM 19 novembre 2008 Le carriere universitarie degli studenti di matematica

Il TARM ed il voto di diploma Si considera una tabella di contingenza, dove la popolazione degli studenti è suddivisa in quartili: Il test del chi-quadro sulla tabella mostra che al 95% la correlazione è significativa (ad un basso risultato del TARM corrisponde un basso voto di diploma, ad un alto risultato un alto voto di diploma). 21 novembre 2008

Il TARM ed il voto di diploma È più predittivo il TARM o il voto di diploma per la carriera universitaria? Per rispondere a questa domanda, effettuiamo i seguenti passi: Analizziamo i “flussi”, ossia i CFU acquisiti dagli studenti al termine di ogni semestre; Suddividiamo la popolazione degli studenti in base al punteggio TARM (basso, medio-basso, medio-alto, alto) e seguiamo la loro carriera separatamente per ciascun gruppo. Operiamo la stessa suddivisione in base al voto di diploma. Confrontiamo la predittività sulla carriera di TARM e diploma. 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Le carriere universitarie degli studenti di matematica I flussi Suddividiamo la popolazione degli studenti, immatricolati negli anni 2002/03 – 2005/06, in sottogruppi: Studenti laureati in tempo Studenti laureati con 1 anno di ritardo Studenti laureati con 2 anni di ritardo Abbandoni alla fine del primo anno Abbandoni alla fine del secondo anno Abbandoni alla fine del terzo anno Abbandoni dopo il terzo anno Ancora iscritti Osservando i CFU acquisiti dopo 6, 12, 18, .. mesi, è possibile stabilire una relazione tra “successo formativo (laurea)” e crediti acquisiti? 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Le carriere universitarie degli studenti di matematica I flussi 19 novembre 2008 Le carriere universitarie degli studenti di matematica

I flussi: il primo anno Eccellenze, sufficienze e abbandoni al primo anno, dal 2002 al 2007 19 novembre 2008

Dai flussi alla predittività del TARM FALSI NEGATIVI: superano TARM non raggiungono 21 CFU dopo 6 mesi Dai flussi alla predittività del TARM NEGATIVI: superano TARM raggiungono 21 CFU dopo 6 mesi CFU6 <21 >=21 CFU12 >= 21 <42 >= 42 LAUREA No Sì TARM >=0.4 17% m=11% (2003) M=33% (2006) 39% 9% m=7% (2005) M=15% (2002) 47% 19% m=11% (2004) M=35% (2006) 37% 13% m=16% (2004) M=37% (2005) 23% <0.4 27% 21% 29% 15% 40% 24% OK 66% m=44% (2003) M=79% (2004) 70% m=39% (2003) M=90% (2005) m=51% (2003) 63% m=54% (2003) M=76% (2004) CFU6 <21 >=21 CFU12 >= 21 <42 >= 42 LAUREA No Sì TARM >=0.4 <0.4 OK POSITIVI: non superano TARM non raggiungono 21 CFU dopo 6 mesi FALSI POSITIVI: non superano TARM raggiungono 21 CFU dopo 6 mesi 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Dai flussi alla predittività del diploma CFU6 <21 >=21 CFU12 >= 21 <42 >= 42 LAUREA No Sì diploma >=88 14% m=8% (2004) M=18% (2006) 36% 8% m=5% (2004) M=11% (2003) 42% 15% M=22% (2006) 35% 13% m=12% (2002) M=17% (2005) 28% <88 30% 20% 24% 26% 33% 17% 39% 19% OK 66% m=56% (2005) M=79% (2004) m=57% (2003) M=76% (2004) 68% m=65% (2006) 67% m=63% (2002) 21 novembre 2008 Le carriere universitarie degli studenti di matematica

TARM/diploma e abbandoni Abbandona dopo I anno NON abbandona dopo I anno TARM >=0.4 13% m=3% (2003) M=23% (2002) 48% <0.4 18% 21% OK 66% m=36% (2003) M=85% (2005) Abbandona dopo I anno NON abbandona dopo I anno diploma >=88 30% m=21% (2005) M=39% (2003) 42% <88 0% 27% OK m=31% (2003) M=55% (2006) 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Il TARM ed i CFU acquisiti nel primo semestre Precorso necessario Precorso fortemente consigliato Precorso non necessario Precorso non necessario 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Il TARM e la media dei voti nel primo semestre 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Il TARM ed i CFU acquisiti nell’ultimo semestre (dopo 36 mesi) Pochi studenti, perché molti hanno abbandonato 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Il TARM ed il voto di laurea Molti hanno abbandonato o non si sono laureati 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Il TARM, gli abbandoni, le lauree 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Le carriere universitarie degli studenti di matematica …e il diploma? Il diploma sembra essere ancora meno predittivo, sulle carriere degli studenti, rispetto al TARM 21 novembre 2008 Le carriere universitarie degli studenti di matematica

I quartili TARM ed il voto di diploma 21 novembre 2008 Le carriere universitarie degli studenti di matematica

L’enigma del primo quartile Nel primo quartile del TARM (precorso necessario) c’è un gruppo di studenti con un alto voto di diploma, i quali hanno una carriera ai livelli del terzo quartile: si laureano in tempo e con buoni voti. Chi sono? I tipi di diploma di questi studenti sono così rappresentati: Quindi non sono un campione significativo, per il tipo di diploma, rispetto alla popolazione di riferimento. Ipotesi: sono studenti che provengono da scuole in cui hanno ricevuto una buona preparazione di base, ma non sono stati capaci di affrontare bene il test? Proposta di lavoro: individuare le scuole di provenienza e intervistare gli studenti. Verifica immediata: abbiamo semplicemente sbagliato a definire la soglia del I quartile? 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Le carriere universitarie degli studenti di matematica L’enigma del primo quartile: se avessimo semplicemente sbagliato a “tagliare”? Cerchiamo una risposta nei CFU acquisiti dopo 6 mesi Non abbiamo sbagliato: gli studenti peggiori al TARM hanno ottimi risultati Non abbiamo sbagliato: ai livelli più alti nel I quartile corrisponde una distribuzione uniforme dei CFU acquisiti 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Le carriere universitarie degli studenti di matematica L’enigma del primo quartile: se avessimo semplicemente sbagliato a “tagliare”? Quanti di questi studenti effettivamente si laureano? Non abbiamo sbagliato: gli studenti peggiori al TARM con più di 21 CFU dopo 6 mesi si laureano 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Le carriere universitarie degli studenti di matematica Test equating Questione: in anni successivi i test TARM sono diversi. È necessario, però, confrontare i punteggi ottenuti in test diversi. È possibile definire un’unica scala per i punteggi ottenuti dagli studenti in anni successivi. I modelli IRT (Item Response Theory), infatti, forniscono metodi di equating, per permettono di confrontare fra loro test diversi, che abbiano almeno un insieme di domande in comune. 21 novembre 2008 Le carriere universitarie degli studenti di matematica

Le carriere universitarie degli studenti di matematica Conclusioni Tra il TARM ed il diploma c’è correlazione (non lineare, ma per quartili). Analizzando i flussi, è possibile predire, con un buon livello di certezza, se uno studente con un certo numero di CFU in un dato momento si laureerà, in quanti anni, o se abbandonerà. Il TARM è più predittivo del diploma sulle carriere degli studenti. Problema aperto: l’enigma del I quartile TARM. 21 novembre 2008 Le carriere universitarie degli studenti di matematica