la valutazione della qualità della didattica nell’università
DESCRIPTION
A P C D. V. V. N. N. Salerno 12 novembre1999. Salerno 12 novembre1999. I. I. La valutazione della qualità della didattica nell’Università. La Valutazione della Didattica nell’Università di Pisa L’opinione degli studenti. Nucleo di Valutazione dell’Università di Pisa. I. - PowerPoint PPT PresentationTRANSCRIPT
La valutazione della qualità La valutazione della qualità della didattica nell’Universitàdella didattica nell’Università
Nucleo di Valutazione dell’Università Nucleo di Valutazione dell’Università di Pisadi Pisa
II
Salerno 12 novembre1999Salerno 12 novembre1999
A PA P
C DC D
VVII
NNVVII
NN
La Valutazione della Didattica nell’Università di Pisa
L’opinione degli studenti
Venerdì 4 LuglioVenerdì 4 Luglio 22
IndiceIndice
• Obiettivi del nucleo di valutazione dell’Università di Pisa
• Le aree di valutazione nell ’università
• La valutazione della didattica nell’Università
• La metodologia Campusone CRUI
• L’opinione degli studenti
Venerdì 4 LuglioVenerdì 4 Luglio 33
• Verificare la corretta gestione delle Verificare la corretta gestione delle risorse pubbliche, la produttività risorse pubbliche, la produttività
della ricerca e della didattica, nonché della ricerca e della didattica, nonché l’imparzialità e il buon andamento l’imparzialità e il buon andamento
dell’azione amministrativadell’azione amministrativa• Determinare i parametri di Determinare i parametri di
riferimento per il controlloriferimento per il controllo• Attuazione delle azioni di controllo Attuazione delle azioni di controllo
Funzioni del Nucleo di Funzioni del Nucleo di ValutazioneValutazione
(Legge 29/93 e ss) (Legge 29/93 e ss)
Venerdì 4 LuglioVenerdì 4 Luglio 44
LA POLITICA DEL NUCLEO DI LA POLITICA DEL NUCLEO DI VALUTAZIONE DELL’UNIVERSITÀ VALUTAZIONE DELL’UNIVERSITÀ
DI PISADI PISA • svolgere i compiti assegnati dalla legge tramite il coinvolgimento e la
responsabilizzazione di tutte le strutture dell’ateneo
• privilegiare lo sviluppo di modelli di valutazione finalizzati
all’autocontrollo ed al miglioramento continuo
Venerdì 4 LuglioVenerdì 4 Luglio 55
IndiceIndice
• Obiettivi del nucleo di valutazione dell’Università di Pisa
• Le aree di valutazione nell ’università
• La valutazione della didattica nell’Università
• La metodologia Campusone CRUI
• L’opinione degli studenti
Venerdì 4 LuglioVenerdì 4 Luglio 66
• PIANIFICAZIONE STRATEGICA– OBIETTIIVI E STRATEGIE
– VALUTAZIONE CRE
• AMMINISTRAZIONE E GESTIONE– CONTROLLO DI GESTIONE
– EFFICIENZA ED EFFICACIA DEI PROCESSI
• RICERCA– VALUTAZIONE INDIVIDUALE (INDICATORI CRUI, DATA BASE
PUBBLICAZIONI)
– VALUTAZIONE DELLE STRUTTURE
• DIDATTICA– AUTOVALUTAZIONE RICORRENTE E VALUTAZONE ESTERNA
PERIODICA (PEER REVIEW)
– MIGLIORAMENTO CONTINUO
– TRASPARENZA ED IMMAGINE (SINTESI DEI RISULTATI DELL’AUTOVALUTAZIONI MESSI A DISPOSIZIONE DI TUTTE LE PARTI INTERESSATE SU SITO WEB DELLA CRUI)
Venerdì 4 LuglioVenerdì 4 Luglio 77
IndiceIndice
• Obiettivi del nucleo di valutazione dell’Università di Pisa
• Le aree di valutazione nell ’università
• La valutazione della didattica nell’Università
• La metodologia Campusone CRUI
• L’opinione degli studenti
Venerdì 4 LuglioVenerdì 4 Luglio 88
La riforma “3+2”: le originiLa riforma “3+2”: le origini
Rapporto Martinotti 1997: obiettivi della riforma:
– Contrattualità del rapporto studenti-ateneo– Differenziazione competitiva tra gli atenei– Flessibilità curriculare– Accreditamento dei corsi di studio– Adozione del sistema dei crediti educativi– Adozione di sistemi di valutazione– Trasparenza
Venerdì 4 LuglioVenerdì 4 Luglio 99
Adozione di sistemi di Adozione di sistemi di valutazionevalutazione
(autonomia, responsabilità, valutazione)(autonomia, responsabilità, valutazione)
Autonomia:• nella definizione degli obiettivi, dei
curricula, delle scelte attuative, delle azioni di “controllo”
• nel processo di programmazione didattica, come adempimento dal lato della struttura didattica, della pluralità di “contratti formativi” conseguenti al perfezionamento delle iscrizioni
Venerdì 4 LuglioVenerdì 4 Luglio 1010
Adozione di sistemi di valutazioneAdozione di sistemi di valutazione(autonomia, responsabilità, valutazione)(autonomia, responsabilità, valutazione)
Responsabilità• nei confronti degli studenti, che nella
scelta del corso di studio danno fiducia ed investono in una proposta formativa
• a fronte degli investimenti e delle aspettative delle “parti interessate”– famiglie– docenti, Ateneo, Murst– lo “stato” ovvero la società– il mondo del lavoro– i “partners”
Venerdì 4 LuglioVenerdì 4 Luglio 1111
Adozione di sistemi di Adozione di sistemi di valutazionevalutazione
(autonomia, responsabilità, valutazione)(autonomia, responsabilità, valutazione)
Valutazione• interna, attraverso processi più o meno formali
di autovalutazione, anche in collegamento a modelli condivisi a livello settoriale o intersettoriale
• esterna, come valutazioni indipendenti di confronto tipo peer review o di assesment a fronte di Modelli di riferimento (tipo premi internazionali per la qualità o l’eccellenza) o inserendosi in sistemi di accreditamento (di seconda parte, di agenzia, di settore) o di certificazione di terza parte (ISO 9001)
Venerdì 4 LuglioVenerdì 4 Luglio 1212
Valutazione/Valutazione/AccreditamentoAccreditamento
La valutazione analizza, in un processo dialettico, i punti forti e quelli deboli pertinenti agli aspetti della formazione negli istituti superiori, al fine di poterne
in primo luogo individuare le cause e, di conseguenza, fornire una serie di utili indicazioni che consentano sia una garanzia, sia un miglioramento
dell’attività didattica nel suo complesso, senza tener conto dei livelli raggiunti sino a quel momento dai
singoli istituti in questione
L’accreditamento consiste in un’operazione di analisi preventiva, che ha come oggetto la previsione della
possibilità o meno che un singolo corso di studio o un istituto superiore siano in grado di raggiungere uno
standard minimo
la valutazione potrebbe corrispondere alla manutenzione ‘di routine’ di
un’autovettura da parte del proprietario (controlli a intervalli
regolari in un’officina autorizzata), mentre l’accreditamento
corrisponderebbe al controllo tecnico periodico statale per la revisione o per
il ‘bollino blù
Venerdì 4 LuglioVenerdì 4 Luglio 1313
Accreditamento dei corsi di Accreditamento dei corsi di studiostudio
• prospettiva derivante dalla progressiva erosione del valore legale del titolo di studio e dall’ampio livello di autonomia concesso
• da un accreditamento “legale” sulla base di un formale rispetto da parte di tutti gli atenei dei requisiti ministeriali (il che potrebbe ridursi ad una mera fictio iuris) ad un accreditamento sostanziale, legato a tre criteri:– valore culturale del titolo proposto,– rispondenza a esigenze sociali o economiche,– adeguatezza delle risorse messe a disposizione
ed efficienza /efficacia della loro gestione
Venerdì 4 LuglioVenerdì 4 Luglio 1414
IndiceIndice
• Obiettivi del nucleo di valutazione dell’Università di Pisa
• Le aree di valutazione nell ’università
• La valutazione della didattica nell’Università
• La metodologia Campusone CRUI
• L’opinione degli studenti
Venerdì 4 LuglioVenerdì 4 Luglio 1616
IL “SISTEMA CLIENTE” DEL CSIL “SISTEMA CLIENTE” DEL CS
Interazione con Clienti e PI
Progettazione del CS
Specifica di erogazione e
controllo del CS
Specificadel CS
Processo di erogazione
del CS
Valutazione da parte dell'organizzazione
Analisi e miglioramento delle prestazioni
del servizio
Valutazione da parte del cliente
Risultati del CS
come
che cosa
che cosa
DCSDCS
AziendeAziendeEnti territorialiEnti territoriali
StudentiStudenti SocietàSocietà
Plan Do
CheckAct
Obiettivi di apprendimento
Esigenze ed
obiettivi
Venerdì 4 LuglioVenerdì 4 Luglio 1717
Parti InteressateParti Interessate
Gli studenticome utilizzatori diretti del servizio formativo
Le organizzazioni, imprese, singole persone
ovvero gli utilizzatori finali o beneficiari, che fruiranno o
potranno trarre benefici dalla professionalità acquisita
dallo studente nel Corso di Studio
L’Ateneo di appartenenza, il MURST, il
personale docente e non docente, i partners e i
fornitori, la comunità civile.
Venerdì 4 LuglioVenerdì 4 Luglio 1818
CRITERI DI VALUTAZIONECRITERI DI VALUTAZIONE
• VALORE DEGLI OBIETTIVI
• VALORE DEI RISULTATI
• VALORE DELL’ORGANIZZAZIONE E
DEI PROCESSI
Venerdì 4 LuglioVenerdì 4 Luglio 1919
ASPETTI CHIAVE PER LA ASPETTI CHIAVE PER LA VALUTAZIONEVALUTAZIONE
•ORGANIZZAZIONE•ESIGENZE ED OBIETTIVI•RISORSE•PROCESSI•RISULTATI
Venerdì 4 LuglioVenerdì 4 Luglio 2020
VALUTAREVALUTAREA COSA CI SI PUO’ RIFERIREA COSA CI SI PUO’ RIFERIRE
Insieme di proprietà e caratteristicheche conferiscono ad un prodotto, un servizio, un processo, un’organizzazione, una persona
la capacità di soddisfare esigenze esplicite od implicite di una parte interessata
Venerdì 4 LuglioVenerdì 4 Luglio 2121
RISULTATO DI UN PROCESSO O DI UNA SERIE RISULTATO DI UN PROCESSO O DI UNA SERIE DI PROCESSIDI PROCESSI
COSA PREME ALLA PARTE INTERESSATACOSA PREME ALLA PARTE INTERESSATALA DIDATTICA
ELA RICERCA
Equazioni di
Maxwell
Venerdì 4 LuglioVenerdì 4 Luglio 2222
Un insieme di elementi e relazioni interagenti tra loro al
fine di svolgere una o più funzioni.
SISTEMASISTEMA
(COME RISPONDERE AL MEGLIO ALLE ESIGENZE DELLE PARTI INTERESSATE
CON LE “RISORSE” DISPONIBILI)
Gli elementi e le relazioni del sistema che consentono di svolgere le funzioni previste sono
collegati tra loro in una catena di processi IL SISTEMA DI GESTIONEL’ORGANIZZAZIONE
(Ateneo, Dipartimento,Corso di Studio, Corso di Dottorato)
Venerdì 4 LuglioVenerdì 4 Luglio 2323
LA VALUTAZIONELA VALUTAZIONE
• IL CONTROLLO DEL SISTEMA IL CONTROLLO DEL SISTEMA
(QUALITA’ SISTEMA) (QUALITA’ SISTEMA)
• IL CONTROLLO DEI RISULTATI IL CONTROLLO DEI RISULTATI
(QUALITA’ PRODOTTO)(QUALITA’ PRODOTTO)
CERTIFICAZIONE ISOCERTIFICAZIONE ISO
PRODOTTO & SISTEMA
VALUTAZIONEVALUTAZIONEPER UN’PER UN’
ECCELLENZAECCELLENZASOSTENIBILE NEL TEMPOSOSTENIBILE NEL TEMPO
ACCREDITAMENTOACCREDITAMENTO
Venerdì 4 LuglioVenerdì 4 Luglio 2424
IndiceIndice
• Obiettivi del nucleo di valutazione dell’Università di Pisa
• Le aree di valutazione nell ’università
• La valutazione della didattica nell’Università
• La metodologia Campusone CRUI
• L’opinione degli studenti
Venerdì 4 LuglioVenerdì 4 Luglio 2525
Adozione di sistemi di Adozione di sistemi di valutazione: opinione degli valutazione: opinione degli
studentistudenti• adempimento di una disposizione legislativa (art 1 L
370/99) che delega al NdV di ogni Ateneo l’organizzazione di tale attività, presidiata da severe sanzioni in tema di allocazione di risorse ministeriali (uno degli elementi richiesti da un possibile accreditamento ministeriale)
• elemento di monitoraggio/controllo dei processi formativi, di quelli gestionali od organizzativi e di contesto (supporto, orientamento, assistenza e tutorato, placement) ai fini di miglioramento del servizio
Venerdì 4 LuglioVenerdì 4 Luglio 2626
Risultati e Risultati e ControlloControllo
La Misura dei La Misura dei Risultati come Risultati come
elemento di Controllo elemento di Controllo del Sistema di del Sistema di Conduzione Conduzione dell’Impresadell’Impresa
PLANPLANPLANPLAN
DODODODOCHECKCHECKCHECKCHECK
ACTACTACTACT
Venerdì 4 LuglioVenerdì 4 Luglio 2727
Il Controllo dei RisultatiIl Controllo dei Risultati• Chi:• Cosa:
• Perché:
• Quando:
• Come:
Le posizioni di responsabilità del CdScapacità di attrazione, opinioni degli studenti
giudizio delle Parti Interessate
verificare l’efficacia dell’azione di Controllo del Sistema a fronte degli obiettivi stabiliti (target), degli “altri” e dei First Of Class
periodicamente, in relazione alla dinamica di variazione
dei fattori di controllo
tecniche di controllo qualitative e quantitative
(gli “indicatori”)
Venerdì 4 LuglioVenerdì 4 Luglio 2828
RisultatiRisultati
• Capacità di attrazione
• Efficacia interna
• Opinioni degli studenti
• Efficacia esterna•questionari di soddisfazione
sia sui singoli corsi che sul CdS nel suo complesso
•tempo di inserimento nel mondo del lavoro•livello di soddisfazione delle imprese
•soddisfazione dei laureati a X anni dalla laurea
•n° studenti immatricolati•valore degli studenti all’ingresso
•risultati della selezione o dell’orientamento
•% laureati•durata media degli studi
•indici di avanzamento negli studi
Venerdì 4 LuglioVenerdì 4 Luglio 2929
Sistema di gestioneSistema di gestione
StruttureStrutture
FornitoriFornitori
PersonalePersonaleCostiCosti
Processie
ProcedureD
ipar
tim
ento
AD
ipar
tim
ento
A
Seg
rete
rie
Seg
rete
rie
Fac
olt
àF
aco
ltà
Uff
icio
Tec
nic
oU
ffic
io T
ecn
ico
Am
min
istr
azio
ne
Am
min
istr
azio
ne
Risorse
Struttura Organizzativa
Venerdì 4 LuglioVenerdì 4 Luglio 3030
• Valutazione formale effettuata dal CdS relativamente allo stato e all’adeguatezza del Sistema di gestione a fronte degli obiettivi stabiliti ed alla Politica.
• Elementi da considerare– risultati (capacità di attrazione, efficacia
interna della formazione, opinione degli studenti, efficacia esterna della formazione, soddisfazione dei laureati e delle PI...)
– interventi correttivi, azioni di miglioramento– Indicatori e dati derivanti dalla gestione del
Sistema
RiesameRiesame
Venerdì 4 LuglioVenerdì 4 Luglio 3131
L 370/99 questionari agli studenti frequentanti 3+2
L 370/99 questionari agli studenti frequentanti 3+2
L 370/99 questionari ai dottorandiL 370/99 questionari ai dottorandi
L 370/99 questionari agli specializzandi e agli iscritti ai Master di 1° e 2° livello
L 370/99 questionari agli specializzandi e agli iscritti ai Master di 1° e 2° livello
L 370/99 questionari specifici per i laureandi - primo e secondo livello
L 370/99 questionari specifici per i laureandi - primo e secondo livello
a.a. 01/02 – 02/03 questionario del NVI a distribuzione cartacea e data entry manuale
a.a. 01/02 – 02/03 questionario del NVI a distribuzione cartacea e data entry manuale
a partire dalle prossime sessioni di laurea sarà disponibile una sezione valutativa affiancata al questionario informativo di DIOGENE
a partire dalle prossime sessioni di laurea sarà disponibile una sezione valutativa affiancata al questionario informativo di DIOGENE
a.s. 2002 – questionario NVI -ADI, compilabile via WEB
a.s. 2002 – questionario NVI -ADI, compilabile via WEB
a.a. 03/04 – questionario del NVI a distribuzione manuale, ma con lettura ottica dei moduli
a.a. 03/04 – questionario del NVI a distribuzione manuale, ma con lettura ottica dei moduli
NVI indagini
conoscitive rivolte agli studenti
NVI indagini
conoscitive rivolte agli studenti
DOC 09/02CNVSU
“Proposta di un insieme minimo di domande per la valutazione della didattica da parte degli studenti”
DOC 4/03CNVSU
“Proposta di un insieme minimo di domande per gli studenti che concludono
gli studi”
Venerdì 4 LuglioVenerdì 4 Luglio 3232
““ORA, ECCO, VEDI, CI VUOLE TUTTA LA ORA, ECCO, VEDI, CI VUOLE TUTTA LA VELOCITÀ DI CUI SEI CAPACE PER VELOCITÀ DI CUI SEI CAPACE PER RESTARE ALLO STESSO POSTO.RESTARE ALLO STESSO POSTO.
SE VUOI ARRIVARE IN QUALCHE ALTRO SE VUOI ARRIVARE IN QUALCHE ALTRO POSTO DEVI CORRERE ALMENO DUE POSTO DEVI CORRERE ALMENO DUE
VOLTE DI PIÙ.”VOLTE DI PIÙ.”
““Alice nel paese delle meraviglie”Alice nel paese delle meraviglie”
Lewis Carroll - 1872Lewis Carroll - 1872
UN BRANO FAMOSO...UN BRANO FAMOSO...