progetto vai dimensione della valutazione risultati, analisi e miglioramento
TRANSCRIPT
Progetto VAIProgetto VAI
Dimensione della Dimensione della ValutazioneValutazione
RISULTATI, ANALISI E RISULTATI, ANALISI E MIGLIORAMENTOMIGLIORAMENTO
Corso per Autovalutatori 2002-2003 2
Progetto VAIProgetto VAI
Il Corso di StudioIl Corso di Studio
Esigenze e Obiettivi
Sistema Organizzativo(Responsabilità)
Risorse
Processo Formativo
Risultati, Analisi e
Miglioramento
Part
i In
tere
ssate
ESIGENZE
SODDISFAZIONE
Part
i In
tere
ssate
STUDENTE LAUREATO
Risorse
Processo Formativo
Risultati, Analisi e
Miglioramento
Part
i In
tere
ssate
ESIGENZE
SODDISFAZIONE
Part
i In
tere
ssate
STUDENTE LAUREATO
Inteso come bagaglio di conoscenze, abilità ed
esperienze possedute dal Laureato
Inteso come bagaglio di
conoscenze, abilità ed esperienze
possedute dallo Studente all’inizio
del processo formativo
Corso per Autovalutatori 2002-2003 3
Progetto VAIProgetto VAI
Articolazione della Articolazione della DimensioneDimensione
RISULTATIRISULTATI
ANALISI EANALISI EMIGLIORAMENTOMIGLIORAMENTO
RISULTATI, ANALISIRISULTATI, ANALISIE MIGLIORAMENTOE MIGLIORAMENTO
Corso per Autovalutatori 2002-2003 4
Progetto VAIProgetto VAI
RisultatiRisultati
Attraverso questo elemento si intende accertare:
- la capacità di attrazione del CdS nei confronti degli studenti e delle altre PI;
- se e come il CdS provvede al monitoraggio del percorso formativo degli studenti, al fine di valutare l'efficacia interna della formazione;
- come il CdS provvede a raccogliere, analizzare e sintetizzare, con l'ausilio di opportuni indicatori, le opinioni degli studenti sui singoli insegnamenti, sulle altre attività didattico-formative e sul CdS nel suo complesso, al fine di valutarne il livello di soddisfazione;
- se e come il CdS provvede al monitoraggio dell’inserimento dei laureati nel mondo del lavoro, al fine di valutare l’efficacia esterna della formazione;
- se e come il CdS provvede a monitorare l’opinione sia dei laureati sia di chi utilizza le loro capacità, al fine di valutarne il relativo livello di soddisfazione
Corso per Autovalutatori 2002-2003 5
Progetto VAIProgetto VAI
CONOSCERSI E VALUTARSICONOSCERSI E VALUTARSI
?!
Corso per Autovalutatori 2002-2003 6
Progetto VAIProgetto VAI
Risultati e ControlloRisultati e Controllo
L’accertamento e misura dei Risultati come elemento di
Controllo del Sistema di
Conduzione del CdS
PLANPLANPLANPLAN
DODODODOCHECKCHECKCHECKCHECK
ACTACTACTACT
Corso per Autovalutatori 2002-2003 7
Progetto VAIProgetto VAI
Obiettivi del
processo
Risultati
Se coincidono va tutto bene, altrimenti occorre indagare sulle
cause dello scostamento e decidere circa le modalità di
intervento
miglioramento
riprogettazione
Confronto con gli obiettiviConfronto con gli obiettivi
Corso per Autovalutatori 2002-2003 8
Progetto VAIProgetto VAI
CONFRONTARSI CON GLI CONFRONTARSI CON GLI ALTRIALTRI
!!!
Corso per Autovalutatori 2002-2003 9
Progetto VAIProgetto VAI
Un risultatoUn risultato
Un Risultato dovrebbe essere rappresentato da un valorevalore derivato da una valutazione o misura valutazione o misura
quantitativa o qualitativaquantitativa o qualitativa (Una determinata quantità di laureati, di risorse per utente, etc.)
Traguardo che il CdS ha Traguardo che il CdS ha raggiunto attraverso le raggiunto attraverso le
proprie attività e i propri proprie attività e i propri processiprocessi
Corso per Autovalutatori 2002-2003 10
Progetto VAIProgetto VAI
L’accertamento dei L’accertamento dei risultatirisultati
• Chi:Chi:
• Cosa:Cosa:
• Perché: Perché:
• Quando: Quando:
• Come:Come:
Le funzioni di responsabilità e coordinamento del CdS
Capacità di attrazioneEfficacia interna ed esterna del CdS
Verificare l’efficacia del CdS nel suo complesso
Continuativamente, con periodicità di analisi coerente con la dinamica di variazione dei fattori di controllo
Tecniche di controllo qualitative e quantitative (mediante gli “indicatori”)
Corso per Autovalutatori 2002-2003 11
Progetto VAIProgetto VAI
Un indicatore o indiceUn indicatore o indicePARAMETRO DESCRITTIVO DI UN SISTEMAPARAMETRO DESCRITTIVO DI UN SISTEMA
SOLITAMENTE COSTITUITO DA UN DATO NUMERICO VARIABILEDATO NUMERICO VARIABILE IN MODO CONTINUO O DISCRETOCONTINUO O DISCRETO CHE CONSENTE DI TRARRE DELLE
INDICAZIONI DI TENDENZA DI UN FENOMENO
La misura di un dato è esprimibile in termini assoluti o assoluti o relativirelativi, sia rilevandola direttamente da misure su processi,
sia ottenendola come elaborazione di queste attraverso algoritmi e procedimenti prestabiliti
percentuale di studenti provenienti da altro CdS
percentuale di studenti che hanno conseguito il titolo con tempi più lunghi della media
indice di soddisfazione delle PI
numero di studenti iscritti
% di studenti che ha acquisito da 1 a 60 crediti
NON È SIGNIFICATIVO TANTO IL VALORE ASSOLUTO DI UN INDICATORE,
QUANTO LA SUA VARIAZIONE RELATIVA
(NEL TEMPO O IN FUNZIONE DI ALTRE GRANDEZZE O VARIABILI
INDIPENDENTI)
Corso per Autovalutatori 2002-2003 12
Progetto VAIProgetto VAI
Rappresentazioni di Rappresentazioni di indicatori e indici indicatori e indici
Andamento soddisfazione studenti
6454
64
43
68 61
79
25
54
Utilità dei Compitini
Aule
Mat. Didattico
Utilità dei Ricevimenti
OrarioLaboratori
Aderenza lezioni alprogramma
Utilità delleEsercitazioni
Disponibilità docente
0
25
50
75
100
0 25 50 75 100
Importanza
So
dd
isfa
zio
ne
Domanda 6Motivi di insoddisfazione servizio di sportello
0
2
4
6
8
10
12
14
16
file lunghe/pocopersonale
orario di aperturaristretto
chiusura del sabato altri
Diagrammi a tortaIstogrammiDiagrammi polariDiagrammi cartesiani...
Visualizza qualche esempio
Corso per Autovalutatori 2002-2003 13
Progetto VAIProgetto VAI
RisultatiRisultati
Domande Fattori Quali sono i risultati inerenti il grado di attrazione del CdS?
Numero di immatricolazioni annuo Trend di immatricolazione Tipologia degli iscritti
Quali sono i risultati inerenti l’efficacia interna del CdS?
Avanzamento della carriera degli studenti Livelli di apprendimento raggiunti Opinione degli studenti rispetto alla didattica Tassi di successo e tempi di percorrenza degli studenti
Quali sono i risultati inerenti l’efficacia esterna del CdS?
Congruenza tra la collocazione nel mondo del lavoro e la formazione ricevuta Tempi di collocazione nel mondo del lavoro Opinione dei laureati sulla formazione ricevuta Opinione dei datori di lavoro sulla preparazione dei laureati
Corso per Autovalutatori 2002-2003 14
Progetto VAIProgetto VAI
Esempi di “Lettere”Esempi di “Lettere”
• L’80% degli studenti ha superato gli esami e conseguito il numero di crediti programmato per l’attuale fase del percorso formativo nelle sessioni di febbraio e giugno-luglio. Di questi studenti il 20% ha conseguito i crediti con una valutazione compresa fra il 30 e lode e i 28 trentesimi; il 45% ha conseguito i crediti con una valutazione compresa fra i 27 e i 26 trentesimi, il 25% ha conseguito i crediti con una valutazione compresa fra i 25 e i 23 trentesimi e il 10% ha conseguito i crediti con una valutazione compresa fra i 22 e i 18 trentesimi. Il livello di apprendimento raggiunto dagli studenti è dunque mediamente discreto.
Corso per Autovalutatori 2002-2003 15
Progetto VAIProgetto VAI
• I risultati effettivi inerenti il grado di attrazione del CdS su un target analogo o simile a quello delineato sarà valutabile esclusivamente con la chiusura delle iscrizioni del prossimo A.A., cioè all’inizio del secondo anno di vita del CdS stesso. I dati relativi all’andamento delle iscrizioni presso i licei e gli istituti di istruzione secondaria superiore, che rappresentano il bacino di utenza privilegiato del CdS in Lettere, nonché i risultati dell’attività di orientamento presso le scuole, delle azioni di sensibilizzazione dell’opinione pubblica attraverso i mezzi di comunicazione di massa, legittimano un’aspettativa di implementazione pari al 10-15%.
Esempi di “Lettere”Esempi di “Lettere”
Corso per Autovalutatori 2002-2003 16
Progetto VAIProgetto VAI
• Il tasso di successo e i tempi di percorrenza degli studenti saranno valutabili esclusivamente durante il successivo anno di corso, così come la congruenza tra la collocazione nel mondo del lavoro e la formazione ricevuta, i tempi di collocazione nel mondo del lavoro, l’opinione dei laureati sulla formazione ricevuta e l’opinione dei datori di lavoro sulla preparazione dei laureati saranno valutabili esclusivamente ad un anno o due dalla conclusione del primo ciclo triennale.
• La situazione attuale lascia prevedere un tasso di successo vicino al 70-80% del totale degli iscritti e il sostanziale rispetto dei tempi di percorrenza previsti.
Esempi di “Lettere”Esempi di “Lettere”
Corso per Autovalutatori 2002-2003 17
Progetto VAIProgetto VAI
Articolazione della Articolazione della DimensioneDimensione
RISULTATIRISULTATI
ANALISI EANALISI EMIGLIORAMENTOMIGLIORAMENTO
RISULTATI, ANALISIRISULTATI, ANALISIE MIGLIORAMENTOE MIGLIORAMENTO
Corso per Autovalutatori 2002-2003 18
Progetto VAIProgetto VAI
Analisi e miglioramentoAnalisi e miglioramentoAttraverso questo elemento si intende accertare e
valutare la capacità del CdS di promuovere un promuovere un
processo di miglioramento continuoprocesso di miglioramento continuo dell'efficacia e
dell'efficienza dell'organizzazione e dell'offerta
didattica, attraverso la ricerca sistematica,
l’individuazione e l’analisi di tutte le opportunità di
miglioramento.
Si intende inoltre accertare e valutare anche la
capacità del CdS di affrontare e risolvere i problemicapacità del CdS di affrontare e risolvere i problemi
che si presentano nell'erogazione della didattica e
dei servizi, di ricercarne le cause e di prevenirne
l'insorgere
Corso per Autovalutatori 2002-2003 19
Progetto VAIProgetto VAI
MiglioramentoMiglioramento
SISTEMA
SISTEMA
MIGLIORAMENTO
MIGLIORAMENTO
CONFORMITÀCONFORMITÀ
Le azioni intraprese dal CdS per accrescere Le azioni intraprese dal CdS per accrescere efficienza ed efficacia delle attività e dei efficienza ed efficacia delle attività e dei
processi a vantaggio delle PI e, in processi a vantaggio delle PI e, in particolare, del CdS stessoparticolare, del CdS stesso
Corso per Autovalutatori 2002-2003 20
Progetto VAIProgetto VAI
MiglioramentoMiglioramentoApplicazione della sequenza Applicazione della sequenza
“P.D.C.A.”“P.D.C.A.”
P D A C
Plan
Do
Check
Act
pianificare
attuare quanto pianificato
valutare i risultati rispetto agli obiettivi
standardizzare o ricominciare il ciclo
Corso per Autovalutatori 2002-2003 21
Progetto VAIProgetto VAI
2) Rilevazione valori
3) Analisi dati raccolti
4) Individuazione interventi di
miglioramento
1) Individuazione indicatori
Processi base per il miglioramentoProcessi base per il miglioramento
Corso per Autovalutatori 2002-2003 22
Progetto VAIProgetto VAI
Individuare tutti i problemi
Individuare tutti i problemi
Scegliere un problema
Scegliere un problema
Ricercare le cause potenziali
Ricercare le cause potenziali
Individuare le cause reali
Individuare le cause reali
Cercare le soluzioni
Cercare le soluzioni
Proporre una soluzione
Proporre una soluzione
Approvare il progetto
Approvare il progetto
AttuazioneAttuazione
Verificare i risultati
Verificare i risultati
Approvare i risultati
Approvare i risultati
MiglioramentoMiglioramento
Corso per Autovalutatori 2002-2003 23
Progetto VAIProgetto VAI
Problem-solvingProblem-solving
“Insieme di metodi, di tecniche e di strumenti che, utilizzati in
maniera sistematica, nelle varie fasi del processo di
miglioramento, permettono l’efficace raggiungimento degli
obiettivi, con un efficiente impiego delle risorse.”
Progetto VAIProgetto VAI
Analisi delle difficoltà Analisi delle difficoltà contingenticontingenti
Il CdS deve gestire le difficoltà contingenti Il CdS deve gestire le difficoltà contingenti che si possano manifestare durante che si possano manifestare durante
l’erogazione del processo formativo e dei l’erogazione del processo formativo e dei servizi di supportoservizi di supporto
Situazione problematica o non desiderata
Corso per Autovalutatori 2002-2003 25
Progetto VAIProgetto VAI
Esempi di difficoltà Esempi di difficoltà contingenticontingenti
Disservizi (mancata apertura della segreteria, etc.)
Equazioni di
Maxwell
PROGRAMMA
Leggi di OhmCircuiti elettriciEquazioni di MaxwellMotori elettrici………
Un programma didattico non rispettato
Corso per Autovalutatori 2002-2003 26
Progetto VAIProgetto VAI
Gestione delle difficoltà Gestione delle difficoltà contingenticontingenti
Identificazione
Documentazione
Riesame (valutazione)
Risoluzione (Disposizioni o
Trattamento)
Ricerca delle Cause (Azioni
Correttive)
Corso per Autovalutatori 2002-2003 27
Progetto VAIProgetto VAI
Azioni correttive e Azioni correttive e preventivepreventive
garantire che condizioni avverse alla qualità quali disservizi, malfunzionamenti, carenze,
incongruenze siano PREVENUTEPREVENUTE e quelle che si sono verificate siano
prontamente IDENTIFICATE e CORRETTEIDENTIFICATE e CORRETTE (le cause che hanno generato i problemi non
si devono ripresentare)
Corso per Autovalutatori 2002-2003 28
Progetto VAIProgetto VAI
Azioni correttive e Azioni correttive e preventivepreventive
Non ti soffermare solo al rimedio degli effetti (non conformità, difetti, etc.)
Prevenzione delle Prevenzione delle cause di problemi cause di problemi
potenzialipotenziali((AZIONI PREVENTIVEAZIONI PREVENTIVE))
Individuazione e Individuazione e rimozione delle cause rimozione delle cause dei problemi (dei problemi (AZIONI AZIONI
CORRETTIVECORRETTIVE))
Perché la chiave del successo sta nella...
Risolto!
Corso per Autovalutatori 2002-2003 29
Progetto VAIProgetto VAI
L’importanza della prevenzione nei L’importanza della prevenzione nei serviziservizi
Controllo QualitàControllo Qualità
Clienti
Inizio lezioneore 15.30
Clienti insoddisfattiClienti insoddisfatti
Nell’industria manifatturiera…
…e invece nei servizi!!
Corso per Autovalutatori 2002-2003 30
Progetto VAIProgetto VAI
Analisi e miglioramentoAnalisi e miglioramento
Domanda Fattori Le attività di analisi e miglioramento sono credibili ed efficaci?
Decisioni conseguenti ai risultati della valutazione e loro efficacia Modalità di gestione delle difficoltà contingenti Valutazione della qualità del CdS (Requisito obbligatorio CampusONE)