Cultura de Calidad y Evaluación
en Conservatorios
Jornet y Sánchez-Delgado (Coords. Técnicos Proyecto)
Grupo GEM-Educo
Dpto. MIDE-Universitat de València
España
Hablaremos acerca de…
Ponencia I: Implementación del Proyecto de Cultura de Calidad y
Evaluación en los CPMyDs de la CV. (Dra. Purificación
Sánchez-Delgado)
Ponencia II: Perspectivas de desarrollo del Proyecto de Cultura de
Calidad y Evaluación en los CPMyDs de la CV. (Dr. Jesús
M. Jornet Meliá)
Ponencia I:
Implementación del Proyecto de
Cultura de Calidad y Evaluación en
los CPMyDs de la CV.
Dra. Purificación Sánchez-Delgado
Aportaciones de la Evaluación a la Mejora Educativa
Dr. Jesús M. Jornet Meliá
Dpto. MIDE-Universitat de València
España
Manuel Tomás Ludeña
Dir. Gral. Cultura
GV
Estructura del Proyecto
Proyecto
CCEVAL
CPMD-CV
Micro
Aula:
Estudiantes
PEMD-CV
Meso
Instituciones
EVAL-CPMD-CV
Macro
Mapa de Indicadores
Mapa-INDAMD-CV
Evaluación como empoderamiento
institucional
Diseño de un Modelo de Portafolio para
Evaluación para los Conservatorios
Profesionales de Música y de Danza de
la Comunidad Valenciana.
PEMD-CV
6
7
COMITÉ DE
ORGANIZACIÓN
COMISIÓN EVALUACIÓN
PORTAFOLIO
Jesús M. Jornet
Purificación Sánchez
Juan Pablo Valero
Raúl Juncos
César Cabedo
Pau Gil
Batiste Bernat
Coordinador: Pau Gil
1. Remedios Blanco González
2. Juan Carlos Fernández Fabra
3. Vicent Lluch Fuentes
4. Mario Masó Agut
5. Jose Luis Miralles Bono
6. Jorge Morellá Penella
7. Jose Peris Pando
8. Ana Vernia Carrasco
Validación Lógica de
Rúbricas
62
Perspectivas para el desarrollo del PEMD-CV
Fase Actuaciones
1 Acuerdo/Contrato con el equipo directivo.
2 Diseño de Rúbricas e instrumentos de recogida de información.
3 Integración en Guía de Portafolio (experimental).
4 Validación por especialistas (profesorado de los CPMD.
Definición de Condiciones de Validación
Validación de Rúbricas
Sensibilización en el centro. Conferencias a: profesorado, alumnado y/o familias
5 Aplicación experimental. Ensayo piloto del Portafolio Procesual: curso 2014/15.
6 Recogida de información de aplicaciones.
7 Análisis e interpretación de la información.
8 Información de usuarios acerca del Portafolio.
9 Análisis de información.
10 Validación empírica.
11 Revisión del diseño en función de resultados.
12 Distribución definitiva. Guía de Portafolio de evaluación (2015/16)
13 Seguimiento de implementación de mejoras. Evaluación del plan de mejora.
8
¿Cómo desarrollar una rúbrica?
• Claves de desarrollo en la competencia
• Deben ser observables y graduables
Identificar criterios de Evaluación
• Identificar el aspecto clave que permite diferenciar entre niveles
• Consensuar por equipo docente
Establecer niveles de adquisición de la
competencia • Analizar si la rúbrica ofrece una visión exhaustiva de la competencia
• Valorar la adecuación de niveles
Integrar criterios y niveles
Diseño de un Modelo de Evaluación
para los Conservatorios Profesionales
de Música y de Danza de
la Comunidad Valenciana.
Eval-CPMD-CV
10
11
COMITÉ DE
ORGANIZACIÓN
COMISIÓN EVALUACIÓN
INSTITUCIONAL
Jesús M. Jornet
Purificación Sánchez
Juan Pablo Valero
Raúl Juncos
César Cabedo
Pau Gil
Batiste Bernat
Coordinador: Batiste Bernat
1. Teresa Bacete García
2. Fani Blanch Piqueras
3. Beatriz Brull Gregori
4. Ricardo Callejo López
5. Monica Cantó Durá
6. Josep M. García Company
7. Alicia Gómez
8. Enrique Llorens Vallés
9. Valerie Maciá Manzanaro
10. Jordi Nogués Escribá
11. Ximo Ortega Soria
12. Ricard Raga Piqueras
13. Ricardo Soldado Peris
14. Fernando Torner Feltrer
Perspectivas para el desarrollo Modelo
Eval-CPMD-CV Fase Actuaciones
1 Diseño y validación lógica del Modelo de Evaluación
Diseño y Validación de Instrumentos de Recogida de Información
2 Acuerdo/Contrato con el equipo directivo.
3 Formación del CEI. (Abril, 2014)
4 Recogida de información: documentación e instrumentos de medida.
5 Análisis de la Información.
6 Interpretación de información. Elaboración del Auto-informe (CEI).
7 Difusión de información en el centro. Plazo de alegaciones.
8 Incorporación de alegaciones (CEI). Informe de autoevaluación definitivo.
9 Visita CEE: elaboración de informe externo. (Septiembre-Octubre, 2014)
10 Integración de informes CEI/CEE. (Noviembre, 2014)
11 Plan de mejora (Equipo Directivo del CPM). (Noviembre, 2014)
12 Difusión del Informe de evaluación institucional y de su plan de mejora (web CPM).
13 Seguimiento de implementación de mejoras. Evaluación del plan de mejora. (Anual)
12
Mayo
Julio
2014
Autoevaluación
Validación Externa
Diseño de Plan de Mejora
Implementación del Plan de
Mejora
Evaluación del Plan de Mejora
(Interna/Externa)
13
14
• Equipo Directivo
• Coord. Formación
• Profesorado
• Familias
• Alumnado
• PAS
• 1 Profesorado
Externo (Otro
Conservatorio)
• Profesional del
ámbito
• Asesor
Metodología
Diseño de un Mapa de Indicadores
acerca del impacto y relevancia de las
Enseñanzas Musicales y de Danza en
la Comunidad Valenciana.
Mapa-INDAMD-CV
15
16
COMITÉ DE
ORGANIZACIÓN
COMISIÓN EVALUACIÓN
INDICADORES
Jesús M. Jornet
Purificación Sánchez
Juan Pablo Valero
Raúl Juncos
César Cabedo
Pau Gil
Batiste Bernat
Coordinador: Raul Juncos
1. Ángel Casero Alcañiz
2. José Galiano Pérez
3. Patricia Elvira Gasque Sendra
4. Rodrigo Madrid Gomez
5. Juan Miravet Lecha
6. Sergio Perelló Blanquer
7. Ignacio Sanjuan Rodrigo
8. Amalia Valero Fernández
Características del Modelo
Mapa-INDAMD-CV
¿Qué debe representar?
17
Situación educativa: Escenarios
Informal
S
O
C
I
A
L
Individual
No-Formal
Programas Socio-educativos
Enfoque Político
Instituciones
Formal
Sistema Educativo
Instituciones
Aula Acciones Formativas
18
o Conservatorios Públicos: 16
o Centros Autorizados: 64
o Escuelas de Música: 274
o Estructuras sociales: Coros, Bandas de Música, Agrupaciones...
Elemento clave de
Estructuración y Cohesión Social
Estructura del Mapa de Indicadores
19
Mapa de Indicadores
Sistema No-Formal
Agrupaciones Musicales
Orfeones Otros...
Sistema Formal
CPMD
Características del Modelo
Mapa-INDAMD-CV
¿Qué debe representar?
20
Difunde Información
Informe periódico:
Panorama de la Educación Musical y de la Danza en la CV
Mapa de Indicadores Informatizado
accesible en la web de la GV
Comité Central
Ponencia II:
Perspectivas de desarrollo del Proyecto
de Cultura de Calidad y Evaluación en
los CPMyDs de la CV.
Dr. Jesús M. Jornet Meliá
Diseño de un Modelo de Portafolio para
Evaluación para los Conservatorios
Profesionales de Música y de Danza de
la Comunidad Valenciana.
PEMD-CV
22
Perspectivas para el desarrollo del PEMD-CV
Fase Actuaciones
1 Acuerdo/Contrato con el equipo directivo.
2 Diseño de Rúbricas e instrumentos de recogida de información.
3 Integración en Guía de Portafolio (experimental).
4 Validación por especialistas (profesorado de los CPMD.
Definición de Condiciones de Validación
Validación de Rúbricas
Sensibilización en el centro. Conferencias a: profesorado, alumnado y/o familias
5 Aplicación experimental. Ensayo piloto del Portafolio Procesual: curso 2014/15.
6 Recogida de información de aplicaciones.
7 Análisis e interpretación de la información.
8 Información de usuarios acerca del Portafolio.
9 Análisis de información.
10 Validación empírica.
11 Revisión del diseño en función de resultados.
12 Distribución definitiva. Guía de Portafolio de evaluación (2015/16)
13 Seguimiento de implementación de mejoras. Evaluación del plan de mejora.
23
Validación de Rúbricas
Proceso: Grabación de dos
interpretaciones de cada
estudiante
Atención: Necesidad de
pactar repertorio (igualar
condiciones)
Valoración del profesorado
según la rúbrica
Remisión de la grabación a 2
colegas (volverán a valorar
con la misma rúbrica)
(Estrategia doble ciego)
Condiciones:
Confidencialidad:
Identificación del estudiante
(NO)
Identificación del Docente
Responsable (NO)
Identificación de jueces (NO)
(Ajustados a Ley de protección de
datos)
Consistencia:
Acuerdo: consenso-intersubjetivo
usando la rúbrica (Estadístico)
Se valora la rúbrica, no a los
docentes
24
Validación del Portafolio Procesual
Aplicación desde el inicio del curso
2014/15
Se dispondrá de apoyo desde la GV para
el uso de e-portafolio
Trabajo del profesorado:
◦ Utilizar el portafolio según las indicaciones
◦ Apoyar/motivar al alumnado para su uso
Análisis de resultados UV+GV
Diseño de un Modelo de Evaluación
para los Conservatorios Profesionales
de Música y de Danza de
la Comunidad Valenciana.
Eval-CPMD-CV
26
Perspectivas para el desarrollo Modelo
Eval-CPMD-CV Fase Actuaciones
1 Diseño y validación lógica del Modelo de Evaluación
Diseño y Validación de Instrumentos de Recogida de Información
2 Acuerdo/Contrato con el equipo directivo.
3 Formación del CEI. (Abril, 2014)
4 Recogida de información: documentación e instrumentos de medida.
5 Análisis de la Información.
6 Interpretación de información. Elaboración del Auto-informe (CEI).
7 Difusión de información en el centro. Plazo de alegaciones.
8 Incorporación de alegaciones (CEI). Informe de autoevaluación definitivo.
9 Visita CEE: elaboración de informe externo. (Septiembre-Octubre, 2014)
10 Integración de informes CEI/CEE. (Noviembre, 2014)
11 Plan de mejora (Equipo Directivo del CPM). (Noviembre, 2014)
12 Difusión del Informe de evaluación institucional y de su plan de mejora (web CPM).
13 Seguimiento de implementación de mejoras. Evaluación del plan de mejora. (Anual)
27
Mayo
Sep.
2014
Formación de los CEI y CEE
Presentación del Modelo de Evaluación
Modos de recogida de información
Remisión de datos de instrumentos
estandarizados (encuestas) a MIDE+GV
Devolución de resultados a centros
Elaboración del Informe por parte del CEI
Difusión (y recogida de alegaciones)
Visita del CEE. Informe
Plan de Mejora
La finalidad de la Evaluación Institucional
es el diseño de un PLAN DE MEJORA
INSTITUCIONAL, en el que estarán:
1. Identificadas las necesidades
2. Priorizadas las acciones de mejora
3. Identificados los responsables para la
dinamización de la innovación
4. Establecido un calendario para el logro de
metas
Diseño de un Mapa de Indicadores
acerca del impacto y relevancia de las
Enseñanzas Musicales y de Danza en
la Comunidad Valenciana.
Mapa-INDAMD-CV
30
Perspectivas para el Desarrollo del Mapa-
INDAMD-CV Fase Actuaciones
1 Acuerdos de la Comisión Organizadora.
2 Análisis del concepto de impacto/relevancia a estudiar a partir del MI
3 Diseñar preguntas de evaluación a responder, clasificadas según el modelo CIPP
4 Diseño de indicadores para responder cada pregunta
5 Identificación de la fuente más adecuada (evaluabilidad, operatividad)
Validación del Diseño del Mapa de Indicadores (Encuesta on-line)
6 Diseño de base de datos de integración de cada indicador
7 Recogida de información
8 Incorporación de Información en base de datos
9 Diseño web de acceso público al Mapa de Indicadores (Inicio 2015)
10 Elaboración del Informe: Panorama de la Educación Artística (Música y Danza) en la
CV (Presentación final de curso 2014/15)
11 Difusión del informe
12 Estudios a partir de indicadores. Invitación a Investigadores/as.
13 Actualización de indicadores, según periodo estimado
31
Participantes
Comité Técnico
• Dinamiza
• Organiza recogida de información
• Realiza contactos
Centros Reglados
• Aporta
información
centros propios
• Facilita
información y
contactos
Estructuras No-regladas
• Aporta información (agrupaciones, orfeones…)
• Facilita información y contactos
32
Información Clave
Encuesta On-line para:
◦Validar indicadores
◦ Identificar fuentes de información
¡Colaboración!
Resultados
34
Difunde Información
Informe periódico:
Panorama de la Educación Musical y de la Danza en la CV
Mapa de Indicadores Informatizado
accesible en la web de la GV
Comité Central
Trabajo Técnico
Requiere la colaboración de las
instituciones (regladas y no-regladas) para
aportar información
Las aportaciones del profesorado:
cruciales para identificar información
Resultados del Mapa de Indicadores
Disponibilidad:
1. Para la sociedad en
general
2. Para la orientación
política (cultural y
educativa)
3. Para
investigadores/as
(realización de
estudios)
Panorama de la
Educación Musical y
de la Danza en la CV
Informe periódico (a
definir)
Organizado en torno a
preguntas de evaluación
Completado con
estudios específicos
realizados por
investigadores
independientes
35
"Dicen que soy héroe, yo débil, tímido, casi
insignificante, si siendo como soy hice lo que
hice, imagínense lo que pueden hacer todos
ustedes juntos".
Mahatma Gandhi
"El mayor error del ser humano es intentar
sacarse de la cabeza aquello que no sale del
corazón“
Mario Benedetti
Muchas gracias por su atención
38