Los Exámenes de Altas Consecuencias:
Implicaciones Educativas
Dr. Melchor Sánchez MendiolaUNAM
Jueces 12:5-6
“Y los galaaditas tomaron los vados del Jordán a los de Efraín; y aconteció que cuando decían los fugitivos de Efraín: Quiero pasar, los de Galaad
les preguntaban: ¿Eres tú efrateo? Si él respondía: No, entonces le decían: Ahora, pues,
di Shibolet. Y él decía Sibolet; porque no podía pronunciarlo correctamente.
Entonces le echaban mano, y le degollaban junto a los vados del Jordán. Y murieron entonces de
los de Efraín cuarenta y dos mil”.
Exámenes de Altas Consecuencias
Pruebas o exámenes cuyos resultados tienen consecuencias importantes y
directas para los individuos, programas o instituciones
involucrados en el examen.
AERA, APA, NCME. Standards for Educationaland Psychological Testing. 2014
Exámenes de Altas Consecuencias
Graduación (Examen Profesional)Selección (ENARM, ingreso UNAM)Promoción (exámenes finales de
cursos de licenciatura o posgrado)Certificación (exámenes de Consejos)
www.nap.edu
Exámenes de Altas Consecuencias y sus efectos: Calle de dos sentidos
Examen deAltas ConsecuenciasPolíticos
HumanosEconómicos
Sociales
Educativos
Consecuencias de un Examen
Brennan RL, Ed. Educational Measurement.National Council on Measurement in Education
4th Ed. 2006
Intencionales No intencionales
Positivas
Negativas
I - P NI - P
I - N NI - N
Efectos educativos de un EAC PositivosMotivación al estudio Estandarización de la evaluación Puede elevar la calidad Unifica criterios - si se hace bien -
(alineado con el currículo)Koretz DM, Linn RL. Effects of high-stakes
educational testing on instruction and achievement.AERA & NCME, Chicago. 1991
Efectos educativos de un EAC Negativos “Enseñando a la prueba” (“teaching
to the test”) explícito e implícito Cursos de preparación (leyes de mercado) Efectos en currículo formal y oculto Inferencias inapropiadas de resultados
Madaus G. The influence of testing on the curriculum.NSSE Yearbook. University of Chicago Press. 1988
Efectos educativos de un EACEAC generan controversia por convicciones
filosóficas, políticas o sesgos personales/grupales.Intensa retórica que nubla la discusión.Escasez de evidencia publicada convincente
positiva y negativa.Necesidad inescapable de tomar decisiones.
Cizek GJ. More unintended consequences of high-stakes testing. Educational Measurement:
Issues and Practice. 2001; 20:19-27
“…el uso de la puntuación de un examen definitivamente
implica consecuencias; de otra manera uso es sólo una
abstracción”.
Brennan RL, Ed. Educational Measurement.National Council on Measurement in Education
4th Ed. 2006
“Los desarrolladores del examen son los candidatos obvios para
validar las afirmaciones que hacen sobre la interpretación de los resultados de un examen…”
Brennan RL, Ed. Educational Measurement.National Council on Measurement in Education
4th Ed. 2006
“ El poder de examinar es el
poder de destruir…”
Abraham Flexner. Medical educationin the United States and Canada.
1910. p. 169www.carnegiefoundation.org
¿Qué es evaluación?“…cuando una persona, con algún
tipo de interacción directa o indirecta con otra, obtiene e
interpreta información de manera consciente sobre el
conocimiento y la comprensión, habilidades y actitudes de la
otra persona. Hasta cierto puntoevaluación es un intento de
conocer a esa persona”.
www.psy.gla.ac.uk/~steve/best/rowntree.html
“Colectar datos de evaluación es como recoger la basura, es mejor que sepas qué vas a hacer con ella antes de recogerla”
Mark Twain
El largo camino educativo del médico
EspecialistaMédico Mantenimientode la competencia
EMP EMP EMC…DPC
HACE
DEMUESTRA CÓMO
SABE CÓMO
SABE
Lo que pasa realmente en la práctica diaria (evaluación de 360o, portafolios)
Habilidad para demostrar habilidades clínicas específicas (ECOE, pacientes estandarizados)
Habilidad para aplicar conocimiento factual (preguntas de opción múltiple)
Habilidad para citar conocimiento factual (preguntas de opción múltiple)
Pirámide de MillerAcad Med 1990; 65:S63-67
“No todo lo que puede ser
contado cuenta, y no todo lo que cuenta puede ser
contado”
Albert Einstein
EDUCACIÓN MÉDICA BASADA EN EVIDENCIA
EDUCACIÓN BASADAEN OPINIÓN
EDUCACIÓN BASADAEN EVIDENCIA
Educación Médica Basada en Evidencias: ¿Ser o no ser?Sánchez Mendiola M. Inv Ed Med 2012;1(2):82-89.
http://evidencelibrary.abms.org
http://riem.facmed.unam.mx
http://onlinelibrary.wiley.com/doi/10.1111/jedm.12000/abstract
http://ncme.org/publications/items/
www.aera.net/Publications/tabid/10067/Default.aspx
www.ceneval.edu.mx/ceneval-web/content.do?page=7344
www.inee.edu.mx
www.facmed.unam.mx
Lo bueno…
Recurso imprescindible para la calidad.¡Llegó para quedarse! Se puede mejorar.Rendición de cuentas.Evaluación formativa. Fuente de motivación para aprender.Del aprendizaje y para el aprendizaje.
Lo malo…
Puede profundizar la desigualdad.Refuerza cultura de fiscalización, control y
castigo.Prioriza funciones administrativas.Mucha evaluación pero con pocos cambios.Implementación de programas que después
no se evalúan.
Lo feo…
Homogeneidad que niega la diversidad.Usos sesgados de los resultados de la
evaluación…cuando se usan.Fomenta la cultura de la simulación.Conducida por personal improvisado.
“Todo lo que merece ser hecho, merece también ser bien hecho”
Andre Maurois