EVALUACIÓN DE POLÍTICAS PÚBLICAS
Fabio Vallejo GiraldoUniversidad de AntioquiaqNoviembre 7 de 2012
Este documento se ha realizado con la ayuda financiera de la Unión Europea. El contenido es este documento es presponsabilidad exclusiva de sus autores y en modo alguno debe considerarse que refleja la posición de la Unión Europea
No se puede mostrar la imagen. Puede que su equipo no tenga suficiente memoria para abrir la imagen o que ésta esté dañada. Reinicie el equipo y, a continuación, abra el archivo de nuevo. Si sigue apareciendo la x roja, puede que tenga que borrar la imagen e insertarla de nuevo.
Incluya en esta zona el título del apartado
Incluya en esta zona el subtítulo del apartadoDefiniciones o referentes
Incluya en esta zona el subtítulo del apartado Políticas públicasUna política es un plan para alcanzar un objetivo de interés público (Banco Mundial,2011).Un conjunto de actividades (programas, estrategias, procedimientos, leyes, reglamento) dirigido hacia
bj i l ¨ E i id d f l d ñ (E l d 2008)un objetivo general ¨ Estas actividades frecuentemente se acumulan durante años. (Evalsed, 2008) “una política pública es un curso de acción o de inacción gubernamental, en respuesta a problemas públicos: [Las políticas públicas] reflejan no sólo los valores más importantes de una sociedad, sino que también el conflicto entre valores. Las políticas dejan de manifiesto a cuál de los muchos diferentes f p j f fvalores, se le asigna la más alta prioridad en una determinada decisión(Kraft y Furlong, 2006).una política pública es “en suma: a) el diseño de una acción colectiva intencional, b) el curso que efectivamente toma la acción como resultado de las muchas decisiones e interacciones que comporta y, en consecuencia c) los hechos reales que la acción colectiva produce” (Villanueva 1996)en consecuencia, c) los hechos reales que la acción colectiva produce”. (Villanueva,1996)
Política pública Momentos de
1 2 3
45
la Evaluación
4
6
Incluya en esta zona el título del apartado
Incluya en esta zona el subtítulo del apartadoMomentos y ruta de la evaluación de la políticaIncluya en esta zona el subtítulo del apartado
11 22 33
Momentos y ruta de la evaluación de la política
Evaluación/análisisex ante y diseño depolíticas
Toma de decisiones Planificación (programación ,regulación)
33
Transformación social
445566
OperativizaciónSeguimiento y mapeo de alcances
Medición de efectos
4455
de efectos
Incluya en esta zona el título del apartado
Incluya en esta zona el subtítulo del apartado
11 Análisis ex‐ante
Análisis dimensional: “Método analítico diseñado para explorar dimensiones y Incluya en esta zona el subtítulo del apartado
D En qué consiste?
límites de las situaciones de referencia en una organización o en un entorno social”
Dsustantiva
DDpersonal
D espacial
Quién lo produce o a quién afecta?
Análisis dimensional
D finalista
D cuali‐t ti Para qué resolvemos la
D
cuantativa Para qué resolvemos la situación de referencia?
Cuánto importa la situación de f temporal Cuándo y desde cuándo se produce la
situación de referencia?referencia?Cómo se produce la situación de referencia?
Incluya en esta zona el título del apartado
Incluya en esta zona el subtítulo del apartado22 Toma de decisiónIncluya en esta zona el subtítulo del apartado Planificación del desarrollo
Planificación físico
22 Toma de decisión
Análisis situacional (identificación y priorización de necesidades)
Planificación físico‐financiera
yectos
vención
Plan de
amas y proy
e la interv
Rendición de cuentas
Plan de desarrollo
Pl dTrabajo
colaborativo e integración i tit i l o
de progra
ficación de cuentasPlanes de
acción
institucional
Diseño
Planif
Seguimiento, mapeo de alcances y evaluacióng , p yDe diseño y estructura
De resultados y efectos
Incluya en esta zona el título del apartado
Incluya en esta zona el subtítulo del apartadoLínea Base 33 Planificación
Incluya en esta zona el subtítulo del apartado Objetivos y metas
Dimensiones
Categorías, variables e indicadoresindicadores
Seguimiento y evaluación de
Información de base Información de resultados
Seguimiento de Seguimiento en terreno evaluación de
resultadosprogramasSeguimiento en terreno
(diarios de campo)
Indicadores Gestión, proceso, producto y resultado
Incluya en esta zona el título del apartado
Incluya en esta zona el subtítulo del apartado
44 Operativización
Incluya en esta zona el subtítulo del apartado
Análisis de contexto
De la ejecución a la evaluación
contexto
Análisis deAnálisis de interesadosAnálisis de
EfectosPolítica pública
Análisis de resultados
(Cumplimiento de(Cumplimiento de objetivos y metas)
Incluya en esta zona el título del apartado
Incluya en esta zona el subtítulo del apartado
55 Seguimiento y mapeo de alcances
Incluya en esta zona el subtítulo del apartado ContextoEstándarTendencias
Planificación objetivos y metasResultados
Mapeo de
Expectativa, efectividad e idoneidad
Mapeo de alcances e Indicadores Insumos
EficienciaProductos
EficienciaEficaciaCumplimiento y calidad
ProcesoEfi i iEficiencia e idoneidad
Incluya en esta zona el título del apartado
Incluya en esta zona el subtítulo del apartado66 Medición de efectos
Incluya en esta zona el subtítulo del apartado Propósitos de la evaluación
Comprensión de la intervención
Transformación fsocial
Medición de efectos y mejora Rendición de efectos y mejora
continua cuentas
Incluya en esta zona el título del apartado
Incluya en esta zona el subtítulo del apartado
Papel de la evaluación en la toma de decisiones
Incluya en esta zona el subtítulo del apartado Diseño y formulación de políticas públicas
Políticas, programasT d Evaluación
Desempeño y gestiónToma de decisiones
Toma de decisiones
Ejecución , seguimiento y evaluación de resultados
EvaluaciónSegún la etapa de intervención:Según la etapa de intervención:Ex ante – previa a la implementación de la políticaDocumenta necesidad de intervención, la viabilidad y factibilidad de programas y políticas. (estudios de diseño de políticas y programas, estudios de pre‐inversión de proyectos).Procesos – durante la implementación de la acción .Se examina el uso de recursos para el cumplimiento de los objetivos, la planificación de la intervención y laSe examina el uso de recursos para el cumplimiento de los objetivos, la planificación de la intervención y la generación de los productos. Se recomiendo “Mapeo de alcances”Ex post – Finalizado cada programa o proyecto Se evalúan los resultados y el cumplimiento de objetivos y metas. Además la gestión en cada período. Involucra análisis de los efectos de primer y segundo orden
Incluya en esta zona el título del apartado
Incluya en esta zona el subtítulo del apartadoFactores de éxito de la política
Factores de éxito de la políticaIncluya en esta zona el subtítulo del apartado Factores de éxito de la política
Los objetivos explican losLos objetivos explican los beneficios a largo y mediano plazo que pueden esperarse de la política
¿La política logra el efecto que se propone? ¿Cambia la situación de la población objetivo?
Pertinencia
objetivo?
Sostenibilidad EficaciaViabilidad
¿Tiene sentido la propuesta deintervención?
d f d Efi i iGrado en que se cumplen los objetivos de¿Los riesgos identificados son
aceptables?Eficiencia cumplen los objetivos de
una iniciativa al menor costo posible.
Incluya en esta zona el título del apartado
Incluya en esta zona el subtítulo del apartadoEscala propuesta òreferente
Equivalencia. Dada enporcentaje (expresado en
Calificación ovaloración numérica
S ú i ifi d
Escalas de valoración
Incluya en esta zona el subtítulo del apartado f p j pintervalos) (expresado en
intervalos)
Deficiente 0 a 25% 0 a 1 25
•Según significadosLos juicios deberán expresarse de acuerdo a las siguientescategorías y significados:Muy bueno o muy alto: Cuando el diseño cumple totalmentecon el criterio y por lo tanto no requiere modificacionesDeficiente 0 a 25% 0 a 1.25
Aceptable 25 a 50% 1.25 a 2.50
Bueno 50 a 75% 2.50 a 3.75
con el criterio y, por lo tanto, no requiere modificaciones.Bueno ò alto: Cuando el diseño cumple con el criterio
analizado pero puede ser mejorado antes o durante suimplementaciónAceptable ò medio: Cuando el diseño según el criterio deBueno 50 a 75% 2.50 a 3.75
Muy bueno 75 a 100% 3.75 a 5.0
Aceptable ò medio: Cuando el diseño según el criterio deevaluación que corresponda alcanza un nivel de desarrolloque requiere de modificaciones importantes previas a suimplementación.Deficiente ò pobre: Cuando no satisface requerimientos• Según valoración numérica Deficiente ò pobre: Cuando no satisface requerimientosmínimos y deben hacerse cambios profundos en el diseño
Escala de calificación del efecto 1-5
Según valoración numérica• Deficiente ò pobre (0 – 1.25): no hay evidencias de cambio claramente detectadas y no están dadas las condiciones para el progreso futuro. • Aceptable ò medio (1.25 - 2.50): no hay mecanismos adecuados
Pobre 0 a 2.5
Medio 2 5 a 3 6
p ( ) yque develen posibilidades para alcanzar cambios en el mediano y largo plazo, aunque pueden estar dadas las condiciones para el progreso futuro. • Bueno ò alto (2.50 - 3.75): Se evidencian condiciones favorables Medio 2.5 a 3.6
Alto 3.7 a 4.6
para alcanzar algunos cambios en el rezago o permanencia que favorecen la sostenibilidad en el mediano plazo, pero los mecanismos para lograrlo son insuficientes; se están realizando moderados progresos para lograr impactos de largo aliento.
Muy alto Mayor de 4.6
• Muy bueno ò muy alto (3.75 ‐ 5.0): hay suficientes evidencias que develan el cambio y/o transformación en las tasas de graduación y rezago claramente reconocidos, y se está realizando un sustancial progreso para lograrlo con mecanismos apropiados claramente definidos. El programa está posicionado para entregar sus productos y se visualiza sostenibilidad.
Incluya en esta zona el título del apartado
Incluya en esta zona el subtítulo del apartadoModelo de componentes principales
Incluya en esta zona el subtítulo del apartado
E= f . Fac + h . Coh + n . Com
Donde: Una opción f=0 60
Factor o dimensión
f=0.60h=0.25n=0.15
0.60
EfectosNota: Los valores para f, h y n se definen según el grupo de investigación ó a través de panel de
t
Coherencia Complementarios
expertos
Coherencia p
0.25 0.15
Incluya en esta zona el título del apartado
Incluya en esta zona el subtítulo del apartadoIncluya en esta zona el subtítulo del apartado
Incluya en esta zona el título del apartado
Incluya en esta zona el subtítulo del apartadoIncluya en esta zona el subtítulo del apartado
Gracias