segevalfasesejecyoperpsalud

Oficina General de Planeamiento General Oficina Ejecutiva de Proyectos de Inversin Documento de Trabajo: no citar, no reproducir. ________________________________________________________________________________________

MINISTERIO DE SALUD

DOCUMENTO DE TRABAJO:

SEGUIMIENTO Y EVALUACIN DE LAS FASES DE EJECUCIN Y OPERACIN DE PROYECTOS DE

INVERSIN PUBLICA EN EL SECTOR SALUD

Directora Ejecutiva: Arq. Fabiola Luna Andrade. Consultora OPI Salud: Ing. Liliana Li Mostacero.

Lima, 2004.

_____________________________________________________________________________ Seguimiento y evaluacin de las fases de ejecucin y operacin de proyectos de inversin pblica en el sector Salud.


_____________________________________________________________________________ 2

NDICE

Presentacin 3 I.- Antecedentes 4 II.- Base legal 5 III.- mbito de aplicacin 5 IV.- Objetivo 5 V.- Fines 6 VI.- Experiencia a la fecha 7 VII.- Criterios Generales 8 VIII.- Informacin Bsica 9 IX.- Marco conceptual 10 X.- Estrategia del sistema de evaluacin y seguimiento 13 10.1 Decisin de lo que debe ser evaluado 13 10.2 Enfoque y metodologa 14 10.3 Obtencin de informacin 17 10.4 Uso de resultados de la evaluacin y seguimiento 18 10.5 Papeles potenciales de los organismos para la evaluacin y seguimiento 19 XI.- Metodologa de evaluacin y seguimiento 21 11.1 Metodologa de evaluacin y seguimiento de la ejecucin de la inversin 22 11.2 Metodologa de evaluacin de resultados y seguimiento de la fase operativa 40 11.3 Evaluacin de impacto 47 XII.- Perfil del equipo de evaluacin 51 XIII.- Recomendaciones 52 XIV.- Glosario de Trminos 52 XV.- Bibliografa 53 XVI.- Anexo: Hojas de Trabajo 54

Seguimiento y evaluacin de las fases de ejecucin y operacin de proyectos de inversin pblica en el sector Salud.


_____________________________________________________________________________ 3

PRESENTACIN La gestin de los servicios pblicos de salud requiere del anlisis profundo de la realidad sanitaria, de factores condicionantes y de la propuesta social del gobierno para revertir los problemas existentes a fin de mejorar las condiciones de vida y salud de la poblacin. El Ministerio de Salud ha definido los objetivos y metas sectoriales que espera alcanzar en el Plan Estratgico Multianual, orientando todos los esfuerzos y recursos al logro de esos objetivos. No obstante, que en algunos casos estos objetivos, no necesariamente concuerdan con las prioridades en determinados mbitos regionales, por ello los Gobiernos Regionales, a travs de las Direcciones Regionales de Salud, definen los objetivos, en funcin a la situacin de salud de la poblacin de su mbito. La definicin de objetivos claros puede aadir transparencia al proceso de asignacin de recursos y proveer una referencia de comparacin para la evaluacin de los objetivos y metas previstas en el marco de la poltica sectorial, regional e institucional. La definicin de objetivos se basa en los diagnsticos, que definen la lnea basal punto partida de los planes, programas y proyectos de inversin pblica a travs de los indicadores que servirn de referencia para el proceso de evaluacin y seguimiento de los resultados obtenidos durante la implementacin de los planes, programas y proyectos. El objetivo del presente documento de trabajo es poner a disposicin de todos los agentes del sector que participan en la implementacin de proyectos, una metodologa de evaluacin y seguimiento de proyectos en sus fases de ejecucin y operacin, que ha sido diseada como un sistema de control de los resultados de los objetivos y metas planteados y as poder mejorar la gestin de servicios de salud.



_____________________________________________________________________________ 4

I.- ANTECEDENTES La Inversin Pblica est normada por la Ley N 27293, Ley del Sistema Nacional de Inversin Pblica, las leyes anuales de presupuesto y de endeudamiento externo, as como por las normas sobre requerimientos tcnicos de infraestructura y acreditacin de servicios para los diferentes niveles de atencin. Esta normatividad establece los principios, procesos, metodologas y normas tcnicas relacionadas con las diversas fases de los proyectos de inversin y obliga la observancia del Ciclo de Proyectos por parte de todas las entidades y empresas del sector pblico no financieros con el fin de optimizar el uso de los recursos pblicos destinados a la inversin. La Inversin Pblica en el sector Salud tiene como objetivos especficos mejorar la cobertura y calidad de los servicios para garantizar la eficiencia de la produccin de servicios de salud. El mejoramiento de la oferta de servicios debe estar articulado al proceso de planificacin local, acorde a las necesidades de la demanda, perfiles epidemiolgicos, oferta actual y el estado socio econmico de la poblacin objetivo del proyecto. El Sistema Nacional de Inversin Pblica, desde su creacin en Julio del ao 2000 a la fecha, ha otorgado delegaciones de facultades tanto a las OPIs Sectoriales como a los Gobiernos Regionales y Locales, para efectuar la Declaracin de Viabilidad de los proyectos; en un inicio esta delegacin se realiz segn tipologa y montos de inversin, actualmente la delegacin de viabilidad est dada segn montos de inversin. Los proyectos de inversin pblica generalmente estn orientados a la produccin de bienes y servicios para satisfacer las necesidades de una poblacin determinada, en tal sentido, la unidad de anlisis para la realizacin de un proyecto es el impacto de los resultados del proyecto sobre la poblacin beneficiaria. De ah la importancia de verificar los cambios del estado de salud de la poblacin objetivo, como consecuencia de la implementacin del proyecto. Haciendo uso de las facultades establecidas en el art. 13 de la Directiva N 004-2003-EF/68.01 y habiendo transcurrido ms de tres aos de la implementacin del SNIP, la Oficina General de Planeamiento Estratgico a travs de la Oficina Ejecutiva de Proyectos de Inversin ha visto por conveniente disear una metodologa de evaluacin y seguimiento de proyectos de inversin pblica del sector Salud, a fin de obtener informacin de cmo se viene ejecutando la inversin, detectar debilidades si las hubieran, identificar sus causas y recomendar las acciones correctivas. As mismo, en la fase de operacin nos interesa conocer si se viene logrando las metas propuestas en cuanto a produccin de servicios y los costos de los mismos, lo que tambin permitir obtener informacin que sirva para retroalimentar los procesos en el marco del ciclo de proyecto.



_____________________________________________________________________________ 5

II.- BASE LEGAL

- Ley N 27293. Ley del Sistema Nacional de Inversin Pblica. - D.S. N 157-2002-EF. Reglamento del Sistema Nacional de Inversin Pblica. - Resolucin Directoral N 007-2003-EF/68.01. Directiva N 004-2003-EF/68.01 del

SNIP. - Resolucin Ministerial N 525-2002-SA/DM, mediante la cual se encarga la

conduccin del Sistema Nacional de Inversin Pblica a la OGPE del MINSA a travs de la OEPI.

- Resolucin Ministerial N 007-2001-SA-DM, mediante la cual se establece la OPI Salud.

III.- MBITO DE APLICACIN Se aplica a las unidades ejecutoras que conforman el Pliego Ministerio de Salud, Gobiernos Regionales, Gobiernos Locales, Fuerzas Armadas y Policiales, ESSALUD y todas las unidades ejecutoras que lleven a cabo inversiones que beneficiarn al sector Salud en el mbito nacional.

IV.- OBJETIVO El presente es un documento de trabajo que contiene una propuesta de procedimientos y acciones de evaluacin y seguimiento de los proyectos de inversin pblica declarados viables, con la finalidad de obtener informacin del desempeo de los agentes que participan en el proceso de implementacin del ciclo del proyecto.



_____________________________________________________________________________ 6

V.- FINES La evaluacin y seguimiento de los procesos en la etapa de implementacin de los proyectos nos permitir medir los niveles de eficiencia alcanzados en la ejecucin de las actividades de la inversin, observar el grado de eficacia que se est logrando en el cumplimiento de objetivos, segn las metas anuales ejecutadas y apreciar en qu medida el proyecto est contribuyendo al fin propuesto; todo lo cual, permitir identificar las debilidades existentes y recomendar acciones pertinentes para evitar en el futuro situaciones que en la prctica hacen menos eficiente y/o eficaz el proceso de implementacin del proyecto. As mismo, la informacin obtenida en este proceso de seguimiento ser de muchsima utilidad cuando al finalizar los primeros cinco aos del proyecto se realice una primera evaluacin de impacto.

Fines especficos:

5.1 Verificar si se ha logrado ejecutar las actividades previstas en el estudio de preinversin al mejor costo y en el mejor tiempo (eficiencia).

5.2 Verificar si se viene logrando las metas del proyecto (eficacia) a travs de la

medicin de los avances logrados en el cumplimiento de los objetivos, teniendo como referencia la matriz de marco lgico, planes de produccin y otros parmetros que hayan sido considerados en el estudio de preinversin.

5.3 Verificar las capacidades de gestin de las unidades ejecutoras para la ejecucin

de la inversin. 5.4 Generar informacin que contribuya a retroalimentar el proceso de la toma de

decisiones y el aprendizaje organizacional para mejorar proyectos futuros.



_____________________________________________________________________________ 7

VI.- EXPERIENCIAS A LA FECHA Algunos proyectos que se encuentran en la fase de inversin, cuando se ha culminado la elaboracin del estudio definitivo, muestran que el monto de inversin obtenido en el expediente tcnico es mayor al estimado en el estudio a nivel de perfil. Estos casos se han presentado en proyectos cuyos componentes de inversin son infraestructura y equipamiento. Los motivos de incremento generalmente aceptados en el caso de infraestructura, son por mayores costos por concepto de suelos de baja resistencia que requeran platea de cimentacin y/o muros de contencin; as tambin, por incremento de rea construida por concepto de muros, circulacin y/o reas complementarias, o por subestimacin de costos unitarios por metro cuadrado al momento de la estimacin. En el caso de equipamiento, normalmente el incremento se presenta por diferencias entre los precios consignados en el perfil y los obtenidos en las cotizaciones, as tambin se observ que en algunos perfiles no se haba indicado la especificacin del equipo (variable segn el nivel de atencin del establecimiento) y que influye en la determinacin de su precio. En ambos casos, la variacin que se produce, generalmente, se encuentra en el rango de 5 10% y en algunos casos excepcionales se super el 20 y 30%.



_____________________________________________________________________________ 8

VII.- CRITERIOS GENERALES Para conocer si los resultados de la evaluacin del estudio de preinversin no se alteran cuando se presentan incrementos en la fase de inversin, (es decir, sigue siendo viable), se debe tener en cuenta los siguientes criterios generales:

i) Los incrementos que se produzcan deben estar dentro del margen del anlisis de sensibilidad donde se utiliza como variable riesgosa la inversin, segn el cual la alternativa elegida sigue siendo mejor que la segunda mejor alternativa.

ii) Los componentes de inversin del proyecto deben ser los mismos que los previstos en el estudio de preinversin (infraestructura, equipos, capacitacin, etc.).

iii) Pueden producirse variaciones en el rea a construir, remodelar, ampliar y/o rehabilitar, ms no se aceptarn cambios en el nmero de unidades productoras de servicios (consultorios, camas, sala de partos, sala de operaciones, equipos de rayos X, ecgrafos, tpicos de emergencia, etc.), que afecten la capacidad instalada prevista de las unidades orgnicas de los establecimientos de salud intervenidos.

iv) Se debe respetar el rea mnima establecida en las normas de arquitectura para establecimientos de salud vigentes.

v) Que los equipos a adquirir tengan las caractersticas tcnicas indicadas en el estudio de preinversin y acordes a la complejidad de los establecimientos intervenidos.



_____________________________________________________________________________ 9

VIII.- INFORMACIN BSICA En la evaluacin se tendr que contrastar la informacin del estudio de preinversin con el que se obtiene la viabilidad, con la existente a la fecha de la evaluacin, por tanto ser de inters conocer:

i) El problema a resolver, con su indicador indicadores. ii) El objetivo central a lograr, con su indicador indicadores. iii) La mejor alternativa y las actividades que implique su implementacin, con sus

respectivos indicadores. iv) El plan de implementacin, que indique el tiempo programado de las

actividades para la ejecucin del proyecto. v) El programa de requerimientos de recursos humanos, infraestructura,

equipamiento y gestin. En el caso del recurso humano, ser de inters conocer si se prev incrementar personal y de que profesin y/o especialidad; en el caso de infraestructura, es de inters conocer si se incrementan unidades de produccin (consultorios, salas de partos, salas de operaciones, tpicos, camas, etc.).

vi) El plan de produccin de los servicios intervenidos (atenciones esperadas). vii) Lnea basal que sirva de referencia cuando se realice las actividades de

seguimiento y evaluacin del proceso de implementacin del proyecto (ej: cobertura en consulta externa, tasa de parto institucional, gestantes controladas, etc.). Estos indicadores deben estar referidos a los servicios a intervenir y que se espera se modifiquen con la implementacin del proyecto.

viii) Costos de inversin, de operacin y mantenimiento anualizados. ix) Ratios costo / eficacia de las alternativas propuestas. x) Anlisis de sensibilidad de la inversin y de las atenciones. xi) Anlisis de sostenibilidad financiera e institucional. xii) Matriz de marco lgico de la alternativa seleccionada.



_____________________________________________________________________________ 10

IX.- MARCO CONCEPTUAL Las acciones de evaluacin y seguimiento de los proyectos que se plantean en el presente documento se enmarcan dentro del proceso de control de la gestin realizada, con el fin de verificar que las actividades de los PIPs se lleven a cabo tal y como fueron planeadas, de manera que garanticen el cumplimiento de sus objetivos y metas. En tal sentido, se relaciona con objetivos, metas, estrategias, polticas, recursos, resultados, procesos y actividades. La evaluacin es un proceso continuo, que debe realizarse durante todas las etapas del ciclo de proyectos: 1.- Evaluacin ex ante: Busca proporcionar criterios racionales para decidir si debe o no implementarse el proyecto, en caso en que la respuesta sea afirmativa se evala que alternativa se elige y en general, el criterio a seguir es aquella alternativa que genere el mayor impacto al menor costo. 2.- Evaluacin de procesos: Se realiza durante la implementacin y busca detectar las dificultades en la programacin, administracin, control, etc., si las hubiera. Se trata de una evaluacin peridica. La herramienta de evaluacin es el monitoreo o seguimiento de las actividades previstas, pues busca mejorar la eficiencia de la ejecucin. Este tipo de evaluacin no permite evaluar los resultados o impacto del proyecto, slo conocer el cumplimiento de actividades y la ejecucin presupuestal. As cuando se presenta datos de monto invertido, m2 construidos, nmero de ambientes remodelados, charlas impartidas, talleres de capacitacin realizados, etc. no se est sealando nada acerca del resultado impacto en el nivel de la poblacin objetivo de una intervencin social, slo se refiere a las actividades realizadas y los insumos utilizados. 3.- Evaluacin de resultados: Busca determinar si se ha cumplido con los objetivos especficos sealados en el proyecto o programa. Establece el nivel de eficacia en el cumplimiento del objetivo del proyecto y sirve para determinar las razones del xito o fracaso. Generalmente este tipo de intervencin se realiza al final del proyecto, o luego de transcurrido un tiempo de maduracin. La evaluacin de resultados slo es posible si existen objetivos mensurables y si adems se puede demostrar que estos resultados son la consecuencia de las actividades del proyecto. En sntesis, la evaluacin de resultados revela si el proyecto o intervencin entreg los productos esperados en el plazo previsto y con la financiacin asignada. Por ejemplo: si uno de los objetivos especficos era incrementar la cobertura de atenciones en consulta externa, se podr demostrar si se incrementaron estas atenciones; pero no sabremos si ello contribuy a disminuir la tasa de morbilidad y/o mortalidad general, para lo cual se requiere de la evaluacin de impacto.



_____________________________________________________________________________ 11

4.- Evaluacin de impacto: La evaluacin de impacto constituye la evaluacin sustantiva de los resultados de una intervencin o proyecto en el nivel de la poblacin objetivo o beneficiaria. Generalmente, alude al cumplimiento del objetivo general del proyecto o programa (fin ltimo), por ello debe realizarse luego de un tiempo de finalizada la intervencin para estimar su sustentabilidad, entendida sta no slo en trminos financieros, sino tambin en trminos de cambio social. Busca apreciar en qu medida el proyecto eleva el bienestar de la comunidad, incorpora as los efectos secundarios y colaterales. La evaluacin de impacto habitualmente requiere herramientas y tcnicas especiales (encuestas o entrevistas) en el nivel de la poblacin objetivo (una muestra representativa) para estimar los cambios que la intervencin ha producido en ella. La metodologa empleada en la evaluacin ex - ante de proyectos del sector Salud es la de Costo Efectividad, donde el principal criterio para evaluar proyectos es el impacto sobre la salud de los pacientes y los costos necesarios para lograr ese impacto. Sin embargo, dado que actualmente no se dispone de informacin para la obtencin de indicadores de costo efectividad, se opt por incorporar criterios de costo-eficacia, ms orientados a las relaciones entre los resultados, productos y costos.

Ejemplo de indicadores costo efectividad:

i) Costo del perodo relevante / Reduccin de tiempo de discapacidad (recuperacin / rehabilitacin).

ii) Costo del perodo relevante / Incremento del tiempo de vida saludable (prevencin / promocin).

Entre los indicadores costo eficacia ms utilizados tenemos:

i) Costo total actualizado/ pacientes atendidos, y

ii) Costo total actualizado/atenciones integrales.

Se debe tener en cuenta que para que un proyecto sea efectivo debe lograrse el objetivo propuesto, es decir que el servicio llegue a las personas con la necesidad identificada, en otras palabras, debe ser eficaz. La evaluacin de la efectividad de un servicio, implica conocer la situacin antes y despus de las acciones.

As, pueden haber proyectos eficientes, pero que no logran los impactos deseados, es decir no son eficaces. Cuando se sostiene que la evaluacin mide hasta qu punto un proyecto alcanza ciertos objetivos, tambin se debe tener en cuenta que esta definicin tiene dos riesgos:



_____________________________________________________________________________ 12

a.- Cuando en el estudio de preinversin se han sobreestimado las metas, el resultado de la evaluacin puede conllevar a que un proyecto se considere fracasado an cuando desde otra perspectiva pueda haber sido exitoso. b.- Cuando en el estudio de preinversin se han subestimado las metas, el resultado de la evaluacin puede ser inadecuadamente positivo. En tal sentido, el equipo que se encargue de realizar la evaluacin de los procesos deber incorporar en el informe final un anlisis previo de la coherencia y validez de los supuestos considerados para la estimacin de las metas que conllevarn a lograr los objetivos del proyecto.



_____________________________________________________________________________ 13

X.- ESTRATEGIA DEL SISTEMA DE EVALUACIN Y SEGUIMIENTO

El diseo de una estrategia de evaluacin comprende la determinacin de las polticas, programas y proyectos que deberan ser evaluados, la definicin de los resultados esperados y el lapso de tiempo que deberan tomar, la seleccin de un diseo de evaluacin y la obtencin de los datos necesarios. 10.1 Decisin de lo que debe ser evaluado Para constatar la tendencia de la intervencin del Estado en el mejoramiento de las condiciones de salud de la poblacin en el pas, podramos ver cuatro aspectos: anlisis de la demanda en salud, la cobertura de atencin por financiamiento de la demanda, la cobertura de atencin por financiamiento de la oferta y la cobertura de atencin por reestructuracin de la gestin de servicios de salud. Los resultados obtenidos pueden ser evaluados desde el punto de vista de la eficacia y eficiencia. Para el anlisis de la demanda, una informacin importante es el anlisis de la situacin de salud proporcionada por INEI en las Encuestas Nacionales de Hogares, adems del anlisis de la situacin de entorno, con las que se podr estimar la cantidad de personas que se sintieron enfermas y/o sufrieron accidente, la demanda efectiva, los establecimientos que consulta la poblacin, la demanda insatisfecha y las causas de ello. Con el anlisis de la cobertura de atencin por financiamiento de la demanda es posible evaluar el resultado de la aplicacin de los sistemas de aseguramiento a la poblacin de escasos recursos econmicos; la informacin utilizada en este anlisis ser el propio registro de poblacin asegurada; si se incorpora adems informacin del nivel de pobreza de la poblacin asegurada, se podr verificar si la poblacin beneficiada con este aseguramiento corresponde a la poblacin objetivo de esta poltica. Con el anlisis de la cobertura de atencin por financiamiento de la oferta, se podrn evaluar aquellas intervenciones del Estado para mejorar la oferta de servicios de salud, para ello se puede utilizar informacin de produccin de los diferentes establecimientos de salud referente al nmero de atendidos y atenciones, pudindose incorporar adems informacin referente a la condicin de pobreza de las nuevas personas atendidas, con la que podemos evaluar si se avanza a alcanzar la equidad y la eficacia en la atencin de servicios de salud. As por ejemplo, si se encontrara que se produce un incremento en el nmero promedio de atenciones por paciente, pero no necesariamente la incorporacin de nuevos pacientes, se estara observando que se est mejorando la eficacia, pero no necesariamente la equidad.



_____________________________________________________________________________ 14

El anlisis de la cobertura de atencin por reestructuracin de la gestin de establecimientos nos permitir analizar el efecto de las acciones de mejoramiento de la gestin de los establecimientos, con la implementacin de los sistemas de redes y microrredes, se ha capacitado personal, se ha iniciado la calificacin de usuarios segn nivel de pobreza y con la puesta en marcha de sistemas de informacin y monitoreo. Para esto, se puede utilizar informacin histrica de produccin de los diferentes establecimientos de salud que conforman la red en anlisis, referente al nmero de atendidos y atenciones, incorporando informacin de referencias de pacientes de los establecimientos de menor a mayor nivel de complejidad, con la que se podr hacer un anlisis de comparacin de la produccin de servicios antes y despus de la intervencin. Adems, es posible evaluar la eficiencia del uso de los recursos para la produccin de servicios de salud, sus costos operativos y la sostenibilidad financiera, a travs del anlisis de los ingresos. En general, es recomendable que todos los proyectos cuenten con el respectivo seguimiento y evaluacin, pero si se trata de priorizar lo que debe ser evaluado, habra que considerar lo siguiente: - Las zonas donde se registran altos indicadores de morbilidad y mortalidad. - Poblacin beneficiaria grupos poblaciones con caractersticas socioculturales

especficas, de difcil acceso, donde existe gran incertidumbre respecto a los resultados de aplicacin del proyecto.

- Si la evaluacin considerada nos permitir conocer las dificultades encontradas en la implementacin del proyecto y por consiguiente nos ayudar a decidir su ampliacin a otras zonas su reestructuracin.

- Cuando en el proyecto se han considerado mtodos innovadores para la solucin del problema.

10.2.- Enfoque y metodologa La estrategia del sistema de seguimiento y evaluacin se ha planteado pensando en verificar el grado de cumplimiento de los objetivos y determinar los impactos reales del proyecto, programa y poltica, segn sea el caso. La contribucin de un proyecto en trminos de resultados econmicos, sociales, ambientales, etc.) est dada por la diferencia entre la nueva situacin (con el proyecto en operacin) y la situacin original (sin proyecto). Una buena medicin de los efectos asociados al proyecto se obtiene del contraste entre dos fotografas, antes y despus. Para facilitar un buen proceso de evaluacin ex post evaluacin de impacto, la dependencia responsable del proyecto, en cada fase, debe proponerse efectuar el registro sistemtico de los avances, logros, problemas y forma como se van enfrentando sobre la marcha, es decir implementando el sistema de seguimiento y control de resultados.



_____________________________________________________________________________ 15

El seguimiento de resultados y la evaluacin de impacto son dos actividades diferentes pero sumamente complementarias. Ambas estn dirigidas a la recopilacin y anlisis sistemticos de la informacin que tiene un impacto en la salud de la poblacin. Sin embargo difieren en sus necesidades de informacin, en las cuestiones metodolgicas y en su uso final.

Principales diferencias entre el control de resultados y la evaluacin de impacto

Aspecto Control de resultados Evaluacin de impacto

Objetivos Seguir los cambios de los resultados de los proyectos (metas) a medida que pasa el tiempo.

Evaluar los cambios en los resultados a nivel de la salud de la poblacin, debidos a unas medidas pblicas especficas y evaluar los impactos sobre diferentes grupos de la poblacin.

Datos necesarios Datos al nivel del mbito del proyecto, programa y/o plan recopilados a intervalos frecuentes.

Datos de una poblacin representativa de la poblacin beneficiaria recopilados por lo menos en dos oportunidades, antes y despus de la puesta en prctica de una poltica o un programa.

Metodologa Comparacin de indicadores a medida que pasa el tiempo.

Comparacin de los indicadores antes y despus de la intervencin y entre unos grupos comparables de participantes y no participantes.

La evaluacin en sus propsitos de:

a) verificar si el proyecto ha valido la pena como esfuerzo de inversin para resolver un problema,

b) derivar propuestas de mejoramiento a futuros proyectos, recorre el ciclo del proyecto e indaga por la forma como se han realizado las tres fases: formulacin, ejecucin y operacin. Cuando la evaluacin comprende un paquete de proyectos dentro de la institucin, o un programa interinstitucional, deber efectuarse el anlisis ex post vs ex ante, tanto para cada proyecto, como para el conjunto. Generalmente, por razones prcticas, cuando se evala un programa configurado por un nmero significativo de proyectos, se efecta la evaluacin sobre una muestra, con el fin de derivar conclusiones en el nivel individual de los proyectos seleccionados, as como en el nivel agregado del programa.



_____________________________________________________________________________ 16

Un buen instrumento para abordar la evaluacin es el Marco Lgico. Este no slo provee elementos esenciales para la evaluacin, sino que sirve de referencia para orientar la identificacin de informacin adicional y el diseo de elementos complementarios para el anlisis. Por ejemplo, en la fila del propsito, dado que la cobertura est en funcin de los recursos productivos, costos operativos e ingresos percibidos, dentro del anlisis a efectuar tambin revisaremos el programa de requerimientos, costos de produccin e ingresos por toda fuente de financiamiento. Instrumento de evaluacin: Matriz de marco lgico

Niveles de objetivos del marco lgico Preguntas bsicas Concepto Indicador Verificacin Supuesto

Atributos a evaluar

Cul es la contribucin al desarrollo del Sector?

Fin Impacto?. Contribucin?. Sostenibilidad?.

Cul fue el grado de solucin al problema?

Propsito Cobertura?. Dficit?. Calidad de atencin?.

Qu se entreg?

Componente Cantidad? Calidad? Costo? Cronologa?

Cmo se hizo?

Actividad Tiempo? Costo? Calidad?

Los indicadores del marco lgico servirn de referencia para la comparacin de la situacin sin proyecto, con la situacin con proyecto y nos permitir medir el avance logrado respecto a las metas trazadas. Una vez que se dispone del anlisis de objetivos y de sus niveles de logro mediante el marco lgico, es necesario abundar en informacin con mayor especificidad, para lo cual se requerir aplicar una gama de elementos complementarios. La metodologa propone el anlisis del ciclo del proyecto mediante la verificacin de los siguientes aspectos:

1. El problema o necesidad identificada. 2. El proyecto como solucin al problema (pertinencia). 3. Objetivos del proyecto (% de cumplimiento de objetivos). 4. Cobertura (ndice de cobertura = real (fase operacin) / terica (proyecto)). 5. Brecha (ndice de brecha = real (fase operacin) / terica (proyecto)). 6. Dimensionamiento (adecuado, sobre o subdimensionado?). 7. Localizacin (anlisis ex ante: adecuada?, se ha cumplido?). 8. Aspectos tcnicos (anlisis ex ante; cumplimiento de especificaciones?).



_____________________________________________________________________________ 17

9. Aspectos ambientales (anlisis ex ante, balance ambiental). 10. Aspectos institucionales (capacidad para la ejecucin y para la operacin). 11. Costos de inversin (ndice de costos). 12. Tarifas (han variado las tarifas de la situacin ex ante?) 13. Esfuerzo de financiacin (de la entidad ejecutora, adicional al aporte del Estado). 14. Desembolsos (grado de cumplimiento y anlisis de factores externos e internos). 15. Ejecucin. (ndice de cumplimiento: plazos). 16. Evaluacin econmica (costo eficacia). 17. Sostenibilidad (anlisis integral (social, tcnico, institucional, financiera) sobre

condiciones de continuidad y expansin). 18. Impacto del proyecto (verificacin de eficacia en funcin del problema y del

entorno). 10.3 Obtencin de informacin Para la obtencin de informacin se puede acudir a los siguientes procedimientos:

- Investigacin documental: especialmente sobre los estudios de preinversin, los informes de avance del proyecto, los registros y estados financieros y la informacin sobre productos y resultados.

- Recopilacin de informacin estadstica sobre el proyecto y su entorno. - Verificacin y comprobacin de hiptesis por observacin directa. - Recoleccin de informacin por visitas a terreno y entrevistas con los diferentes

actores sociales relacionados con el proyecto y su ambiente. - Procesamiento, estimacin y anlisis de indicadores de evaluacin.

Ejemplos de fuentes de datos para la evaluacin: Encuestas nacionales de hogares (ENAHO). Estudios de medicin del nivel de vida (ENNIV). Encuestas demogrficas y sobre la salud (ENDES). Encuestas especiales realizada por universidades, ONG, grupos consultores. Datos de seguimiento para administradores de programas de salud existentes (identificacin de beneficiarios segn nivel de pobreza, poblacin asegurada por el SIS, produccin de servicios, sistema de referencia y contrarreferencia, costos operativos: recursos humanos, insumos, servicios, mantenimiento). Estudios de casos de proyectos. Por tal motivo, es de suma importancia fortalecer los sistemas de registro de informacin estadstica tanto de los establecimientos de salud, redes, microrredes y de las Direcciones Regionales de Salud que permita facilitar el sistema de seguimiento y evaluacin de proyectos.



_____________________________________________________________________________ 18

Algunas evaluaciones podran necesitar la recopilacin de nuevos datos. Si ese es el caso, es importante estar al tanto de la capacidad institucional adicional y de los dems recursos que se requieran para la tarea de recopilacin de datos. Cuando la necesidad de datos es de la ms alta importancia y la capacidad institucional es dbil, es importante coordinar esfuerzos con las instituciones, bien sea pblicas o no pblicas, para disear instrumentos que puedan recopilar la informacin que pueda servir para la ms alta cantidad de propsitos posible. Es importante tener como criterio el gasto y tiempo que demandara la obtencin de informacin adicional, comparados con los beneficios que esta proporcionara en este proceso de control de resultados. 10.4 Uso de los resultados de la evaluacin y seguimiento El seguimiento de los resultados y la evaluacin del impacto no son actividades tcnicas aisladas. Su propsito principal es de presentar una imagen del estado de la salud de una poblacin en una regin o pas en diferentes pocas, con una clasificacin por grupos poblacionales ciclos de vida, segn lo apropiado. Son ntimamente vinculados al proceso de toma de decisin en todos los niveles y proveen retroaccin a los directores de proyectos, a los responsables de las polticas y a la sociedad civil. Por tanto, un elemento crucial de la estrategia de seguimiento de resultados y de evaluacin de impacto es la produccin de un proceso de retroaccin. Un proceso de retroaccin es un mecanismo por medio del cual el seguimiento y los resultados de la evaluacin son difundidos y utilizados para evaluar el progreso general de los esfuerzos de mejorar las condiciones de salud y para decidir el camino a seguir. Consta de dos componentes: una estrategia de difusin y un vnculo claro entre las actividades de seguimiento y de evaluacin y la estrategia planteada. La difusin de los resultados del seguimiento y de la evaluacin considera generalmente una amplia gama de auditorios que incluye los responsables de la poltica, los directores de programas, los beneficiarios de los programas, el pblico en general, los medios de comunicacin y los acadmicos. Por lo tanto, los resultados del seguimiento y de la evaluacin daran informacin sistemticamente para las estrategias, las cuales a su vez, podrn determinar las asignaciones presupuestarias. En particular, es conveniente una evaluacin anual del progreso sobre la ejecucin de las estrategias planteadas. Con ello se conocera si las metas se han alcanzado, indicando las razones por cualquier diferencia existente entre los resultados deseados y los resultados reales. Adems, podra examinar cualquier modificacin necesaria a la estrategia para reforzar su ejecucin que se haya sugerido con los resultados obtenidos de las actividades de seguimiento y evaluacin. Para que sean tiles, los resultados del seguimiento y evaluacin deberan estar disponibles cuando se necesiten.



_____________________________________________________________________________ 19

10.5 Papeles potenciales de los organismos para la evaluacin y seguimiento El seguimiento de los resultados y la evaluacin del impacto comprenden la participacin de varios organismos dentro y fuera del gobierno. Dentro del gobierno, la participacin de varios organismos en diferentes niveles tambin es importante. Por ejemplo, el Ministerio de Salud tiene un papel ms importante para el diseo, el seguimiento y el aporte de respaldo a toda la estrategia de seguimiento y evaluacin, mientras el INEI y otras fuentes estadsticas pueden ser esenciales para proveer la informacin necesaria. El Ministerio de Salud est en buena posicin para coordinar el diseo, seguimiento y el respaldo para las actividades de seguimiento y evaluacin. Los rganos de Lnea del MINSA estn generalmente encargados de la coordinacin y supervisin de los programas. Por lo tanto, juegan un papel importante en la supervisin de la ejecucin de las actividades de seguimiento y evaluacin a nivel sectorial. La Oficina General de Planeamiento Estratgico a travs de la Oficina Ejecutiva de Proyectos de Inversin realiza el monitoreo de las actividades de seguimiento y evaluacin de los proyectos de inversin pblica en sus fases de inversin y operacin, orientando a las Unidades de Proyectos de Inversin de las Direcciones Regionales de Salud, para que a su vez realicen el seguimiento y evaluacin de los proyectos en el mbito de su competencia. La Oficina General de Estadstica e Informtica del Ministerio de Salud, puede aportar informacin valiosa respecto a la produccin de servicios en los diferentes establecimientos de salud. Los Organismos Ejecutores de los proyectos estn encargados de la gestin de los proyectos y programas y son responsables de que la ejecucin sea hecha correctamente y segn el cronograma establecido, adems son responsables de proveer la informacin necesaria para el proceso de seguimiento y evaluacin. El Instituto Nacional de Estadstica e Informtica es proveedor esencial de datos, adems de tener experiencia en la recopilacin de los mismos. Los beneficiarios de los programas pueden proveer informacin sobre la calidad de los servicios. Los organismos de asistencia al desarrollo pueden ayudar en el desarrollo de la capacidad de seguimiento y evaluacin con la prestacin de asistencia tcnica, que incluya consejos, pericia, organizacin de seminarios, capacitacin, identificacin de consultores competentes y de la preparacin de documentacin de orientacin que incluya ejemplos de estudios de casos.



_____________________________________________________________________________ 20

Las actividades de seguimiento y evaluacin se tendrn que ir implementando gradualmente. Inicialmente este proceso se realizar tomando las capacidades y actividades existentes de seguimiento y evaluacin a nivel del Ministerio de Salud, que incluye la participacin de las Direcciones Regionales de Salud y Gobiernos Regionales.

OperacinPre-

FactibilidadEjecucinExpediente Tcnico

Declaracin de Viabilidad

aprobado autorizado

PRE-INVERSIN INVERSIN

Unidad Formuladora

Unidad Ejecutora

POST-INVERSIN

CICLO DE VIDA DEL PROYECTO DE INVERSIN PBLICA

CICLO DE VIDA DEL PROYECTO DE CICLO DE VIDA DEL PROYECTO DE INVERSIN PBLICAINVERSIN PBLICA

DIRESA

Perfil Factibilidad

SEGUIMIENTO Y EVALUACIN



_____________________________________________________________________________ 21

XI.- METODOLOGA DE EVALUACIN Y SEGUIMIENTO

El diseo de un sistema de evaluacin y seguimiento implica identificar los objetivos y metas, con los correspondientes indicadores en los diferentes niveles de desglose y determinar la informacin necesaria, la frecuencia de seguimiento, que permitir la comparacin de los indicadores a medida que pasa el tiempo. Adems, para el anlisis de los resultados se requiere conocer los criterios generales de evaluacin y los parmetros establecidos en las normas sectoriales vigentes. Previamente al inicio del proceso de evaluacin de resultados es interesante conocer si el proyecto a evaluar estuvo incluido en el Plan Multianual de Inversin Pblica, a fin de verificar si este proyecto surgi de un proceso de planificacin. Adems, es de inters conocer si existen otros proyectos en el mbito de influencia que puedan influir en el logro de las metas previstas (ej.: creacin, mejoramiento ampliacin de otro establecimiento en el mbito de influencia, ya sea del MINSA, municipal privado).

ObjetivosObjetivos

Fin ltimo:

Disminuir la tasa de

morbilidad general

Objetivo central:

Incrementar cobertura

de Servicios de Salud

Actividades::

-Ampliacin de infraestructura. - Adquisicin de equipos.- Capacitacin a personal

Asistencial.

PLAN Y/O

PROGRAMA

PROYECTOSEvaluacin de

Resultados:

Medir eficacia

Evaluacin de Impacto:Medir efectividad

Evaluacin de procesos:

Medir eficiencia



_____________________________________________________________________________ 22

La evaluacin de impacto se realiza generalmente a nivel de planes y/o programas, segn sea el caso, considerando que un programa est conformado por un conjunto de proyectos que contribuyen a un mismo fin; a su vez un plan puede estar conformado por un conjunto de programas que contribuyen a lograr un mismo fin. Luego, en la evaluacin de impacto se evaluar la efectividad de los programas y proyectos en la salud de la poblacin, es decir los cambios en los indicadores de la salud de la poblacin, para ello ser necesario que a nivel de plan, programas y proyectos se haya definido la lnea basal punto de partida del proyecto, que contiene los indicadores a una fecha anterior al inicio del proyecto. Los indicadores de impacto podran ser: tasas de morbilidad, tasas de mortalidad prevalencia de discapacidad de un grupo poblacional. Un indicador de resultado podra ser la cobertura de servicios a determinado grupo poblacional. La evaluacin de impacto se realiza una vez culminado el horizonte de evaluacin del proyecto, pero es necesario que durante la fase de implementacin (inversin y operacin) se realice el seguimiento respectivo, con la finalidad de recoger informacin del progreso del logro de los objetivos y metas previstas tanto en la inversin como en la operacin. En la evaluacin de resultados realizada en la fase de operacin se examinar la tendencia en el logro de los objetivos y metas previstas. Se medir la eficacia alcanzada por el proyecto. En la evaluacin del proceso de inversin se examinar la eficiencia alcanzada en la ejecucin de las metas previstas.

11.1. Metodologa de evaluacin y seguimiento de la ejecucin de la Inversin

Informacin bsica: Seguimiento: En la etapa de seguimiento el objetivo es obtener informacin de las metas alcanzadas, costo y tiempo de ejecucin. Evaluacin: En la etapa de evaluacin se realiza la comparacin de la informacin obtenida durante el seguimiento realizado, respecto a las metas previstas en el proyecto. En la fase preoperativa se encuentra la inversin, con la cual se ejecutan las actividades previstas que permitirn alcanzar los objetivos propuestos. En esta evaluacin se medir la eficiencia con que se ha ejecutado la inversin.



_____________________________________________________________________________ 23

Paso 1: Identificacin de Objetivos y Metas Un primer aspecto ser conocer el problema o necesidad identificada en el proyecto, luego se analiza la pertinencia del proyecto, es decir, el proyecto como solucin al problema, los objetivos planteados y las actividades a ejecutar para el logro de los mismos. En esta parte es conveniente verificar si el dimensionamiento del proyecto es adecuado, su localizacin y cumplimiento de aspectos tcnicos normativos. En esta etapa se identifica los componentes de la inversin. Los componentes ms frecuentes de los proyectos de inversin en salud son: infraestructura, equipamiento y capacitacin. En cada uno de estos componentes se programan actividades. En el componente de infraestructura, las actividades ms habituales son:

Elaboracin de los estudios definitivos y expediente tcnico. Aprobacin del Expediente Tcnico.

Proceso de seleccin y contratacin. Ejecucin de obra. Supervisin de obra. Recepcin de obra. Liquidacin de obra. Transferencia de obra.

* El terreno donde se realiza la obra civil debe contar con el saneamiento fsico legal

correspondiente. En el componente equipamiento, las actividades ms habituales son:

Elaboracin del Expediente Tcnico. Aprobacin del Expediente Tcnico. Proceso de seleccin y contratacin (orden de compra). Entrega de bienes. Liquidacin. Entrega de bienes a beneficiarios.

En el componente de capacitacin, las actividades ms habituales son:

Elaboracin de los trminos de referencia de la capacitacin a realizar. Seleccin del capacitador o capacitadores. Elaboracin de material de capacitacin. Talleres y/o otras actividades de capacitacin.

Si existieran otros componentes de inversin, tambin habr que sealarlos indicando las actividades previstas.



_____________________________________________________________________________ 24

Paso 2: Parmetros para la evaluacin

Teniendo en cuenta las actividades que corresponden a cada componente de la inversin, se ha considerado los siguientes parmetros: Componente Infraestructura En el componente de infraestructura las lneas de intervencin se caracterizan por incluir: remodelacin y/o rehabilitacin, as como tambin reconstruccin y/o construccin nueva. En todos los casos, los parmetros de comparacin sern cuantitativos y cualitativos. - Cuantitativos: Se requiere comparar el nmero de unidades definidas en el estudio de

preinversin, respecto del nmero de unidades ejecutadas.

Metas: Nmero de metros cuadrados remodelado, rehabilitado y/o construido. Nmero de unidades productoras de servicios: consultorios, sala de operaciones, sala

de partos, ambientes de hospitalizacin, tpicos, etc.

Monto de inversin. Costo de estudios definitivos y elaboracin de expediente tcnico. Costo de ejecucin de obra. Costo de supervisin y liquidacin de obra.

Plazo de ejecucin: A fin de comparar el plazo de ejecucin estimado en el estudio a nivel de perfil, respecto del tiempo en que se llev a cabo la fase de inversin del proyecto, en sus diferentes etapas: Elaboracin de expediente tcnico. Contratacin de ejecucin de obra. Ejecucin de obra. Recepcin de obra y liquidacin. Entrega y recepcin. Medios de verificacin: Estudio de preinversin con el que se obtuvo la viabilidad. Expediente tcnico. Resolucin de aprobacin de expediente tcnico. Bases y/o Trminos de Referencia para proceso de seleccin. Acta de adjudicacin y/o licitacin de obra. Contrato de supervisor. Acta de recepcin de obra, resolucin de aprobacin de liquidacin de obra. Acta de Transferencia de obra a entidad del sector salud.



_____________________________________________________________________________ 25

Cualitativos: Se refiere a: Material de construccin empleado: material noble, adobe, drive wall u otros. Caractersticas visibles de la construccin: Se deber describir si se encuentra en buen

estado presenta deficiencias en acabados, estructuras, instalaciones sanitarias, instalaciones elctricas, etc.

Caractersticas funcionales: Se deber describir si la construccin efectuada se articula adecuadamente con los servicios relacionados teniendo en cuenta lo establecido en las normas de arquitectura de establecimientos de salud.

Componente Equipamiento En el componente de equipamiento las lneas de intervencin se caracterizan por incluir: adquisicin de equipos, mobiliario e instrumental. Muchas veces tambin se incluye unidades mviles (ambulancia, moto y/o camioneta). Estas adquisiciones se realizan dado que a la fecha no existen para reemplazar equipos existentes en estado obsoleto. Los parmetros de evaluacin sern cuantitativos y cualitativos. Cuantitativos: Se requiere comparar el nmero de unidades definidas en el estudio de preinversin, respecto del nmero de unidades ejecutadas. Metas: Nmero de unidades adquiridas, segn sea el caso (equipos, mobiliario, instrumental y/o

unidad mvil).

Monto de inversin. Costo de elaboracin de expediente tcnico. Costo de adquisicin de equipos. Plazo de ejecucin: A fin de comparar el plazo de ejecucin estimado en el estudio a nivel de perfil, respecto del tiempo en que se llev a cabo la fase de inversin del proyecto, en sus diferentes etapas: Elaboracin de expediente tcnico. Proceso de seleccin del proveedor. Recepcin y entrega de equipos al establecimiento.

Medios de verificacin: Estudio de preinversin con el que se obtuvo la viabilidad. Expediente tcnico. Resolucin de aprobacin de expediente tcnico. Bases y/o Trminos de Referencia para proceso de seleccin. Acta de adjudicacin de Buena pro. Contrato u Orden de Compra. Acta de recepcin de obra, resolucin de aprobacin de liquidacin de obra. Acta de Transferencia de equipos a entidad del sector salud y/o PECOSA.

Cualitativos: Se refiere a: Caractersticas visibles del equipo: Se deber indicar si se encuentra en buen estado y

en funcionamiento.



_____________________________________________________________________________ 26

Componente Capacitacin Generalmente se consideran talleres de capacitacin en tal sentido, se procurar ubicar informacin de la unidad de capacitacin respecto a: Actividades realizadas. Personas capacitadas (poblacin, personal asistencial, personal administrativo). Ejecucin de gastos por concepto de ponentes, elaboracin de material de capacitacin,

carpetas de trabajo de los participantes, etc. Plazo de implementacin.

Paso 3: Identificacin de Indicadores Nos interesa conocer: en qu grado se ha logrado cumplir el objetivo o la meta propuesta? (cantidad y calidad), a qu costo operativo? y si adems del proyecto evaluado se han realizado otras intervenciones en los servicios en evaluacin?. De acuerdo a esto se han definido indicadores segn tipo de servicio: a) Indicadores de cumplimiento de metas (cuantitativo y en trminos porcentuales). b) Indicadores de eficiencia en el procesamiento de informacin estadstica

(cualitativo y cuantitativo). c) Indicadores de costos operativos (cantidad). d) Indicadores de ingresos operativos (cantidad). e) Indicadores de costo eficacia (cantidad). Para ello se ha preparado formatos que pueden ser usados por los evaluadores como hojas de trabajo para levantar informacin y clculo de indicadores, donde se encuentran adems los principales criterios de evaluacin. Despus de identificar los objetivos (actividades) y los parmetros de medicin de cada una de ellas, se debe identificar los indicadores para medir el progreso hacia esos objetivos. Rara vez un solo indicador puede reflejar la medida en la cual un objetivo dado se ha realizado. Es posible identificar tanto indicadores intermedios, como indicadores finales para cada objetivo. Los indicadores son relaciones cuantitativas entre dos cantidades susceptibles de ser observadas y medidas, asociadas a eventos determinados y que por s solos no son relevantes, sino que adquieren importancia cuando se les compara con patrones de referencia o con el mismo tipo de cantidades o variables, correspondientes a perodos anteriores. Por lo tanto, los indicadores constituyen instrumentos y sus resultados insumos para el anlisis e interpretacin de los fenmenos relacionados con el quehacer de los servicios de salud.



_____________________________________________________________________________ 27

Son indicadores finales cuando miden un objetivo final o el efecto de una intervencin sobre el bienestar de la poblacin, se denominan tambin indicadores de impacto indicadores de resultado, segn sea el caso. Por ejemplo, la disminucin de la tasa de mortalidad materna se puede considerar como un objetivo final y la tasa de mortalidad materna un indicador de impacto. As tambin, el incremento de gestantes que acceden a control pre natal se puede considerar como objetivo central y la cobertura de control pre natal se puede considerar como un indicador de resultado. Son indicadores intermedios cuando miden un factor que determina un resultado o contribuye al proceso de lograr un resultado, se denominan tambin indicadores de aporte indicadores de producto, segn sea el caso. Por ejemplo: una medida de los gastos pblicos para establecimientos de salud y personal sera un indicador de aporte, mientras que el nmero de consultorios, rea construida, equipos adquiridos son indicadores de producto. Un aspecto a tener en cuenta es que los indicadores de aporte y producto ayudan a alcanzar el objetivo central y por tanto contribuyen a lograr el objetivo final. Los datos sobre los indicadores intermedios pueden generalmente ser recopilados a travs de los sistemas de seguimiento, mientras los datos sobre los resultados impactos normalmente deben ser recopilados de los beneficiarios y necesitan de encuestas a la poblacin. Ambos indicadores, los finales (resultado e impacto) y los intermedios (aporte y producto) son importantes. El examen de los indicadores finales ayuda a juzgar el progreso hecho hacia las metas fijadas. Sin embargo, estos indicadores cambian generalmente ms lentamente con el tiempo y sus resultados estn en funcin de muchos factores, algunos fuera del control de los responsables de la poltica y de los administradores de los programas. El examen de los indicadores intermedios da una imagen ms correcta de lo que est ocurriendo. Estos indicadores cambian por factores que los administradores de los programas y otros agentes controlan y sobre los cuales es ms fcil recoger informacin. El seguimiento y vigilancia de los aportes y de los productos puede ayudar a identificar cules de los varios factores que influencian un resultado no est en buen camino e indicar las medidas correctivas que se debera tomar. Los indicadores intermedios que son ms tiles para seguir la marcha del progreso hacia un impacto o resultado son los que se refieren a los determinantes esenciales de ese impacto o de ese resultado y que varan segn las zonas o grupos poblacionales al pasar el tiempo. Los indicadores finales e intermedios podran ser completados con otros indicadores escogidos para medir el rendimiento general del pas, a fin de contar con informacin del contexto en el cual la estrategia del plan o programa se est llevando a cabo.



_____________________________________________________________________________ 28

La decisin al nivel de desglose de indicadores es tan importante como la seleccin de los indicadores mismos. En la presente metodologa para plantear los indicadores de resultado, segn los cuales se realizar la evaluacin de los resultados de la intervencin realizada y los indicadores de aporte y de producto que nos permitirn realizar el proceso de seguimiento se ha tenido en cuenta lo siguiente: Qu nos interesa medir en el proceso de seguimiento? Nos interesa medir: Cunto se ha ejecutado? (cantidad). Qu se ha ejecutado y de qu tipo? (descripcin y calidad). Cundo y en que tiempo se ejecut?. De acuerdo a esto se han definido indicadores intermedios para medir: Inversin realizada segn componentes y actividades. Metas realizadas segn componentes y actividades. Plazo de implementacin, segn componentes y actividades. Cumplimiento de normatividad vigente para arquitectura de establecimientos de salud, segn componentes (infraestructura, equipamiento y capacitacin). Adems se han definido indicadores totales de inversin, plazo de implementacin, cumplimiento de metas, cumplimiento de normatividad vigente para arquitectura de establecimientos de salud, donde se consolida lo evaluado anteriormente por componente. Para ello se ha preparado formatos que pueden ser usados tanto en la fase de seguimiento como en la fase evaluacin, como hojas de trabajo para levantar informacin y clculo de indicadores; all se indican adems los principales criterios de evaluacin. Qu implica la evaluacin examen de los indicadores obtenidos? Implica conocer cuan eficiente fue la fase de inversin del proyecto y si se consigui alcanzar las metas previstas en el estudio de preinversin aprobado, con el que se obtuvo la viabilidad del proyecto. Luego, se proponen los siguientes indicadores: Indicadores del Componente Infraestructura Monto de inversin: En la hoja de trabajo elaborada se han considerado en este rubro informacin complementaria de metas desagregadas segn tipo de intervencin en infraestructura: demolicin, remodelacin, rehabilitacin, construccin nueva, con sus correspondientes montos de inversin, tanto en la fase de preinversin como en la fase de operacin; as mismo, se formulan preguntas relacionadas al estado de la infraestructura, articulacin funcional con la infraestructura existente, cumplimiento de requisitos de la normatividad vigente de arquitectura de establecimientos de salud y propiedad del terreno, a fin de que el evaluador tenga mayores elementos de juicio para emitir sus apreciaciones en la fase de evaluacin.



_____________________________________________________________________________ 29

Indicadores de inversin: En la etapa de seguimiento:

Monto del exp. tcnico / Monto de la estimacin del estudio de preinversin. En la etapa de evaluacin:

Monto ejecutado / Monto de la estimacin del estudio de preinversin. Esta es la forma en que se desarrolla en la hoja de clculo:

d) Existen variaciones en la fase de inversin respecto a lo estimado en la fase de preinversin, ?

d.1) Infraestructura

- Actividades Und. Cantidad Monto (S/.) Und. Cant.Monto (S/.)

del Exp. Tcnico (2)

Monto contratado

Monto ejecutado

Demolicin m3 m3 Remodelacin m2 m2

Rehabilitacin m2 m2

Construccin Nueva m2 m2 TOTAL (1) (2)INDICADOR 1 : INVERSIN = ( (2) x 100 ) / (1)

PREINVERSIN INVERSIN

Metas: En esta parte se ha desagregado las metas segn unidad de servicio a intervenir, dado que en cada una de ellas se encuentran ambientes que constituyen unidades productoras de servicios y que en el estudio de preinversin se determinan en funcin a la demanda existente y la oferta optimizada. As en consulta externa, tenemos los consultorios; en emergencia, los consultorios-tpico; en hospitalizacin, los ambientes dimensionados segn el nmero de camas; en el centro quirrgico, la sala de operaciones; en el centro obsttrico, la sala de partos, etc. Por tanto, es de inters verificar que la inversin realizada respete el tamao del proyecto definido en el estudio de preinversin en cuanto a unidades productoras de servicios, no obstante, van a existir variaciones en la definicin del rea total por efecto de estimaciones de reas complementarias, rea de circulacin, rea verde, rea de muros, etc. En tal sentido, se han planteado dos tipos de indicadores.

Indicadores de Metas:

Metas Ejecutadas / Metas Previstas en estudio de preinversin Nmero de metros cuadrados remodelado, rehabilitado y/o construido / Nmero de metros cuadrados a remodelar, rehabilitar y/o construir.

En la hoja de trabajo diseada se plantea de la siguiente forma:



_____________________________________________________________________________ 30

- Intervencin en: Und. Remode-lacin

Rehabili-tacin

Construc-cin Und.

Remode-lacin

Rehabili-tacin

Construc-cin Und.

Remode-lacin

Rehabili-tacin

Construc-cin

(a) (b) (c) (d) (e) (f) (g)=(d/a)x100 (h)=(e/b)x100 (i)=(f/c)x100

Consulta externa m2 m2 m2

Emergencia m2 m2 m2

Hospitalizacin m2 m2 m2 Centro quirrgico m2 m2 m2

Centro obsttrico m2 m2 m2

Rayos X m2 m2 m2

Laboratorio m2 m2 m2

Nutricin m2 m2 m2

Lavandera m2 m2 m2 Casa de Fuerza m2 m2 m2

Ambientes administrativos m2 m2 m2

PREINVERSIN INVERSIN INDICADORES

Metas Ejecutadas - Metas Previstas en estudio de preinversin

Nmero de unidades productoras de servicios construidos -

Nmero de unidades productoras de servicios a construir. En la hoja de trabajo diseada se plantea de la siguiente forma: - Unidades Productoras de servicios

Unidad Cantidad Area unit. (m2)Area total

(m2) Unidad CantidadArea unitaria

(m2)Area total

(m2) Unidad CantidadArea unitaria

(m2)(j) (k) (l) (m) (n) = (l) - (j) (o)=(m)-(k)

Consulta externa Consultorios Consultorios Consultorios Emergencia Tpicos Tpicos Tpicos Hospitalizacin Camas Camas Camas

Centro quirrgico Salas de operacionesSalas de

operacionesSalas de

operaciones

Centro obsttrico Salas de partosSalas de

partosSalas de

partos

Rayos X m2 m2 m2 Laboratorio m2 m2 m2


Plazo de ejecucin: A fin de comparar el plazo de ejecucin en que se llev a cabo la fase de inversin del proyecto, respecto al tiempo estimado en el estudio a nivel de perfil, en sus diferentes etapas: Elaboracin de expediente tcnico hasta su aprobacin. Contratacin de ejecucin de obra. Ejecucin de obra. Recepcin de obra y liquidacin. Transferencia de obra.

Indicador de plazo de implementacin:

Tiempo de ejecucin Tiempo estimado para ejecucin En la hoja de trabajo se presenta de la siguiente manera:



_____________________________________________________________________________ 31

- De los plazos Unidad Cantidad Unidad Cantidad Unidad Cantidad(p) (q) (r) = (q) - (p)

Expediente Tcnico aprobado meses meses meses Proceso de seleccin y contratacin meses meses meses Ejecucin de Obra meses meses meses Recepcin y liquidacin meses meses meses Transferencia de obra meses meses meses TIEMPO TOTAL meses (3) meses (4) meses INDICADOR 2 : PLAZO DE IMPLEMENTACIN

INDICADOR

(4) - (3)


Indicadores del Componente Equipamiento Monto de inversin: En la hoja de trabajo elaborada se han considerado en este rubro informacin complementaria de metas desagregadas segn tipo de equipamiento: equipos biomdicos, mobiliario, instrumental, unidades mviles, en cuanto a unidades adquiridas por adquirir y al costo ejecutado y costo estimado. As mismo, se incluyen preguntas para la fase de evaluacin, respecto al estado del equipamiento adquirido y uso actual. Indicadores de Inversin: En la etapa de seguimiento:

Monto del exp. tcnico / Monto de la estimacin del estudio de preinversin. En la etapa de evaluacin:

Monto ejecutado / Monto de la estimacin del estudio de preinversin. En la hoja de trabajo se presenta de la siguiente manera:

f) Existen variaciones en la fase de inversin respecto a lo estimado en la fase de preinversin?

f.1) Adquisiciones

- Actividades Unidad Cantidad Monto (S/.) Unidad Cantidad Monto (S/.) Exp. Tc.Monto

ejecutado (S/.)

Equipos biomdicos Und. Und. Mobiliario Und. Und. Instrumental Und. Und. Unidades mviles Und. Und. TOTAL (5) (6)INDICADOR 3 : MONTO DE INVERSIN ( (6) x 100 ) / (5)


Metas: En esta parte se ha desagregado las metas segn tipo de intervencin (reemplazo de equipos existentes adquisicin de equipos) y segn tipo de equipamiento (equipos biomdicos, mobiliario, instrumental unidades mviles). Indicadores de Metas:


En la hoja de trabajo se presenta de la siguiente forma:



_____________________________________________________________________________ 32

EQUIPAMIENTO

f.1 Equipos biomdicos Und. Cant. Und. Cant. Und. Cant.(s) (t) (x) = (t) - (s)

Reemplazo de equipos exist. Und. Und. Und. Adquisicin de equipos nuevos Und. Und. Und.

f.2 Mobiliario Reemplazo de mobiliario exist. Und. Und. Und. Adquisicin de mobiliario nuevo Und. Und. Und.f.3 Instrumental Reemplazo de instrumental exist. Und. Und. Und. Adquisicin de instrumental nuevos Und. Und. Und.f.4 Unidades mviles Reemplazo de und. mviles exist. Und. Und. Und. Adquisicin de und. mviles nuevos Und. Und. Und.


Plazo de implementacin: A fin de comparar el plazo de ejecucin en que se llev a cabo la fase de inversin del proyecto, respecto al tiempo estimado en el estudio a nivel de perfil, en sus diferentes etapas: Elaboracin de expediente tcnico hasta su aprobacin. Contratacin de proveedor. Entrega de equipos. Recepcin y liquidacin. Transferencia.

Indicador de plazo de implementacin:

Tiempo de ejecucin Tiempo estimado para ejecucin En la hoja de trabajo se presenta de la siguiente manera: - De los plazos Unidad Cantidad Unidad Cantidad Unidad Cantidad

(y) (z) (z')=(z)-(y)

Expediente Tcnico aprobado meses meses meses

Proceso de seleccin y contratacin meses meses meses

Entrega de equipos meses meses meses

Recepcin y liquidacin meses meses meses

Transferencia meses meses meses

TIEMPO TOTAL meses (7) meses (8) meses (8)

INDICADOR 4 : PLAZO DE IMPLEMENTACIN


(8) - (7)

INDICADOR

Indicadores del Componente Capacitacin Monto de inversin: En la hoja de trabajo elaborada se han considerado en este rubro informacin respecto a donde est orientada la capacitacin: personal asistencial, personal tcnico, personal administrativo y/o poblacin. As mismo, se considera las actividades contempladas: talleres, charlas, otros y el monto de inversin requerido y ejecutado. Indicadores de Inversin:

Monto ejecutado / Monto de la estimacin del estudio de preinversin



_____________________________________________________________________________ 33

En la hoja de trabajo se presenta de la siguiente manera:

f) En el componente capacitacin:f.1 La capacitacin est orientada a: S No S No

f.1.1 Personal asistencialf.1.2 Personal tcnicof.1.3 Personal administrativof.1.4 Poblacin

f.2 Qu actividades se han contemplado?Und. Cant. Monto (S/.) Und. Cant. Monto (S/.)

f.2.1 Talleresf.2.2 Charlasf.1.3 Otros TOTAL (9) (10)INDICADOR 5 : MONTO DE INVERSIN ( (10) x 100 ) / (9)

INVERSIN


PREINVERSIN

Metas: En esta parte se ha desagregado las metas segn tipo de intervencin (talleres, charlas, otros). Indicadores de Metas:


En la hoja de trabajo se presenta de la siguiente forma: f.3 Qu metas se han contemplado?

Und. Cant. Monto (S/.) Und. Cant. Monto (S/.) Und. Cant.(a') (b') (c')=(b')-(a')

f.2.1 Talleres Und.f.2.2 Charlas Und.f.1.3 Otros Und. TOTAL (11) (12) (12) - (11)INDICADOR 6 : METAS (12) - (11)


Plazo de implementacin: A fin de comparar el plazo de ejecucin en que se llev a cabo la fase de inversin del proyecto, respecto al tiempo estimado en el estudio a nivel de perfil. Indicador de plazo de implementacin:

Tiempo de ejecucin Tiempo estimado para ejecucin En la hoja de trabajo se presenta de la siguiente manera: f.4 Se cumpli plazo de implementacin?

Und. Cant. Und. Cant. Und. Cant.(d') (e') (f')=(e')-(d')

f.2.1 Talleres Und.f.2.2 Charlas Und.f.1.3 Otros Und. TOTAL (13) (14) (14) - (13)INDICADOR 7: PLAZO (14) - (13)




_____________________________________________________________________________ 34

Indicadores para la evaluacin final de la fase inversin Monto de inversin: En la hoja de trabajo elaborada se han considerado en este rubro informacin segn componentes y se presenta de la siguiente manera: g) RESUMEN FINAL DE LA FASE INVERSIN

g.1 Componentes: S No S Nog.1.1 Estudio definitivog.1.2 Infraestructurag.1.3 Supervisin y liquidacing.1.4 Equipamientog.1.5 Capacitacing.1.6 Gastos administrativosg.1.7 Gastos imprevistosg.1.8 Otros


En esta parte lo que se quiere es verificar si en la inversin se ejecutaron todos los componentes previstos en la preinversin. Indicadores de Inversin:

Monto ejecutado / Monto de la estimacin del estudio de preinversin

g.2 Inversin segn componentesUnd. Cant. Monto (S/.) Und. Cant. Monto (S/.)

g.2.1 Estudio definitivog.2.2 Infraestructurag.2.3 Supervisin y liquidacing.2.4 Equipamientog.2.5 Capacitacing.2.6 Gastos administrativosg.2.7 Gastos imprevistosg.2.8 Otros TOTAL (15) (16)INDICADOR 8 : MONTO DE INVERSIN ( (16) x 100 ) / (15)


Metas: En la hoja de trabajo elaborada se han considerado en este rubro informacin segn componentes y se presenta la informacin de la siguiente manera: Indicadores de Metas:




_____________________________________________________________________________ 35

g.3 Metas segn componentes

Und. Cant. Und. Cant. Und. Cant.(g') (h') (i')=(h')-(g')

g.3.1 Estudio definitivog.3.2 Infraestructurag.3.3 Supervisin y liquidacing.3.4 Equipamientog.3.5 Capacitacing.3.6 Gastos administrativosg.3.7 Gastos imprevistosg.3.8 Otros


Plazo de Implementacin: En la hoja de trabajo elaborada se han considerado en este rubro informacin segn componentes y se presenta la informacin de la siguiente manera: Indicador de plazo de implementacin:

Tiempo de ejecucin Tiempo estimado para ejecucin g.4 Plazos segn componentes

Und. Cant. Und. Cant. Und. Cant.(j') (k') (l')=(k')-(j')

g.4.1 Estudio definitivog.4.2 Infraestructurag.4.3 Supervisin y liquidacing.4.4 Equipamientog.4.5 Capacitacing.4.6 Gastos administrativosg.4.7 Gastos imprevistosg.4.8 Otrosg.4.9 TOTAL (17) (18) (18) - (17)

INDICADOR 9 : PLAZO DE IMPLEMENTACIN (18) - (17)

INDICADORESPREINVERSIN INVERSIN

Paso 4: Identificacin de las fuentes de informacin La Unidad Ejecutora est definida en el estudio de preinversin con el que se obtiene la viabilidad y ser necesario presentarse ante el responsable de la misma, para comunicarle de las acciones que se realizarn, solicitndole brinde las facilidades del caso para obtener la informacin necesaria y para realizar las coordinaciones con las personas responsables de acciones especficas en la ejecucin del proyecto. As por ejemplo, en el caso de Gobiernos Regionales, la Gerencia Regional de Administracin, se encuentra a cargo de las acciones de adquisiciones y pagos efectuados por diferentes conceptos y la Gerencia Regional de Infraestructura, se encuentra a cargo de la elaboracin de expedientes tcnicos, ejecucin, recepcin, liquidacin y transferencia de obras. Se recomienda el uso del siguiente cuadro para la presentacin de los involucrados en la ejecucin de las actividades, responsables de brindar la informacin necesaria en el proceso de seguimiento y evaluacin de resultados.



_____________________________________________________________________________ 36

CUADRO DE INVOLUCRADOS

COMPONENTE ACTIVIDADES DEPENDENCIA

RESPONSABLE PERSONA

RESPONSABLE OTROS

INVOLUCRADOS Es importante que se analice la calidad de la informacin proporcionada, si sta es congruente entre s y la oportunidad con la que es entregada, lo que estar en funcin de la organizacin administrativa de la unidad ejecutora.

Paso 5: Determinacin de la frecuencia de evaluacin y seguimiento

La decisin sobre la frecuencia de los seguimientos a realizar, como los que se efectan sobre los indicadores y el nivel de desglose de los mismos, depende de una cuidadosa evaluacin de las ventajas relativas entre el deseo de obtener datos recientes y el costo de su recopilacin. Dado que en la etapa de seguimiento de la fase de inversin, la informacin requerida debe estar disponible, no debe ser muy difcil obtenerla, por lo tanto es factible que se realice frecuentemente (mensual, trimestral semestral), de acuerdo a las caractersticas de la ejecucin del proyecto. La evaluacin se realiza culminado el ao en que se realiza la inversin.

Paso 6: Criterios de evaluacin Los criterios de evaluacin se han orientado para obtener informacin respecto a lo siguiente: Costos: Las variaciones permitidas estn de acuerdo al anlisis de sensibilidad, es decir que ante las variaciones producidas la alternativa elegida sigue siendo mejor que la segunda alternativa. Adems hay que considerar que los motivos de las variaciones de costos sean por razones aceptables de carcter tcnico, de acuerdo al nivel del estudio de preinversin, que no modifiquen la capacidad de produccin definida en el estudio con el que se obtuvo la viabilidad, es decir, NO se aceptan incrementos en el nmero de unidades productoras de servicios (consultorios, camas, salas de operaciones, sala de partos, equipos de rayos x, etc.), que modifiquen la capacidad de oferta definida en el proyecto.



_____________________________________________________________________________ 37

Los incrementos en costos de carcter tcnico, generalmente estn supeditados a la capacidad portante del suelo (dado que a nivel de perfil no es exigible estudio

segevalfasesejecyoperpsalud

Documents