Evaluacion de la IAP
GESTIÓN INTEGRAL DE PROGRAMAS SOCIALES DEL SISTEMA DE INFORMACIÓN, MONITOREO Y EVALUACIÓN DE PROGRAMAS SOCIALES DE LA UNESCO (SIEMPRO)
Explique en que consiste la Gestión Integral de Diseño según Unesco?
La UNESCO propone un Sistema de Información, Monitoreo y Evaluación de Programas Sociales (SIEMPRO), donde la evaluación se concibe en el marco de lo que denomina Gestión Integral de Programas Sociales orientada a resultados¿Identifique y describa las herramientas que se utilizan según fases de Planificación del programa, Ejecución del programa y Finalización del programa?
La evaluación ex-ante:
esta herramienta de evaluación se diseña y se realiza durante la planificación del programa y permite “evaluar la viabilidad y sustentabilidad del programa en términos financieros, políticos e institucionales, para priorizar y seleccionar las alternativas de componentes y actividades que maximicen el impacto de la inversión social… permite tomar la decisión de la implementación –o no– de las actividades y componentes de un programa social.
El monitoreo:
esta herramienta de evaluación se diseña durante la planificación del programa y se desarrolla permanentemente durante toda la ejecución lo que permite indagar y analizar el grado en que las actividades realizadas y los resultados obtenidos responden a lo planificado, con el fin de detectar oportunamente eventuales deficiencias, obstáculos y/o necesidades de ajuste en la planificación y ejecución La evaluación diagnóstica:
esta herramienta de evaluación se diseña durante la ejecución del programa –si es necesario conocer mejor su desempeño– para evaluar en profundidad aspectos o problemas del programa relacionados con la planificación, ejecución y logro de resultados, desde la perspectiva institucional
La evaluación desde la perspectiva de los beneficiarios:
esta herramienta de evaluación se diseña durante la ejecución del programa, cuando se requiere conocer la visión de los beneficiarios respecto de la implementación y sus efectos para evaluar aspectos o problemas del programa relacionados con la planificación, ejecución y logro de resultados, desde la perspectiva de los beneficiarios, incorporando su participación como aspecto central”.
La evaluación de resultados finales:
esta herramienta de evaluación se diseña durante la planificación del programa y como su nombre lo indica se efectúa al momento de finalizar la ejecución del mismo para “… evaluar el grado de cumplimiento final de los objetivos específicos del programa, en términos de efectividad, eficacia y eficiencia”.
La evaluación de impacto:
esta herramienta de evaluación se diseña durante la planificación del programa y se realiza un tiempo después de finalizada la ejecución del programa que pueden ser meses o años, permite identificar y explicar la modificación del valor inicial de los indicadores del problema que dio origen al programa (línea de base SESIÓN 10 : INDICADORES SEGÚN ENFOQUE : COSTO- BENEFICIO: VAN – TIR ¿Qué es el VAN , y cuando se utiliza?
VAN (Valor Actual Neto) No sólo permite reconocer un proyecto bueno, sino que también permite comparar proyectos que tengan la misma vida útil ¿Cuáles son los criterios de decisión del calculo del VAN?
Criterio de decisión Indicador Resultado
VAN < 0 =»» proyecto=»» no=»» conveniente=»»>
VAN = 0 La decisión es indiferente
VAN > 0 Proyecto no es conveniente
¿Cómo se define TIR y que mide?
(Tasa Interna de Retorno), la tir mide la rentabilidad de un proyecto o activo, y se define como aquella tasa a la cual se hace cero el valor actual neto SESIÓN N° 11 : COSTO- EFICIENCIA: VAC – CAE se utilizan en aquellos proyectos cuyos beneficios no son posible de valorar. tal es el caso de salud, educación, vivienda, entre otros.
¿Qué es el VAC y cuando se utiliza? Valor Actual de Costos (VAC)
El valor actual de costos se utiliza cuando:
· Beneficios difíciles de valorar, pero se reconoce son deseables. · Los beneficios de dos alternativas son idénticos. · En ambos casos se busca alternativa de mínimo costo.
· Cuando se relaciona el VAC con alguna variable del proyecto, se convierte en indicador costo –eficiencia Ejemplo: Costo por total de toneladas a disponer (relleno sanitario)
¿Defina que es el CAE? Costo anual equivalente consiste en expresar todos los costos del proyecto en términos de una cuota anual, cuyo valor actualizado es igual al VAC de los costos del proyecto. El criterio de decisión al utilizar el CAE es el siguiente: la alternativa de solución evaluada que presente el menor valor actual de costos, es la más conveniente desde el punto de vista técnico económico.
Las ventajas del CAE:
· Permite compara proyectos de distinta vida útil · Supone que las opciones se repiten en las mismas condiciones que la primera vez SESIÓN N° 12: COSTO EFECTIVIDAD: CUI (COSTO POR UNIDAD DE IMPACTO)
¿En qué consiste costo por unidad de impacto?
indica cuánto cuesta una unidad de impacto. se requiere información diagnóstica y estratégica que permita estimar el impacto a alcanzar y para ello se requiere de decisiones políticas, técnicas y financieras ¿Cuándo se utiliza el costo efectividad?
permite estimar los costos en relación a las estimaciones de impacto propuestas, y entrega una unidad de comparación llamada CUI (costo por unidad de impacto)
SESIÓN N° 13: ANÁLISIS INTEGRAL DE DISEÑO-CRITERIOS EVALUATIVOS (el reconocimiento y uso de ellos permite valorar de manera integral la propuesta a calificar)
Señale en qué consiste y cuando se utiliza la Evaluacion Integral de Diseño Identifique los criterios evaluativos y defínalos.
La Evaluación Integral del Diseño se basa en el juicio emitido sobre un conjunto de criterios que permiten valorar de manera integral la propuesta a calificar. Los criterios que utiliza no son exclusivos, varios de ellos se aplican también en otros enfoques que analizan el diseño Criterios Evaluativos y Niveles de Análisis,
1-PERTINENCIA.:
La pertinencia de un programa es el grado de adecuación de la propuestade intervención a las necesidades y perfil de la población objetivo
2-COHERENCIA:
La coherencia de un programa corresponde al carácter lógico de la relación entre los diferentes contenidos del diseño y entre éste y elementos externos como la política social y el resto de la oferta pública. De esta manera, el análisis de coherencia de un programa adquiere dos dimensiones: interna y externa.
COHERENCIA EXTERNA: Se refiere al grado de coherencia lógica entre el diseño de la intervención y las políticas que orientan la acción social del gobierno y la oferta pública existente, extra e intra-institucional COHERENCIA INTERNA : Es el grado de coherencia lógica entre los distintos elementos centrales que componen el diseño, tanto en su eje vertical(actividades, productos, propósito y fin) como horizontal (indicadores, metas, fuentes de verificación y supuestos).
3-EFICIENCIA:
La eficiencia, en la evaluación ex ante, se refiere a la relación entre el cumplimiento de los productos del programa al menor costo posible y en el tiempo programado El análisis de la eficiencia implica considerar si el costo estimado del programa es adecuado para las actividades y productos que se desean obtener y si estos últimos se podrán entregar en el tiempo programado. El programa será eficiente cuando su costo (por ejemplo, costo medio por beneficiario o producto) sea menor al de otras alternativas de producción comparables.
4-
EFICACIA
La eficacia, en la evaluación ex ante, se refiere al grado en que se podrán alcanzar las metas de los objetivos y productos, en un período de tiempo determinado: lo que interesa es conocer a priori el grado de certeza que otorga el diseño, especialmente su modelo de gestión y antecedentes institucionales, respecto al logro de los productos y sus efectos en los beneficiarios.5-
SOSTENIBILIDAD
Se entenderá por sostenibilidad la capacidad del programa de mantener en un período prolongado de tiempo el flujo de beneficios que forman parte de sus objetivos de intervención 6
EVALUABILIDAD:
Corresponde al grado en que el sistema evaluativo descrito en la presentación del programa permitirá efectivamente realizar las evaluaciones ex dure y ex post adecuadas.: El juicio sobre la evaluabilidad debe fundarse en el análisis de los objetivos,actividades, indicadores, metas y sistema de evaluación propuesto en el diseño del programa. Será evaluable en la medida que en su diseño se establezcan estándares con los cuales se puedan comparar los resultados obtenidosCONSISTENCIA:
Se refiere al grado de solidez de la propuesta de intervención y por lo tantoentrega niveles adecuados de certidumbre respecto al logro de sus objetivos El criterio de consistencia se construye en relación a la valoración entregada por el análisis de los criterios antes mencionados. El grado máximo de solidez se obtiene en la medida que el programa sea: pertinente, coherente, eficiente, eficaz, sostenible y evaluable.
SESIÓN N° 15: INSTITUCIONALIDAD , ROLES Y PROCEDIMIENTOS (SUBSECRETARIA DE EVALUACIÓN SOCIAL, SISTEMA NACIONAL DE INVERSIONES)¿Cuáles son las instituciones que participan del sistema Nacional de Inversiones y cuáles son sus roles?
a instituciones participantes del proceso de InversiónPublica son el Ministerio de Desarrollo Social MDS , la dirección de presupuesto , los diferentes servicios de los Ministerios , Municipios y Gobiernos Regionales. Cada uno de ellos con distintos roles y funcionesMinisterio de Desarrollo Social, el que coordina las políticas sociales de los diferentes organismos del Estado, y cuenta con do Subsecretarías, una de Servicios Sociales y otra de Evaluación Social, encargándose de diseñar, proponer, evaluar y coordinar programas y políticas sociales de los diferentes ministerios, monitoreándolos periódicamente y otorgando,herramientas para su óptima focalización.
IDENTIFIQUE Y DESCRIBA LOS SUBSISTEMAS El subsistema Análisis Técnico Económico permite que las instituciones públicas dispongan de una cartera de iniciativas de inversión socialmente rentables y que, por tanto, estén en condiciones de recibir recursos públicos para su ejecución. La administración de este proceso recae íntegramente en el Ministerio de Desarrollo Social.
subsistema Formulación Presupuestaria corresponde a la asignación de recursos financieros a los proyectos de interés sectorial, regional y de las empresas del Estado Su función es homogeneizar, normar y coordinar la información relativa al proceso de asignación de fondos, así como también la aplicación del presupuesto aprobado para el sector público. Este subsistema es responsabilidad del Ministerio de HaciendaEl subsistema Ejecución Presupuestaria corresponde a la regulación y supervisión de la ejecución del gasto público y su respectivo financiamiento, materializada a través de la Ley de Presupuestos del Sector Público, anual, y las instrucciones complementarias de la Dirección de Presupuestos del Ministerio de Hacienda (Dipres).
el subsistema de Evaluación Ex Post corresponde al análisis de los resultados logrados una vez que el proyecto entra en operación, para medir el grado de cumplimiento de los objetivos propuestos, retroalimentar y actualizar las metodologías, parámetros y supuestos del análisis técnico económico (evaluación ex ante), y así poder efectuar las correcciones tendientes a perfeccionar los procesos y los procedimientos de inversión vigentes. Este subsistema es también responsabilidad del Ministerio de Desarrollo Social, quien anualmente realiza una evaluación ex post simplificada de una muestra representativa de proyectos, programas y estudios básicos financiados por los gobiernos regionales.
SESION N° 16 : EVALUACIÓN EXPOST ¿En qué consiste en modelo experimental clásico y el modelo cuasiexperimental según Cohen y Martinez?
MODELO EXPERIMENTAL BÁSICO
Implica la conformación de dos muestras: un grupo “con proyecto” o población beneficiaria (grupo experimental) que recibe el estímulo (en este caso, las acciones del proyecto en cuestión) y un grupo “sin proyecto” (grupo de control). Estas submuestras se seleccionan antes de iniciarse las operaciones de la intervención (en la situación de línea de base) y deben diferir solo en que la primera recibe los bienes o servicios de las 3 P y la segunda no. Las diferencias iniciales entre estos grupos deberían ser mínimas; si fueran estadísticamente significativas, sería necesario realizar una nueva selección. De lo contrario, no es posible medir el impacto.
MODELO CUASI EXPERIMENTAL
En este tipo de diseños, los miembros de los grupos “con y sin proyecto” no se seleccionan aleatoriamente, sino en función de las variables de mayor relevancia para el objetivo de impacto perseguido. Por eso, es posible que se presenten diferencias entre los grupos. La lógica de este modelo es idéntica a la del experimental clásico. Se efectúan mediciones en las líneas de base y de comparación, y luego se comparan las diferencias.
Esta técnica resulta útil cuando se desea evaluar un proyecto durante su operación o cuando ya se eligieron tanto los “titulares” como los “no titulares”. Limitaciones: en términos estrictos, con este modelo no es posible aislar los efectos legítimamente atribuibles a una política, programa o proyecto ¿En qué consiste el modelo después y cuáles son sus limitaciones?
Es el más débil de los diseños presentados. Considera a un solo grupo (la población objetivo de la política, programa o proyecto) y la medición solo puede efectuarse una vez finalizada la implementación. Efectuada la medición, hay que reconstruir cómo era la situación antes de comenzar la intervención, sobre la base de la información disponible.
La comparación entre los datos de la medición y los obtenidos mediante la reconstrucción de la situación inicial permitiráemitir un juicio sobre el impacto. Para superar esta restricción, es posible identificar variables de control dentro del mismo grupo experimental que indiquen los impactos imputables al curso de acción. Por otra parte, en la evaluación ex post pueden utilizarse una gran variedad de técnicas de recolección de información: encuestas, entrevistas individuales, grupos focales, método Delphi, observación participante, indicadores sociales, cálculo de los costos reales del proyecto, etc.
SESIÓN Nº 17 : PROCESO DE INVERSIÓN Y PROYECTO EN EL SIN.¿Cuáles son las etapas del proceso de inversiones? 1.Identificación del problema o demanda
Las entidades responsables detectan un problema o necesidad, el cual se encuentre insatisfecho.
2. Formulación de iniciativa de inversión 3. Generación de anteproyectos 4. Ingreso al Sistema Nacional de Inversiones 5. Solicitud de Análisis técnico-económico
¿En qué consiste la etapa de generación de un anteproyecto?
Se realiza un análisis detallado de las ideas de proyecto, para luego jerarquizarlas, seleccionando a aquellas que son factibles de elaborar un anteproyecto, según los antecedentes con que se cuente hasta ese instante.
¿Cuáles son las etapas que considera el ciclo de vida de un proyectos según el SIN?
Proyecto: considera las siguientes etapas del ciclo de vida:
IIDEA, dentifica el problema;
PERFIL:
precisa información de la etapa anterior e incluye información adicional;
PREFACTIBILIDAD,
conjuntamente con verificar datos de las etapas anteriores se recoge nuevos datos para poder, mediante múltiples evaluaciones técnicas y económicas desechar ciertas alternativas (proyectos);
FACTIBILIDAD, perfeccionar la alternativa que obtuviere el mayor valor actual neto positivo, VAN;
DISEÑO, elaboración del diseño de ingeniería y/o arquitectura y ajustar detalles asociados a la ejecución de la obra (para programas y proyectos);
EJECUCIÓN, acciones tendientes a la ejecución física del proyecto con el fin de concretar los beneficios netos estimados (estudios básicos, proyectos y programas).