Evaluación de Intervenciones Comunitarias: Guía Completa

Evaluación de una Intervención en la Comunidad

Causa

Causas que generan el problema.

Problema

Formular un problema central concreto.

Efectos

Efectos negativos que lo producen.

Preguntas Claves

• Viabilidad: Económica, social.
• Adopción de la Política Orgánica de Evaluación: Definir claramente los criterios.
• Formación: Conocimiento en conceptos, metodologías y herramientas básicas.
• Participación: De parte de todos los interesados.
• Sistematización y Retroalimentación: Disponibilidad y circulación de la información en todo momento para uso como herramienta de mejora continua.

Sistema de Monitoreo y Evaluación

¿Dónde queremos ir, qué resultados queremos lograr? –> Objetivos Estratégicos: Resultados que se espera lograr la entidad para cumplir con su misión, claros, realistas, desafiantes y congruentes.

¿Cómo llegaremos? –> Estrategia: Plan de acción para implementar los objetivos estratégicos y determinar el presupuesto.

¿Cómo mediremos el desempeño logrado? –> Indicadores de Desempeño: Para medir logros, evaluar y tomar acciones correctivas.

Dimensiones Claves

• Pertinencia
• Eficiencia
• Eficacia

Misión

¿Quiénes somos, qué hacemos, para quiénes y qué efectos o resultados esperamos? Es una descripción de la razón de ser de la organización, establece su quehacer institucional, los bienes y servicios que entrega, las funciones principales que la distinguen y la hacen diferente de otras instituciones y justifican su existencia.

Definición de la Misión

• ¿Cuál es el propósito de la organización?
• ¿Qué hace? Descripción de los productos finales (bienes y servicios que entrega).
• Para quiénes: Identificación de los usuarios o beneficiarios a quienes van dirigidos los productos finales (bienes y servicios).
• ¿Cuál es el efecto que se espera lograr? (resultado final) en la población objetivo o potencial a la que se dirige su accionar, a través de los productos provistos. El quehacer de la institución que genera el valor público de la entidad y el plazo en que se espera proveer.

Visión

¿Cómo queremos ser reconocidos? Corresponde al futuro deseado de la organización. Se refiere a cómo quiere ser reconocida la entidad y representa los valores con los cuales se fundamentará su accionar público.

• Puede ser más amplia que la misión institucional.
• Se debe evitar repetir las funciones y los productos que caracterizan la definición de la misión.

Información Clave para la Visión

• Valores que tiene la entidad y que desea comunicar.
• Cómo quiere ser vista o percibida la institución en el futuro.
• Los estándares de desempeño con los cuales se comprometió.

Evaluación Periódica

Tabla con preguntas de desempeño para cada nivel de intervención.

Nivel de Intervención	Tipo de Preguntas
Objetivo general	¿Qué impacto ha tenido la intervención del proyecto?
Objetivo específico	¿Qué se ha conseguido como consecuencia de los resultados?
Resultado	¿Qué hemos producido como consecuencia de las actividades del proyecto?
Actividad	¿Qué hemos hecho? ¿La actividad se lleva a cabo adecuadamente y a tiempo?

Monitoreo

Proceso sistemático de recolectar, analizar y utilizar información para hacer seguimiento al progreso del plan y para guiar las decisiones de gestión. Generalmente se dirige hacia los procesos en los que respecto a cómo, cuándo y dónde tiene lugar las actividades, quién las ejecuta y a cuántas personas o entidades beneficia. Su objetivo es examinar el cumplimiento de las actividades y la organización de los medios disponibles que garanticen el cumplimiento de las mismas.

Preguntas Claves para el Monitoreo

• ¿Si los recursos materiales y financieros son suficientes?
• ¿Si el personal encargado de la ejecución tiene la calificación y las capacidades necesarias?
• ¿Si el plan de trabajo ha sido implementado en los tiempos y en la forma planeada?
• ¿Si las actividades realizadas son coherentes con los planes de trabajo?
• ¿Si estamos progresando para avanzar hacia los resultados u objetivos propuestos?
• ¿Si la respuesta de la población involucrada en las actividades del proyecto es positiva?
• ¿Si hay participación y aceptación de las actividades y los procesos?
• ¿Si existen circunstancias o eventos inesperados?

Evaluación

Busca generar información, conocimiento y aprendizaje dirigidos a garantizar la eficacia, la eficiencia y la efectividad (impacto) de una estrategia de prevención (o Promoción). Evaluar una estrategia es analizar el valor del plan de comparación con el objetivo de conocer sus resultados (esperando e inesperados) su impacto sobre la población objetivo y en general, así como permitir posibles ajustes para el perfeccionamiento de la estrategias (ayudar en la toma de decisiones).

• El monitoreo y la evaluación son términos complementarios pero independientes entre sí.
• Estos aspectos se deben tomar en cuenta desde el inicio, es decir, desde la etapa de planificación.

Monitoreo vs. Evaluación

• Monitoreo: Herramienta que facilita la revisión del cumplimiento de las actividades planificadas, a través de un registro sistemático y continuo (proceso).
• Evaluación: Busca verificar el nivel de eficacia de la intervención, mediante la comparación de los resultados alcanzados con los objetivos y metas originalmente trazados en un punto dado en el tiempo.

¿Qué Queremos Evaluar?

• La calidad de las acciones comunitarias: Planificación y organización, dimensión metodológica y dimensión de objetivos.
• Los impactos en la población: Individuales, de grupo y en la comunidad.
• Los espacios de trabajos: Funcionamiento interno, la dimensión institucional y la dimensión comunitaria.

Variable

La variable puede definirse como un aspecto o dimensión de un objeto de estudio que tiene como característica la posibilidad de presentar valores en forma distinta. Se refieren a atributos, propiedades o características de las unidades de estudio, que pueden adoptar distintos valores o categorías.

Tipos de Variables

• Cuantitativa:
  • Continua: Presión arterial, altura, peso.
  • Discreta: Número de hijos, número de ataques de asma.
• Categórica:
  • Ordinal: Estadio de cáncer de mama (bien, malo…).
  • Nominal: Sexo, grupo sanguíneo, vivo o muerto.

Indicadores

Son señales que permiten identificar las características o propiedades de las variables, dándose con respecto a un punto de referencia. Dentro de este marco son señales comparativas con respecto a contextos o a sí mismas.

Características de los Indicadores

• Variables cuya función es objetivar cambios para la toma de decisiones en salud.
• Información estadística que resulta de la tabulación de datos.
• Expresiones estadísticas que intentan cuantificar, en forma indirecta o parcial, un fenómeno complejo.
• Sirven para evaluar el comportamiento de una situación determinada con otras situaciones de similares características.
• Herramienta de control operativo y de gestión al permitir tomar decisiones.

Atributos de los Indicadores

• Validez: ¿Mide lo que pretende medir? ¿Tiene sentido para quienes deben aplicarlo?
• Fiabilidad: Mediciones repetidas por distintos observadores deben dar como resultado valores similares del mismo indicador.
• Relevancia: Deben ser capaces de medir lo más importante del proceso.
• Sensibilidad: Deben ser capaces de captar los cambios.
• Especificidad: Deben reflejar solo cambios ocurridos en una situación determinada.

Tipos de Indicadores

• Estructuras
• Proceso
• Resultado:
  1. Números absolutos.
  2. Frecuencia relativa (razón, porcentaje, tasas, índices).

Tipos de Evaluación

• Evaluación de Proceso/Desempeño: Cuestionamiento sobre la implementación ¿qué podemos mejorar?
• Evaluación de Resultados: Rendición de cuentas y transparencia en el uso de recursos (eficiencia, eficacia, efectividad).
• Evaluación de Impacto: Se emplea para contestar: ¿Qué hubiese ocurrido en la población de no haber existido la intervención?