Actividades de diagnóstico para secundaria

TIPOS DE EVALUACIÓN: Existen 4 tipos de evaluación

TIPOS DE EVALUACIÓN

1. Según el momento en que se evalúa:

1. Evaluación antes (o ex –  ante), inicial o pre-decisión:

   
   se realiza antes de comenzar una intervención (antes del inicio o aprobación). Evalúa pertinencia, viabilidad, coherencia, rentabilidad.

2. Evaluación durante o (proceso):

   
   se realiza durante la fase de ejecución. Evalúa cambios situacionales, es decir, en qué medida se cumple y realiza la intervención.

3. Evaluación ex – post:

   
   se realiza cuando la intervención ha finalizado.

2. Según la función que cumple la evaluación:

A) Evaluación sumativa:

evalúa resultados o efectos de una intervención, es decir hasta qué punto se cumplen los objetivos. Juzga si una intervención se mantiene o termina.

B) Evaluación formativa:

se realiza durante la ejecución de una intervención, para apoyar la puesta en marcha o mejorar lo que se está realizando.

3. Según la procedencia de los evaluadores:

A) Evaluación externa:

evaluadores no pertenecen a la institución ejecutora. Generalmente se recurre a expertos contratados para evaluar algunas o todas las actividades que realiza la institución.

Ventajas:

Mayor objetividad.

* Desventajas:

No capta plenamente todos los factores, así como la naturaleza y funcionamiento del programa.

B) Evaluación interna:

evaluadores pertenecen a la institución ejecutora, pero no son directamente responsables de la ejecución.

* Ventajas:

Mayor conocimiento de lo que se va a evaluar

* Desventajas:

Puede resaltar lo bueno y minimizar lo negativo, Desquite por situación conflictiva, Ser juez y parte.

C)

Evaluación mixta:

contempla evaluadores externos e internos.

D) Autoevaluación:

evaluadores están implicados directamente en la ejecución, valorando y enjuiciando actividades propias en el cumplimiento de metas

4. Según los aspectos del programa (intervención) que son objetos de evaluación: Se propone evaluar 3 elementos importantes:

A)  Evaluación del diseño y conceptualización del programa:

Se realiza en la fase de formulación del programa y planeamiento de la intervención. Y, en este caso se evalúa finalmente el modelo de intervención social que se deberá utilizar, pero para esto se plantean 3 procesos de evaluación que ayudan a definir el modelo de intervención.

B) Evaluación del estudio – investigación:

estudio /investigación de la realidad sobre la que va a intervenir. Se lleva a cabo para identificar posibles causas de fracaso del programa que no se hayan detectado mediante otros tipos de evaluación, o con el propósito de establecer fiabilidad y validez del estudio, entre otros.

C)

Evaluación del diagnóstico:

se establece la naturaleza, magnitud y carácterísticas básicas del problema objeto de intervención. Se aplica en aquellos casos en que se sospecha que el diagnóstico que fue llevado a cabo puede haber sido inadecuado o     “mal hecho”.

PRINCIPIOS BÁSICOS DE LA EVALUACIÓN

1. Según los aspectos del programa que son objeto de evaluación (naturaleza del objeto de evaluación):

Se proponen 3 tipos de evaluación

A) Evaluación del diseño y conceptualización del programa:

Se realiza en la fase de formulación del programa y planeamiento de la intervención. Y, en este caso se evalúa finalmente el modelo de intervención social que se deberá utilizar, pero para esto se plantean 3 procesos de evaluación que ayudan a definir el modelo de intervención.

B) Evaluación del estudio – investigación:

estudio /investigación de la realidad sobre la que va a intervenir. Se lleva a cabo para identificar posibles causas de fracaso del programa que no se hayan detectado mediante otros tipos de evaluación, o con el propósito de establecer fiabilidad y validez del estudio, entre otros.

C) Evaluación del diagnóstico:

se establece la naturaleza, magnitud y carácterísticas básicas del problema objeto de intervención. Se aplica en aquellos casos en que se sospecha que el diagnóstico que fue llevado a cabo puede haber sido inadecuado o     “mal hecho”.

2. Evaluación del diseño y concepción del programa

Se establecen los recursos y medios de intervención posibles de usar, así como, los factores relevantes del contexto que inciden en la problemática. Se consideran 4 puntos:

A)

Evaluación de la cobertura del programa respecto de:

La finalidad de este tipo de evaluación es determinar si el programa llega a la población objetivo-deseada (usuaria del servicio), en donde se consideran dos cosas:

– En qué medida alcanza la población destinataria:

Si conocen el programa: cuantos, en que medida, Si el programa es accesible: barreras que dificultan accesibilidad, Si el programa es aceptado por la comunidad.

En que medida se cubre el área de acción:

 Cobertura efectiva.

2

Evaluación de los aspectos técnicos de la implementación (medios e instrumentos  utilizados), según los siguiente conceptos: 

1. 1. 1. Necesarios:

         
         no se puede prescindir de ellos.
      2. 
         

         Suficientes:

         bastan para alcanzar metas y objetivos propuestos.
      3. 
         

         Idóneos:

         tienen capacidad de cumplir con las metas establecidas.
      4. 
         

         Potentes:

         tienen capacidad de enfrentar la situación problema y los obstáculos y dificultades.
      5. 
         

         Eficaces:

         medios usados sean idóneos para los objetivos y propósitos buscados.

3. Evaluación del ambiente organizacional en el que se desarrolla el programa:

Lo que pretende este tipo de evaluación, es valorar la estructura y desempeño organizacional de la institución desde la cual se realiza el programa. Por lo tanto, se analizan dos cosas:

– Valorar si la organización responsable favorece o dificulta la marcha, en lo estructural o funcional.

– Analizar lo organizacional y psico- social, en base a los objetivos de la institución y el contexto social en que está.

Evaluación del rendimiento personal:

mide la capacidad, competencia y habilidad de un individuo para efectuar determinadas actividades y tareas asignadas según el cargo que este tenga, para lograr establecer el grado de competencia que tiene cada persona para desempeñar las tareas que tiene a su cargo, en el cual se considera lo siguiente.

* Habilidades y aptitudes necesarias para la tarea, * Actitud frente al trabajo y las motivaciones para realizarlo responsablemente, * Capacidad de aplicar conocimientos. (teóricos y prácticos) y sistematizar la experiencia, * Forma y capacidad de organizar el trabajo, así como, solucionar problemas concretos.

4

Evaluación de la eficiencia y eficacia del programa:

Se realiza cuando el programa ha funcionado un largo tiempo o al terminarlo. Esta posee dos cosas a evaluar:

A)

Evaluación de la eficacia o efectividad (evaluación de resultados):

evalúa y analiza en que medida se están alcanzando los resultados previstos, estableciendo esta en relación a los usuarios.

Por lo tanto, con la evaluación de la eficacia se pretende evaluar el efecto o resultado del programa, y con la evaluación de la eficiencia se busca establecer el grado de rentabilidad económica de la intervención. Lo sustancial es saber si el programa que se esta llevando a cabo responde o no a las necesidades y problemas reales, de ahí que se intenta evaluar los resultados en términos de efecto (sobre la población destinataria) e impacto (sobre el conjunto de la población y el medio).

B)

Evaluación de la eficiencia o rentabilidad económica de un   programa:

• Para la evaluación económica, se debe analizar:

  
  Revisar el costo del programa en relación a los resultados obtenidos.

• Para la evaluación de eficiencia, se debe analizar

  
  Costo efectividad o costo eficacia, Costo utilidad y Costo beneficio. Y esta consiste en determinar el grado de rentabilidad económica del programa o servicio, comparando beneficios y costos.

DISEÑO DE EVALUACIÓN Y PROCESO DE EVALUACIÓN

DISEÑO DE LA INVESTIGACIÓN:

En el diseño de la evaluación deben tenerse en cuenta los siguientes elementos:

*Finalidad:

¿Para qué se realiza esta evaluación?.  ¿Para mejorar las prácticas o los servicios?

*Beneficiarios:

¿A quién está dirigida? O  ¿A quién beneficiará la evaluación?

*Usos:

¿Cómo se utilizarán los resultados de la evaluación?

En el diseño de la evaluación deben tenerse en cuenta los siguientes elementos preliminares

*Preguntas:

¿Cuáles son las preguntas más importantes que debe responder la evaluación?

*Métodos:

¿Cuáles son los métodos para proporcionar información a fin de responder a las preguntas?.

Proceso de evaluación (FASES) :

Este proceso consta de fases las cuales se llevan a cabo diferentes pasos y tareas las cuales implica una investigación evaluativa

1. Tareas Preliminares (1 fase): Este conlleva el tratamiento y resolución de dos cosas previas:

A) Las negociaciones entre los que encomiendan la evaluación y el equipo de evaluación:

Estas negociaciones se llevan a cabo entre los futuros usuarios de los resultados y el equipo que llevará a cabo dicha evaluación, en donde se tiene como propósito especificar el tema concreto de la evaluación, en relación a lo que quieren los usuarios con lo que indica el equipo que es posible realizar.

Hay dos cosas básicas que se deben lograr visualizar en esta fase de trabajo:

1. Delimitación conceptual de los aspectos a estudiar:

Consiste en establecer de la manera más precisa cuales son los alcances y propósitos de la evaluación y cuáles son los aspectos que se van a evaluar, para lo que se deben dilucidar 4 cuestiones:

• Establecer un perfil claro del programa o servicio
• Delimitar el nivel organizacional en que se realizará la evaluación
• Dejar especificado que se evaluará
• Determinar el “para qué” de la evaluación

2

Determinación de los recursos disponibles para realizar la evaluación:

Se trata de saber que recursos existen, para poder llevar a cabo el proceso de evaluación. Las disponibilidades de recursos financieros condicionan muchas veces el proceso de evaluación, ya que muchas veces o no se encuentran disponibles los recursos financieros que se requieren o bien que el equipo realice un estudio de costos según la demanda que se haya formulado.

Cabe mencionar que, cuando nos referimos a recursos estos pueden ser: financieros, humanos, técnicos, materiales, etc. Por lo tanto, lo que se necesita es lograr alcanzar un equilibrio entre lo que se desea evaluar y los recursos que se han asignado para esto, ya que si no se cuentan con los recursos necesarios el proceso de evaluación será imposible ser llevado a cabo.

B) Respuesta Preliminar a cuestiones que condicionarán el diseño de investigación evaluativa:

Sobre la base de los acuerdos a que se ha llegado en el proceso de negociación, el equipo técnico debe operacionalizar ese acuerdo al que se ha llegado, por lo tanto, se visualizan los problemas que conciernen al diseño técnico. En donde se debe responder a las siguientes cuestiones:

• ¿Cuáles son las necesidades de información y las posibilidades de obtenerla?
• ¿En qué medida puede ser asegurada la calidad y exactitud de los datos? (validez y fiabilidad)
• ¿Qué método/s se utilizarán en la evaluación? (cuál es el más adecuado)
• ¿Qué grado de colaboración se espera por parte de las personas que están involucradas en los resultados de la evaluación?

2

ELABORACIÓN DEL DISEÑO DE EVALUACIÓN (2 fase)

El diseño es el conjunto de operaciones que permiten llevar a cabo un proceso de investigación. Por lo tanto, se trata de un esquema que indica el conjunto de decisiones, pasos y actividades a realizar los cuales le otorgan direccionalidad a la investigación. La cual posee 3 tareas fundamentales:

1. Formulación del marco de referencial: Esta incluye dos aspectos que se deben considerar

B)Determinar el para qué de la investigación:

Se busca establecer los objetivos de la evaluación los cuales son llevados a cabo por parte del equipo que realizará esta, especificando el grado y extensión en que dichos objetivos pueden ser logrados con el estudio evaluativo

C) Identificar y determinar los aspectos que serán evaluados:

Se formulan aquellas preguntas que se quiere para el proceso de la evaluación, se deja claro que elementos o componentes del programa serán evaluados y por tanto, se precisa que tipo de evaluación deberá llevarse a cabo. ( Si es global o sectorial, la primera es cuando se evalúan todos los aspectos y la sectorial es cuando solo se trata de la evaluación de algunos aspectos)

Si es:

• Evaluación del diseño y conceptualización del programa
• Evaluación de la instrumentación y seguimiento del programa
• Evaluación de la eficacia y eficiencia del programa

2

Selección de la estrategia metodológica y de los procedimientos técnicos que será utilizados para la recopilación de datos:

Se precisa que método de investigación se llevará a cabo, en donde se define si será cuali o cuanti. Hoy en la actualidad, la mayoría de los investigadores combinan ambas metodologías para llevar a cabo el proceso evaluativo, ya que permite tanto entregar datos duros, como también obtener interpretación de significados de los datos recogidos.

*Evaluación orientada al proceso (cuali) y evaluación de resultados (cuanti)

3

Selección de variables y elaboración de indicadores

El determinar variables e indicadores, permitirá efectuar las mediciones y recoger los datos en el trabajo de campo. El indicador es sencillamente, una forma de aproximarnos al conocimiento de algo que no podemos captar directamente, ya que estos hacen referencia a un contexto específico. Por lo tanto, el indicador es el signo con el que señálamos los grados de una cosa y las variaciones inducidas en ella.

*La elaboración de estos está condicionada por la calidad y cantidad de datos disponibles o susceptibles de obtener, lo que a su vez dependen de los recursos asignados para realizar la evaluación.

Por otro lado, existen requisitos para elaborar indicadores de evaluación:

• Independencia:

  
  Utilizar cada indicador para una sola meta planteada.
• 
  

  Verificabilidad:

  Que permita comprobar los cambios que se van produciendo con el proyecto

• Validez:

  
  Que sirvan para medir todos los efectos que persigue el programa
• Accesibilidad:
  Que la obtención sea poco costosa o más “fácil” de evaluar y medir.

En cuanto al proceso metodológico, se plantean fases para la elaboración de indicadores:

• Representación literaria del concepto que se quiere medir
• Especificación del concepto: factores o dimensiones que lo componen, se trata de reflejar lo mejor posible la complejidad del fenómeno que se desea medir.
• Elección o selección de indicadores: Que permita medir cuantitativamente los factores
• Accesibilidad

3

TRABAJO DE CAMPO (3 fase)

Consiste en ir hacia la realidad que es motivo de estudio, En donde la tarea principal es la recopilación de los datos e información necesaria para llevar a cabo la evaluación. Por lo tanto, se requiere realizar aquellos instrumentos que servirán para evaluar, en donde se realiza una prueba previa de estos, para luego ejecutar estos.

A) Recopilación de datos e información:

Esta fase pertenece al trabajo de campo, en donde consiste en recoger los datos e información que previamente se ha decidido recabar respecto a las variables e indicadores de estudio, conforme a las técnicas y procedimientos elegidos.

ELABORACIÓN Y PRESENTACIÓN DE RESULTADOS:

Una vez efectuado el trabajo de campo, es preciso elaborar y analizar esos resultados por parte del equipo de evaluación. Esto implica 4 tareas básicas:

A) Elaboración de la información:

Es preciso ordenar, clasificar y agrupar los resultados obtenidos. Por lo tanto, se trata de procesar y sistematizar los datos, para así obtener conclusiones válidas.

B) Análisis e interpretación de los resultados: Dependiendo del diseño de investigación, el análisis puede ser:

1.Exploratorio:

Tiene como finalidad conocer los datos, para comprender que se puede hacer con ellos, antes de utilizar técnicas de análisis. Es necesario realizar este, cuando se quiere llevar a cabo un análisis explicativo.

2. Descriptivo: Los datos son resumidos, los cuales son plasmados en una matriz de datos

3.Explicativo:

Busca encontrar las explicaciones del éxito o fracaso de un programa o de algunas de sus partes, y además de comprobar las modificaciones que se han dado en la situación problema.

C)

Discusión de resultados:

Es necesario realizar una discusión de las conclusiones formuladas con el objeto de permitir opinar al respecto y no dejar aspectos sin considerar.

D) Formulación de conclusiones y recomendaciones:

Luego de la discusión de las conclusiones preliminares, se elabora el informe de evaluación, con los resultados, conclusiones y recomendaciones o propuestas. Se debe tener en consideración que, antes de entregar los resultados a los destinatarios, hay que someter a discusión las conclusiones que se han formulado.

Definiciones:

• Efectividad:

  
  es la relación entre el resultado obtenido y la meta programada dentro de un cierto objetivo. Considera el grado en que se han logrado las metas y objetivos propuestos. (efectividad = resultado/meta)

• Eficacia:

  
  también relaciona resultados y metas preestablecidas, pero introduce la variable tiempo. Es el grado en el cual se alcanzan las metas en la población objetivo, en relación con el tiempo programado para su logro, con independencia de los costos implicados.

• Eficiencia:

  
  relaciona los resultados obtenidos, con los recursos utilizados para ello.
  

1. Es el índice de rentabilidad del programa, relacionando los bienes y servicios finales(resultados), con los insumos requeridos para su obtención (recursos).
2. Incluye a la eficacia y la asocia a alguna unidad de recurso (dinero, horas/persona, horas/equipo, etc.).
3. A menor costo de producción, mayor eficiencia