Evaluación de Proyectos Educativos: Aproximaciones Teóricas

1. Definición y Propósito de la Evaluación

Según Utac, la evaluación es “la recogida y análisis sistemático de toda aquella información para determinar el valor o mérito de las acciones realizadas en la fase de ejecución”, lo que equivale a “emitir juicios de valor”. La evaluación implica una valoración y una comparación entre la situación actual y la situación deseada.

2. Efectos de la Evaluación

Medina y Villar definen la evaluación como un “proceso sistemático diseñado intencional y técnicamente” para la recogida de información, con el fin de valorar la calidad y los logros del objetivo.

3. Evaluación y Toma de Decisiones

L. Weiss reconoce que la evaluación puede contribuir a la toma de decisiones sobre el proyecto y la programación futura.

4. Evaluación para la Mejora Continua

Cembranos define la evaluación como un proceso de recogida y análisis de información, con la intención de utilizar dicho análisis para mejorar el programa, actividad o intervención.

2.1. Diseño de la Evaluación: Tipos de Evaluación

1.1.1. Según la Metodología de la Evaluación: ¿Cómo se Evalúa?

• Evaluación Cuantitativa: Recogida de información a través de indicadores fijados con criterios predeterminados. La información obtenida es concreta y fácilmente extrapolable, aunque puede ser limitada en cuanto a la expresión de problemáticas individuales.
• Evaluación Cualitativa: Basada en interpretaciones, opiniones, aspiraciones y propuestas de las personas involucradas. La recogida de información es más abierta y subjetiva, requiriendo un papel activo del evaluador.

1.1.2. ¿Cuándo se Evalúa?

• Evaluación Inicial o Diagnóstica: Su objetivo es conocer la realidad previa a la intervención.
• Evaluación Continua, Formativa o de Proceso: Permite el replanteamiento o readaptación de los objetivos durante la intervención, considerándose parte integral del proceso de planificación y desarrollo del programa.
• Evaluación Sumativa o Final: Se realiza después de que la actividad haya terminado, incorporando la información y los datos del desarrollo. Se basa en apreciar el grado de alcance de los objetivos.
• Evaluación Posterior o Seguimiento a Largo Plazo: Permite conocer los efectos de la intervención a largo plazo, así como su diferencia con los efectos a corto plazo.

1.1.3. ¿Qué se Evalúa?

A. Evaluación de las Necesidades

Considera el contexto y la realidad de los usuarios. Su objetivo es obtener conclusiones que faciliten el diagnóstico para plantear el proyecto, ayudando a programar los objetivos y tomar decisiones sobre la planificación. Esta fase puede implicar una reorientación de los objetivos.

B. Evaluación de la Planificación o Diseño

El diseño del programa o proyecto debe ser evaluado, analizando cada elemento que lo compone. Se deben responder preguntas como:

• ¿Existe coherencia entre el análisis de la realidad, los objetivos generales, los objetivos específicos, las actividades y la metodología?
• ¿Responden los objetivos a las necesidades detectadas?
• ¿Son los objetivos congruentes con la filosofía de la organización o del grupo que los formula?
• ¿Están los objetivos específicos bien formulados con respecto a los objetivos generales?
• ¿Están los objetivos correctamente priorizados?
• ¿Se corresponden las actividades a la jerarquización de los objetivos?
• ¿El planteamiento de la metodología es adecuado para los objetivos?
• ¿Existen o se prevén los recursos necesarios?
• ¿Se prevé el tiempo necesario?

C. Evaluación de la Ejecución o Aplicación

Sirve para guiar el proceso y obtener la información necesaria para realizar ajustes durante la ejecución del programa. Permite conocer:

• Si se está respetando el diseño pactado o se producen desviaciones.
• Si existen variables que dificultan el buen desarrollo del proyecto.
• Cuál es el nivel de repercusión de la intervención.

Para llevar a cabo esta evaluación, el equipo evaluador se plantea:

• ¿Se está llevando a cabo la aplicación del programa como estaba previsto en el diseño?
• ¿Cuáles son los factores que están influyendo en su desarrollo?
• ¿Se está llegando a los destinatarios previstos?
• ¿Se están beneficiando todos ellos de igual manera?
• ¿Qué grado de participación se está consiguiendo?
• ¿Qué grado de satisfacción se está dando entre los destinatarios?
• ¿La metodología escogida puede mejorarse?
• ¿Está respetando cada profesional su responsabilidad?

D. Evaluación de los Resultados o Impacto

Tiene como misión describir y juzgar los resultados de un programa de intervención. Sirve para evaluar los efectos que ha producido el programa, tanto los pretendidos y positivos, como los no buscados y negativos. Facilita la toma de decisiones sobre la continuidad del proyecto.

Las cuestiones que se pueden plantear son:

• ¿Qué efectos positivos o negativos ha producido el proyecto?
• ¿Qué impacto ha tenido sobre los destinatarios?
• ¿Hasta qué punto se han cumplido los objetivos?
• ¿Han aparecido resultados inesperados?
• ¿Cuál es la relación entre costes y beneficios?

1.1.4. Según Quién Realiza la Evaluación

A. Evaluación Interna

La responsabilidad recae sobre el equipo de profesionales, quienes evalúan a partir de la información recogida, especialmente en la evaluación continua, donde la retroalimentación proporciona claves sobre aciertos, carencias, errores, etc.

B. Evaluación Externa

Se realiza por evaluadores ajenos al equipo de intervención, requiriendo un esfuerzo y tiempo adicional.

C. Evaluación Mixta

Se realiza por un equipo de profesionales internos y externos.

D. Autoevaluación

Evaluación a sí mismo.

2.2. Objetivos y Funciones de la Evaluación

La finalidad de cualquier evaluación es la mejora del proceso de intervención.

En cuanto a sus posibles objetivos, dependerán de las funciones para las que se planteen:

• Función Diagnóstica: (evaluación inicial). Su objetivo es “conocer”, “averiguar”.
• Función Predictiva: La evaluación siempre tiene que estar orientada al futuro. El profesional debe ser capaz de estimar cuál será el avance. Muy común en la evaluación inicial y en la continua.
• Función Orientadora: El profesional deberá tener presente esta función. Su objetivo es guiar en la toma de decisiones.
• Función de Control: Necesidad de conocer en qué medida se logran o no los objetivos previstos. Su objetivo es medir el grado de adecuación.

2.3. Criterios e Indicadores

Se considera indicador a una variable que refleja una realidad aparentemente inobservable, obteniendo datos de gran utilidad para el fin con los que fueron redactados. Estos son importantes.

Es necesario identificar qué procesos son sensibles a la formación de sucesos y detectar qué variables intervienen en la actividad principal de nuestro proyecto.

Una vez hechos estos, permiten estandarizar el control de la actividad y obtener datos de una forma sistemática y comparable. Ejemplos:

• Indicadores sobre la participación de los destinatarios.
• Indicadores sobre las actividades que se llevan a cabo.
• Indicadores sobre la calidad de los profesionales.
• Indicadores sobre la calidad y cantidad de los recursos.