EL DISEÑO Y LOS DISEÑOS EN LA
EVALUACIÓN DE PROGRAMAS.
1. LA EVALUACIÓN DE PROGRAMAS COMO INVESTIGACIÓN EVALUATIVA
La Evaluación de Programas es un proceso para generar formas útiles de comprensión sobre una
innovación (o una intervención)
Se utiliza la intervención como un recurso crítico para mejorar los procesos de acción educativa, razón
por la que, a nivel metodológico, puede entenderse como un proceso de investigación evaluativa (
Esta metodología queda delimitada por: una terminología propia, un conjunto de herramientas
conceptuales y analíticas específicas, y unos procesos y fases también específicos.
a) Mayor interrelación entre las actividades de evaluación y programación
b) La investigación evaluativa es investigación
c) Se produce una mayor implicación de las partes interesadas
d) Pueden integrarse estrategias de investigación muy diversas, tanto cuantitativas como cualitativas.
investigación evaluativa es un modo de investigación que implica un proceso riguroso, controlado y sistemático
de recogida y análisis de información fiable y válida para tomar decisiones sobre un programa educativo.
a) Los juicios de valor acompañan al desarrollo de todo el programa
b) Resulta difícil (a veces inadecuado) formular hipótesis precisas
c) La replicación es prácticamente imposible
d) La recogida de datos está condicionada
e) Multitud de variables relevantes sólo son susceptibles de un control superficial
f) Las decisiones importantes en relación con la paralización, sustitución o repetición del programa no son
competencia del evaluador.
g) El informe debe adaptarse a las exigencias de quien lo financia
2. EL DISEÑO EN LA EVALUACIÓN DE PROGRAMAS
Un diseño es un plan que fija qué medidas y cuándo serán tomadas en el curso de un proceso de evaluación
La especificación de un diseño supone haber realizado reflexiones, planificación prevista, los fundamentos de la
misma, los objetivos, los elementos personales implicados en el programa, los ámbitos de intervención, los
instrumentos de recogida de datos, las técnicas de análisis y los momentos de la evaluación
El diseño de Evaluación de Programas es tanto un proceso como un conjunto de escritos o planes que incluyen
unos elementos que presentan los propios contenidos y que generan numerosas preguntas
Cualquier mínima planificación tiene que atender las siguientes tareas:
*Establecer las actividades que se van a evaluar * Fijar
los criterios de evaluación * Elegir las estrategias para la
obtención de información *Analizar la información
*Tomar decisiones a partir de la información analizada
Dos elementos básicos del diseño de una evaluación
La determinación de los datos que se requieren para valorar la eficacia del programa
La determinación del plan para obtener la información necesaria que nos
permita establecer relaciones entre el programa y los resultados obtenidos
Los aspectos a considerar en la delimitación del diseño en el marco de la Evaluación de Programas.
a) Diseños prefijados vs emergentes
Prefijados
Los diseños prefijados siguen la pauta del modelo positivista, requiriéndose que los objetivos de la evaluación
estén claramente definidos y fijados con anterioridad a la ejecución del programa, lo que supone que todos los
componentes del modelo (objetivos variables, tratamientos, fuentes de información, datos a recoger, análisis de
datos,...) estén determinados a partir de presupuestos teóricos o de experiencias en evaluación de otros
programas similares.
Emergentes
Se adaptan mejor a las necesidades e intereses de los participantes, están abiertos a posibles modificaciones
que durante el desarrollo puedan incorporarse, los problemas y objetivos no tienen por qué ser especificados,
se exige que el evaluador siga el desarrollo del programa estando en contacto permanente con los
participantes; este distinto grado de implicación del evaluador va a condicionar las técnicas e instrumentos de
obtención de datos , los datos suelen ser de carácter cualitativo y se valora todo aquello que se aproxima a los
paradigmas interpretativo y crítico , además debe cuidarse la adecuada selección de información y una
implicación excesiva del evaluador en la valoración de logros
b) Diseños de evaluaciones formativas vs sumativas
Formativa
La evaluación formativa es una parte importante del proceso que sigue el desarrollo del programa,
proporcionándole retroalimentación de su funcionamiento para favorecer el mismo e incorporar los cambios
que puedan contribuir a mejorar su realización, lo que implica la vinculación del evaluador con el discurrir del
programa: evaluación de carácter interno con efectos potenciales, sobre todo en la mejora del desarrollo del
programa.
Sumativa
La evaluación sumativa nos informa sobre los resultados obtenidos y, por tanto, sobre las necesidades que
han podido satisfacerse con la aplicación del programa.
c) Distintos tipos de evaluaciones
1) Evaluación de necesidades
Debe ser la primera actividad a llevar a cabo en la puesta en marcha de un
programa de intervención
La evaluación de necesidades, siendo una fase del proceso de investigación para la puesta en marcha de un
programa de intervención
2) Evaluación del diseño
Se pretende valorar el plan de acción (diseño) y los recursos del programa, a fin de seleccionar las estrategias
que permitan satisfacer más adecuadamente las necesidades detectadas y que mejor se adapten al grupo de
personas al que el programa va dirigido.
3) Evaluación de la implementación
Pretende analizar el funcionamiento del programa y determinar si existen diferencias entre el funcionamiento
real y el previsto inicialmente
4) Evaluación de resultados
Pretende efectuar comprobaciones a base de patrones claramente identificados, tanto en base a datos
cuantitativos como cualitativos, y la modalidad de «evaluación comprensiva», que pretende ampliar o
profundizar la comprensión de situaciones y que utiliza básicamente datos cualitativos.
5) Metaevaluación
Los elementos a considerar serán las pautas de cambio estratégico en la intervención y en la planificación
evaluativa
3. LOS DISEÑOS DE INVESTIGACIÓN EN LA EVALUACIÓN DE PROGRAMAS
La evaluación de efectos supone la elección de un diseño adecuado de investigación que permita obtener,
analizar e interpretar la información relevante para formular un juicio de valor y toma de decisiones
apropiadas.