RESUMEN

CAPTULO 3: MODELOS DE EVALUACION

En primer lugar se define el concepto de modelo de evaluacin, el cual es entendido por el
autor como un esquema o diseo general que caracteriza la forma de la investigacin
evaluativa que ha de realizar, a travs de las tcnicas de recoleccin de datos.
De esta manera se distingue dos modelos de evaluacin: el modelo analtico y el modelo
global. Los modelos analticos estn relacionado con el paradigma epistemolgico
explicativo- Su finalidad consiste en explicar las modalidades del funcionamiento de un
programa en trmino de una teora. Mientras que los modelos globales se basan en
paradigmas interpretativos, de tal modo que la evaluacin consiste en establecer el
significado de las acciones y actividades que se desarrollan dentro del programa. Tiene un
enfoque holstico y una posicin subjetivista.
Modelo CIPP: Contexto-Insumo Proceso- Producto
Fue propuesto por Daniel Stufflebeam en 1971, este modelo define la evaluacin como un
proceso destinado a obtener y proporcionar informaciones tiles para la aprobacin de
decisiones alternativas. Para ello, el evaluador necesita de los siguientes requisitos: tipo de
informacin especfica requerido por las personas que tomen decisiones, procedimientos
para obtener la informacin y la elaboracin de sntesis para la toma de decisiones.
La informacin para la toma de decisiones que han de tomarse dentro del programa
proviene de los cuatro tipos de evaluacin que en conjunto forman el modelo CIPP. Ellos
son:
a. Evaluacin contextual: (consiste en un estudio exploratorio destinado a ubicar los
problemas o necesidades educativas no satisfechas en un cierto contexto.
b. Evaluacin de insumos: (trata de determinar los recursos que se necesitaran para
alcanzar los objetivos propuestos en el programa)
c. Evaluacin de procesos: (tiene como finalidad establecer si la estrategia de
utilizacin de insumos se est aplicando o no)
d. Evaluacin de producto: (mide e interpreta el logro de los objetivos)
Modelo de referentes especficos
Esquema propuesto por el autor, para ello distingue los principales referentes de la
evaluacin: el contexto con el cual se desarrolla el programa, sus objetivos, los recursos, la
poblacin, los resultados de un programa, con el fin de que se pueda tomar mejores
decisiones en diversos niveles del programa. Para ello se recurre a los focos de atencin.
Focos y objetos de evaluacin

Permite la participacin activa de los administradores del programa, la poblacin objeto y

los evaluadores. Es decir este modelo otorga la participacin de las partes involucradas en
el estudio con el fin de integrar un esquema coherente las diversas necesidades de
informacin y la relacin de estas con los focos de evaluacin que han de elegirse. La
participacin permite asegurar el inters y el compromiso de todos los grupos con la
marcha del estudio.
Normas de evaluacin
Sigue una combinacin de procesos como la descripcin, medicin y comparacin.
Consiste en hacer descripciones ms o menos detalladas relacionadas al programa, medir
las variables de esas situaciones para luego compararlos entre objetivos y resultados. En la
comparacin evaluativa pueden darse tres situaciones: coincidencia entre lo esperado y lo
obtenido, situacin mejor que la esperada y situacin inferior a la esperada.
Algunas especificaciones del modelo

Evaluacin de contexto (compara los objetivos del programa con las necesidades
de la poblacin)
Evaluacin de objetivos ( se ve que tan posible es que los usuarios del programa
alcancen las situaciones o estados deseables)
Evaluacin de recursos ( estn constituidos por personal directivo, administrativo ,
personal tcnico y recursos financieros y fsicos)
Evaluacin de funcionamiento ( se entiende todos los procesos que se desarrollan
en el programa, como son los procesos relacionados con el desarrollo del programa
y los procesos destinados a producir los cambios)
Evaluacin de poblacin (se debe establecer si se trata de una poblacin objeto
directa o de una poblacin instrumental, para luego describir sus caractersticas
demogrficas, creencias, etc)
Evaluacin de resultados (evala los cambios que se producen en una determinada
poblacin objeto)

Efectividad, eficacia y eficiencia del programa

-

La efectividad es la relacin entre el resultado obtenido y la meta programada

dentro de un cierto objetivo.
La eficacia tambin relaciona resultados y metas preestablecidas, pero introduce la
variable tiempo, es decir es entendida como el grado en el cual se alcanzan las
metas en la poblacin en relacin con el tiempo programado para su logro, con
independencia de los costos.

NOTA: Es conveniente realizar un clculo de la eficacia y eficiencia de un

determinado proyecto, pues esta evaluacin mediante las herramientas de anlisis

econmico compara costos y beneficios de un proyecto, expresados de manera

monetaria. De esta forma la evaluacin social de proyectos permite racionalizar la
toma de decisiones en el campo de la inversin pblica.
Modelo de utilizacin focalizada
Representa un intento de superar la oposicin abierta entre los paradigmas que destacan la
explicacin basada en sistemas hipotticos deductivos o diseos rgidos de control de
variables.
Las caractersticas bsicas del modelo se inicia con la identificacin y organizacin de las
personas que toman las decisiones relevantes frente a un programa, como tambin las
personas que emplearn la informacin producida por la evaluacin. El evaluador trabaja
con esas personas con el fin de localizar las preguntas de evaluacin relevantes. De esas
preguntas se derivan las tcnicas de recoleccin y de anlisis de datos apropiados. Luego
los evaluadores y las personas que toman las decisiones negocian y cooperan para la
diseminacin.
Un modelo global: la evaluacin iluminativa
Presentada por M. Parlett en 1976, se apoya en un paradigma subjetivista que privilegia el
uso de informacin cualitativa y que busca la interpretacin mediante los significados que
tales procesos tienen para los autores que participan en el programa. Representa un enfoque
cultural, etnogrfico, de naturaleza holstica. Pretende contribuir a la toma de decisiones
mediante informaciones, comentarios y anlisis destinados a aumentar el conocimiento y la
comprensin del programa en evaluacin. El evaluador es considera un intrprete del
programa.
La evaluacin Participativa
Es la forma que asume la investigacin participativa al evaluar los programas de accin, La
idea es que en esta evaluacin las personas que pertenecen al programa tomen en sus manos
las tareas que implica un estudio de este tipo, con claras ventajas para ellos (lograr los
propsitos buscados, aprendizaje grupal e individual, autorrealizacin) y para el programa
(mejor determinacin de los problemas, propuesta de soluciones realistas, mayor
compromiso de los usuarios, etc).
CAPTULO 4: VALIDACION DE UN PROGRAMA DE ACCION
Para el autor todo programa es una estrategia destinada a producir cambios en un
determinado contexto. Para ello se determina las actividades los cuales producirn
resultados adecuados. Pero esa conexin necesita ser evaluada, contrastada, esto se
denomina validacin del programa.

Lo que se debe validar es el modelo de medios a fines. Para ello primero se verifica la
propiedad y eficacia de los instrumentos empleados para que se produzcan estos cambios.
Diseos de validacin
La efectividad de un determinado programa, es decir su capacidad para lograr los objetivos
que se ha propuesto, no pasa de ser una hiptesis mientras esta no haya sido contrastada
empricamente y pueda mostrar su validez. Este proceso se debera llevar a cabo antes de
comenzar el programa mismo. Sin embargo lo cierto es que gran nmero de programas se
inicia sin haber cumplido esta etapa de validacin., lo cual a la larga presenta barreras y
dificultades. Campbell y Stanley destacan los siguientes factores que pueden perturbar la
validez:

Historia: los programas se desarrollan en periodos prolongados, por lo que se

pueden presentar otras acciones que influyan en los cambios ocurridos en la
poblacin objeto.
Maduracin: en programas que buscan modificaciones tipo intelectual y/o afectivo
debe tener en cuenta que el paso del tiempo produce cambios biolgicos y psquicos
en los individuos.
Efecto de la prueba: el efecto de la aplicacin de una prueba inicial para encontrar la
situacin de entrada con la medicin final.
Instrumentacin: las diferencias entre el instrumento aplicado antes de iniciar el
programa y el instrumento aplicado despus o al final.
Seleccin diferencial: diferencias de caractersticas que pueden tener las personas de
los grupos experimentales y de control.
Mortalidad experimental: la prdida de personas que puede producirse tanto en los
grupos experimentales y de control, de modo que modifique la igualacin que se
haba logrado.
Interaccin seleccin y maduracin: s el efecto perturbador que se produce cuando
los grupos, debido a diferencias en su composicin de edades, tienen periodos
distintos de maduracin fsica y psicolgica.

Frente al problema planteado, la investigacin evaluativa encuentra a su disposicin dos

tipos de diseo metodolgicos: diseos experimentales y los diseos cuasi
experimentales.
Diseo experimentales:
Los diseos experimentales controlan en mayor nivel que los otros la validez interna de
un programa. Estos se dividen a su vez: a. Diseo experimental clsico, b. Diseo con
mediciones.

Diseo experimental clsico

Tiene como objeto verificar el efecto de una variable independiente, sobre una
determinada variable dependiente, el comprende los siguientes pasos:

- Asignacin al azar de las personas a los grupos experimentales y de control.

- Medicin de la variable dependiente tanto en el grupo experimental y control.
- Aplicacin de estmulos al grupo experimental
Medicin de la variable dependiente en ambos grupos
Diseo con grupo control y medicin:
Se forman dos grupos: experimental y otro de control, cuyos integrantes se asignan cada
uno de ellos de manera aleatoria. Es el grupo experimental quien recibe el tratamiento
de acciones del programa y el efecto se mide por la comparacin de las mediciones que
se hacen despus en cada grupo.
Diseo Cuasi experimentales
Tienen en cuenta la dificultad de aplicacin de los diseos experimentales en sentido
estricto, en particular la formacin de grupos de control y la asignacin al azar de las
personas tanto a esos grupos como a los grupos experimentales. El no cumplimiento de
estas condiciones afecta diversos aspectos de la validez interna y externa de las cuales
el evaluador debe tener plena conciencia al analizar en interpretar los resultados de sus
investigaciones. Los de mayor aplicacin son los siguientes: diseo con un grupo de
control no equivalente; diseo parchado; diseo de series de tiempo.
a. Diseo con un grupo de control no equivalente: Este diseo utiliza un grupo de
control que no proviene del universo del grupo experimental o del grupo que
constituye la poblacin usuaria del programa.
b. Diseo parchado: Se trata de un diseo que trabaja con dos o ms grupos que se
pueden colocar en una secuencia temporal. La caracterstica del diseo es la
utilizacin de las mediciones despus de un grupo con las mediciones antes del
siguiente.
c. Diseo de series de tiempo: Consiste en una serie de descripciones y mediciones
de la poblacin-objeto realizadas unas antes y otras despus que el programa haya
comenzado a funcionar.
Validacin ecolgica
Asi como es importante la validacin experimental y cuasi experimental de un
programa, tambin el evaluador se debe preocupar por la validez ecolgica de los
resultados obtenidos en la validez interna. La validez ecolgica se asegura cuanto
mayor sea el control de los factores que inciden en la validez interna, pero adems que

la poblacin de usuarios sea lo ms semejante posible a las que se dieron en la

validacin del programa.
Campbell y Stanley sealan 4 factores que amenazan la validez externa o
representatividad de un diseo:

El efecto reactivo o de interaccin de las pruebas: la aplicacin antes de las

pruebas podra sensibilizar a las personas respecto de las aplicaciones
despus.
Efectos reactivos de los dispositivos experimentales: la diferencia entre el
ambiente experimental de la validacin, que por lo novedoso puede llevar a
algunas personas a rendir positivamente, mientras en otras puede ocurrir lo
contrario. Existe una diferencia ente una situacin experimental y la situacin
natural.
El efecto Hawthorne: resulta cuando un grupo de personas se percatan de que
est sirviendo a una experimentacin y proporcionan informacin que genera
expectativas en los ejecutores.