DISEO Y EVALUACIN DE

PROYECTOS

UNIDAD: EVALUACIN DE PROYECTOS

1
 Evaluacin de Proyectos

Programas y proyectos

Proyectos: son actividades a corto plazo con objetivos especficos

y recursos asignados.
Programas: son actividades en cursos que representan esfuerzos
programas coordinados para conseguir los principales objetivos
educativos.

Razn para evaluarlos:

Buscar informacin que ayude a los centros a mejorar los
programas existentes y desarrollar nuevos programas.

2
 Evaluacin de Proyectos

La evaluacin es un componente ineludible de todo proyecto

educativo que aspira a ser vlido y eficaz.

La evaluacin de un proyecto puede entenderse como un proceso

sistemtico, diseo intencional y tcnicamente, de recogida de
informacin-valiosa y fiable-orientado a valorar la calidad y los
logros del mismo, como base para la posterior toma de decisiones
de mejora, tanto de dicho proyecto, como del personal implicado y,
de modo indirecto, del cuerpo social en que se encuentra inmerso
(Prez R., 1995,pp.85)

3
 Evaluacin de Proyectos

La evaluacin de programas educativos, supone un

conjunto de destrezas y habilidades orientadas a
determinar si los servicios prestado son necesarios, si se
utilizan, si son suficientes, si se dan en los trminos planificados,
si ayudan dentro de un costo razonable o si incuso, provocan
efectos no deseados.

La evaluacin de un proyecto ha de ser inherente al desarrollo

del propio proyecto en sus diferentes fases y debe estar
permanentemente presente desde antes, incluso, de su
implantacin.

4
 Evaluacin de Proyectos

Componentes bsicos de una evaluacin

Comprender el problema de la evaluacin.

Planificar la evaluacin.
Recoger datos.
Analizarlos.
Informar sobre los resultados de la evaluacin.

5
 Evaluacin de Proyectos

Requisitos metodolgicos

Objetivo
Imparcial
Valido
Todo proceso de Confiable
Evaluacin debe ser Creble
Oportuno
til
Participativo
Retroalimentador
Costo/eficaz

6
 Evaluacin de Proyectos

Comprender el problema de la evaluacin.

Para comprender bien el problema de la evaluacin es necesario
saber especficamente:

1.- La naturaleza del proyecto o programa (OBJETO). Es importante

comprender los fundamentos y el planteamiento concreto lo antes posible.

2.- Quienes son los posibles interesados en la evaluacin (AUDIENCIA), para

que el equipo evaluador pueda identificar la informacin relevante y los
criterios a utilizar.

3.- Porque se evala el programa (FUNCIONES), para que pueda planificar y

dirigir de manera que cubra las funciones.

4.- Que tipo de informacin se debe recoger (CRITERIOS), determinados

segn estndares o normas aceptadas.

7
 Evaluacin de Proyectos

Instrumentos para entender el problema de la

evaluacin.

1.- Dialogar con las personas relacionadas con el programa.

2.- Observar actividades en curso y revisar documentacin pertinente.
3.- Revisar estudios de investigacin disponibles.

8
 Evaluacin de Proyectos

Indicadores de evaluacin del proyecto

Los indicadores de evaluacin son los instrumentos que permiten

medir la progresin hacia las metas propuestas.
Ellos permiten realizar una evaluacin adecuada teniendo en cuenta los
objetivos propuestos y las realizaciones concretas. Por otra parte, si los
indicadores no se establecen durante la fase de diseo del proyecto
habr que reconstruirlos posteriormente en la evaluacin,
probablemente con menos fiabilidad.

9
 Evaluacin de Proyectos

Para que los indicadores sean concretos y permitan una buena

medicin de los resultados del proyecto, deben reunir algunas
condiciones:

Independencia, esto es: no conviene usar el mismo indicador para

medir diferentes metas y objetivos.
Cada meta debe tener un indicador propio. Si ello no es posible, habr
que revisar el diseo del proyecto y corregirlo.

Verificabilidad. Es decir, los indicadores deben establecerse de tal

modo que sea posible comprobar o verificar de forma emprica los
cambios que se van produciendo con el proyecto. Esto permite que
objetivamente el indicador tenga el mismo significado tanto para un
defensor como para un oponente del proyecto

10
 Evaluacin de Proyectos

Validez. Los indicadores deben medir lo que se pretende medir. No se trata

de un juego de palabras. Tomados en conjunto, todos los indicadores
deben reflejar los efectos del proyecto.

Accesibilidad. Que implica el establecimiento de indicadores cuya

informacin necesaria (datos) se puedan obtener fcilmente. No tiene
mucho sentido emplear indicadores para los cuales hay que utilizar mucho
tiempo y esfuerzo en recabar los datos necesarios que permitan la
medicin. Lo ideal es usar indicadores que requieran datos ya existentes o
que se puedan obtener mediante el sistema de seguimiento normal del
proyecto.

No siempre se pueden encontrar indicadores directamente cuantificables de lo

que se quiere medir. En esos casos, hay que utilizar indicadores de sustitucin o
indirectos. Pero se debe considerar que cuanto ms indirecto es el indicador,
ms peligro hay de que influyan factores extraos.

11
 Evaluacin de Proyectos

Para que la evaluacin produzca efectos beneficios es preciso contar con la

cooperacin voluntaria ejercida der los implicados en el proyecto; por el
contrario, cuando se realiza contra la voluntad de aqullos, nos encontramos
ante el denominado sndrome de Penlope, en el que, por no existir el
necesario clima de confianza, la evaluacin estar condenada al fracaso
(Plante, J., 1994, p.50).

Aunque resulte difcil establecer un escalonamiento definido y preciso de las

fases de evaluacin de un proyecto, pueden considerarse, con carcter
general, tres momentos prototpicos, a saber:
Despus de su elaboracin FASE PREACTIVA
(previa a su aplicacin)

En su ejecucin FASE INTERACTIVA O DE EXPLOTACION

Despus de su realizacin. FASE POSTACTATIVA

(GENTO, S., 1995a, p, 185.)

12
 Evaluacin de Proyectos

Validacin preactiva

Comprobar si efectivamente responde a lo que debe ser de

acuerdo con la concepcin terica que se tiene del mismo: se trata,
pues, de determinar el grado de adecuacin de lo pretendido con lo
realmente diseado (Plante, J., 1994a, pp.19)

Podran considerarse en esta fase evaluativa los siguientes tipos de

validez: la de apariencia, de contenido, de constructo y de contraste
(GENTO, S., 1995a, pp.185-7.)

13
 Evaluacin de Proyectos

Validacin preactiva de un proyecto

Criterios de validacin Criterios de validacin Criterios de validacin

Contenidos Validez Inmediata

Usuarios
Estructura Validez de
Contenido
Jueces externos
Acomodacin Validez de
Concepcin terica Constructo

Autores
Comparacin con otros Validez
Proyectos de Contraste

14
 Evaluacin de Proyectos

Validez de apariencia o aparente.

Se realiza a partir de la opinin de quienes han de manejar el proyecto
diseado.
ofrecer valoraciones ponderadas sobre los aspectos que se someten a
estimacin.
Las personas que opinen en esta evaluacin de apariencia deben responder a
cuestiones abiertas en las que puedan formular aportaciones.

Validez de constructo.
Pretende mostrar la acomodacin del proyecto diseado a la concepcin
terica sobre la que se fundamenta.

Validez de contraste.
Trata de llevar a cabo una estimacin de un proyecto estableciendo un
parangn con otro u otros de similares caractersticas.

15
 Evaluacin de Proyectos

Validez de contenido.
Aportaciones estimativas procedentes de jueces externos supuestamente
expertos en la problemtica que aborda el proyecto, o mediante la opinin de
los propios realizadores del diseo, a quienes cabe considerar como expertos
internos del proyecto mismo.
Algunos de los posibles contenidos sobre los cuales podra pedirse opinin en
torno al grado de suficiencia y exactitud con que se tratan en el proyecto
podran ser, por ejemplo:
Proceso de elaboracin.
Fundamentacin ideolgico-conceptual.
contextualizacin.
Componentes de calidad tcnica del proyecto.

16
 Evaluacin de Proyectos

Evaluacin interactiva.

Se lleva a cabo durante la realizacin del proyecto mismo, mediante la

intervencin colaborativa de los responsables de su ejecucin.

En la evaluacin interactiva se pueden utilizar procedimientos, tcnicas e

instrumentos, cuyo uso depender de la situacin y de los
condicionamientos de cada caso.

17
 Evaluacin de Proyectos

Procedimientos Tcnicas Instrumentos

Autoevaluacin Observacin: Guas de evaluacin.

Heteroevaluacin Etnografa. Inventarios.
Participante. Lista de cotejo o control.
No participante. Anecdotarios.
De instalaciones Diarios.
materiales y Estudios de caso.
resultados. Anlisis de contenido.
Anlisis de trabajo.
Anlisis de tareas.
Escalas de observacin.
Evaluacin Interrogativas. Exmenes orales.
Orales. Entrevistas.
Triangulacin Interrogativas: Cuestionarios.
Escritas. Escalas de evaluacin.
Pruebas sociomtricas.
Memorandos.
Informes.
Tests estandarizados.
Pruebas objetivas.
Exmenes tradicionales.
Autobiografas.

18
 Evaluacin de Proyectos

Valoracin postactiva.

Es aquella que se lleva a cabo una vez concluida la aplicacin del proyecto.

El anlisis de resultados, propios de esta fase postactiva, se pueden

considerar los siguientes descriptores:
Indicadores de eficacia.
Indicadores de eficiencia.
Indicadores de funcionalidad.
Indicadores de impacto.
19
 Evaluacin de Proyectos

tiempo
Indicadores de
EFICIENCIA
recursos

propsitos
Indicadores de Posibilidades Nuevas
FUNCIONALIDAD de mejora propuestas
proceso

xitos
Indicadores de
EFICACIA
fracasos

20
 Evaluacin de Proyectos

Indicadores de eficacia.

Tratan de llegar a una estimacin de los resultados

conseguidos o productos logrados, aunque sin plantearse la
recuperacin que sobre los mismos hayan podido tener los
elementos que constituyen el input(bsicamente, el contexto
y recursos).
Entre los indicadores de eficacia podran incluirse aspectos
como: xitos logrados (objetivos cumplidos, carencias
apreciadas (objetivos no logrados), deficiencias acaecidas, etc.

21
 Evaluacin de Proyectos

Indicadores de eficiencia.
La relacin entre factores determinantes o input y los resultados
obtenidos o output es lo constituye la eficiencia de una accin o
proyecto educativo.
Algunos posibles indicadores de eficiencia son: aprovechamiento
de recursos humanos, explotacin de recursos fsicos,
optimizacin de la capacidad formativa de los alumnos,
funcionamiento de estructuras organizativas, etc.

Indicadores de funcionalidad.
Tratan de valorar la idoneidad del proceso de ejecucin del
proyecto mismo, con independencia de los resultados obtenidos
y, en lo posible, los recursos puestos en accin.
22
 Evaluacin de Proyectos

Indicadores de impacto.
Pondrn de manifiesto los efectos que un proyecto produce en el
mbito de incidencia de sus resultados, pero con independencia de
estos ltimos.

EFECTO LABORAL: EFECTO SOCIAL:

Incorporacin al trabajo. Nivel sanitario e higiene.
Niveles de empleo. Respeto y tolerancia.
Promocin laboral/profesional. Ayuda a otros.
Niveles retributivos. Nivel cultural.
Satisfaccin de trabajadores. Mejora medio ambiente.
Satisfaccin de empleadores. Actividades fsico-deportivas
Rendimiento laboral. Canalizacin del ocio.

EFECTO ACDEMICO:
Titulaciones.
EFECTO FAMILIAR: Calificaciones.
Relaciones familiares entre Pruebas de acceso.
diversos miembros. Opiniones de profesores.
Orden interno. Superacin de exmenes.
Condiciones econmicas. ndices de escolarizacin.
IMPACTO
DE LA
EDUCACIN 23
 Evaluacin de Proyectos

El proceso de evaluacin de programas

2: SELECCIN DE LAS
1: PLANTEAMIENTO DE OPERACIONES A OBSERVAR
LA EVALUACIN

FASES

5: ANLISIS DE 3: SELECCIN DEL DISEO

DATOS DE EVALUACIN

4: RECOGIDA DE
INFORMACIN

24