Lo que falta para poder utilizar los indicadores

Determinacin de la frecuencia de medicin.

Determinacin de lnea base y metas para
los indicadores.
Medios de verificacin
Ficha tcnica del indicador
Cmo hemos estado antes?
Dnde estamos ahora?
Cun lejos queremos y podemos llegar?


Subcontralora de Evaluacin y
Mejora de la Gestin


Metas y medios de verificacin
Menor frecuencia
Mayor frecuencia
F
r
e
c
u
e
n
c
i
a

d
e

m
e
d
i
c
i

n

Fin
Propsito
Compo-
nentes
Activi-
dades
Frecuencia de medicin del indicador
Es la periodicidad con que se calcular el valor
del indicador
Las necesidades de uso de la informacin generada
por los indicadores (proceso de toma de decisiones).
Tiempo estimado en que se producirn los resultados
del programa en los beneficiarios.
Disponibilidad de informacin cuando sta es
obtenida o proporcionada por fuentes externas.
Compromisos de cuenta pblica o de informar
resultados de la gestin.
Factores que inciden en la frecuencia de
medicin de los indicadores
Qu es la lnea base?
Dato que se tomar como inicio para el indicador
(nuestro punto de partida).
Servir para evaluar el grado de avance logrado desde
el inicio del programa (o de las mediciones).
Para indicadores nuevos, puede que no exista un valor
base.
Una vez realizada la primera medicin, se tomar esta
como lnea de base.
Las Metas constituyen la expresin concreta y
cuantificable de los logros que se planea alcanzar en
un cierto perodo de tiempo con relacin a aspectos
relevantes de los objetivos.

Metas
Deben ser claras, especficas y
acotadas en el tiempo.
Deben ser exigentes pero
alcanzables.
Deben ser consensuadas entre los
principales involucrados.


Sentido de evolucin de las metas
Ascendente (ms es mejor!)
Cobertura, Calidad, Economa
Promedios de logro acadmico o de
rendimiento,
Tasas de aprobacin
Descendente (menos es mejor!)
Eficiencia
Tiempo promedio de respuesta
Tasas de morbilidad, de mortalidad, de
accidentes, de reprobacin, de desnutricin, etc.

Requisitos de las metas
Deben ser posibles de cumplir por la institucin
con los recursos financieros, humanos, fsicos y
tecnolgicos disponibles.
Deben ser conocidas y acordadas con los
ejecutores de un programa (establecer los
responsables por el cumplimiento).
Debe sealarse claramente el plazo para ser
cumplidas.

Requisitos de las metas
Su logro debe depender la gestin realizada
por la institucin (establecer supuestos).

Debe quedar claramente establecido cual es
la unidad responsable por el cumplimiento
de la meta (an cuando otras reas
intervengan)

Ejemplos de metas mal definidas
Mejoraremos el sistema de tramitacin de quejas.
Compraremos la mayor cantidad de libros posibles
para las escuelas.
Mejoraremos las condiciones de vida de los
trabajadores del campo
Generaremos oportunidades de empleo permanentes
para la poblacin rural e indgena.
Lograremos que nuestros usuarios estn
completamente satisfechos con nuestros servicios.


Incremento de un 10% de la cobertura de
beneficiarios del Programa en el ao 2014 respecto al
2013.
Reduccin a 30 minutos o menos del tiempo mximo
para la atencin a los usuarios en el plazo de tres
meses.
Realizar 20 inspecciones a bibliotecas locales por
trimestre durante el ao 2014.
80% de las nuevas contrataciones de directores de
secretaras se realizarn mediante concursos de
oposicin de antecedentes en 2014.
Ejemplo de metas bien definidas
Las metas de un proyecto deben ser
SMART.
Deben ser: Especficos (Specific): Claros sobre qu, dnde,
cundo y cmo va a cambiar la situacin;
Medibles (Measurable): que sea posible cuantificar los fines y
beneficios;
Realizables (Achievable): que sea posible lograr las metas
(conociendo los recursos y las capacidades);
Realistas (Realistic): que sea posible obtener el nivel de
cambio reflejado en la meta;
Limitado en tiempo (Time bound): estableciendo el periodo
de tiempo en el que se debe completar cada uno de ellas.

Primer paso para determinar una meta
Identificar la lnea base











Se construye con base en:
Programas similares
Estndar tcnico
Opinin de expertos


No
Existe
Existe
Se toma como
referencia.
Se toma como
referencia.
Considerar luego
Objetivos nacionales, sectoriales o institucionales.
La disponibilidad prevista de recursos financieros,
humanos, fsicos y tecnolgicos.
La evolucin histrica del indicador.
El desempeo de instituciones similares
(benchmarking).
Nacionales
Internacionales
Estndares aplicables o normas tcnicas.

Subvaloracin de las
metas frente a un
ambiente punitivo de la
evaluacin.

Trampa de la medicin: se
muestra como resultados
(y se hace) solo lo que se
puede medir.

Escasa utilidad para la
toma de decisiones y
mejora de la gestin.

No es posible avanzar
hacia la mejora de los
resultados relevantes para
la organizacin y por ende
para la ciudadana.

Problemas frecuentes y sus
consecuencias al establecer las metas
PROBLEMA S CONSECUENCIAS
No existen datos disponibles
para estimar la lnea base.

La institucin desconoce
estndares de entidades
similares .

Se desconoce la poblacin
objetivo y potencial.

Riesgo de sobre o subvalorar
la meta.

No es posible evaluar
respecto de las mejores
prcticas (autocomplacencia).

La meta no permite
monitorear el avance hacia el
cumplimiento del objetivo (y
por lo tanto no se pueden
tomar decisiones adecuadas).

Problemas frecuentes y sus
consecuencias al establecer las metas
PROBLEMA S CONSECUENCIAS
Parmetros de semaforizacin
Desviacin observada es inaceptable
(por ejemplo: desviacin > 10%)
Desviacin implica riesgo (por
ejemplo: 5% < desviacin <10%)
Desviacin es nula o aceptable
(por ejemplo: desviacin < 5%)
Permiten evaluar las desviaciones respecto a las
metas del indicador
Se establecen de acuerdo al sentido de evolucin del
indicador respecto a la meta
Ejemplo de parametros de
semaforizacin
0
20
40
60
80
100
Enero Marzo Junio Septiembre Diciembre
En riesgo
Aceptable
Crtico
Fallo de
Planeacin
LneaBase 42
------- Lnea Base Metas programadas Valores alcanzados
Taller
Establecer lneas base y metas
Medios de Verificacin
Cmo obtenemos la evidencia?
Son las fuentes de informacin que se pueden
utilizar para verificar el logro de los objetivos
(clculo de los indicadores).
Debe identificarse un medio de verificacin para
cada una de las variables que hacen parte de la
frmula de clculo del indicador.
Fin
Propsito
Compo-
nentes
Activi-
dades
Medios de
verificacin
La informacin debe estar disponible
para quin la solicite (transparencia).
Medios de Verificacin
Pueden incluir:
Estadsticas
Material publicado
Inspeccin visual
Encuestas
Informes de auditora
Registros contables

Fin
Propsito
Compo-
nentes
Activi-
dades
Medios de
verificacin
Diagrama para establecer Medios de
Verificacin
Est la
informacin
disponible en
registros del
programa?
Est en otra
entidad?
Beneficio de
obtenerla es
mayor que el
costo?
Si
No
Medio de
Verificacin
No
Buscamos
indicador
proxy
No
Si
Incluimos actividad
para obtener la
informacin
Si
Recomendaciones sobre Medios de Verificacin
Si falta informacin ser necesario incluir actividades
para obtenerla.
Si no se puede conseguir la informacin, habr que
cambiar el indicador (usar proxy).
Si hay ms de una fuente de informacin, verificar la
consistencia de los datos.
Medios de verificacin deben ser acordados con los
involucrados.

Fin
Propsito
Compo-
nentes
Activi-
dades
Lgica horizontal
Medios de verificacin bien identificados para cada
variable.
Indicadores bien definidos y necesarios y suficientes
para evaluar el logro del objetivo.
Taller
Identificacin de los
Medios de Verificacin