Evaluacin Ex Post - SNI

Fernando Cartes Mena

Jefe Divisin de Evaluacin Social de Inversiones
Ministerio de Desarrollo Social - Chile
SISTEMA NACIONAL DE INVERSIONES (SNI)
El SNI norma y rige el proceso de inversin pblica de Chile.
Rene las metodologas, normas y procedimientos que
orientan la formulacin, ejecucin y evaluacin de las
Iniciativas de Inversin (IDI) que postulan a fondos pblicos. El
SNI est compuesto por 4 subsistemas:
Evaluacin Ex
Ante

Ministerio de Desarrollo Social

Evaluacin Ex Formulacin Ministerio de Hacienda

Post Presupuestaria

Ejecucin
Presupuestaria
TEMARIO

OBJETIVOS

TIPOS DE EVALUACIN EX POST

EVALUACIN EX POST DE CORTO PLAZO

EVALUACIN EX POST DE MEDIANO PLAZO

EVALUACIN EX POST DE LARGO PLAZO

OBJETIVOS DE LA EVALUACIN EX POST

Identificar el grado de cumplimiento de los objetivos planteados y la validez

de las proyecciones ex ante.

Analizar el cumplimiento de los procesos y procedimientos tcnicos y

administrativos establecidos en la evaluacin ex ante.

Derivar acciones correctivas para mejorar los procesos de inversin vigentes

y la gestin de los proyectos.

Generar informacin y lecciones para apoyar el proceso de actualizacin de

metodologas, capacitacin, criterios de formulacin y evaluacin ex ante.
TIPOS DE DE EVALUACIN EX POST
Evaluacin Ex Post Oportunidad en que se realiza Alcances
la evaluacin

Fase I: Medicin y anlisis de variables

Corto Plazo Al trmino de la Ejecucin relevantes.
(Producto) Entrada en Operacin (1 o 2 aos) Fase II: Visitas a terreno de proyectos
en operacin.

Medicin de flujos (demanda, oferta,

beneficiarios, costos de operacin) y
En la etapa de Operacin.
Mediano Plazo efectos intermedios.
Proyectos con 3 a 7 aos de operacin.
(Intermedio) Aspectos de calidad de servicio
Anlisis de la operacin y modelo de
gestin

de Largo Plazo En la etapa de operacin en rgimen. Levantamiento de lnea base

(Impacto) Proyectos con ms de 7 aos de operacin Medicin de resultados a nivel de
impacto.
EVALUACIN EX POST DE CORTO PLAZO
1. Conceptualizacin
2. Caractersticas del proceso, variables e
Indicadores
3. Sistema Informtico
4. Informes
EX POST DE CORTO PLAZO
1. CONCEPTUALIZACIN
Consiste en la evaluacin y anlisis de los costos,
Fase I plazos y magnitudes de los proyectos (al trmino
de su ejecucin), a objeto de contar con
Ex Post de referencias para la formulacin y evaluacin de
Corto Plazo proyectos nuevos.

Consiste en visitar proyectos en operacin para

Fase II observar, registrar y analizar cmo funcionan
aspectos relevantes de la formulacin, con el
objeto de extraer lecciones aprendidas, que sean
tiles para otros proyectos.

Evaluacin

Programado Real
EX POST DE CORTO PLAZO
2. CARACTERISTCAS DEL PROCESO
Del Proceso
Dimensiones Aspectos Hasta el Proceso 2010 A partir del Proceso 2015
2011 al 2014
Muestra de proyectos, Seleccin Estratgica de
Modalidad de 100% de
programas y estudios proyectos por subsector y
Evaluacin proyectos
bsicos visitas a terreno

FASE I: Alrededor de 215

COBERTURA N Proyectos 200 Ms de 600 FASE II: Piloto: entre 3 y 5
proyectos.
Fuente
FNDR FNDR y Sectoriales
Financiamiento
Perodo de Dos aos anteriores
El ao anterior a la evaluacin
Referencia a la evaluacin
GENERACIN Nacional y Informes Nacional, Sectorial
Informes Nacional
DE Sectorial y de Visita
RESULTADOS Registro por Informe Individual en el Banco Integrado de
Ninguno
Proyecto evaluado Proyectos
OPTIMIZACIN Automtico
Sistema Manual
DEL TIEMPO (con carga de informacin del BIP)
EX POST DE CORTO PLAZO: FASE I
3. QU ANALIZA?
EX POST DE CORTO PLAZO: FASE I
4. INDICADORES
Variable Nombre indicador Descripcin

Plazo Real vs Plazo Recomendado de: Obra

Variacin plazo recomendado por tems Civil, Equipos, Equipamiento, Consultoras,
Terreno
Plazos (meses)

Variacin plazo total recomendado Plazo Total Real vs Plazo Total recomendado
de Ejecucin del Proyecto

Monto Contratado v/s Monto Recomendado

Variacin del monto recomendado

Monto Ejecutado v/s Monto Recomendado

Costos (M$)
Variacin del Monto Contratado
Monto Ejecutado v/s Monto Contratado

Costo por Magnitud Monto Ejecutado v/s

Magnitud Real
Cumplimiento de la magnitud Magnitud Ejecutada v/s magnitud
Magnitud
recomendada recomendada
EX POST DE CORTO PLAZO: FASE I
5. FUNCIONAMIENTO DEL SISTEMA INFORMTICO : AVANCES TECNOLGICOS
IMPLEMENTADOS

Sistema en lnea de empuje y simultneo

Comunicacin

Mdulo Unidad Mdulo Unidad Cierre

Mdulo SEREMI
Tcnica Financiera
Control
Control

Usuario Usuario Evaluacin

Tcnico Financiero Analista

Retorno a
Evaluacin
EX POST DE CORTO PLAZO: FASE II
QU ANALIZA?

Las Visitas a Terreno buscan entender las causas que generan un determinado
resultado (el porqu), en las siguientes reas

Identificacin del problema Funcionalidad

rea de influencia Uso de la infraestructura
Localizacin Calidad del servicio
Poblacin beneficiaria Equipos y equipamiento
Estimacin de demanda Operacin y mantenimiento
Capacidad instalada Personal
Diseo Adecuacin metodolgica

para expresarlas en forma de lecciones aprendidas.

EX POST DE CORTO PLAZO
INFORMACIN PAGINA WEB
EVALUACIN EX POST DE MEDIANO PLAZO
1. Objetivo
2. Metodologa Seleccin de Proyectos
3. Aspectos a Evaluar
4. Estudios Realizados
5. Informacin Disponible
EX POST DE MEDIANO PLAZO
1. OBJETIVO
Analizar y comparar el comportamiento de lo estimado en la formulacin del proyecto
vs lo real en las variables relevantes de un proyecto; y se lleva a cabo cuando el proyecto
lleva entre 3 a 7 aos de operacin.

Algunos aspectos analizados en esta etapa son los flujos de oferta y demanda, costos
operacionales y de mantenimiento; como tambin, el modelo de gestin de la
infraestructura, calidad del servicio (satisfaccin del usuario), flexibilidad de la
infraestructura en operacin, entre otros.
Anteproyecto y Proyecto Ejecutado
Mejoramiento Estadio Municipal Nelson Oyarzn Arenas de Chilln Cdigo BIP 300758980-01

Fuente: Evaluacin ex post de Mediano Plazo a Estadios Mundialistas (2012).

EX POST DE MEDIANO PLAZO
2. METODOLOGA DE SELECCIN DE PROYECTOS
Aspectos Proceso vigente
Seleccin de proyectos relevantes en coordinacin con el
Modalidad de Evaluacin
sector y los equipos de Inversiones y Metodologas
Seleccin de alrededor 15 proyectos segn tipo de
Modalidad de Ejecucin
proyecto, considerando la disponibilidad de informacin
Fuente FNDR y Sectorial
Perodo de Referencia En operacin (entre 3 y 7 aos)
Estudio Licitacin pblica
Producto final Informe y presentacin de la evaluacin de indicadores
La metodologa depende principalmente del objetivo del estudio, considerando qu para el
anlisis de la evaluacin social del proyecto se aplica la misma metodologa ex ante, pero
esta vez, considerando antecedentes reales o efectivos del proyecto, obtenidos en el ex post
(Inversin real, costos de operacin y mantenimiento, demanda, entre otros).

A partir del 2014 para la evaluacin ex post de mediano plazo se priorizan proyectos que
presenten evaluacin ex post de corto plazo, con una operacin mnima de 3 aos.
EX POST DE MEDIANO PLAZO
3. ASPECTOS A EVALUAR
Los aspectos transversales analizados y medidos en la evaluacin ex post
de mediano plazo son:

Dimensin Variable
Demanda Demanda efectiva
Costo de operacin y mantenimiento
Econmico
Indicador econmico en operacin
Gestin Modelo de gestin
Calidad servicio Satisfaccin usuario
Infraestructura Uso efectivo, mantenimiento efectivo y estado actual
Localizacin / Accesibilidad
Beneficiarios rea de influencia
Poblacin atendida
Las variables medidas estn relacionadas con los resultados de la
operacin del proyecto y se ajustan dependiendo del origen del
proyecto.
EX POST DE MEDIANO PLAZO

4. ESTUDIOS

Sector Estudio / Ao N Proyectos Aspectos analizados

N matrculas, Capacidad de uso,

Establecimientos Educacionales Costos de operacin y mantenimiento,
Educacin (2012)
10
Calidad del servicio, Indicador econmico en
operacin.
Demanda efectiva, Costo de operacin y
mantenimiento, Modelo de gestin,
Multisectorial Complejos Fronterizos (2011) 4
Calidad del servicio, Indicador econmico en
operacin.
Costo de operacin y mantenimiento, Modelo
Embalse Santa Juana (2012) 1
Riego de gestin, Traspaso, Designacin derechos
de agua, Volumen acumulado, Indicador
Embalse Puclaro (2012) 1 econmico en operacin.
EX POST DE MEDIANO PLAZO
4. ESTUDIOS
La lnea de ex post de mediano plazo es la ms antigua implementada,
comenz el ao 1992 y en forma casi ininterrumpida ha realizado estudios de
distintos sectores y proyectos de distinta envergadura. A continuacin se
presenta una muestra de los sectores analizados en el periodo 2010-2015:

Sector Estudio (Ao) N Proyectos Aspectos analizados

Agua potable N Arranques, consumo efectivo, Costo de

y Agua Potable Rural (2014) 12 operacin y mantenimiento, Satisfaccin
alcantarillado usuario, Tarifas, Indicador econmico.
Siniestros, Costo de operacin y
Defensa y
Cuarteles de Carabineros (2013) 12 mantenimiento , Modelo de gestin
Seguridad Calidad del servicio,Indicador econmico
Demanda de actividades y deportes, Costo
Estadios Mundialistas (2011) 4 de operacin y mantenimiento, Modelo de
Deporte gestin, Estado de conservacin ,
Polideportivos y Gimnasios Modificaciones programa arquitectnico,
recreativos 15 indicador econmico, calidad del servicios,
(2015) localizacin, Traspaso, rea de influencia.
EX POST DE MEDIANO PLAZO

4. ESTUDIOS
N
Sector Estudio / Ao Aspectos y variables analizadas
Proyectos
Hospitalizacin Domiciliaria (2013) 7
N de camas, rotacin, demanda
Efecto de la construccin de hospitales efectiva, costos de operacin y
2
Salud sobre su Red asistencial (2013) mantenimiento, recursos humanos,
modelo de gestin, equipamiento,
Eficiencia Modelo Gestin Equipos
8 indicador econmico.
Imaginologa (2012)
Transporte caminero (2014) 5 Flujo vehicular, Costos de operacin y
Transporte mantenimiento, Velocidades, Tasa de
Trnsito generado (2012) 12 ocupacin, Rugosidades, indicador
econmico.
Oferta y Demanda, Costo de operacin y
Vivienda Viviendas para Adultos Mayores mantenimiento, equipamiento,
15
ELEAM y CVT (2015) estndares, Modelo de gestin,
Traspaso, Rentabilidad
EX POST DE MEDIANO PLAZO
5. INFORMACIN PAGINA WEB
EX POST DE MEDIANO PLAZO
FICHA RESUMEN ESTUDIO
EVALUACIN EX POST DE LARGO PLAZO

1. Objetivo
2. Avances
MOMENTOS DE LA DE EVALUACIN EX POST
Evaluacin Ex Post Oportunidad en que se realiza la evaluacin Alcances/Tipo de resultados medidos

Fase I: Anlisis de productos, procesos y

procedimientos realizados en la
Corto Plazo Al trmino de la Ejecucin ejecucin.
(Producto) Entrada en Operacin Fase II: Visitas a terreno de proyectos
en operacin.

Medicin de flujos (demanda, oferta,

beneficiarios, costos de operacin) y
En la etapa de Operacin.
Mediano Plazo efectos intermedios.
Proyectos con 3 a 7 aos de operacin.
(Intermedio) Aspectos de calidad de servicio
Anlisis de la operacin y modelo de
gestin

de Largo Plazo En la etapa de operacin en rgimen. Levantamiento de lnea base

(Impacto) Proyectos con ms de 7 aos de operacin Medicin de resultados a nivel de
impacto.
EX POST DE LARGO PLAZO (IMPACTO)
1. OBJETIVO

Medir los resultados finales (impacto) a nivel de propsito o fin del

proyecto.

En general, la evaluacin de largo plazo mide el beneficio de mediano y largo

plazo ejercido en la poblacin objetivo (indicadores macroeconmicos y
socioeconmicos) .

El horizonte de tiempo para medir resultados de largo plazo es variable

segn el tipo de proyecto, sin embargo se estima en ms de 7 aos de
operacin del proyecto. El anlisis puede estar enfocado en proyectos de
gran envergadura o en grupos de proyectos.
EX POST DE LARGO PLAZO (IMPACTO)
2. AVANCES

Este proceso an es incipiente en el Subsistema de Evaluacin Ex Post .

El ao 2009 se inici con un primer intento de traspasar la metodologa de evaluacin de

impacto de programas a proyectos de inversin en infraestructura, con un estudio en el
tema que entrega lineamientos muy bsicos y revisa exhaustivamente la evaluacin de
programas entregando una propuesta metodolgica para el caso de inversin en
infraestructura.

Por otra parte, el SNI est sentando las bases para efectuar evaluacin de impacto a
travs de la generacin de Lneas de Base para proyectos de gran envergadura, para el
caso de embalses y carreteras de gran magnitud. (Embalses Chacrillas y Valle Hermoso,
Carretera Austral, p.ej.)
Gracias