CLASE 01

INTRODUCCIN A LA OPTIMIZACIN DINAMICA.

Diversos problemas econmicos se formulan mediante procesos matemticos, durante nuestros

estudios nos hemos familiarizado con las variables siguientes:

P: Precio de un producto.

Q: cantidad de un producto

B: Beneficio en una empresa

K: Capital asignado a un determinado proceso.

L: Mano de obra asignado en la transformacin de un recurso en un producto manufacturable

T: tiempo asignado en el proceso de transformacin de un recurso.

P: Precio de un producto

V: Velocidad.

A: Aceleracin.

F: Fuerza.

Adems tenemos procesos funcionales, tales como:

P=f(q): El precio en funcin de la cantidad.

U =F(q): Utilidad en funcin de la cantidad producida.

U=f(C) : La utilidad en funcin del consumo

B=f(q): El beneficio en funcin de la cantidad.

C=f(q): Costo de un producto en funcin de la cantidad producida.

C=f(y,p,m,g,t): El consumo en funcin del ingreso, la publicidad, la moda, el gusto y la tecnologa.

P=f(t,Q,K,L,T): La produccin en funcin del tiempo, la cantidad, el capital , la mano de obra y la

tecnologa.

Max {U]= f(x1,x2,x3,,xn): La produccin en funcin de los componentes del proceso de

produccin; sujeto a la restriccin g(xi)= g(x1,x2,x3,x4,,xn), adems las condiciones de no
negatividad para xi0,i=1,2,3,,n.

En este proceso se tiene en cuenta tres momentos.

Max{U}: funcin objetivo.

G(xi): Restricciones de la variable de decisin.

1
xi0 : condiciones de no negatividad.

En todo problema econmico: Un agente toma decisiones, luego considera las consecuencias
sobre su bienestar fututo. Ejemplos.

Decisiones de ahorro en los individuos.

Decisiones de inversin en las empresas.

Decisiones de endeudamiento de un gobierno.

En los ejemplos anteriores el agente optimizador toma en cuenta el efecto futuro de sus
decisiones presentes.

Analizamos este problema considerando el consumo C en dos tiempos, f(t1,t2), donde t1:
tiempo presente y t2 es tiempo futuro, y hay un solo bien de consumo C en la
economa que tiene un precio igual a l unidades monetarias (u.m.) en el presente, pero decide no
trabajar en el futuro, por lo que no recibir ingresos en dicho periodo.

Adems este individuo vive dos periodos y valora tanto el consumo presente C1 como el consumo
futuro C2, sin embargo el consumidor presenta cierto grado de impaciencia y tiene una mayor
utilidad si consume en el presente, que si consume en el futuro.

La funcin de utilidad que refleja estas preferencias esta dado por:

U (C1 , C2 ) f (C1 ) f (C2 ); 0 1; f (Ci ) 0, f (Ci ) 0, i 1,2 (01)

Esta funcin se considera como una suma ponderada de las utilidades asociada a cada periodo;
mientras la utilidad proveniente del primer periodo tiene prioridad igual a 1, la del segundo
periodo tiene ponderacin 0 < < 1 ( tiene un valor menor que 1, se denomina factor de
descuento).

: Refleja el grado de impaciencia intertemporal del individuo, analizando cada momento

tenemos:

Si = 0, entonces el individuo es totalmente impaciente y valora solo el consumo presente (se

denomina decisiones miopes; no recomendadas)

Si = 1, entonces el individuo le dara el mismo grado de importancia al consumo presente y al

consumo futuro.

Nota:

a. La funcin de utilidad (01) es aditiva con respecto al tiempo, esto es

U (C1 , C2 ) f (C1 ) f (C2 )

b. La restriccin intertemporal limita la decisin del agente a que no consuma ms de lo que

pueda adquirir con sus recursos, sin embargo de acuerdo a la existencia de la variable
temporal, el ingreso y el consumo en cada periodo no son compatibles directamente en la

2
restriccin complementaria, esto se debe al valor que posee el dinero en el tiempo. Si a una
persona se le otorga 1 u.m. (Unidades monetarias) en el presente, podra acudir a una entidad
financiera, depositar dicha cantidad en una cuenta de ahorros a una tasa de inters r % por
perodo, y en el futuro obtendra (1 + r) u.m. esto es, (1 +r) en el futuro equivale a 1 en el
presente. De igual forma 1 unidad en el futuro tendra 1/(1+r) en el presente.

Ejemplos: si r = 0,12, entonces una utilidad en el futuro tendr 1/(1+0,12)= 1/(1,12) =

0,8912 en el presente.

Si r= 0,20, entonces una utilidad en el futuro tendr 1/(1+0,20)= 1/(1,20) = 0,83 en el

presente.

La restriccin presupuestaria a la que est sujeto el consumidor, establece que el consumo

del primer periodo, ms el valor presente del consumo en el segundo perodo, debe ser
equivalente a los ingresos del primer periodo, esto es, el consumidor en el primer periodo
cuenta con I u.m. y decide que en dicho perodo su consumo sea C1, el ingreso remanente
es (I-C1), y es depositado a una entidad financiera a una tasa de r %. En el segundo perodo
destina todos sus ingresos (1+r)(I-C1) al consumo futuro C2, de esta forma se cumple la
igualdad (I+r)(I-C1)= C2, que no es otra cosa que la restriccin presupuestaria.

C2
C1 I
1 r
Con esta restriccin se evita que el consumo a lo largo de los dos periodos exceda a sus
ingresos.

Finalmente el problema que enfrenta el individuo es

Max : U (C1 , C2 ) f (C1 ) f (C2 ); 0 1; f (Ci ) 0, f (Ci ) 0, i 1,2 (01)

C2
Sujeto a : C1 I
1 r
La decisin optima del individuo consistir en destinar sus recursos tanto al consumo
presente C*1 como al consumo futuro C*2.

Geomtricamente tenemos

Nota: Formula del monto a inters compuesto:

3
Consideremos:

C0 : Capital original; r : Tasa de inters

t : Tiempo. M : Monto a inters compuesto
m : Sub periodos de capitaliza cin

Consideramos la deduccin de la formula:

si t 0 entonces C 0 C0
Si t 1 entonces C 0 C0 r C0 (1 r )
Si t 2 entonces C0 (1 r ) C0 (1 r )r C0 (1 r ) 2

Si t n entonces C0 (1 r ) n 1 C0 (1 r ) n 1 r C0 (1 r ) n M

Si la capitalizacin es sub peridica la frmula del monto a inters compuesto es

r nm
M C0 (1 )
m
El problema de eleccin intertemporal del consumo puede extenderse a un horizonte de un
tiempo mayor.

El consumidor podra tener utilidad por el consumo en los siguientes perodos T, por lo
tanto la funcin de utilidad del consumidor sera la siguiente:

U (C1 , C2 , C3 ,..., CT ) f (C1 ) f (C2 ) 2 f (C3 ) ... T 1 f (CT )

T
t 1 f (Ct ) (06)
t 1

En esta funcin de utilidad, el factor de descuento posibilita que conforme el consumo sea
de un periodo ms lejano con respecto al presente, el individuo le asignar una menor
importancia al consumo. Esto es

lim 0
t

La restriccin intertemporal para T perodos ser similar a la restriccin (02); esta establece
que la suma de consumo en cada perodo, expresado en valor presente, debe ser
equivalente al ingreso, esto es:

C2 C3 C4 CT
C1 ... I
1 r (1 r ) (1 r )
2 3
(1 r )T 1
T
Ct
I (07)
t 1 (1 r )t 1

Finalmente el problema de optimizacin dinmica para un horizonte de tiempo T ser el

siguiente:

4
 T
Max U t 1 f (Ct )
t 1
T
Ct
Sujeto a : (1 r )
t 1
t 1
I (08)

CLASE 02

Ejemplos a considerar:
Consideremos el cuerpo humano de una persona x el cuerpo humano de x es un
sistema que evoluciona en el tiempo, es por tanto un sistema dinmico. Un da x decide
ir al mdico pues no se encuentra bien, el mdico tras escuchar al paciente, lo explora
para conocer su estado de salud: Le toma la temperatura, la presin sangunea, leucocitos,
colesterol etc. Es decir. El mdico mide el estado del sistema en dicho momento y toma
nota de l (son las variables de estado en dicho momento). Como el estado del paciente
no es el adecuado, hay que tomar medidas para modificar dicho estado: El mdico, le dice
al paciente que debe poner en prctica las siguientes medidas: Dormir 8 horas diarias,
hacer ejercicios fsicos 3 das por semana, dejar de fumar, no tomar ms de un caf al da,
tomarse las medicinas que le receta, y seguir la dieta mediterrnea (Son las variables de
control). Cuando el paciente ponga en prctica las medidas propuestas por el mdico, su
estado de salud variar, de manera que cuando vuelva al mdico un mes ms tarde a
pasar la revisin, el valor que tomara la variable de estado, ser diferente. Los nuevos
valores de la variable de estado dependern de los valores que tena en el mes anterior y
de las medidas que se ha puesto en prctica (la variable de control).
Una persona viaja en su coche de una ciudad A hasta otra ciudad B, el coche se va
moviendo por lo que se trata de su sistema dinmico. En un momento dado, el estado de
S: viene dado por el lugar que se encuentra el vehculo y por la velocidad que lleva en ese
momento. En cada instante, el conductor tiene a su disposicin los controles: Volante,
freno y acelerador, que estn sujetos a ciertas restricciones. El estado del sistema depende
del estado del S. en algn momento anterior y de los controles que haya introducido en
ambos. La trayectoria que siga el vehculo depender del punto de partida y de los
controles que el conductor vaya introduciendo en el S. en cada instante, los cuales a su vez
dependern de los objetivos del conductor: Puede ser minimizar el tiempo, o minimizar el
costo o minimizar la cantidad de combustible.
La economa de un determinado pas es un S. que evoluciona en el tiempo, por lo que es
un sistema dinmico. En un determinado momento, el estado de dicha economa se
recoge en un cuadro macroeconmico, donde aparecen los valores que toman las
siguientes variables: Consumo privado, consumo pblico, formacin bruta de capital fijo,
variacin de existencias, demanda interna, exportaciones, importaciones, PBI, tasa de
pago e inflacin (Son las variables de estado). La autoridad econmica decide tomar en
prctica una serie de medidas de poltica monetaria y de poltica fiscal (son las variables
de control), que van a afectar el comportamiento de los agentes econmicos y que
llevaran a nuevos valores de la variable de estado, cuando estas se presentan en otro
momento posterior. Los valores del cuadro macroeconmico al final del ao dependern

5
 de los valores del mismo a principios de ao y de La medidas de poltica econmica
tomada durante el ao, y en este caso tambin de la respuesta de los agentes a dichas
medidas. Las medidas de poltica econmica dependen de los objetivos que tenga el
gobierno en el momento en que se toman.
Ejemplo 1. Un consumidor tiene una funcin de utilidad U[C(t)], en donde C(t) es el
consumo en el instante t [0, T], se supone que U(c(t))>0 y que U(c(t)) <0 (por lo que su
utilidad es creciente y cncava). La persona recibe una dotacin inicial de stock de capital
igual a K0, los ingresos de la persona vienen dados por i*K, obtenidos a partir del stock de
capital, en donde i es el tipo de inters de mercado. Adems la persona puede consumir el
stock de capital en cualquier instante, vendiendo capital (normalizamos su precio a la
unidad). Supongamos tambin que el consumidor es impaciente, siendo su tasa de
descuento. Tambin se tiene que cumplir que K(t) 0. El problema consiste en:
T
max T 0
e tU [C (t )]dt
{C (t )}t 0
Sujeto a K(t)=i K(t) C(t)
Con: K(0)=K0 , K(t) 0
En la ecuacin diferencial se puede despejar C(t), por lo que el problema se puede expresar
como
T
max T 0
etU [iK (t ) K(t )]dt
{C (t )}t 0
Con: K(0)=K0 , K(t) 0
Se trata de un problema de clculo de variaciones.
Ejemplo 2. (problema de asignacin regional de inversin, Takayama 1967 y 1985). Se
considera una economa nacional en la que existen dos regiones (1 y 2). Sea:
Y (t ) Y1 (t ) Y2 (t ); para t [0, T ] , en donde, para cada t: Y(t) es el producto
nacional, Yi (i = 1, 2) es el output de cada regin. Se supone que el producto bruto est en
funcin del capital output, por lo que Yi (t ) bi K i (t )
Donde Ki es el stock de capital de la regin i. El objetivo de la autoridad responsable de la
planificacin es maximizar el producto nacional en el instante final T del horizonte
temporal:
Y (t ) Y1 (t ) Y2 (t ) b1K1 (T ) b2 (T ) K2 (T ); para t [0, T ]
Los fondos de inversin Z para el conjunto de las dos regiones consisten en los ahorros
acumulados en el conjunto de la economa, por lo que:
Z (t ) s1Y1 (t ) s2Y2 (t );
para s1 (0,1) es la propensin al ahorro en la regin i, se tiene que
Z (t ) g1K1 (t ) g 2 K 2 (t );
En donde g i si bi sea (t) la proporcin de fondos de la inversin a asignar a la regin 1.
Entonces, ignorando la depreciacin del stock de capital se tiene las siguientes
ecuaciones diferenciales.
k1 (t ) (t )[ g1 K1 (t ) g 2 K 2 (t )]
k2 (t ) (1 (t )[ g1 K1 (t ) g 2 K 2 (t )]
K1 (0) K 1 K 2 (0) K 2
0 0
y

6
 El problema por tanto es
max {b K (t ) b K
T
1 1 2 2 (t )}
{C (t )}t 0
Sujeto a
k1 (t ) (t )[ g1 K1 (t ) g 2 K 2 (t )]
k2 (t ) (1 (t )[ g1 K1 (t ) g 2 K 2 (t )]
Con
K1 (0) K 1 K 2 (0) K 2 ; 0 (t ) 1 0t T
0 0
y para
En este caso K1(t) y K2(t) son las variables de estado y (t) es la variable de control. Se trata
de un problema de control de tiempo continuo.
Ejemplo 3. Una mina tiene reservas iniciales de R(0) = 250 y puede estar activa durante el
horizonte temporal t = 1, 2 ,3, , 19. En t = 20 la mina ser expropiada y no tendr
ninguna compensacin econmica por el mineral que quede sin extraer en ese periodo. El
beneficio neto por cada periodo t vine dado por:
cq(t )
t (t ) [ p ]q(t )
R(t )
En donde q(t) es la cantidad de mineral a extraer durante el periodo t, R(t) es el stock de
mineral en la mina al comienzo del periodo t, p es el precio unitario del mineral y c es un
1
parmetro referente al costo. Se supone que el factor de descuento es:
1
Donde es la tasa de descuento. El problema consiste en calcular cual ser la cantidad de
mineral a extraer en cada periodo para maximizar el valor presente de los beneficios
descontados, es decir:
19
cq(t )
max [ p R(t ) ]q(t )
t

19
t 0
(qt )t 0
Sujeto a R(t 1) R(t ) q(t ) para t 0,1,2,3,...,19
Con R(0) = 250
q(t ) 0, para t 0,1,2,3,...,19
R(t ) 0, para t 0,1,2,3,...,19
R(t) es la variable de estado. q(t) es la variable de control, por tanto se trata de un problema
de control ptimo en tiempo discreto.
Ejemplo 4. (un problema de control de inventario) En un establecimiento se dispone
en un momento dado k = 0 de un inventario x0 de un determinado producto. Se trata de
calcular la cantidad de producto que hay que pedir al comenz de cada uno de los N
prximos periodos , de manera que se minimice el costo total esperado. Para cada k 0,1,2,,
N-1, sean:
X(k), el inventario disponible al principio del periodo k.
U(k), la cantidad de producto pedido ( e inmediatamente suministrado) al principio del
periodo k.
W(k). la demanda durante el periodo k con distribucin de probabilidad dada. Adems se
considera los siguientes datos:
H, el costo de tener en stock una unidad no vendida al final del periodo k.

7
 C, el costo por unidad de stock pedida.
P, costo por unidad de demanda no atendida por no tener stock disponible.
B, es la capacidad del almacn.
Se supone que w(0). W(1),, w(N-1) son variables aleatorias independientes y que el exceso
de demanda no se pierde si no que se atiende en cuanto hay stock adicional disponible(con
lo que se quiere decir que puede haber inventario negativo diferido)
El problema es:
N 1

min E{ [cu (k ) p max( 0, w(k ) x(k ) u (k )) h max( o, x(k )

N 1
k 0
(u (k ))k 0
u (k ) w(k )]}
Sujeto a x(k 1) x(k ) u (k ) w(k ), para k 0,1,2,..., N .1.

Con x(0) =x0

0 u (k ) B x(k )

Se trata de un problema de control ptimo estocstico en tiempo discreto.

CLASE 03

INGRESO DISPONIBLE (Ecuacin del movimiento)

El ingreso tambin puede convertirse en una variable que depende del tiempo; en la formula (08)
en vez de utilizar el ingreso como una restriccin se puede utilizar como el ingreso disponible del
individuo.

Esta variable consiste en la cantidad de dinero remanente con la que cuenta el agente en un
perodo cualquiera, para gastos de consumo. La evolucin del ingreso disponible esta dado por la
siguiente ecuacin en diferencias.

yt 1 (1 r )( yt Ct ) (09)

Donde: yt: Ingreso disponible en el tiempo t; r: Tasa de inters; Ct: Consumo en el tiempo t.

A la ecuacin (09) se le llama Ecuacin del movimiento ya que determina el comportamiento

del ingreso disponible en el tiempo; en un determinado momento el individuo tiene un ingreso
disponible yt, y decide consumir por un monto Ct, el dinero remanente (yt Ct) lo destina a una
entidad financiera que otorga un rendimiento igual a r, en el siguiente periodo el ingreso con el
que contar ser (1+r)(yt Ct); en dicho perodo el agente decidir su nivel de consumo y as se
determina el siguiente ingreso disponible para el siguiente perodo; este proceso se desarrolla
sucesivamente hasta el perodo T.

Asumimos un ingreso disponible inicial I u.m. y vamos a deducir la formula siguiente:

8
 y1 I
y2 (1 r )( I C1 ) I (1 r ) C1 (1 r )
y3 (1 r )[(1 r )( I C1 ) C2 ] I (1 r ) 2 C1 (1 r ) 2 C2 (1 r )
y4 (1 r )[(1 r )[(1 r )( I C1 ) C2 ] C3 ] I (1 r )3 C1 (1 r )3 C2 (1 r ) 2 C3 (1 r )

. . . . . . . . . . . . .

yT 1 I (1 r )T C1 (1 r )T C2 (1 r )T 1 C3 (1 r )T 2 ... Ct (1 r )T t 1
T
I (1 r )T Ct (1 r )T t 1
t 1

Si suponemos que el individuo destina todos sus recursos para gastos de consumo hasta el
perodo T; en el perodo T +1 el ingreso disponible es igual a cero, esto es:
T T
yT 1 0; yT 1 I (1 r )T Ct (1 r )T t 1 0 I (1 r )T Ct (1 r )T t 1 (11)
t 1 t 1
Adems
T
I Ct (1 r )1t
t 1
La restriccin (06) es equivalente a (09) debido a que el ingreso disponible en un perodo refleja el
conjunto de decisiones tomadas previamente, de esta forma, en el perodo T+1 la variable
incorpora todas las decisiones de consumo previas.
En la ecuacin de movimiento (09) se relacionan dos tipos de variables:
Variables de control.- es aquella que debe elegir un agente con el fin de optimizar la funcin
objetivo.
Variable de estado.- No es directamente controlable por el agente, y refleja el resultado del
problema, as tenemos, para el ejemplo anterior:
Variable de control: el consumo
Variable de estado: El ingreso
Si consideramos el problema (08) el horizonte de tiempo es muy largo y consideramos la funcin
de utilidad con horizonte infinito

U t 1 f (Ct ) (12)
t 1
Tambin puede modificarse la funcin de utilidad en el tiempo de discreto a continuo, la funcin
de utilidad U puede representarse mediante una integral
T
U et f (Ct )dt (13)
0
En este caso
e t : Se llama factor de descuento y al igual que en el caso discreto, este factor asigna valores ms
pequeos a tiempos alejados con respecto al presente; y la ecuacin de movimiento se transforma
en una ecuacin diferencial
dy
g ( y, c) (14)
dx
Dado que en la funcin de utilidad (05) existen tantas decisiones de consumo como perodos en el
tiempo, es que puede obtenerse una funcin grafica, al igual que en el problema (03), para ello

9
tendramos que graficar un espacio de T dimensiones, lo cual sera imposible; en vez de ello, la
solucin grafica o la optimizacin de la funcin de utilidad (05) o alternativamente (13) toma la
forma de sendas o trayectorias.
De un conjunto amplio de trayectorias de consumo existentes (s1,s2,s3) el objetivo es seleccionar
la mejor de todas, y ser la que optimiza la funcin objetivo.

Cuando se considera a la solucin como una senda, a la funcin de utilidad se le denomina funcin
objetivo.
Existen 3 tcnicas para resolver problemas de optimizacin dinmica:
Calculo de variaciones. (Para tiempo continuo)
Control optimo (Para tiempo continuo)
Programacin dinmica. (Para tiempo discreto)

10