Monetary, Food, and Social

Rewards Induce Similar Pavlovian-

to-Instrumental Transfer Effects
Rea Lehner, Joshua H. Balsters, Andreas
Herger, Todd A. Hare and Nicole
Wenderoth
Frontiers in Behavioral Neuroscience | www.frontiersin.org 1
January 2017 | Volume 10 | Article 247
Autores Introduccin Mtodos y materiales Resultados Discusin

Los autores

Introduccin

Mtodos y materiales.

Resultados

Discusin
Autores
Autores Introduccin Mtodos y materiales Resultados Discusin

Naci en 1989 en Suiza.

Rea Lehner
Licenciatura en ciencias del deporte y biologa.

Maestra en Ciencias del movimiento humano, su

tesis la llevo a cabo en el laboratorio de control
neuronal utilizando estimulacin magnetica
transcranial (TMS).

2013 trabaj como asistente de investigacin

en el grupo de investigacin sobre autismo en le
Colegio Trinidad de Dublin investigando la
funcin cerebral en pacientes con espectro
autista, utilizando fMRI.

Actualmente estudiante de PhD

Autores
Autores Introduccin Mtodos y materiales Resultados Discusin

Dr. Nicole Wenderoth

Director del Instituto de Ciencia del
Moviemineto Humano y Deportes
Andreas Herger
Recolect los datos para esta investigacin
Autores Introduccin
Introduccin Mtodos y materiales Resultados Discusin

Revisin de literatura
Hay amplia evidencia de que los estmulos
predictores de recompensas (reward-predicting
stimuli) pueden consciente o inconsientemente
ejercer una fuerte influencia en el
comportamiento (Pessiglione et al., 2008; Holmes et al.,
2010; Watson et al., 2016).
Autores Introduccin
Introduccin Mtodos y materiales Resultados Discusin

Un asunto importante es si los diferentes tipos de

recompensas utilizan sistemas de valuacin separados o
compartidos.

Recompensas sociales activan la red social de cognicin.

Recompensas monetarias son procesadas en la parte

anterior de la corteza prefrontal ventromedial (anterior part
of the ventromedial prefrontal cortex).
(Saxe, 2006; Sescousse et al., 2013; Clithero and Rangel, 2014).
Autores Introduccin
Introduccin Mtodos y materiales Resultados Discusin

El clculo de valores subjetivos permite al cerebro mapear diferentes tipos

de recompensas en una escala comn para guiar las decisiones.

La corteza prefrontal ventromedial (vmPFC) cuando el valor

representado depende de la eleccin.

La corteza cingular posterior (PCC), cuando el valor representado pasa

automticamente.

El estrato ventral (ventral striatum) parecen ser las principales regiones

cerebrales involucradas en el clculo subjetivo de valores a travs de
diferentes modalidades de recompensas.

(Plassmann et al., 2007; Hare et al., 2008; Peters and Bchel, 2010; Rangel and Hare, 2010;
Levy and Glimcher, 2011; Clithero and Rangel, 2014).
Autores Introduccin
Introduccin Mtodos y materiales Resultados Discusin

Objetivo
Probar la influencia de recompensa asociada al estmulo
en respuesta instrumental en humanos utilizando:
recompensas primarias (comida), secundarias (dinero) y
sociales (individuos sonriendo en una postura de pulgares
arriba), mientras se contabilizan las diferencias
subjetivas en la valuacin de cada tipo de recompensa.
Autores Introduccin
Introduccin Mtodos y materiales Resultados Discusin

Pregunta de investigacin
Los diferentes tipos de recompensas (i.e.
monetarias, de comida o sociales) tienen una
efectividad equivalente en la motivacin del
comportamiento?
Autores Introduccin
Introduccin Mtodos y materiales Resultados Discusin

Hiptesis
1. El comportamiento es influenciado por un estmulo asociado a
recompensas independientemente del tipo de recompensa, cuando las
recompensas fueron ajustadas al mismo valor subjetivo.

2. El estmulo asociado con diferentes tipos de recompensas influencia el

comportamiento de manera diferente incluso cuando los diferentes tipos
de recompensas son igualados por un valor subjetivo.

Esperan que los participante que evaluan las recompensas como ms valiosas
(que tengan un valor subjetivo ms alto) muestren una influencia ms fuerte al
estmulo asociado con recompensa en el comportamiento.
 Mtodos y materiales

65 Participantes
Pavlovian e Instrumental recibiran recompensas segn desempeo.

La parte PIT no inclua recompensas.

Al final todos recibieron: $ 418 / h +

N = 46, m_age = 25.34, s = 5.76

20 hombres, 4 zurd@s

19 exclusiones:
No fue posible la equivalencia entre recompensas (10).
Pavlovian no funcion (3).
No siguieron las indicaciones (6).
Fuente: https://en.wikipedia.org/wiki/Maltesers
 Mtodos y materiales

Procedimiento
Pre: Cuestionario lateralidad.

Post: Cuestionario para identificar si

hubo alguna estrategia durante el PIT,
si s, entonces se les pregunt cul. Fuente:http://www.infallibletechie.com/2013_
03_01_archive.html

Calibrar el grip force hanles con la

media de tres contracciones voluntarias
mximas.

En las pruebas se requirieron del 15 al

50% de las MCV.

Fuente:http://www.ihuniu.com/14-hand-grip
 Mtodos y materiales

Bloques
A) Becker-DeGroot-Marschak Auction modificado.

Homologar el valor subjetivo para cada tipo de recompensa.

B) Condicin instrumental.
Asociar un tipo de recompensa a la mano izq. y otro tipo a la der.

C) Condicin paloviana.
Asociar 4 estmulos, cada uno con recompensa monetaria, alimenticia, social y neutral.

D) Condicin pavloviana a instrumental (PIT).

Observar la influencia del estmulo pavloviano en la respuesta instrumental
 Mtodos y materiales

Homogeneizar valores subjetivos.

Bloque A: Precansar al sujeto un poco.
BDM_Auction
Estmulo (tipo y cantidad)

Oferta del sujeto (cuntos segundos

al 50%)

PC genera nmero aleatorio R entre

0 y 10.

Si oferta R, entonces sostendr R

segundos para recibir recompensa.

Observar la relacin entre las

magnitudes ofrecidas de dinero y
comida v.s. recompensa social.
 Mtodos y materiales

Bloque B: Condicin Instrumental

Aprender que tipo de recompensa obtiene con

cada mano.

El sujeto deba mantener 15% entre 2 y 6

segundos con la mano indicada para obtener la
recompensa.

La recompensa depende de la mano izq. o der.

Verificar aprendizaje a los 20 ensayos, en caso

contrario correr otros 20.

(todos los participantes requirieron 20 ensayos)

 Mtodos y materiales

Bloque B: Condicin Pavloviana

4 Estmulos relacionados a cuatro resultados.

Pseudo aleatorio.

80 % reforzamientos.

15 corridas por condicin = 60 totales.

Verificar aprendizaje, de lo contrario aplicar

otras 120 corridas.

No aprendizaje con ms de 120 corridas =

exclusin.
 Mtodos y materiales

Bloque C: Condicin PIT

NO hay recompensas.

20 ensayos por estmulo

Usar ambas manos para mantener el cursor.

Observar si el estmulo Pavloviano influa en la

distribucin de fuerza en ambas manos.

Observar el tiempo mantenido en cada

estmulo.

Predicciones: distribucin y tiempo.

 Resultados

Anlisis

Observaciones 2.5 S se consideran outliers. Se reportaron los siguiente valores d de Cohen

para el tamao del efecto:
Modelo mixto con covarianza de simetra
compuesta en la que, para PIT: Pequeo 0.20 d 0.49

Efectos fijos: PIT( H1, H2. NoIC, Neutral, Mediano 0.50 d 0.80
money, food, social)
Grande d > 0.80
Efectos aleatorios: sujetos.
O los valores r:
Dependiendo de la hiptesis se aadi el valor
subjetivo como covariable. Pequeo 0.1 r 0.29

Spearman para correlacionar el valor subjetivo Mediano 0.30 r 0.49

y PIT.
Grande d > 0.50
 Resultados

Resultados
PIT general
MDB
El tiempo manteniendo el cursor se us
Valor subjetivo de la rec. Social = 6.26, como medida del PIT general.
con un rango de 2 a 10.
Los estmulos y asociaciones
Cantidad de Dinero y Valor subjetivo aprendidos previamente S influyen en el
(r=0.9837, p 0.001) tiempo en que se mantuvo el cursor.

Cantidad de Comida y Valor subjetivo pH1-Neutral 0.025, dH1-Neutral =

(r=0.9831, p 0.001) 0.36,

El valor subjetivo del dinero y del pH2-Neutral 0.025, dH2-Neutral =

chocolate corresponden con el valor de 0.26,
mercado.
pNo IC-Neutral 0.025, dNo IC-
Neutral = 0.31,
Resultados
 Resultados

El impacto del

valor subjetivo en el PIT

Los sujetos que mostraron

grandes valores subjetivos en
conjunto, tambin mostraron
valores de PIT ms grandes.

PIT = t (IC) t(neutral C)

 Resultados

El impacto del Tipo de

recompensa en el PIT general

Se usan las recompensas

asociadas a NoIC por ser 100%
pavlovianas (no tienen mano
asociada).

Todos los tipos de recompensa

tienen la misma posibilidad de
inducir PIT.

FReward Type(2,39) = 1.469,

pReward Type = 0.243

dMoney-Food = 0.00

dMoney-Social = -0.24

dFood-Social = -0.31
 Resultados

El impacto del Tipo de

recompensa en el PIT general

Se usan todas las condiciones de

recompensa y se restan al Neutral.

NO se encontr diferencia
estadstica entre el tipo de
recompensa y su efecto PIT.

FReward Type(2,82) = 2.65,

pReward Type = 0.077

dMoney-Food = -0.09

dMoney-Social = 0.20

dFood-Social = 0.31
 Resultados

PIT especfico

Existe una preferencia por

suministrar ms fuerza con la mano
dominante.

Esta preferencia solo fue

modulada por la presencia de
fractales.

Se encontr significancia
estadstica entre la H2 y Neutral.

Se sugiere que el PIT especfico

no est presente cundo se
responde con las dos
manos.
 Discusin
Autores Introduccin Mtodos y materiales Resultados Discusin

A pesar de que las recompensas monetarias y de comida no

coincidieron de manera directa entre ellas, sino que calcularon de
manera independiente un valor subjetivo, el valor inferido para
la tasa de intercambio entre el chocolate y el dinero refleja
el valor actual en el mercado de un paquete de chocolates
bastante bien. (0.15 Francos suizos por pieza).

Estudios previos que utilizan una incentive force task muestran que
los participantes estuvieron dispuestos a invertir mayor esfuerzo por
magnitudes ms grandes de recompensas. (Pessiglione et al., 2007; Ziauddeen et
al., 2012).

Estos dos resultados confirman la validez de la modificacin hecha

al BDM.
 Discusin
Autores Introduccin Mtodos y materiales Resultados Discusin

Slo un estudio previo en

roedores ha investigado el
impacto de la magnitud de
recompensa en PIT y
encontraron que el PIT
especfico era insensible a
la magnitud de la
recompensa (i.e. Nmero
de comprimidos de comida
recibidos mientras aprende) al
comparar el tamao del efecto
PIT de un grupo de
recompensas bajas con un
grupo de recompensas altas.
 Discusin
Autores Introduccin Mtodos y materiales Resultados Discusin

Los hallazgos de este estudio apoyan la hiptesis

que el valor subjetivo de la recompensa es
un determinante importante sobre que tan
fuerte la respuesta instrumental es
influenciada por un estmulo asociado a
la recompensa.

No se encontr evidencia de que el tipo de

recompensa influenciara por si mismo el
efecto general PIT.
 Discusin
Autores Introduccin Mtodos y materiales Resultados Discusin

Porqu no hay diferencias entre los tipos de

recompensas en el PIT general?

1) Un resultado de la accin puede ser ms o menos

valioso dependiendo del estado del agente (i.e., si tiene
hambre o si esta saciado).

2) model-free system, donde se acumulan valores a travs

de la experiencia. Acciones no ejecutadas con respecto
a la identidad del resultado.

3) El clculo de valores subjetivos para diferentes tipos de

recompensas permite mapearlas en una escala comn
para guiar decisiones.
 Discusin
Autores Introduccin Mtodos y materiales Resultados Discusin

Estudios previos que han utilizado un slo tipo de

recompensa en humanos muestran que el efecto conductual
PIT estaba asociado con actividad incremental en NAcc y
amigdala, similar a lo ya bien establecido en roedores.

Se especula que la corteza prefontral media (medial PFC )

puede ser una estructura neuronal clave al modular
respuestas instrumentales durante PIT en humanos al mapear
diferentes opciones en una escala comn para hacer una decisin
final.
 Discusin
Autores Introduccin Mtodos y materiales Resultados Discusin

Se encontraron claros efectos de PIT general , no se observaron efectos del PIT especfico
con ningn tipo de recompensa. Basados en investigacin previa, hay varias explicaciones:

1) Se prob la respuesta de los participantes utilizando un paradigma de transferencia

que requera respuestas bimanuales mientras que el condicionamiento
instrumental esta basado en respuestas unimaniales.

2) Un cambio a la mano no-dominante pudo haber conllevado un incremento en el

esfuerzo percibido y el costo de movimiento

3) En contraste con el PIT general, ninguno de los participantes report una estrategia
consciente para el PIT especfco, lo que sugiere que la distribucin de fuerza entre
manos fue controlada incoscientemente, el control inconsciente de la disribucin
de fuerza bimanual puede haber disminuido el efecto PIT especfico.
 Discusin
Autores Introduccin Mtodos y materiales Resultados Discusin

A pesar de las limitaciones en medir PIT

especfico, el paradigma provee una clara
demostracin de la influencia de valor
subjetivo en los efectos del PIT general.
 Discusin
Autores Introduccin Mtodos y materiales Resultados Discusin

Investigaciones posteriores (Further research )

Se requiere investigacin adicional para validar la

influencia del valor subjetivo en PIT

Se requieren estudios de neuroimagen para entender

mejor el rol potencial del medial PFC en las estructurales
subcorticales del PIT

Podra tener aplicaciones clnicas en la sensibilizacin

sobre el uso de las drogas o en el espectro autista.
 Discusin
Autores Introduccin Mtodos y materiales Resultados Discusin

Conclusin
Los estmulos de todos los tipos de recompensas fueron capaces de actuar como
reforzadores apetitivos (appetitive reinforcers ) e influenciar el comportamiento cuando
estaban ajustados a un valor de recompensa subjetivo.

La fuerza del PIT general fue modulada por un valor subjetivo (i.e. individuos que
mostraron un efecto PIT mayor , calificaron el valor de las recompensas ms alto).

Estos hallazagos fortalecen la hiptesis que el valor subjetivo es crucial para saber lo
mucho que influye un estmulo asociado a recompensa en respuestas
instrumentales.