Motivacin y Sistemas

de Refuerzo
Chocoboy y Fashi

AEIC (James Olds y Peter Milner)

REFUERZO
Objeto o situacin determinada que genera un acercamiento por parte del
sujeto, una conducta consumatoria, que posibilita que esta se aprenda,
que implica resultados y consecuencias ventajosas y que provoca
sensaciones positivas.

Motivacin y sistemas
cerebrales de refuerzo
Mecanismos reguladores
fisiolgicos tienen 3 funciones
fundamentales:
Dirigir la conducta hacia un objetivo.
Organizar las secuencias
conductuales.
Incrementar el nivel general de
activacin del individuo con el fin de
mejorar su ejecucin.

Conductas regulatorias
Sed osmtica: Lquido intersticial hipertnico. Clula pierde liquido por
osmosis. Osmorreceptores en placa terminal reaccionan.
Sed volmica: Producto de prdida de plasma sanguneo, tambin por
vmitos y diarrea.
Corteza cingulada anterior e hipotlamo correlacionados con sensacin de
sed.

Conductas regulatorias
NPY/PRAG en N. Arqueado activa
OREX y HCM, activando conducta
ingesta y reduciendo metabolismo.
Grelina activa N. arqueado.
CART/MSH proyectan
inhibitoriamente a N. Paraventricular
e Hipotalamo. Peptido YY inhibe N
Arqueado. Leptina inhibe
NPY/PRAG, promueve CART/MSH.

Sustrato nervioso del refuerzo

Vas
dopaminrgicas
V.D. Nigroestriada
V.D. Mesocortical y
Mesolimbica
V.D. Tuberofundibular
Proyecciones
dopaminrgicas al
tlamo

Sustrato nervioso del refuerzo

Neuronas dopaminrgicas de sistemas mesolmbico y mesocortical se
han caracterizado como elementos claves en sustrato neural del
refuerzo.
Parece dedicado a coordinar respuestas, mas no almacenar o
procesar informacin detallada.
Aprendizajes parecen consolidarse y almacenarse en relacin a
cambios en patrones de conexiones glutamatergicas y GABA-ergicas.

Sustrato nervioso del refuerzo

Corteza prefrontal
Regiones posteriores tienden a activarse ante Ref. sensoriales y mediales
ante Ref. abstractos.
Ref. valorados provocan aumento en CPFvm.
CPFm podra sopesar beneficios sobre costes ante inversiones de riesgo,
integrando informacin de nucleo accumbens e nsula.

Sustrato nervioso del refuerzo

Corteza prefrontal
Ref. inmediato activa estriado ventral y CPFm.
Menor activacin ante Ref. tardos indica
reticencia a esperar. CPF lateral se activa
igualmente ante ambos.
CPF dorsolateral activa ante memoria de
trabajo en relacin a incentivos. CCA dorsal
monitora motivacin y cognicin ante posible
conflicto.

Sustratos nerviosos del refuerzo

Estriado ventral y dorsal
Compuesto por ncleo accumbens, putamen
rostroventral y ncleo caudado.
Exposicin a Ref. aumenta actividad del estriado.
Magnitud de refuerzo anticipado aumenta
actividad de ncleo accumbens y caudado,
mientras que esfuerzo requerido afecta putamen.

Sustratos nerviosos del refuerzo

Amgdala
Interacta con COF en decisiones adaptativas, y en
regiones del lbulo temporal medial para influir en
percepcin y memoria.
Importante en procesamiento de aspectos
emocionales del refuerzo, como valencia y valor
relativo.
Interaccin entre amgdala y CPF actualiza valor
esperado en resultados, ayudando a maximizar
resultados positivos.

Sustratos nerviosos del refuerzo

Neuronas dopaminrgicas mesenceflicas
En modo tnico mantienen nivel basal de DA, posibilitando funciones
normales de circuitos neuronales.
En modo fsico, aumentan o disminuyen drsticamente tasa de
disparo provocando cambios en concentracin de DA.
Parecen ser crticas para prediccin y error en la prediccin del
refuerzo.
Activacin ante anticipacin de un refuerzo.

Sustratos nerviosos del refuerzo

Sistemas serotoninrgicos del rafe, habnula lateral y ncleo
pedunculopontino tegmental
Ncleos del Rafe conecta con regiones corticales y estructuras
subcorticales.
Tanto refuerzos esperados como recibidos modifican actividad de
neuronas 5-HT.
Sistema serotoninrgico parece desempear un papel modulador del
procesamiento de informacin reforzante.

Sustrato nervioso del refuerzo

Tlamo
Parece estar relacionado a estado de
activacin relacionado con refuerzo y
castigo.
Plido ventral
Activacin ante distintos aspectos de
procesamiento de informacin
reforzante. Difcil de separar de estriado
en tcnicas de neuroimagen.

Adiccin y
Mecanismos de
Aprendizaje y
Memoria

Adiccin
Estado determinado por el uso
compulsivo de una sustancia, en el
que se carece de control eficaz
para adecuar la conducta a las
demandas del medio, persistiendo
en el consumo de sta, pese a
conocer las consecuencias que
puede tener ese consumo y pese a
todas las tentativas iniciadas para
controlar su administracin

Tolerancia
Dependencia
Sndrome de Abstinencia
Recaida

Hiptesis Mantenimiento de la Adiccin:

Aprendizaje Relacionado con el Refuerzo
Aprendizaje vinculado al refuerzo de conductas
consecuentes al estmulo apetitivo.
Usurpacin patolgica de los procesos
neurales implicados en el aprendizaje usados
de forma habitual para la consecucin de
estmulos apreciados para el individuo (comida,
orgasmo).
Sustrato cerebral subyacente al procesamiento
de la informacin reforzante como facilitador.
https://www.youtube.com/watch?v=6AZejpL_Cf4

Drogas y Estrs modulan la

funcin sinptica en rea
Tegmental Ventral
Todos inducen potenciacin a
largo plazo al aumentar los
receptores postsinpticos
AMPA en las sinapsis
glutamatrgicas.
Morfina: impide PLP al inhibir
accin oxido nitrico sobre
Guanino Ciclasa.

Usurpacin de procesos neuronales en

abuso de drogas
Ejemplo Choconio:
Presencia de
Choconio en
JGM (estmulo
neutro).
Chocolates de
mltiples sabores,
deliciosos y
energticos
(refuerzo)

Considerando la Hiptesis de Usurpacin

Neuronas DA origen
en ATV y proyectan hacia
N. ACCUMBENS.
Neuronas
GABArgicas en ATV
inhiben a neuronas DA.
Algunos receptores
implicados en la
mediacin de la accin de
los refuerzos (D1 y D2)
Las drogas de abuso
intensa liberacin de
DA (mayor a la de
reforzadores naturales).
-

Vas implicadas en
Desarrollo Adiccin

Va Dorsal:
- De cortical a subcortical
(top-down).
- Correcta planificacin y
ejecucin de las conductas
dirigidas a una meta
(obtencin de una droga).
Va Ventral:
- Aspectos de Motivacin y
refuerzo (Chocolate blanco
versus chocolate negro)
-Tipo Bottom-Up

La persona adicta:
* Merma en su repertorio conductual
(bsqueda de drogas).
* Persistencia a pesar de efectos
nocivos.
Craving: intenso deseo por
consumir.
Efectos positivos inmediatos guan
ms la conducta que las
consecuencias negativas a largo
plazo.
Poder gratificante droga: uso inicial.
* No la prdida de control sobre su uso
ni la persistencia que muestra.

Refuerzo y modulacin de la consolidacin de la

Memoria

* AIEC (estimulacin elctrica

intracraneal) provoca la liberacin de
dopamina, mejores resultados con
autoadministracin.
* Ha demostrado ser eficaz en
consolidacin en paradigmas de
memoria implcita (aprendizaje de
hbitos, habilidades y asociaciones de
estmulos).
* Mejora la retencin de
informacin aprendida.

* Se ha estudiado tambin en
memoria explicita logrando
buenos resultados en modelos
animales.
En humanos??
* AEIC en hipotlamo memoria
autobiogrfica (episdica)
Cundo hay dao mnmico?
* AIEC mejora dao en ncleo
parafascicular del tlamo que
produce amnesia diencefalica.

* Dos mecanismos de accin de la AEIC:

A corto plazo: acta sobre consolidacin,
acelerndola

Dopamina, refuerzo y
procesos cognitivos

A largo plazo: genera cambios morfolgicos

- Aumento de arborizacin dendrtica
hipotlamo lateral
- De la sustancia negra.
- CA3 del hipocampo

Importante papel de la dopamina en

relacin al refuerzo, la motivacin, el
aprendizaje y la memoria.

- Capa V del de la corteza motora.

* Aumenta neurotransmisores:
- Glutamato, Dopamina y Noradrenalina
- Enzimas acetilcolinesterasas
* Modula expresin de genes
62 genes hipocampicos: 10 relacionados con
aprendizaje y memoria.

Diversas teoras sobre su funcin.

Hiptesis de las
Poblaciones Celulares

Hiptesis de la
codificacin de
situaciones aversivas

Hiptesis de los
efectos de
bsqueda y
acercamiento al
refuerzo

Hiptesis del valor

motivacional y de la
saliencia motivacional

Dopamina en
relacin al
Refuerzo

Hiptesis
Atencional

Hiptesis de la
atribucin de saliencia
incentiva

Hiptesis del error

de prediccin del
refuerzo como seal
como seal del
aprendizaje

Hiptesis del error de prediccin

del refuerzo como seal como
seal del aprendizaje
La respuesta fsica de las
neuronas dopaminergicas
mesencefalicas podra
constituirse como un ndice del
error en la prediccin del
refuerzo.
Diferencia entre el refuerzo
esperado y el refuerzo
obtenido.
La seal dopaminrgica podra
generalizarse a otro tipo de
estmulos (salientes o
novedosos).

Hiptesis de la atribucin de
saliencia incentiva
Un componentes psicologico del
refuerzo: saliencia incentiva (S.I.).
S.I. Tipo de motivacin
dependiente de neuronas
dopaminrgicas mesenceflicas
que promueve acercamiento y
obtencin de refuerzos.
Distinto de otros procesamientos
cognitivos mediados por diferentes
circuitos corticales.

Hiptesis del valor motivacional y de

la saliencia motivacional
Sugiere la existencia de dos tipos
de neuronas DA con distribucin
anatmica diferencial.
Codifican valor motivacional y
saliencia motivacional.
Hiptesis de las poblaciones celulares
Neuronas DA implicadas en
procesamiento de informacin sobre:
- Bsqueda de estmulos de valor
para el individuo.
- Situaciones salientes
motivacionalmente.
- Cambios atencionales y seales de
alerta del entorno.

Hiptesis de la codificacin de
situaciones aversivas

Neuronas DA sera importantes

para codificacin de estimulos
no reforzantes per se ni
tampoco predicen aparicin de
refuerzos futuros.
Neuronas DA forman parte de
un sistema de respuesta frente
a situaciones aversivas, como
elemento fundamental en el
control motivacional.

Hiptesis Atencional
Seales de alerta y atencin iran
a las neuronas DA que codifican
la saliencia motivacional y a las
neuronas DA que codifican el
valor motivacional, para
promover:
- Orientacin de los recursos
atencionales
- Puesta en marcha de determinados
recursos cognitivos.
- Aumento de motivacin para llevar a
cabo un plan de accin y para asignar
un valor positivo a los entornos en los
que las claves sensoriales
potencialmente importantes pueden
ser anticipadas.

Hiptesis de los efectos de

bsqueda y acercamiento al
refuerzo
En tanto que el mdulo coordinador
del acercamiento al refuerzo
orquesta la actividad de diversas
funciones cerebrales para
promover un acercamiento
adaptativo.
Segn esta hiptesis una
disfuncin de este sistema podra
derivar en alteraciones
motivacionales de ndole diversa.