REVISIN

Neuroanatoma funcional de los aprendizajes implcitos: asociativos, motores y de hbito

M. Correa
NEUROANATOMA FUNCIONAL DE LOS APRENDIZAJES IMPLCITOS: ASOCIATIVOS, MOTORES Y DE HBITO Resumen. Objetivo. Abordar la neuroanatoma de los aprendizajes implcitos que requieren asociaciones estmulo-respuesta: clsico, instrumental, motor y de hbito. Desarrollo. Estos aprendizajes tienen en comn el requerimiento de una progresin en el aprendizaje de procedimientos que, en general, aportan informacin sobre el cmo hacer las cosas por oposicin a qu son las cosas y en la implicacin de los circuitos neurales formados por los ganglios basales, el crtex prefrontal y la amgdala, principalmente. El aprendizaje de hbitos se ilustra desde las teoras que describen la adiccin como un proceso que sigue una progresin de respuesta reforzada a un hbito donde prima una supraseleccin de asociaciones estmulo-respuesta que queda carente de control cognitivo voluntario. La relacin entre el aprendizaje pavloviano e instrumental se pone de manifiesto en los estudios de transferencia y automodelado. Uno de los sistemas de neurotransmisin que ha demostrado afectar a la adquisicin del aprendizaje es el sistema de dopamina. Conclusin. Los aprendizajes de procedimientos expuestos aqu comparten en general las asociaciones entre estmulo-respuesta-reforzador, aunque la diferencia entre ellos residira en el grado en el que uno de estos componentes, o las asociaciones entre ellos, se desarrolla, y esto viene regulado por el grado de implicacin de los circuitos frontoestriadoamigdalinos. [REV NEUROL 2007; 44: 234-42] Palabras clave. Adiccin. Estriado. Memoria procedimental. Refuerzo.

INTRODUCCIN El aprendizaje es el proceso por el cual los organismos modifican su conducta para adaptarse a las condiciones cambiantes del medio que los rodea. Es, junto con la evolucin, el modo principal de adaptacin de los seres vivos [1]. Un entorno cambiante requiere de una gran plasticidad conductual y sta refleja la plasticidad neuronal. Por tanto, el aprendizaje puede considerarse como un cambio en el sistema nervioso que resulta de la experiencia y que origina cambios duraderos en la conducta de los organismos. Lo que aprendemos se retiene o almacena en nuestro cerebro y constituye lo que denominamos memoria. As, un recuerdo sera un patrn de actividad de un gran nmero de neuronas evocado por un estmulo o por una configuracin estimular. Dicho patrn de actividad se almacena mediante la asociacin de sus elementos de tal forma que si se presenta slo una parte o subconjunto de esa asociacin, se evoca la actividad en el resto de la red [2]. Aprendizaje y memoria son dos procesos estrechamente ligados y estn, adems, presentes en muchos otros procesos cerebrales como la percepcin o la motivacin. TIPOS Y CARACTERSTICAS DE LOS SISTEMAS DE MEMORIA La memoria es un proceso que depende de diferentes sistemas cerebrales. La distincin principal habra que hacerla entre la capacidad de recuperar conscientemente hechos (memoria declarativa) y un conjunto heterogneo de capacidades de aprendizaje no conscientes (memoria no declarativa) que slo se expreAceptado tras revisin externa: 02.11.06. rea de Psicobiologa. Universitat Jaume I. Castelln, Espaa. Correspondencia: Dra. Merc Correa Sanz. rea de Psicobiologa. Universitat Jaume I. Campus Riu Sec. E-12071 Castelln. Fax: +34 964 729 267. E-mail: correa@psb.uji.es Agradecimientos. Al Dr. J.D. Salamone y a la Dra. M. Miquel, por sus interesantes comentarios y ayuda en el proceso de redaccin. 2007, REVISTA DE NEUROLOGA

san a travs de la ejecucin. Esta propuesta de divisin entre memoria declarativa y no declarativa o, lo que es lo mismo, entre explcita e implcita, se refleja no slo en las estructuras neuroanatmicas que las controlan, sino tambin en el tipo de informacin que procesan y en las caractersticas operativas de cada una [3]. Schacter acu el trmino memoria implcita en los aos ochenta [4]. Segn este autor, la memoria implcita se revela cuando experiencias previas facilitan la ejecucin en una tarea que no requiere del recuerdo consciente o intencionado de dichas experiencias; podramos decir que son nuestros recuerdos no conscientes en los cuales estn basados nuestros hbitos perceptivos y motores. En general, aportan informacin de cmo realizar las acciones y operaciones que solemos hacer. Estos aprendizajes tienen en comn su alto valor de adaptacin y supervivencia de la especie y, por tanto, son filogenticamente antiguos. NEUROANATOMA FUNCIONAL DE LOS APRENDIZAJES ASOCIATIVOS, MOTORES Y DE HBITO En general, las estructuras neurales comunes a los aprendizajes asociativos, motores y de hbitos son evolutivamente arcaicas, lo cual tiene sentido si se considera que hasta los animales ms simples aprenden respuestas automticas ante estmulos. En general, las estructuras implicadas son estructuras estriadas (neo y paleoestriado) que reciben y proyectan a otras regiones motoras del encfalo, a ncleos mesenceflicos y al crtex motor y prefrontal, especialmente al crtex lmbico. Muchos de estos ncleos tienen en comn la neuromodulacin ejercida por el sistema de neurotransmisin de dopamina. Circuito estriado-crtex prefrontal-amgdala Los ganglios basales estn formados por un conjunto de ncleos que se sitan principalmente en el encfalo anterior basal. Estn constituidos por el caudado, el putamen y el globo plido y tambin por las dos divisiones del ncleo accumbens (NAcb):

234

REV NEUROL 2007; 44 (4): 234-242

APRENDIZAJES IMPLCITOS

la zona central (core) y la corteza (shell). Tradicionalmente, algunos de estos ncleos se agrupan en subdivisiones como el estriado (formado por el caudado, el putamen y el NAcb), e incluso en reas especializadas de esta ltima agrupacin, como el estriado dorsal (parte superior del caudado y el putamen) y el estriado ventral (parte inferior y medial del caudado y el putamen ms el NAcb). Las neuronas espinosas medianas del estriado son el tipo de neurona ms densamente cargada de espinas dendrticas de todo el cerebro, lo que las hace estar bien diseadas para integrar informacin procedente de diferentes fuentes. La principal fuente de informacin aferente de los ganglios basales es el crtex frontal y los ncleos mesenceflicos dopaminrgicos. Junto con los ganglios basales hay una serie de estructuras en estrecha relacin funcional pero que forman parte del diencfalo, como el ncleo subtalmico, o del mesencfalo, con el rea tegmental ventral (ATV) y la sustancia negra en sus dos divisiones: parte compacta (SNc) y parte reticulada. El ATV y la SNc proyectan axones dopaminrgicos a diferentes puntos del estriado, de la amgdala o del crtex prefrontal formando las vas dopaminrgicas nigroestriatales, mesolmbicas y mesocorticales. El crtex frontal se divide en reas motoras (localizadas posteriormente) y reas prefrontales o de asociacin. El crtex motor est formado por las reas motora primaria, premotora y motora suplementaria (AMS), que posee una representacin bilateral de todo el cuerpo, un rea motora cingulada rostral (AMCr) y dos reas cinguladas caudales: una en el margen dorsal y la otra en el margen ventral; en ellas slo estn representadas las extremidades. La lesin del AMS produce afasias y lentitud en la generacin de movimientos repetitivos. Se activa durante la realizacin de secuencias complejas de movimientos y en movimientos autogenerados [5], especialmente en las transiciones entre un movimiento y otro, ms que durante la ejecucin del movimiento y durante el aprendizaje de nuevas secuencias motoras, funcin en la que tambin se implica la AMCr [5]. El crtex prefrontal comparte una composicin citolgica similar con el crtex motor y se divide en las regiones dorsolateral (CPd) y orbitomedial (CPo). La CPd (a travs de la corriente dorsal) recibe aferencias corticales parietales y occipitales, as como aferencias talmicas a travs de la porcin parvocelular del ncleo dorsomedial. La CPo medial recibe (a travs de la corriente ventral) conexiones corticales del lbulo temporal que llegan a su zona ms lateral y de las estructuras lmbicas, las cuales llegan a su parte ms medial, as como aferencias talmicas desde la porcin magnocelular del ncleo dorsomedial. La orbitofrontal se considera como una corteza de asociacin lmbica; su lesin produce, en general, una prdida de control inhibitorio sobre el medio y perseverancia conductual. A partir de estudios neurofisiolgicos y neuropsicolgicos se ha observado que la corteza prefrontal es responsable de la organizacin temporal de la conducta, es decir, de desarrollar la secuencia de comportamientos ordenados en el tiempo que conducirn a la ejecucin de un plan y a la consecucin de un objetivo. Para ello, mediante un mecanismo de atencin selectiva se mantienen activas unas reas especficas de la corteza prefrontal y se inhiben otras de forma consecutiva hasta que se consigue el objetivo. Este sistema se ha denominado sistema atencional anterior [6]. Las funciones de la corteza prefrontal son, pues, la combinacin entre el mantenimiento de la actividad cortical relacionada con los estmulos que demandan una tarea relevante y la actualizacin constante y selectiva; permiten que nuestra

conducta sea eficaz y constituyen la denominada memoria de trabajo u operativa. Los ganglios basales y el crtex prefrontal forman un sistema neuronal distribuido e implicado en tareas cognitivas que requieren de la seleccin de acciones en un contexto determinado [6]. Entre estas tareas encontraramos tanto la planificacin como el aprendizaje instrumental de habilidades motoras y de hbitos. En ambos casos se necesita de la evaluacin de los resultados de la accin y de las mejoras en la ejecucin a travs de procesos ensayo-error. Alexander et al [7] introdujeron el concepto de circuitos frontosubcorticales paralelos y segregados. Se trata de cinco circuitos que se inician en alguna de las reas de la corteza frontal y, tras realizar sucesivas sinapsis en los ganglios basales y el tlamo, proyectan de vuelta a la corteza frontal [6]. De entre ellos destacamos el circuito orbitofrontal lateral-estriado ventral, regin ventrocaudal del caudado que tiene un papel en el aprendizaje asociativo instrumental y en la flexibilidad de la conducta, y el circuito cingulado anterior rostral-estriado ventral, NAcb que evaluara la probabilidad de error. Los ganglios basales actuaran frenando o liberando la actividad talmica y, de este modo, seran los rbitros de la actividad cortical seleccionando entre mltiples sistemas corticales que compiten por una capacidad limitada de procesamiento [8]. La dopamina (DA) actuara como el interruptor que modula dicha seleccin. Por otro lado, la amgdala es una estructura neural compuesta por un grupo heterogneo de ncleos, diferentes en su citoarquitectura y en sus aferencias y eferencias, que se encuentra en el lbulo temporal. En general, esta estructura se encarga del reconocimiento de estmulos emocionales, la iniciacin de respuestas motoras y vegetativas como reaccin a esos estmulos y la asociacin entre estmulos y entre stos y sus consecuencias, que ayudaran a establecer el significado emocional de las diferentes situaciones [9]. Los principales ncleos que la componen son el complejo lateral-basolateral, el basal, el central y el medial. Los ncleos lateral-basolateral (ABL) reciben aferencias de diferentes zonas: crtex sensorial primario, crtex de asociacin, tlamo e hipocampo, y proyectan eferencias al estriado ventral y al tlamo dorsomedial, el cual, a su vez, proyecta al crtex prefrontal. La ABL tambin proyecta al ncleo central de la amgdala. El ncleo central (AC) es el ncleo con mayor output descendente (al hipotlamo, a la protuberancia y al bulbo raqudeo) por lo que parece tener un papel principal en la expresin de las emociones. Tambin tiene proyecciones glutamatrgicas al mesencfalo, en concreto al ATV, de manera que indirectamente estara regulando las aferencias dopaminrgicas al NAcb. APRENDIZAJES ASOCIATIVOS Como Rescorla et al [10] han mencionado, el aprendizaje asociativo es la manera en la que los organismos aprenden acerca de las relaciones causales del mundo que los rodea. Las reglas del aprendizaje asociativo son el orden, la contigidad temporal y la contingencia. En general, es la asociacin entre estmulos (E) o entre E y respuestas (R). Condicionamiento clsico Este tipo de aprendizaje fue originalmente descrito por Pavlov [11]. Se trata de una forma de aprendizaje que implica una asociacin entre dos estmulos. El emparejamiento contingente, contiguo temporalmente y repetido de un estmulo incondicio-

REV NEUROL 2007; 44 (4): 234-242

235

M. CORREA

nado (EI) que produce una respuesta refleja, tpica de la especie, o respuesta incondicionada (RI), con un estmulo neutro que ms tarde ser condicionado (EC), hace que ste vaya adquiriendo propiedades condicionadas por asociacin y as el EC produce, con el tiempo, el mismo tipo de respuesta refleja, ahora condicionada (RC), que el estmulo originario (EI). La RC es ahora una respuesta anticipada a la presentacin del EI, dado que el organismo es capaz de determinar una relacin predictiva entre EC y EI. Asimismo, cuando ya se ha establecido el condicionamiento, la presentacin repetida del EC sin que ste vaya seguido del EI tiene como consecuencia la desaparicin gradual de la RC, fenmeno conocido como extincin. Un ejemplo de este tipo de aprendizaje es el condicionamiento clsico de respuestas emocionales aversivas [12]. Neuroanatoma funcional Figura 1. Circuito neural propuesto para los aprendizajes pavlovianos. del aprendizaje pavloviano Este condicionamiento requiere de la actividad de reas cerebrales implicadas en la percepcin de los estmulos, repita en el futuro y, por tanto, el refuerzo aumentar la probabiadems de conexiones neurales localizadas en regiones cerebra- lidad de ocurrencia de cualquier respuesta instrumental que se les tan diversas como la amgdala, el tlamo, el cerebelo o el tron- d justo antes de que aparezca el reforzador. co del encfalo. La localizacin anatmica del aprendizaje emoAs pues, el condicionamiento instrumental es una forma de cional condicionado pavlovianamente se ha propuesto en la amg- aprendizaje asociativo entre la realizacin de una conducta o R dala. Para que se produzca este aprendizaje clsico tienen que que, operando sobre el ambiente, sirve como el instrumento converger en el ABL las vas que transmiten la informacin del para la obtencin de un Rf. Un Rf es un estmulo (o actividad) EC con las que transmiten la informacin del EI [9] (Fig. 1). que incrementa la probabilidad de que se d la R asociada a l y Segn LeDoux et al [13], los EI y los EC activan los ncleos tiene propiedades relevantes (motivadoras, mobilizadoras) para geniculados mediales e intralaminares del tlamo (en el caso de el sujeto, ya sean stas aversivas o apetitivas. En el caso de los los EC sonoros) y la ABL. La informacin referente al EC (un Rf con propiedades apetitivas, la emisin de la R conlleva la sonido) llega a la parte medial del ncleo geniculado medial del obtencin del Rf (reforzamiento positivo). En el caso de que el tlamo y la informacin sobre el EI (shock elctrico) llega tanto a Rf sea un estmulo aversivo, la ejecucin de la R hace que se este ncleo como a la ABL. Los cambios sinpticos responsables evite la presentacin del Rf (reforzamiento negativo). El condidel aprendizaje (que sigue el principio hebbiano) ocurren en am- cionamiento instrumental es un condicionamiento ms flexible, bas estructuras. Lesiones de estas estructuras, as como de la AC, permite que el individuo adapte su conducta en funcin de las alteran las respuestas emocionales condicionadas [14]. La AC (con consecuencias de sta. sus proyecciones colinrgicas al crtex) facilita el establecimienLa adquisicin de una conducta instrumental dirigida a una to de circuitos neurales sensibles al EC y por sus eferencias des- meta (que es el Rf) implica dos formas de aprendizaje: el primecendentes desempea un importante papel en la organizacin de ro, aprender sobre las contingencias instrumentales entre R-Rf patrones de respuestas emocionales conductuales, autonmicas y y el segundo, aprender el valor de incentivo del propio Rf. Por endocrinas elicitadas por estmulos aversivos. ello, las funciones del condicionamiento instrumental seran el fortalecimiento de conexiones en el aprendizaje y la capacidad Condicionamiento instrumental de promover conducta, a la que denominamos motivacin. En Thorndike [15] fue el primero en proponer la denominada ley algunos casos, la conducta instrumental tambin puede llegar a del efecto, que describe este tipo de aprendizaje. Estableci controlarse por un sistema de E-R que se independiza del Rf que la asociacin entre los estmulos ambientales presentes en (aprendizaje de hbitos) [17]. las cajas-problema y la respuesta de escape se vera fortalecida Las reglas generales para el establecimiento de un condiciopor la obtencin de consecuencias favorables (obtencin de namiento instrumental son parecidas a las del condicionamiento comida fuera de la caja). De esta forma, la obtencin de comida clsico. En ambos se requiere contingencia y contigidad tempromovera el almacenamiento en la memoria de la asociacin poral entre los eventos que hay que asociar (en este caso, entre entre los E y las R instrumentales. Asimismo, la concepcin de R y Rf) y se requiere tambin adquisicin gradual del aprendiaprendizaje instrumental de Skinner [16] tambin implica un zaje a travs de la repeticin, que permite que se consolide la fortalecimiento pero, esta vez, de las relaciones entre la R y sus asociacin. La retirada del Rf o la devaluacin de ste producen consecuencias. Skinner defini un reforzador (Rf) como una la progresiva extincin de la R instrumental. Las diferencias consecuencia (estmulo o actividad) que, al seguir a la conducta ms claras radican en que la RI, que ms tarde se condiciona, en instrumental, aumenta la probabilidad de que dicha conducta se el clsico es una respuesta automtica (refleja), mientras que en

236

REV NEUROL 2007; 44 (4): 234-242

APRENDIZAJES IMPLCITOS

tales ya que la presentacin de reforzadores primarios eleva los niveles de DA en ambas regiones [21,22]. Este incremento puede estar mediando en la formacin de las asociaciones entre E relevantes para el sujeto y la obtencin de Rf (Fig. 2). Transferencia pavloviana-instrumental El condicionamiento pavloviano permite al organismo predecir y prepararse para futuros eventos basndose en la experiencia previa. Pero esta forma de aprendizaje puede ir ms all del fortalecimiento de asociaciones entre estmulos con una particular forma de R automtica. Dado que dicha R puede conllevar una consecuencia positiva o negativa para el sujeto, todos aquellos estmulos asociados pavlovianamente (los EC) a la emisin de la R tambin quedarn asociados a la consecuencia de la emisin de sta. Esta asociacin llevar a que, en sucesivas ocasiones, el sujeto, ante la presencia de los EC, adems de realizar la R refleja, llevar a cabo respuestas aproximatorias a ste en un intento por acercarse as a la obtencin del Rf y de las consecuencias emocionales que ste produce. As, estos EC se convierten en incentivos que tambin son capaces de actuar como Rf secundarios promoviendo la respuesta instrumental [23]. Este tipo de conducta implica una transferencia de una asociacin pavloviana a otra instrumental [24], pero carece de la flexibilidad de las conductas dirigidas a una meta como seran las conductas puramente instrumentales. La respuesta emitida se ha denominado respuesta pavloviana de seguimiento del indicio y se ha estudiado a travs de procedimientos de automodelado [25,26]. En estos procedimientos se evalan la discriminacin y el acercamiento del sujeto hacia un EC (una palanca) por oposicin a un segundo E que nunca se ha asociado a un Rf. El EC generar una secuencia motora con direccionalidad (aproximarse a la consecucin del Rf; por ejemplo, olisqueando o caminando de un lado a otro en direccin a la palanca) que se traduce en un estado de arousal (conductual, autonmico y neuroendocrino) [26]. Neuroanatoma funcional de la transferencia pavloviana-instrumental Las bases neuroanatmicas propuestas para este tipo de aprendizaje, en concreto para el automodelado, implican a redes neurales corticosubcorticales que incluyen el crtex cingulado anterior, la parte central del NAcb, la AC y el sistema mesolmbico de dopamina (Fig. 3). Segn Robbins et al [25], la corteza cingulada anterior ejerce su papel a travs de sus eferencias al estriado, concretamente a la parte central del NAcb (las lesiones de la corteza del NAcb o del estriado dorsal no impiden el desarrollo de este tipo de condicionamiento). La AC tambin se ha implicado directamente en este proceso (no as la ABL, como ocurre con otros aprendizajes pavlovianos). La AC proyecta a los ncleos dopaminrgicos del mesencfalo (ATV y SNc) y regula de esta manera la liberacin de DA en el NAcb. Estos autores proponen que las conexiones procedentes del cingulado anterior al NAcb central aportaran la direccionalidad a las respuestas aproximatorias en los procesos asociativos pavlovianos [25]. Las proyecciones desde la AC al ATV y desde sta al NAcb regularan la activacin conductual que vigoriza las respuestas aproximatorias [18, 25,27,28].

Figura 2. Circuito neural propuesto para los aprendizajes instrumentales.

el condicionamiento instrumental el organismo emite una respuesta voluntaria para conseguir un Rf. Neuroanatoma funcional del aprendizaje instrumental El sustrato neural que se ha estudiado tradicionalmente en relacin con el proceso de refuerzo se ha centrado en las estructuras que componen el haz prosenceflico medial, un conjunto de axones que, partiendo del mesencfalo, proyectan a lo largo del eje rostro-caudal hasta el prosencfalo basal rostral. De ellos, se ha enfatizado el grupo de neuronas dopaminrgicas que tienen sus somas en los ncleos A9 y A10. Estas neuronas dan lugar a los sistemas mesolmbico (ATV-NAcb/amgdala/hipocampo, entre otros), mesocortical (ATV-neocrtex prefrontal/ crtex cingulado/hipocampo) y nigroestriatal (SNc-neoestriado). En concreto, la proyeccin mesolmbica es la que ms atencin ha recibido cuando se tratan los aspectos motivacionales implicados en las conductas reforzadas [18]. Sin embargo, desde la perspectiva del aprendizaje, este foco se ha ampliado ms a la conexin entre estructuras corticoestriadoamigdalinas. En concreto, se han estudiado las interconexiones neurales entre el crtex prefrontal medial (rea cingulada anterior), el NAcb y la ABL, que son bsicamente glutamatrgicas y que reciben aferencias dopaminrgicas del ATV [19]. En el NAcb las aferencias glutamatrgicas y dopaminrgicas convergen en las espinas de las neuronas espinosas medianas; por ello, este ncleo est en una posicin privilegiada para reconocer los patrones de activacin producida por el contexto y para transferir esta informacin a regiones motoras y de planificacin que den lugar a una respuesta conductual adecuada [20]. Se ha sugerido que la transmisin dopaminrgica en el crtex prefrontal medial y en el NAcb es crucial para la adquisicin de conductas instrumen-

REV NEUROL 2007; 44 (4): 234-242

237

M. CORREA

APRENDIZAJE MOTOR Y DE DESTREZAS La mayora de conductas motoras en los mamferos superiores son conductas aprendidas, es decir, se adquieren y perfeccionan con la prctica. Al inicio constituyen movimientos voluntarios conscientes y poco precisos pero, con la prctica, se transforman en automticos, no conscientes y de gran perfeccin. El aprendizaje motor est implicado en gran parte de los aprendizajes asociativos instrumentales, aunque, en muchos casos, en estos aprendizajes la respuesta motora ha sido aprendida previamente al condicionamiento (por ejemplo, el animal ya sabe correr o ya sabe meter la cabeza en un agujero, el humano ya sabe apretar botones). La conducta motora implica una continua interaccin entre conducta automtica y conducta voluntaria. Los programas motores instintivos pueden modificarse por las estrategias cognitivas de los sujetos. As pues, muchos de los procedimientos motores en un primer estadio de aprendizaje necesi- Figura 3. Circuito neural propuesto para la transferencia desde un aprendizaje pavloviano a un aprenditan de la participacin de la memoria zaje instrumental. explcita. A medida que se modifica el aprendizaje motor, deja de ser voluntario, se automatiza y se vuelve ms implcito. La corteza pare- das, en las cuales la ejecucin de una respuesta constituye la sece controlar programas motores novedosos y que requieran fle- al para que se realice la respuesta siguiente [29]. Tambin se xibilidad. Por el contrario, las estructuras subcorticales contro- han observado diferencias entre las regiones del AMS [5]. La lan los programas motores ms ensayados y los hbitos motores parte anterior del AMS parece controlar la adquisicin, mientras que se ejecutan ms rgidamente. Los estudios con tcnicas de que la parte posterior est ms activa durante la ejecucin. Esto neuroimagen confirman que, a medida que se va adquiriendo se ve apoyado en el hecho de que la parte posterior tiene coneuna destreza motora, la actividad de reas como los ganglios xiones directas con la corteza motora primaria [30] (Fig. 4). basales o el cerebelo aumentan al tiempo que la actividad cortiEl cerebelo est claramente implicado en aprendizajes de cal disminuye [1]. respuestas motoras simples y condicionadas, como el reflejo palpebral [1]. Su contribucin al aprendizaje motor se realiza Neuroanatoma funcional de los aprendizajes motores en paralelo a la de los ganglios basales. Ratones con una mutaEn el procesamiento de las asociaciones E-R intervienen, en un cin que produce degeneracin progresiva olivocerebelar muesprimer momento, las cortezas de asociacin sensorial y, en ltimo tran ataxia y deficiencias en el aprendizaje motor; sin embargo, lugar, las cortezas de asociacin motoras, pero la conexin entre su capacidad de aprendizaje motor no est totalmente deterioraellas puede ser directa o indirecta. La conexin directa transcorti- da [31]. Estos mutantes mejoran cuando se les administran agocal parece que participa en un primer momento del aprendizaje nistas dopaminrgicos. Ello sugiere que los ganglios basales cuando utilizamos una serie de reglas explcitas para aprender la (que en estos animales son normales) permiten estas mejoras en secuencia de acontecimientos motores, pero, a medida que los habilidades motoras que precisan de un aprendizaje gradual removimientos se repiten y se vuelven ms automticos, las cone- petitivo. xiones subcorticales con los ganglios basales y el tlamo son las As pues, los ganglios basales y el cerebelo parecen ser crque controlan la ejecucin, de manera que sta ya no requiere de ticos para el aprendizaje de habilidades sensoriomotoras. Los un control consciente. Precisamente, sta es una tarea que est ganglios basales se encargaran del aprendizaje de secuencias deteriorada en los pacientes con Parkinson. stos son capaces de motoras repetitivas y el cerebelo de los aprendizajes en los que andar pero deben hacer un gran esfuerzo consciente para iniciar y se formen nuevos mapas basndose en las asociaciones establedetener las secuencias de movimientos y necesitan un continuo cidas entre estmulos visuales y respuestas motoras [1]. Otra control y una gua consciente de sus movimientos. diferencia en las funciones de ambos grupos de estructuras radiLos ganglios basales proyectan a ncleos concretos del tla- ca en que los ganglios basales intervienen en el aprendizaje de mo y ste, a su vez, enva axones a diferentes reas corticales habilidades que requieren efectuarse de acuerdo con un plan motoras que participan en la planificacin y la ejecucin moto- inicial de los movimientos que hay que ejecutar, y en los que ras: reas premotora y AMS. La lesin del AMS no afecta a res- existe una demora en la retroalimentacin sobre los posibles puestas motoras simples, aunque s a las secuencias autoinicia- errores efectuados. Por el contrario, el cerebelo estara involu-

238

REV NEUROL 2007; 44 (4): 234-242

APRENDIZAJES IMPLCITOS

Figura 4. Circuito neural propuesto para los aprendizajes motores.

crado en el aprendizaje de las habilidades que impliquen un continuo feedback visual externo acerca de los errores efectuados en el movimiento. APRENDIZAJES DE HBITOS Mishkin et al acuaron el trmino hbitos como aquel aprendizaje no cognitivo que no est basado en el conocimiento, sino en conexiones automticas entre un estmulo y una respuesta (E-R) [2]. Para estos autores, los ganglios basales, o lo que ellos denominaban crtex estriado, median en importantes aspectos de la formacin de hbitos. El aprendizaje de hbitos se ha tratado en muchas ocasiones como un aprendizaje motor y, aunque en muchos casos, las destrezas motoras y los hbitos motores (montar en bicicleta o cepillarse los dientes) comparten la caracterstica de ser una secuencia motora ms o menos compleja, la principal diferencia entre los dos est en el control que ejerce el estmulo que desencadena la iniciacin de esta secuencia motora. En los hbitos, la secuencia se inicia de una manera ms automtica, ms compulsiva que en el caso de las destrezas motoras, que se desencadenan de una manera ms voluntaria. En la base de esta diferencia puede estar la transferencia desde un control cortical a una codificacin estriatal. Otra diferencia importante entre destreza motora y hbito est en que muchas de las conductas que consideramos hbitos apenas requieren de acciones motoras, como es el caso, por ejemplo, de los hbitos perceptivos. El aprendizaje de hbitos comparte tambin muchas caractersticas con el aprendizaje pavloviano ya que los EC desencadenan respuestas automticas o reflejas que carecen de flexibilidad y que no estn orientadas a la consecucin de una meta como lo estn las respuestas instrumentales [25]. El aprendizaje de hbitos comparte muchas caractersticas con el aprendizaje instrumental. Al inicio del aprendizaje, ambos

estn dirigidos a la obtencin de un Rf y ambos requieren de la repeticin para establecer las contingencias entre E-R-Rf. Sin embargo, en el caso de los aprendizajes de hbitos, una vez establecidos, stos se vuelven automticos y automantenidos, es decir, no requieren de la retroalimentacin que gua el condicionamiento instrumental sino que estn ms controlados por los estmulos que elicitan la ejecucin de la respuesta (E-R). Otra diferencia muy importante, derivada de lo anterior, est en el hecho de que los hbitos son aprendizajes resistentes a una rpida devaluacin del Rf y a la extincin [32], dado que la R est controlada por los estmulos que la preceden (EC, EI) y, en mucha menor medida, por los estmulos que la siguen (Rf). Desde este punto de vista, hay una continuidad temporal entre aprendizaje instrumental y aprendizaje de hbito [23]. Con la prctica, las respuestas instrumentales basadas en el resultado (E-R-Rf) se transforman en respuestas de hbito basadas en asociaciones E-R [33]. As, se convierten en respuestas ms rpidas, menos dependientes de control cognitivo. Sin embargo, esto no supone una ausencia total de control, ya que si el contexto cambia y, tras numerosas repeticiones, la R deja de ser adaptativa, se vuelve desde la modalidad de hbito a la modalidad de aprendizaje instrumental basado en las consecuencias de la R. As, se cambiara a una nueva R que resultase ms adaptativa. La estabilizacin de la nueva asociacin (E-R-Rf) y su repeticin llevaran a un nuevo hbito (E-R) [23]. Por todo lo anterior se puede deducir que el sustrato neural para la formacin de hbitos debe residir, en gran medida, en estructuras implicadas en los aprendizajes instrumentales, en concreto, en los ncleos estriatales. Neuroanatoma funcional del aprendizaje de hbitos La neuroanatoma del hbito se ha estudiado tambin desde los procesos de establecimiento de la conducta adictiva [32,34,35]. La adiccin es un hbito inflexible y compulsivo desencadenado por estmulos (asociados pavlovianamente) con capacidad motivadora condicionada [36,37] que automticamente llevan a la respuesta de bsqueda de la droga. Es un proceso E-R ms que un proceso R-Rf. Las acciones dirigidas a una meta siempre son mediadas por la representacin de las contingencias entre la R y los resultados de sta (R-Rf). En la adiccin, la devaluacin del Rf no se traduce en una rpida disminucin de su consumo (todo lo contrario, el sujeto trata de compensar consumiendo ms) ni en una total extincin de la R (que se reinstaura muy fcilmente). Esto lleva a un modelo terico [38] en el cual la adiccin se ve como un aprendizaje de hbito que se inicia como un aprendizaje instrumental, que gradualmente se vuelve automtico y por el cual el sujeto pierde el control voluntario sobre el uso de la droga a pesar de su devaluacin (tolerancia a los efectos primarios de la droga). Esta progresin desde una accin instrumental a un hbito puede tener su base neural en la reciente propuesta del circuito cerrado en espiral dentro de las diferentes partes de los gan-

REV NEUROL 2007; 44 (4): 234-242

239

M. CORREA

glios basales [25,38]. Segn esta propuesta, cada dominio estriatal regula sus propias inervaciones dopaminrgicas y las de los dominios adyacentes en una direccin ventrodorsal. As, la corteza del NAcb regula sus propias inervaciones dopaminrgicas a travs de las proyecciones al ATV, as como tambin controla las proyecciones al rea central del NAcb. Por su lado, el NAcb central regula sus propias inervaciones dopaminrgicas a travs de las proyecciones al ATV y las del rea dorsal del estriado a travs de proyecciones a la SNc. De esta manera, las drogas administradas crnicamente, a travs de su capacidad para liberar DA en el estriado en general, pueden actuar en la formacin del hbito consolidando esta progresin ventrodorsal (Fig. 5). Asimismo, la transicin desde los procesos R-Rf a los hbitos E-R puede depender tambin del control ejecutivo descendente realizado por el crtex prefrontal sobre diferentes partes del estria- Figura 5. Circuito en espiral ventrodorsal propuesto para la formacin y el control neural de un hbito. do [38]. Este control cortical disminuye en adictos. Estos datos parecen avalados por los resultados procedentes de estudios post mortem realiza- aversivos que se produce durante el primer contacto con estos dos en adictos donde se observan cambios neuroqumicos en el estmulos [41]. Esta teora est apoyada por los datos que muescrtex prefrontal orbital y en los ganglios basales [39]. tran un bajo nivel de autorreceptores de DA en el prefrontal impidiendo as un mecanismo regulatorio de los niveles de DA que s se da en las otras dos reas [43]. Parece posible que todas las IMPLICACIN DOPAMINRGICA neuronas de DA que proyectan al estriado, NAcb y crtex preEN LA FORMACIN DE APRENDIZAJES frontal responden con un tren de potenciales de accin ante estASOCIATIVOS Y DE HBITOS mulos salientes, pero que la magnitud en la concentracin de Tradicionalmente se ha atribuido a las neuronas de DA de la DA depende en esas reas de influencias presinpticas y de meSNc que proyectan al estriado dorsal un papel en el control de canismos reguladores. Estos datos tambin se ven apoyados por acciones motoras especficas y a las neuronas DA del ATV que los estudios que muestran una mayor sensibilidad a los agonisproyectan al estriado ventral el control de procesos motivacio- tas dopaminrgicos en el estriado, donde fcilmente se produce nales y de refuerzo [40]. Sin embargo, esta dicotoma radical se estereotipia, frente a en el NAcb, donde se induce la actividad cuestiona desde diferentes puntos de vista. Una propuesta ya locomotora [44]. As pues, el hecho de que la regulacin sea explicada [25] introduce la formacin de hbitos como una de mayor en el estriado dorsal previene de fluctuaciones a largo las funciones que implican una transicin en el control desde las plazo en las concentraciones de DA y este estricto control supozonas ventrales a las dorsales del estriado. Como hemos visto, ne beneficios para la ejecucin de las funciones de esta estructula formacin de hbitos comparte caractersticas con los apren- ra. El neoestriado se asocia con el control de procesos sensoriodizajes ms puramente motores (estriado dorsal) y con los apren- motores y la ejecucin de acciones motoras complejas que dedizajes instrumentales (estriado ventral); por ello, ambas partes ben ejecutarse con precisin temporal. Por ello, un fuerte control del estriado se veran implicadas. fsico de los niveles de DA puede facilitar el cambio de un comOtros planteamientos proponen que todos aquellos estmu- ponente a otro de la respuesta [45]. Por otro lado, la DA en el los que sean salientes y produzcan arousal elevan la actividad NAcb se asocia a ciertos componentes de la motivacin de indopaminrgica en las tres vas: mayormente en la va mesocor- centivo y a la vigorizacin de la conducta y en el prefrontal puetical (ATV-crtex prefrontal), algo menos en la mesolmbica de estar modulando la memoria de trabajo [30,46,47]. Ambas (ATV-NAcb) y, en menor medida, en la nigroestriatal (SNc- funciones requieren menor precisin temporal en la regulacin estriado dorsal) [41]. Estos datos estaran de acuerdo con los de las concentraciones extracelulares de DA, lo que se reflejara que sugieren que la liberacin de DA en el prefrontal es mayor en un control tnico del neurotransmisor. en las primeras fases del condicionamiento, mientras que la Muchos datos experimentales sustentan la implicacin de la liberacin de DA en el NAcb ocurre predominantemente duran- dopamina en el aprendizaje tanto pavloviano como instrumente estadios de condicionamiento posteriores cuando ya ha emer- tal. El papel de la DA es esencial durante la adquisicin de estos gido la respuesta condicionada [42]. Inicialmente, este mayor aprendizajes; sin embargo, cuando el aprendizaje ya se ha estanivel de DA en el prefrontal en relacin con las otras reas pue- blecido, su contribucin es menos fundamental [18]. Una vez de darse en respuesta a la evaluacin de los eventos apetitivos o que el aprendizaje se ha consolidado, la actividad de la DA se

240

REV NEUROL 2007; 44 (4): 234-242

APRENDIZAJES IMPLCITOS

vincula principalmente a la aparicin de estmulos ambientales salientes ms que a los reforzadores primarios [19,41]. El bloqueo de los receptores D2 mejora la adquisicin del aprendizaje instrumental y el bloqueo de los receptores D1 impide la adquisicin del condicionamiento. Esto puede deberse al papel predominantemente de autorreceptor de los D2. Sin embargo, el bloqueo de ambos receptores cuando el condicionamiento ya se ha establecido fuertemente no afecta a la expresin de la respuesta condicionada [48,49]. El nico cambio que este bloqueo produce en la conducta de un animal que ya ha aprendido la asociacin es la reduccin de respuestas condicionadas a estmulos autogenerados (no ambientales), de manera

que se reduce el repertorio conductual. Esto estara en consonancia con los datos en los que la administracin de antagonistas D2 impide la transferencia pavloviana-instrumental [33]. El animal lleva a cabo nicamente las conductas condicionadas pero no realiza toda la serie de respuestas de automodelado que se autoinician. La reduccin del repertorio conductual se observa tambin en los estudios en los cuales la realizacin de un esfuerzo en tareas instrumentales previamente aprendidas (tareas repetitivas pero que no tienen gran requerimiento fsico) se ve reducida por el antagonismo dopaminrgico en el NAcb, aunque la operante se realiza cuando el animal no tiene eleccin [18,27,28].

BIBLIOGRAFA 1. Morgado I. Psicobiologa del aprendizaje y la memoria. Rev Neurol 2005; 40: 289-97. 2. Mishkin M, Appenzeller T. Anatoma de la memoria. In Morgado I, ed. Psicologa fisiolgica. Libros de investigacin y ciencia. Barcelona: Prensa Cientfica; 1987. p. 110-21. 3. Squire LR. Memory systems. C R Acad Sci III 1998; 321: 153-6. 4. Schacter DL. Implicit expressions of memory in organic amnesia: learning of new facts and associations. Hum Neurobiol 1987; 6: 107-18. 5. Hikosaka O, Nakamura K, Sakai K, Nakahara H. Central mechanisms of motor skill learning. Curr Opin Neurobiol 2002; 12: 217-22. 6. Catal-Barcel J. Papel de los ganglios basales en la monitorizacin de las funciones de los lbulos frontales. Rev Neurol 2002; 34: 371-7. 7. Alexander GE, De Long MR, Strick PL. Parallel organization of functionally segregated circuits linking basal ganglia and cortex. Annu Rev Neurosci 1986; 9: 357-81. 8. Redgrave P, Prescot TJ, Gurney K. The basal ganglia: a vertebrate solution to the selection problem? Neuroscience 1999; 89: 1009-23. 9. Torras M, Portell I, Morgado I. La amgdala: implicaciones funcionales. Rev Neurol 2001; 33: 471-6. 10. Rescorla RA, Wagner AR. A theory of pavlovian conditioning: variations in the effectiveness of reinforcement and non-reinforcement. In Black AH, Prokasy WF, eds. Classical conditioning II: current research and theory. New York: Appleton-Century-Crofs; 1972. 11. Pavlov IP. Conditioned reflexes. London: Oxford University Press; 1927. 12. Millenson JR, Leslie J. The conditioned emotional response (CER) as a baseline for the study of anti-anxiety drugs. Neuropharmacology 1974; 13: 1-9. 13. LeDoux JE, Sakaguchi A, Iwata J, Reis DJ. Interruption of projections from the medial geniculate body to an archi-neostriatal field disrupts the classical conditioning of emotional responses to acoustic stimuli. Neuroscience 1986; 17: 615-27. 14. McGaugh JL, Vadarjanova A. Basolateral amygdala is not critical for cognitive memory of contextual fear conditioning. Proc Natl Acad Sci U S A 1998; 95: 15003-7. 15. Thorndike EL. Animal intelligence. New York: McMillan; 1911. 16. Skinner BF. The behavior of organisms: an experimental analysis. New York: Appleton-Century; 1938. 17. Balleine BW, Dickinson A. Goal-directed instrumental action: contingency and incentive learning and their cortical substrates. Neuropharmacology 1998; 37: 407-19. 18. Salamone JD, Correa M. Motivational views of reinforcement: implications for understanding the behavioral functions of nucleus accumbens dopamine. Behav Brain Res 2002; 137: 3-25. 19. Baldwin AE, Sadeghian K, Kelley AE. Appetitive instrumental learning require coincident activation of NMDA and dopamine D1 receptors within the medial prefrontal cortex. J Neurosci 2002; 22: 1063-71. 20. Houk JC, Adams JL, Barto AG. A model of how the basal ganglia generate and use neural signals that predict reinforcement. In Houk JC, Davis JL, Beiser DG, eds. Models of information processing in the basal ganglia. Cambridge: MIT Press; 1995. 21. Sawaguchi T, Goldman-Rakic PS. D1 dopamine receptors in prefrontal cortex: involvement in working memory. Science 1991; 251: 947-50. 22. Salamone JD. The involvement of nucleus accumbens dopamine in appetitive and aversive motivation. Behav Brain Res 1994; 61: 117-33. 23. Di Chiara G. Nucleus accumbens shell and core dopamine: differential role in behavior and addiction. Behav Brain Res 2002; 137: 75-114. 24. Ettenberg A. Haloperidol prevents the reinstatement o amphetaminerewarded runway responding in rats. Pharmacol Biochem Behav 1990; 36: 635-8. 25. Robbins TW, Everitt BJ. Limbic-striatal memory systems and drug addiction. Neurobiol Learn Mem 2002; 78: 625-36. 26. Tomie A, Tirado AD, Yu L, Pohorecky LA. Pavlovian autoshaping procedures increase plasma corticosterone and levels of norepinephrine and serotonin in prefrontal cortex in rats. Behav Brain Res 2004; 153: 97-105. 27. Salamone JD, Correa M, Mingote S, Weber SM. Nucleus accumbens dopamine and the regulation of effort in food-seeking behavior: implications for studies of natural motivation, psychiatry, and drug abuse. J Pharmacol Exp Ther 2003; 305: 1-8. 28. Salamone JD, Correa M, Mingote S, Weber SM. Beyond the reward hypothesis: alternative functions of nucleus accumbens dopamine. Curr Opin Pharmacol 2005; 5: 34-41. 29. Thaler D, Chen Y, Ixon PD, Stern CE, Passingham RE. The functions of medial premotor cortex. I. Simple learned movements. Exp Brain Res 1995; 102: 445-60. 30. Luppino G, Matelli M, Camarda R, Rizzolati G. Corticocortical connections of area F3 (SMA proper) and area F6 (pre-SMA) in the macaque monkey. J Comp Neurol 1993; 228: 114-40. 31. Krizkova A, Vozeh F. Development of early motor learning and topical motor skill in a model of cerebellar degeneration. Behav Brain Res 2004; 150: 65-72. 32. Dickinson A, Wood N, Smith JW. Alcohol seeking by rats: action or habit? Q J Exp Psychol B 2002; 55: 331-48. 33. Dickinson A, Smith S, Mirenowicz J. Dissociation of pavlovian and instrumental incentive learning under dopamine antagonists. Behav Neurosci 2000; 114: 468-83. 34. Kelley AE. Memory and addiction: shared neural circuitry and molecular mechanisms. Neuron 2004; 44: 161-79. 35. Miles FJ, Everitt BJ, Dickinson A. Oral cocaine seeking by rats: action or habit? Behav Neurosci 2003; 117: 927-38. 36. McFarlnad K, Ettenberg A. Haloperidol does not attenuate conditioned place preference or locomotor activation produced by food-or heroin-predictive discriminative cues. Pharmacol Biochem Behav 1999; 4: 631-41. 37. Tzschentke TM. Measuring reward with the conditioned place preference paradigm: a comprehensive review of drug effects, recent progress and issues. Prog Neurobiol 1998; 56: 613-72. 38. Everitt BJ, Dickinson A, Robbins TW. The neuropsychological basis of addictive behavior. Brain Res Brain Res Rev 2001; 36: 129-38. 39. Volkow ND, Fowler JS, Wang G, Goldstein RZ. Role of dopamine, the frontal cortex and memory circuits in drug addiction: insights from imaging studies. Neurobiol Learn Mem 2002; 78: 610-24. 40. Schneider JS. Functions of the basal ganglia: an overview. In Schneider JS, Lidsky TI, eds. Basal ganglia and behavior: sensory aspects of motor functioning. Lewiston: Hans Huber Publishers; 1987. p. 1-8. 41. Horvitz JC. Mesolimbocortical and nigrostriatal dopamine responses to salient non-reward events. Neuroscience 2000; 96: 651-6. 42. Wilkinson LS, Humby T, Killcross AS, Torres EM, Everitt BJ, Robbins TW. Dissociations in dopamine release in medial prefrontal cortex and ventral striatum during the acquisition and extinction of classical aversive conditioning in the rat. Eur J Neurosci 1998; 10: 1019-26. 43. Chiodo LA, Bannon MJ, Grace AA, Roth RH, Bunney BS. Evidence for the absence of impulse-regulating of somatodendritic and synthesis-modulating nerve terminal autoreceptors on subpopulations of mesocortical dopamine neurons. Neuroscience 1984; 12: 1-16. 44. Braun AR, Laruelle M, Mouradian MM. Interactions between D1 and D2 dopamine receptor family agonists and antagonists: the effects of chronic exposure on behavior and receptor binding in rats and their clinical implications. J Neural Transm 1997; 104: 341-62.

REV NEUROL 2007; 44 (4): 234-242

241

M. CORREA

45. Liao RM, Fowler SC, Kallman MJ. Quantifying operant behavior deficits in rats with bilateral 6-hydroxydopamine lesions of the ventrolateral striatum. Chin J Physiol 1997; 40: 71-8. 46. Gibbs SE, DEsposito M. Individual capacity differences predict working memory performance and prefrontal activity following dopamine receptor stimulation. Cogn Affect Behav Neurosci 2005; 5: 212-21. 47. Robinson S, Sandstrom SM, Denenberg VH, Palmiter RD. Distin-

guishing whether dopamine regulates liking, wanting, and/or learning about rewards. Behav Neurosci 2005; 119: 5-15. 48. Eyny YS, Horvitz JC. Opposing roles of D1 and D2 receptors in appetitive conditioning. J Neurosci 2003; 23: 1584-7. 49. Horvitz JC. The effects of D1 and D2 receptor blockade on the acquisition and expression of a conditioned appetitive response. Appetite 2001; 37: 119-20.

FUNCTIONAL NEUROANATOMY OF IMPLICIT LEARNING: ASSOCIATIVE, MOTOR AND HABIT Summary. Aim. The present review focuses on the neuroanatomy of aspects of implicit learning that involve stimulus-response associations, such as classical and instrumental conditioning, motor learning and habit formation. Development. These types of learning all require a progression in the acquisition of procedural information about how to do things instead of what things are. These forms of implicit learning share the neural substrate formed mainly by brain circuits involving basal ganglia, prefrontal cortex and amygdala. The relationship between pavlovian and instrumental learning is shown in the transference and autoshaping studies. There has been a resurgence of interest in habit learning because of the suggestion that addiction is a process that progresses from a reinforced response to a habit in which the stimulus-response association is supraselected and becomes independent of voluntary cognitive control. Dopamine has demonstrated to be involved in the acquisition of these procedures. Conclusions. The different forms of procedural learning studied here all are characterized by stimulus-response-reinforcement associations, but there are differences between them in terms of the degree to which some of these associations or components are strengthened. These different patterns of association are partially regulated by the degree of involvement of the frontal-striatal-amygdala circuits. [REV NEUROL 2007; 44: 234-42] Key words. Addiction. Procedural memory. Reinforcement. Striatum.

242

REV NEUROL 2007; 44 (4): 234-242