Está en la página 1de 100
John H. Holland 10 EN OCULTO DE COMO LA ADAPTACIO errr cata en eee ee tematico, de Stanislaw Ulam, John H. OCMC ere tener) } 2 afinidad con el enfo etn Clara eee ts Geren P TOR RGR uC Einee emo coca LA CO! y poy Tipe recs jtanislaw Lem, escritor polaco ‘ E de ciencia-ficcion a la altura de H. G. Wells, era el seu- COM CUCM Ne ee Cote cy coats equivoco, pero la empatia no disminuy6. Muy por el con- emo Ono roe tren ay man hasta donde aml TO aLE Uy oF bomen, H. Holla one c ane one Sees Ca eer ose Contec oneon Geert etree adaptan, compiten y cooperan. Holland usa modelos eerie tts Seren ite eo cance PRC te eet eee: 0 or eorte Seetereretnes tt memronetecr a John H. Holland es r ido mundialmente como el frie Cea Cee ese tre coo atte oad Fondo de Cultura Economica Comité de Seleccion Dr Dr. Dr Dr, Antonio Alonso Francisco Bolivar Zapata Javier Bracho ‘Juan Luis Cifuentes Dra, Rosalinda Contreras Dr, Dr. Ds, Dr. Ds Dr, JJorge Flores Valdés (Juan Ramén de la Puente Leopoldo GarelaColin Scherer Adolfo Guzmin Arenas Gonzalo Halffter Jaime Martuscelli Dra, Isaura Meza Dr Ds Dr, José Luis Moran Héctor Nava Jaimes Manuel Peimbert Ruy Pérez Tamayo Julio Rubio Oca “José Sarukhin Guillermo Sobexén, Elias Trabulse Coordinadora Marfa del Catmen Farfas R. SeociOy DE OnsAs DE ClENCIAY TeNOLOGts EL ORDEN OCULTO ‘Traducci6n: JOHN H. HOLLAND ESTEBAN TORRES ALEXANDER EL ORDEN OCULTO De cémo la adaptacion crea la complejidad Foo br CULTURA ECONO MEXICO, Primera edicén eninglés, 1986 PPameraedicén en espanol, 2004 Holland Joka Landen acu / Joli H, Holland. — México: FCE, 2004 19Tp. 2816 en (Cole. Secién de Obras de Ciencia» Tecnologia) “Tiel origina: Hidden Ondem—HeneAdaptaion Bis Complei SEN USELOCSS 1. Sistemas compas aapales—Modelos matemdticos2. Adaptacin(biologia) — Medes matemiticos 3. Algriumos reneneoe Ser Tt HOTRTHG 196 Dewey S118 ‘Tinalo original Hiden Onter Hoss Adoption Builds Compleity ppublieado por Basic Books / Pexseus Books Group {© 1995 John H, Holland ISBN 0:201-40793-0 (empastado) 0-201-442802 (ristica) Se prohibe fa eproeieson toa o pari de ext bre nde el daetio page y de pore {exculSce el media, elestnica o mec sn el consenimienta por escrito del eta. Agiadecenos sus comentario ysigereneia al cameo elec Concaca nuestra catilogo en Intt: / ings. fandodecu Ituraeconeniea, com DR.©, 2004, Fos ox CuLzuns Economics ‘Carretera Picachojuso 227, 1200 Mexico, DE ISBN 965.16.6535.9 Iimpresn en Mérico» Pint Meio CICLO DE CONFERENCIAS ULAM EL, PRESENTE L1nRO €s el primero de una serie basada en las conferencias dedicadas a la anemoria de Stanislaw M. Ulam, un gran matemsatico de la ahora legendaria Escuela Polaca de Matematicas. Impartidas en el Santa Fe Institute (Instituto Santa Fe) de Santa Fe, Nuevo México, es- tas conferencias anuales han sido dictadas por profesores invitados y patrocinadas conjuntamente por el institute y la companfa editora Addison-Welsey. Ulam Hlegé a Estados Unidos contratado por el Institute for Advanced Study en 1935; posteriormente trabajé en las universidades de Harvard, ‘Wisconsin y, tiempo después, en la de Colorado, Pero lo mas interesante es que fue precisamente en cl aiio de su fundacion cuando se integro al equipo del National Laboratory cle Los Angeles, donde se convirtié en una fuerza intelectual y en fuente de inspiracion desde 1944 hasta su muerte, ocurrida en 1984. Durante su estancia en esa instituci6n fo- ment6 una intensa intcraccién entre las matemiaticas y la ciencia. Como matematico, Stanislaw Ulam estuvo a la altura de personajes tales como Kuratowski, Mazur, Banach, Von Neumann y Erdos, y su tra- bajo tavo gran repercusién en ese campo. Ademds fue un cientifico con tuna gran variedad de imiereses, que trabajé con otros grandes hombres de ciencia de su tiempo. Entre los t6picos en los que él y sus colabora- dores hicieron trabajos fundamentales estan: el métode Monte Carlo, sistemas dindmicos no lineales de simulacion por computadora, proce- sos termonucleares, propulsion espacial, métricas para secuencias bio- Jogieas, amématas ¢elulares y muchos mas. La lista de sus amigos y co- laboradores cientificos incluye a muchos de los mejores cerebros del siglo XX. El interés de Ulam en la ciencia no conocia fronteras, y si en- foque hacia ella era verdaderamente interdisciplinario. Al respecto, su esposa, Francoise Ulam, decia: "Stan era una especie de hombre-or- questa en el Santa Fe Institute". A Ulam le hubiera encantado la at- mésfera interactiva ¢ interdisciplinaria del instituto, y hubiera contri- buido mucho a incrementarla. Es una pena para nosotros que él ‘muriera unos dias antes de la findacién oficial del Santa Fe Institute, LM. Sinwons, Je icepresidente de Asuntos Académicos Santa Fe Institute PRESENTACION Es UN GRAN HONOR estar aqui esta noche para celebrar con ustedes el décimo aniversario de la fundacién del Santa Fe Institute. Quiero ex- presar mi agradecimiento y mi aprecio a su fundador, mi buen amigo George Cowan, a sus directores, Ed Knapp y Mike Simmons, ya todas Jay personas que participaron en la creaci6n de esta nueva serie de conferencias del instituto en memoria de mi finado esposo. A aquellos que no conocieron a Stan Ulam, permitanme decirles s6lo una o dos palabras sobre él En cierto sentido, debido a la naturaleza interdiseiplinaria de sus in- vestigaciones, Stan fue una especie de hombre orquesta del instituto, Pero eso sucedié hace mucho tiempo, cuando esta expresiin apenas se acababa de acufar. Si Stan atin estuviera vivo seguramente le encan- taria la estructura informal del instituto, porque él tenia en poco apre- cio las trampas de la burocracia y de la autoridad, Se vanagloriaba di- Giendo que al nico comité al que habia pertenecido era el Comité de Catadores de Vino de los Junior Fellows de Harvard. En Los Alamos, ély Caison Mark, director de la Division Teoria, en una oportunicad provocaron gran confusién en el laboratorio por hi her escrito y hecho circular un memorandum en el que se enfistaban Jos mtimeros del uno al cien en orden alfabsético, “para una rapid y fi- cillreferencia’ En otra ocasién, cuando fue promovido a jefe de grupo, estaba muy contento porque s6lo era jefe de sf misino, ya que al principio era el nico miembro de su grupo. ‘Como ven, Stan era un hombre muy bromista, Incluso nunca consi- deré que pensar era un trabajo, sino mas bien un juego. Solia jugar con las ideas matematicas e inventaba juegos matemiticos. Tam deleitaba enormemente jugando con palabras. Seguramente el ingenioso titulo de la conferencia de esta noche, “La complejidad simplificada”, le hubiera complacido mucho, porque encierra el tipo de paradojas que le gustaban. Después de esta breve semblanza cedo el lugar al siguiente orador, John Holland, quien nos explicard en términos sencillos todo acerea de Los sistemas complejos, Palabras de Francoise Ulam durante la inauguracién de las Conferencias Ulam ° ‘A veces pienso que una explicacion mis racional para todo lo que me ha sucedido durante la vida es Jade que atin tengo trece afios de edad y estoy leyene do aJulio Verne oa H. G. Wells, y me he quedado dormido. SMANISLAW ULM Aventuras de un matemition, 1976, Elhombre que tenia el récord nds alto de agudeza matemtica, el hombre que podfa derrotar a los ing nieros en sti propio juego, que podia evaluar perso- nas y circunstanciasen un instance, era mniembro de ‘una profesion totalmente extinta: la de [os profetas. Gian Casto Roms, En memoria de Stanislaw Ulam PREFACIO EN OTONO bE 1993, Ed Knapp, presidente del Santa Fe Institute, y Jack Repcheck, entonces jefe de redaccién de Helix Books de Addison-Wel- sey, se acercaron a nif con una propuesta: :Estarfa dispuesto a inaugu rar el Ciclo de Conferencias Ulam? Bl ciclo de conferencias se Hevars a cabo anualmente, en honor del renombrado matematico del siglo Xx Stanislaw Ulam. y estarian dirigidas a un anditorio no especializado, pero interesado en temas cientificos; posteriormente serian ampliadas ¢ impresas en un libro, con el fin de dejar un registro perpetuo de ellas. Aun cuando participo activamente en muchas actividades del Instituto, esta propuesta me tomé por sorpresa, Al principio senti cierta aprensién, debido a que disponia de poco tiempo (las conferencias se impartirian durante el primer semestre de 1994; ademas, deber‘a presentar un original para su publicacién a fines del verano de ese mismo afio). No obstante, haba algunos incentives. El incentivo de mas peso era mi gran admiracidn por el trabajo y el talento de algunos cientificos contemporaneos, particularmente de John von Neumann, Ronald Fisher y Robert Oppenheimer. Durante el ‘seguimiento de las mtiltiples facetas de! trabajo de Von Neumann, re- ppetidlas veces me crucé con el nombre de Stanislaw Ulam, en contextos muy cercanos a mis principales intereses. Fue asf como empecé a inte- Fiorizarme en su trabajo, y también fue el principio de una creciente afi- nidad con el enfoque eientifico de Ulam, una afinidad que se amplio considerablemente cuando let su libro, Aventuras de un matemitico (1976). Incluso durante un tiempo estuve convencido de que Stanislaw Lem, escritor polaco de ciencia-ficci6n a la altura de H. G. Wells, era el seu- dénimo de Stan Ulam, Cuando me ofrecieron una beca de un afio-en el National Laboratory de Los Alamos, como asistente de Ulam, la oportunidad de conocer el hugar que habia sido el escenario de anu- chos de los logros de su carrera constituyé uno de los principales moti- vos de mi aceptacién. Fue la tinica ocasién en que Io traté. Mas tarde, cuando Francoise Ulam doné la biblioteca privada de Stan al Santa Fe Institute, me sensi muy contento al enterarme de la cantidad de titulos que teniamos en comin, Ma bibliothegue, cst mai. Estos mismos pensamientos influyeron poderosamente en mi deci- sién de aceprar este compromiso. Cuando empecé a pensar seriamente sobre lo que tenfa encomendado, comencé a considerar estas confe~ n 2 FLORDENOCUITO rencias como una oportunidad extraordinaria para hacer explicito et patrén que subyacia bajo las intuiciones € ideas que habian estado ‘uiando mis investigaciones desde mis dias de estudiante universitario. El hecho de que ademas tendria que escribir para un auditorio mayor me forzaria a luchar por ser més conciso y coherente, lo cual no siem- pre ocurre cuando s¢ realiza un trabajo tecnico. Ese era un reto dificil de ignorar. ‘Alo anterior habia que agregar que acababa de construir mi refugio en la costa norte del lago Michigan, lugar disefiado especialmente para hacerme mas facil esa clase de esfuerzo. Qué gran ocasién para inaugurarlo! Pero también habia otras razones, incluyendo un atract: vo financiamiento; no obstante, estas razones no tuvieron tanto peso en mi decision, Este libro se centra en un tema que ha atrafdo mucho la atenci6n en 10s ttimos tiempos: la complejidad. Stan Ulam hizo muchas observa- iones acerca de la complejidad, utilizando la palabra repetida y cuida- dosamente mucho tiempo antes de que el tema se popularizara o si- quicra fuera mencionada, Muchos de los temas presentados aqui fueron prefigurados en los comentarios de Ulam, Al escribir este libro me he concentrado cn ese aspecto de la complejidad que se contra en la adaptacion, mn area conocida actualmente como el estudio de los sistemas complejas adaptables (sca). Considero, como se comprobara al Icer este libro, que la adaptacién da lugar al surgimiento de una clase de complejidad que obstaculiza considerablemente nucstros intentos por resolver los mas importantes problemas que actualmente enfrenta ‘mestro mundo. No he intentado realizar una revision exhaustiva del trabajo valioso {que se ha hecho sobre los sca, ni he «ratato de criticar ottos enfoques al respecto; en verde esto, he dedicaco toclos mis esfuerzos a producit un panorama coherente de una disciplina de reciente aparicién. El producto final es ciertamente idiosinerasico, aun cuando pienso que ‘muchos ele mis colegas del Santa Fe Institute coincidiran con mis pun- tos de vista, Ademas de tratar de ofrecer un panorama global orde- nado, también he tratado de comunicar qué sentiinientos motivan tun cientifico cuando intenta desarrollar una nueva disciplina, “Hacer ciencia”, particularmente hacer una sintesis de ideas dispates, no es un asunio tan arcano como frecuentemente se hace creer al ptiblico. ‘La disciplina y el olfato desempeiian un papel vital; sin embargo, esto es familiar para cualquiera que haya intentado ser creativo. Los puntos de vista presentados aqui han sido madurados a través de un intercambio continuo con dos grupos que han desempefiado un papel central en mi desarrollo cientifico, Mi mas prolongada afiia- PREEACIO 1s cién ha sido con el grupo asci,® de la Universidad de Michigan (los miembros actuales de este grupo son: Arthur Burks, Robert Axelrod, ‘Michael Cohen, John Holland, Carl Simon y Rick Riolo). Los integran- tes de esta sociedad nos hemos reunido regularmente durante mas de dias décadas, y cuatro de los miembros actuales han sido actives partie pantes desde el principio. seer es un grupo altamente interdisciplina- rio (representa a cinco departamentos) y totalmente informal, por lo que no aparece en el organigrama de la universidad. Aunque no de ‘manera sistematica, casi todas fas ideas incluidas en este libro han sido Giscutidas previamente por el grupo BACH. El segundo grupo que ha desempeiiaclo un papel central en la for- macién de mis Conceptos es, por supuesto, el personal del Santa Fe Institute (sr1). Aun cuando mi asociacién con el fi es mis reciente que a del grupo RACH, no es menos importante, Este instituto alimenta una profunda interdependencia cientifica, mas efectiva que cualquier otra organizacion que haya conocido. Cuando era estudiante universitario pensaba que el tipo de interaccién que fomenta el instituto seria la “erema y nata’ de la actividad cientifica; pero esto rara vez es cierto, En ‘una universidad estindar la mayor parte del tiempo Io consumen las actividades de los comités consultivos o de administracidn y las nego- Giaciones interdepartamentales, asi como los programas de coope- racion intercolegial para las actividades interdiseiplinarias propues- tas, A esto hay que agregar las actividades de ensefianza y preparacion de publicaciones, y con esto ya podra calcular el poco tiempo que res- ta para las exploraciones interdisciplinarias, En cambio, el s& proporcio- na en forma consistente lo que es dificil de obtener en el ambiente de ‘una universidad: la oportunidad para realizar investigacin interdiscipli- naria de manera sostenida, El instituto maci6 gracias al interés y al cui- dadoso trabajo organizacional de George Cowan, quien poco tiempo después dispuso de la colaboracién de un consejo consultivo de cien- lificos dispuestos tanto a proponer como a escuchar. Esta misma histo- ria ha sido contada también en el libro de Mich Waldrop, Complajidad, publicado en 1992, asi que no la repetiné. Basta decir que el st propor- ciona un ambiente cientifico que se acerca mucho al ideal al que yo aspiraba en mis tiempos de estudiante. El hecho que finalmente me convencié de asociarme con el sx fue la invitacion que me hizo Doyne Farmer para dar una charla en una de las conferencias anuales del Centro de Estudios No-lineales del Natio- nal Laboratory de Los Alamos. Fue en esa conferencia donde conoci a Murray Gell-Man, um gran amigo y un critico por excelencia, quien gla de Burk, Axelrod, Cohen y Holland, (N. det Be) 4 ELORDEN OCULTO as tarde me invit6 a unirme al consejo consultivo del sf. Asi, al tratar de enfrentar las normas de claridad de Murray en mis explicaciones, mc he visto obligado repetidamente a afinar mis ideas sobre los Sea, intentando reforzar sus fundamentos y ampliando su aplicabilidad. Por supuesto, Murray no es la tinica persona del set que ha influido en mi trabajo —la lista es demasiado larga y ya fue incluida en el libro de Waldrop—. pero pienso que es justo decir que ninguna otra interac- ci6n de trabajo ha constituido un reto de tal magnitud, La MacArthur Science Foundation ha apoyado mi trabajo consisten- temente durante varias décadas: primero, cando formé parte del Lo- gic of Computers Group de la Universidad de Michigan, con Arthur Burks como investigador principal. Atos mas tarde, cuando Burks ¥ yo nos convertimos en coinvestigadores principales, me brinds nueva- ‘mente su apoyo. A propésito de Art Burks, recuerdo que cuando yo era tun joven miembro del personal de la Universidad de Michigan, ¢1 uti- lizé su prestigio para encaminarme por los senderos que no formaban parte de las rutas tradicionales de la universidad. Ha sido para mi un amigo cercano y un mentor durante casi cuarenta afios, Recientemente me eligieron como miembro de la MacArthur Foun- dation, y fueron Murray Gell-Man y su esposa, Marcia, quienes me infor- maron que habia recibido ese honor (y sf, fue un escéndalo cuando ie Ilamaron). Realmente no hay manera de describir el sentimiento de libertad y de jibilo que acompaita a tal premio. Para bien o para mal, la seguridad financiera que implica me ha estimaulado para dar pasos cada vez mas riesgosos en cl area de la investigaci6n. Las decisiones acerca de los proyectos a largo plazo cuyos beneficios son inciertos, ta- les como la decision de escribir este libro, se hacen mis féciles. Seria imperdonable dejar de mencionar la presentacién de Fran- coise Ulam para estas conferencias, Por supuesto que usted puede leer sus propias palabras al principio de este libro; sin embargo, las pala- bras escritas sobre un papel no pueden tener ia gracia de su discurso ‘oral, Conoct a Francoise en la reunién de recepcién que precedié a las conferencias, cuando tenfamos suficiente tiempo para una conversa- ‘Gdn prolongada, Su encanto e inteligencia crearon inmediatamente un ambiente de vivacidad y calor en un sal6n Hleno de conversaciones. Es facil ver el porqué de su influencia en todas las facetas de la vida personal y de investigador de Stan Ulam, un hecho que el propio Ulam repite continuamente en su autobiografia, He dejado a mi esposa, Maurita, para el final de este prefacio. Ella ha sido el prototipo del profano inteligente interesado en la ciencia. Me ha ayudado de muchas maneras, y no s6lo proporcionandome apoyo yaliento, Por ejemplo, fue Maurita quien me sugitié €l nombre PREFACIO " de “Echo” para los modelos de la sca descritos en este libro. También ley6 los capitulos de Ia obra muchas veces. Aunque probablemente esta mas dispuesta que el lector promedio a aceptar mis buenas in- tenciones, Maurita ha sido en todo lo demas una afectuosa e imparcial critica, $i este libro muestra un poco de clavidad y se salva de la verbo- rea, probablemente se deba a las sugerencias de ella. Jou How.axo Fridhem Gulliver, Michigan Abril de 1995. I. ELEMENTOS BASICOS, UN fa COMO CUALQUIER OTRO en Nueva York, Fleanor Petersson acude su tienda favorita a comprar un tarro de arenques en salmuera, Ella esti plenamente convencida de que los arenques estardn alli, En ver- dad, los neoyorquinos de todas clases consumen vastas cantidades de comida de todo tipo sin preocuparse de que alguna ver pudiera sus- penderse el suministro. ¥ esto no s6lo ocurre con los neoyorquinos: Jos habitantes de Paris, Delhi, Shangai y Tokio esperan lo mismo, Parece cosa de magia que en todas partes esto se dé por descontado. Sin em- argo, estas ciudades no tienen comisiones de planeacién central que se encarguen de resolver los problemas del suministro y distribucién de alimentos. Tampoco mantienen grandes reservas de mercancias para mitigar las fluctuaciones. Sus reservas de alimentos durarfan me- nos de una semana si fueran cortados repentinamente los suministros, 2Gémo evitan estas ciudades la sobreoferta y la escasez aio tras afto y décadla tras década? EI misterio se profundiza cuando observamos la caleidoseépica watu- raleza de las grandes ciudades, Compradores, administradores, calles, puenites y edificios estan en cambio continuo, asi que la coherencia de la ciudad es algo impuesto de alguna manera sobre un flujo constante de personas y estructuras, Igual que la ola estacionaria que se forma fren- te a una roca colocada en medio de un torrente de rapido movimiento, Ja ciudad puede considerarse como un patron estable en el tiempo. Ninguno de sus constituyentes permanece estitico en su lugar; no ‘obstante, Ia ciudad persiste. L_ seus | os Shs~ ca. hed ae FiceRA I, 16, Lox sete bios pelo sistemas compl dep 54 ELORDEN OCULTO Este uso de los bloques de construceién para generar modelos inter- nos ¢5 un caracteristica bien establecida en los sistemas complejos adaptables. Cuando el modelo es ticito, el proceso de descubrimiento ‘ycombinacién de los bloques de construccidn generalmente esti suje- to @ una escala de tiempo determinada por la evolucién; cuando el modelo es manifiesto, la escala de tiempo puede ser de una magnimd menor. Para finalizar, quiero insistir en lo que afirmé cuando abordé ‘el tema de los modelos internos y durante la diseusi6n inicial sobre la adaptaci6n: que el proceso de adaptacién subyacente permanece sin ‘cambios a través de toda la gama de sca, utfuncionaidad autoreparaién chad dD Nuova Yor conto especial Fioues L17. 8 papel debs sete sion lest de los sistemas complejos adap. gist snésio0s 8 .ZADONDE DIRIGIRNOS DESPUES? Los siguientes tres capitulos combinan de diferentes maneras los siete Daisicos que acabamos de analizar (véase la figura I.16), buscando de sta manera aleanzar dos metas. La primera, objetivo del siguiente ea- pitulo, es proporcionar una definicién de “agente adaptable” que fun- Gione con las diferentes clases de agentes quie se encuentran en los sca. La segunda, tema de los capitulos {IT y IV, es proporcionar un modelo de computadora que sea lo sulicientemente general para permitirnos llevar a cabo experiments relevantes para todos los sca. En los capitulos subsi- guientes aparecerdin una y otra ver. estos siete conceptos, sugitiéndonos ‘mecanismos y proporcionndonos directrices (véase la figura [17). Mas alld de estas dos metas hay un objetivo mayor: descubrir los principios generales que nos permitirin sintetizar los comportamicn- tos complejos de los sca a partir de leyes simples. Los sistemas comple- {jos adaptables son muy diferentes de la mayorfa de los sistemas que se han estudiado cientificamente, ya que los primeros exhiben coheren- cia incluso si estin sometidos a cambios continuos, y esto lo logran por medio de las acciones condicionales y la adaptacion; ademas, no re~ quieren de ningvin mecanismo central de direcci6n. Al mismo tiempo, parece que todos los 5c tienen puntos de apalancamiento, en donde pequeiias adiciones producen grandes cambios dirigidos, Resultara sms ficil descubrir estos puntos de apalancamiento si podemos descu- brir los principios generales que gobiernan la dinamica de Tos sca. EL conocimiento de mas hechos respecto a los puntos de apalancamiento ;nos proporciona, a su vez, lineamientos para aplicar enfoques mas efectivos para resolver problemas relacionados con los sca, tales coino Jas enfermedades inmunes, la decadencia de los grandes centros urba- nos, lt innovacién industrial, ete. Por tratarse de problemas tan comple- jos, es improbable que hagamos progresos sustanciales si no contamos ‘con lineamientos tesricos. Estamos apenas en el principio de una bus ‘queda de principios generales, pero tenemos algunos indicios de lo que odrian ser estos principios. Il, AGENTES ADAPTABLES ReoreseMos 4 14 cluna De NUEVA YORK para una breve ilustracién del aspecto que proporcionan los siete éasizos expuestos en el capitulo an- terior. Los agentes formados por agregacién constituyen un rasgo cen- tral, tipificado por las empresas que van desde el Citibank y la Bolsa de ‘Valores hasta la tienda de la esquina y el taxi de propiedad individual. Fstos agentes determinan virtualmente todas las transaeciones fiseales, asi que, a nivel de abstraccidn, el sistema complejo adaptable que es la ciudad de Nueva York puede ser descrito adecuadamente por las inter- acciones evohutivas de dichos agentes. Basta con mirar los logos de pu- blicidad y de identificacién industrial y comercial para ver de qué ma- nera los marbetesfacilitan y dirigen estas transacciones. La diversidad de estos marbetes subraya la variedad de empresas y actividades de la ciu- dad, asi como el complejo flujo de mereanefas que entran, salen y irculan dentro de la ciudad como resultado de esto. El hecho de que la ciudad de Nueva York retenga st coherencia tanto en el corto como en el largo plazos a pesar de la diversidad, el cambio y la falta de una direceién. centralizada es un enigma tipico de los sca. En este ejemplo a nortinealidad se encuentra cerca del centro del enigma. Las no-tinea- lidades de Nueva York se manifiestan de manera mas evidente en los ‘mordelas internas —modelos internos de las empresas— que realizan las transacciones, Estos modelos pueden ser desde modestos planes de venta diarios hasta sofisticados proyectos corporativos. Existen tam- bien constanies innovaciones, tales como el flujo continuo de nuevos instrumentos financieros en Wall Street (los nuevos instrumentos de inversiGn, los derivative, han absorbido todavia més dinero que sus pre- slecesores, los bonos junk). La proyeccién de tendencias y otros analisis lincales no son instrumentos adecuados para estudiar estas propieda- des, Sospecho que surgirian nuevos tipos de percepcién de la proble- :itica urbana si pudiéramos descubrir los bloques de construccidn que se ‘combinan y se recombinan para determinar la apariencia exterior de Ja ciudad, Los bloques de construecién para una ciudad son mas dificiles, de descubrir que los de otros sca, aun Cuando los contratos, los organi- gramas, los permisos, las piezas de la infraestructura urbana y los im- [puestos son los mas obvios candicatos. Esta vision de Nueva York no es més rebuscada que otras maneras de describir este conglomerado urbano, pero sugiere que Ia ciudad no es sr 58 ELORDEN OCULTO diferente a cualquier otro sca. Ya hemos visto estas mismas caracteristi- ‘eas basicas en otros sca, pues constituyen rasgos distintivos de todos ellos. Incluso podria decirse que no existe sistema complejo adaptable en el que no estén presentes estas siete caracteristicas basicas, Esto nos sugiere que debemos tratar a todos los sca dentro de un marco de ta bajo comin que explote estos basicos. No obstante, hay tuna caracteris- tica de Jos sca que nos impide aplicar con todo rigor dicho marco de trabajo: los agentes de los diferentes sistemas, que aun dentro de un mismo sistema exhiben diferencias reales. Por ¢jemplo, las empresas de una ciudad no parecen tener mucho en comiin con los anticuerpos del sistema inmune, y los organismos vivos de un ecosistema no se pa recen en absoluto las neuronas del sistema nervioso. En vista de esto, zrealmente es posible ericontrar una representaci6n comin para tan diferentes agentes? De ser posible, seria factible aplicar un enfo- jue comin a todos los sca; en c2s0 contrario, babria que abandonar el ntento. Por lo tanto, nuestro préximo objetivo es la biisqueda de una representacién comtin para los agentes, Exploraremos las posibilidades en tres etapas, Primero buscaremos ‘una manera uniforme de representar las habilidades de las diferentes clases de agentes, sin tomar en cuemta los cambios que pudieran ser producidos por Ja adaptacién. Llamaremos al resultado de esto sistema de desempero. La siguiente etapa es para utilizar el éxito (0 el fracaso) de Tos agentes para asignar créditos (premios) o penalizaciones @ par- tes del sistema de desempeiio, Llamaremos a este proceso asignacion de avddito, al como se acostumbra en otros estudios de aprendizaje y adaptaci6n, La tltima etapa esti relacionada con la realizacion de ‘cambios en las habilidades del agente para remplazar con nuevas op- ciones las partes a las que se asignaron bajos eréditos. Por razones, que se volver‘n evidentes mas adelante, lenominaré a este procedimiento descubrimiento de las regtas. SISTEMA DE DESEMPENO El primer paso para arribar a una descripcién comin de los agentes consiste en regresar a la descripcidn de los agentes adaptables que pre- sentamos al comienzo del capitulo anterior, en donde utilizamos re- glas como instrumentos de definicién. Ahora daremos un uso més am- plio a las reglas y las consideraremos como mediios formales para definir a los agentes, Para que las reglas resulten instrumentos exitosos de unificacidn, aplicables a cualquier forma exterior de los agentes, deben satisfacer los siguientes tres criterios: piss AGENTES ADAPTABLES 50 1. Las reglas deben utilizar una sola sintaxis para deseribir a todos los agentes de los sca. 2. La sintaxis de la regla debe servir para todas las interacciones en- ire los agentes, 3. Debe haber un procedimiento aceptable part modificar adaptati- vvamente las reglas. En el capitulo anterior consideramos primero las reglas de la clase inde simple: SI (alguna condicién es certa) ENTONCES (realie cierta accidn). Las reglas SI/ENTONCES se utilizan en una amplia variedad de campos: en psicologia se llaman las reglas del estimulo-respuesta (véase la figura IL.1); en inteligencia artificial son lamadas reglas de condicidn-acci6n; en logica son Hamadas reglas de la produccién. ‘Nuestro objetivo inmediato ¢s encontrar una sintaxis simple para las reglas SI/ENTONCES, una sintaxis que funcione para cualquier clase de agentes. Mas adelante agregaremos una modificacién simple que proporcione a las reglas SI/ENTONCES suficiente poder para mode- lar cualquier agente que pueda ser modelado en una computadora Bntrada/salida (Input/ourpat) La sintaxis que utilizamos para las reglas SI/ENTONCES depende ccriticamente de la manera como interacciona el agente con su medio ambiente. Empecemos con el lado de la entrada (infra!) En términos ordinarios, un agente percibe su medio ambiente a través de una serie de estimulos, $i el agente es un anticuerpo, el estimulo lo constituyen las configuraciones moleculares —marbetes— de las superficies de los antigenos. Si el agente es un ser humano, Ios estimulos los recibe a tra- vés de sus cinco sentidos. Si el agente es una empresa comercial, Ios es- timulos son los pedlidos, el flujo de efectivo, las mercancias recibidas, etc. En términos generales, los agentes estin siendo bombardeados por tal cantidad de estimulos, que reciben mucho mas informacién de Ta que pueden utilizar. : La primera labor del agente, entonces, ¢s filtrar el torrente de infor- macién que produce su medio ambiente. Pata describir esta operacién de filtracién adoptaré el punto de vista comin, de acuerdo con el cual ‘el agente recibe informacién de su medio ambiente a través de un con- junto de datecores. La clase mas simple de detectores és la de los que per ‘ciben una propiedad particular del medio ambiente activaneose evian- do esta propiedad esti presente, y desactivindose cuando no Io esta (véase la figura IL-2), Esto significa que el detector es wn axtificio binario o HL ORDEN OCULTO que transporta un bitde informacién acerca del medio ambiente, Tales etectores podsfan parecer muy limitados en se eapacidad para percibir (sentir) el medio ambiente; no obstante, un nimero suficientemente grande de detectores puede transportar una gran cantidad de informa. Gi6n. De hecho, la cantidad de informacién trasmitida se eleva exponen. cialmente con el niimero de detectores, Por ejemplo, un grupo de tres detectores binarios puede codificar 2 x 2x2 = colores; un conjunto de 20 detectores, utilizando una variante del juego de “las veinte pregun- tas", puede producir 2 (mas de un millbn) de distintas categoria sIILO-RESRUESA 9 ‘un objeto pequero wela ala suid uovelacabera 1a aqua rots U1. Une mpl dol etimutorespuesta Vale la pena subrayar, en lo referente a los detectores, la misma ad- vertencia que hicimos para las reglas. Esta discusién sobre los detecto- tes no parie del supuesto de que fodos los agentes de un Sca utilizan de- tectores binarios. Lo que pretendemos demostrar es que podemos utilizar grupos de detectores binarios para descrbir la manera en la que Jos agentes filtran la informacién proveniente det medio ambiente Podemos, incluso, traducir otros medios de deteccion a este formato binario, El valor de los detectores binarios en esta discusién radica en su utilidad en la modelacién de los agentes adiaptables arbitearios. Por medio de los detectores binarios podemos utilizar mensajes estan- darizados —expedientes binarios— para representar la informacion seleccionada por un agente. ¢Podemos extender esta estandariza- cién hasta el lado de la salida (ouput) del agente? Las acciones de los agentes de los sca.on, después de todo, tan diversas como sus maneras de extraer informacién de su medio ambiente. Podemos ganar un Poco de terreno en la estandarizacién de la salida “invirtiendo”, la fun- cidn desemperiada por los detectores. Para tratar de lograr esto, des- cribamos las acciones del agente en términos de un conjunto de efectores, AGENTES ADAPTABLES a cada uno de los cuales tiene un efecto elemental sobre el medio am- Diente cuando es activacio por un mensaje apropiado (figura 11.2). En un momento dado, la respuesta total de un agente es generada por ‘grupos de efectares que se activan en ese instante: esto es, los efectores ‘tecodijican los mensajes estandarizados para provocar acciones en el \edio ambiente, Al hacer esto, los efectores “invierten” el procedi miento que utilizan los detectores para codificar la actividad del me- dio ambiente y convertitla en mensajes estandarizados. Como en el ‘caso de los deiectores, utilizamos los efectores como mecanismos des- cxiptivos para modelar la salida adaptativa del agente adaptable Dasecnet tacts ade roa lee Tab abe te ‘sitena fein obec eases Fiacks 1.2. Detctones y ftons para wn sistema de dese. Procesamisnto y sintaxis Gon esta descripcidn de fa entrada (input) y la salida (output) de los agentes en términos de mensajes, consideramos ventajoso manejar las interacciones de las reglas de los agentes de fa misma manera, La ca- pacidad para ser el sostén de la interaccidn es lo que da a las reglas simples SI/ENTONCES el pleno poder de un lenguaje de programa- cin, Para que una regia SI/ENTONCES interaccione con otra se re quiere que la parte SI de una de las reglas sea sensible a las acciones especificadas por la parte ENTONCES de la otra regla, Si considera- ‘mos.a cada regla como un especie de microagente, podemos extender el papel de entrada/salida de los mensajes para que scan ¢l soporte de Jas interacciones. Consideremos a cada regla como poscedora de sus propios detectores y efectores 0, més especificamente, consideremos a cada regla como un mecanismo de procesamiento, La regla, entonces, tendré la siguiente forma: e EL ORDEN ocUI:TO SI (hay un mensaje de Ia clase correcta) ENTONCES envie un men- saje espectfico). a Ln objeto pequeho wiela l frente BOM onvia a a BTONGE extiende se lengua Un mensoje representa aqu per el smbolo no interpetado @-~ sus se epresentado en ls implementaciones, mediante una Secuencia no terretada de ts. acura TL. Ui poqus soma de trsistn de mensajes based on reas. Esto es, el agente es descrito ahora como wn conjunto de rglas de ‘mensaje/procesamiento (véase la figura 11.3). En esta nueva situacion, al gunas reglas acttian sobre los mensajes originados por el detector Procesando informacién del medio ambiente y otras actiian sobre los mensajes enviados por otras reglas; algunas reglas envian mensajes que actian sobre el medio ambiente a través de los efectores del agente y owas envfan mensajes que activan otras reglas (véase Ia figura IT), Con esta descripcion como gufa, porlemos desarrollar una sintaxis ge- neral para los agentes de un sca (véase la figura IL5). Comenzaremos con los mensajes permisibles. Por sencillez, asumamos que todos los men sajes son eadlenas o secuencias (strings) binavias, cadenas de unos y ceras, ¥y que todas tienen una longitud estindar: (Ksta tltima suposicién signi- fica que los mensajes son muy parecidos alas secuencias de informacion binaria del interior de una compntaciora.) Aun cuando estos supuestos no son realmente necesarios, simiplifican la presentacién, De acuerdo con esta clase de notacién, un mensaje tendra la siguiente forma: AGENTES ADAPTABLES 6 100010111, Jers! donde L es la longitud del mensaje estindar: El conjunto de todos los posibles mensajes, Mes, entonces, el Conjunto de todas las cadenas de lunos y ceros de longitud L. La designacién formal de este conjunto es (1,014 Liste demenssis es oe — es ) si = enTonees - @ Sl = ENTONCES - (— ! sie ENTONCES 1 3) Ll fewiende ‘ 1 J istenaua ‘obsenacién > mens mensaje accion SX a cuna 4 Un sie de deseo transmis de mensajes, Despnés debemos proporcionar una sintaxis para Ia condicién late- zal de las reglas, una sintaxis que especifique a cuales mensajes respon- de la regla, Existen muchas maneras de hacer esto, pero una de las, 6 HLORDEN OCULTO as simples consiste en introducir un nuevo simbolo, #, el cual sera ferpretado como “cualquier cosa es aceptable en esta posicién”, Mas coloquialmente, podriamos denominarlo el simbolo de “no importa” Considere la siguiente secuencia o cadena de simbolos: 1A, [ero los enales som utilizados como la parte condicional de una regla. Esta condicion responde a cualquier mensaje que comience con un 1, sin mportar qué digitos aparezcan en las otras posiciones LI. De la mis ma manera, la cadena ‘het... #140 | fers! representa una condicién que responde a cualquier mensaje que ten- ga.un 1 en Ja antepentiltima posicién, L~ 2, y un 0 en la tiltima post Gidn, L. Bajo esta ordenacién, cl conjunto de todas las condiciones, C, ¢s el conjunto de todas las cadenas dle unos, ceros y # de longitud L.La designacion formal de este conjunto es {1,0,#)!, Debido a que la dnica accién de una regla en este formato es enviar un mensaje, todas las reglas tienen la siguiente forma: SI (condicidn de Ces satisfecha) ENTONCES (enviar mensaje de M) Por cjemplo, con = 5, la nega SI (1####) ENTONCES (00000) transmitira el mensaje 00000 si detecta cualquier mensaje que comien- cecon 1. La regla similar SI (10101) ENTONCES (00000) transmitiré ef mensaje 00000 slo si detecta el mensaje especifico 10101. Con los dos conjuntos —M = (1,0\"y G = (1,0,8!'—y este formato pa. ra las reglas, tenemos la capacidlad para deseribir el comportamiento de una amplia variedad de agentes. Un agente en particular es descrito estableciendo el grupo de reglas, en este formato, que genera su com. AGENTS ADAVTABLES « portamiento. Las reglas asf definidas actitan en gran medida como las instrucciones que se le dan a una computadora: el grupo sirve como tun programa que determina el comportamiento del agente. Si hay alguna manera de modelar un agente en una computadora, estas con- diciones técnicas garantizan que puede ser modelado utilizando in grupo de reglas en este formato. Para obtener todo el poder de una Computadora, dehemos dar a nestras reglas dos condiciones inde- pendientes SI ( ) ¥SI () ENTONCES ()— y proveerlas con la ne- gacién ST NO ( ) ENTONCES ( ); sin embargo, por el momento po- demos ignorar estos refinamientos, weve a popu cere, Mera deeds fey D) emo IE he i a tale (2) A se muon ipequeto)icerano| cree 1 impor no iz cst prpleds) scone qu win mis acepa unrengo mas amps de meres oem ger Fictx4 TLS. Sita para wn sistema de dasompero. Con esta sintaxis obtenemos una técnica uniforme, basada en re- gias, para modelar alos agentes, sean neuronas, anticwerpos, gan thos Hivos oeimpresas comerciales. Las iguras C2 y I 3-—tas cules no hencr oma emo ses ran aso de wa ele para capta una feta del comportamiento de wna ana (os sin. booe abstracts ponen efi en arbluraridad dels seouencas de fatscon que se codifcan Toe menses). Actividad simulténeaparalelismo Antes de seguir adelante, debemos hacer una cuidadosa distineién en- tre los diferentes usos de los mensajes en este sistema. Los mensajes originados en el detector tienen un significado interconstruido asigna- 6 EL ORDEN OCULTO do por las propiedades ambientales detectadas, Por el con! mensajes originados en la regla no tienen asignada una significacion, ‘excepto cuando son utilizados para activar efectores. Estos tltimos ad- quieren significacién en términos de su capacidad para activar otras reglas, Es importante diferenciar estas dos clases de mensajes, ya que, de'no hacerlo, los mensajes originados en la regla podrian ser toma. dos como provenientes del medio ambiente, lo que producitfa *aluc naciones" en el agente, Generalmente se puede hacer esta distincién asignando marbetes de identificaci6n a las dos clases de mensajes. Debido a que los mensajes originados en reglas no tienen significa: do interconstruido (seleccionaremos por el momento mensajes que activan efectores), no encararemos contradieciones cuando varios mensajes originados en reglas estén presentes al mismo tiempo. Esto significa que podemos tener varias reglas activadas simultaneamente sin temor a caer en contradiccién; mas reglas activas significan simaple- mente mis mensajes. Esto constituye una ventaja sustancial. Tenemos un sistema que puede modelar las actividades concurrentes tipicas de lun Sca y, como veremos més adelante, podemos utilizar los mensajes ‘como bloques de construccién para modelar siwaciones complejas Para explotar esta ventaja, proporcionamos al agente una especie de inventario —una lista de mensajes que almacena todos los mensajes ac- ‘tuales—. Una til aunque fantasiosa metafora para visualizar la actua- cion de un agente bajo este arreglo es una oficina en la que hay un gran tablero de mensajes o tareas por concluir, A los trabajatiores de la oficina se les asignan escritorios, y cada uno tiene la responsabilidad de responder cierta clase dle memorandos del tablero. Al comenzar el dia los trabajadores empiezan a seleccionar los memorandos que les correspondeen, los van contestando y, al conchuir la jornada, regresan, al tablero nuevos documentos, producto de sus esfuterzos del dia, De acuerdo con esta metifora, el agente corresponde a la oficina; los memorandos, a los mensajes; el tablero, ala lista de mensajes; los escri- torios, a las reglas; los memorandos provenientes del exterior, a los iginados por el detector, y los mensajes dirigidos al exte- ior, a los mensajes ditigidos al efector. En el agente, como en la oficina, se realizan muchas actividades si- multéneamente, y s6lo algunas de ellas son visibles desde el exterior. Esta prevision para varias reglas simulténeamente activas ayuda a comprender Ja capacidad de un agente para enfrentar un mundo siempre cambiante, Esto contrasta notablemente con cl enfoque en el que el agente tiene sélo una regla para cada situacién. Con el enfoque de una sola regia, cl agente debe tener reglas preestablecidas para to- das as posibles situacionesa las que se enfrente. Sin embargo, no seria a AGENTES ADAPTABLES o adecuado que un agente tuviera una sola regla para cada situacién a la {que se enfrentara, por la misma razén por la que el sistema inmune ca- rece de un conjunto de anticuerpos preparados para detener a todos los posibles antigenos: existen demasiadas posibilidades. En cambio, si simultaneamente cuenta con reglas activas, el agente puede combin: una serie de reglas ya probadas para describir la nueva situacién, Las reghas se convierten en bloques de construcci6n, Tips Taker | Contrase con regis roma blues de constueion "ic pepdedet sen BO eeree FY omens ene Fo fose enone oe a) pm dee seein Pee ee | bene ages) | ane pami Leen, Ts | eee ied | 7 Ee] eto psinnge A] A ater IGOR HL6, Us empl de pralsmo de gla A modo de ejemplo, imaginese que se encuentra en la situacién que habiamos descrito con anterioridad (se pinché un neumatico cuando manejaba un Saab rojo por la autopista). La mayoria de nosotros munca 6 LONDEN ocUETO hemos manejado un Saah —rojo 0 de cualquier color—; no obstante, ann asi estariamos en condiciones de actuar apropiadamente, gracias a que podemos descomponer esta situacién en varias partes, con cada tuna de las cuales si estarnios medianamente familiarizados, Por ejemplo, la mayoria de nosotros ha tenido alguna experiencia con neumdeess pinchados: la mayoria de nosotros ha manejado por una autopista, ete Esto puede deseribirse dentro de las reglas para manejar todos 0 casi todos los componentes de esta situacidn. En términos de nuestra sinta- xis para los agentes basados en reglas, esto significa reglas en la forma de SI (se pincha un neumatico mientras manejamos) ENTONCES (disminuir la velocidad), SI (se pincha un neumatico en la autopista) ENTONCES (orillarse hacia el acotamiento), ete, codificadas en la sintaxis C/M (véase Ta figura 11.6). Estas reglas, invocadas simultdnea- mente por los mensajes originados por el detector y por otras reglas, activan Tas secuencias apropiadas del efector. Por suptcsto, en una sic tuaci6n real habria muchos medios tonos que no se podrian captar con un ejemplo tan simple como éste. Habra mensajes y reglas activas correspondientes a la memoria de corto plazo (relacionados con los sucesos recientemente ocurridos en la auitopista), a los objetivos del Viaje, ete. Cientos de reglas podrian estar activas, pero el principio de la descomposicién de la situacién en bloques de construccién fami res serfa el mismo. ADAPTACION POR ASIGNAGION DE CREDIT Hasta ahora no hemos dicho nada acerca de la capacidad del agente para adaptarse. Hemos descrito el sistema de desempeia del agente, sus habilidades en un particular punto del tiempo. Ahora tenemos que analizar de qué manera cambia el desempeno del sistema a medida que gana ex: petiencia EL primer paso consiste en examinar con atenei6n la funcién de las teglas en el sistema de desempeno. De acuerdo con el punto de vista ‘usual, las reglas representan un conjunto de hechos acerca del medio ambiente; por tal motivo, todas las reglas deben mantener cierta consis. tencia con las demas, Si se introduce un cambio o una nueva regia, debe verificarse que esto no provoque inconsistencias entre las reglas. Pero hay otra manera de considerar las reglas. Dehen ser vistas como hipstesis que estin bajo prueba y confirmacién. Bajo este punto de vista, el objetivo es proporcionar contradicciones, mas que tratar de cvitarlas; es decir, las regias vienen siendo opciones, hipdtesis para- AGENTES ADAPTABLES oo leclas. Si una hip6tesis falla, hay otras reglas en competencia que estan ala espera de ser probadas. Por supuesto, yo estoy a favor de este titi ‘mo punto de vista La asignaciOn de crédito es una tarea facil cuando el medio ambien- te produce una remuneracion (recompensa, premio) por una accion, Si damos ynelta ala Tlave de ignici6n det motor y el auto arranca, esta accion rapidamente se convierte en parte de nuestro repertorio, La asignacion de crédito se hace mucho mas dificil cuando un conjunto de acciones “antiguas” hace posible un resultado reciente, El proble- ma se puede exponer claramente si examinamos un juego de damas chinas. Dar un triple salto en este juego, cuando es posible, siempre contribuye a ganarlo y, como en el-caso de la llave de ignici6n del mo- tor, es facil acreditar una regia que sugiere esa accién, Sin embargo. zcmo acreditaria esta regla un jugador neéfito si su accién sélo pro- dujera efectos después de cuatro jugadas? :Como sabré el nesfito que fue precisamente esa regla, y no otra, la que produjo el resultado en las etapas subsecuentes? ¢Como sabra que este resultado no fue sim- plemente la consecuencia de un error cometido por su oponente? Sin ‘embargo, un buen jugador de damas, asi como las acciones complejas de un Sct, dependen de la habilidad para acreditar con antieipacién y de establecer una adecuacda secuencia de etapas. El problema de la asignacién dle erédito se hace todavia mas complica ‘do cuando consideramos un sistema de desempeiio con muchas reglas activas simultaneamente. A medida que el sistema continga adaptin- dose, algunas reglas se hacen més ttiles y otras no; algunas descompo- nen ¢] medio ambiente de tal manera que pueda ofrecer guias titiles para la accién, y otras no. Adem, pueden pasar largos periodos antes de que las consecuencias de una accién actual sean evidentes. Algunas acciones pueden ser daiinas a corto plazo, pero titles a largo plazo, como ocurre durante un juego de ajedrez. Con todos estos impedi- rmentos, zcémo determina un agente qué reglas son iitiles y cuales son perjudiciales? Aqui podemos utilizar otra itil metafora: el eslabon estandar entre Ia competencia y el capitalismo. Cada regla puede ser tratada como un productor (factor, hombre promedio) que compra y vende mensajes. Los “proveedores” de una regla son aquellos que envian mensajes que satisfacen sus condiciones; los “consumidores” de uria regla son aquellos {que actiian sobre sus mensajes. La fuerza de uma regla es tratada como ¢lefectivo en mano. Cuando una regla “compra” un mensaje, debe pa- ‘gar por él con el efectivo que tiene a la mano, con lo que se reduce st fuerza. Cuanclo una regla “vende” un mensaje, su fuerza se increments con la cantidad que le paga el comprador (véase la figura 11.7) ” HLORDEN o«tLTO wonder rslan consunir om neneie eae ah metwomass) “wokmmealfea) “tba feo) Pe ma is ci Aacputscela nso: ET] 00-68 Frolasquedetrminan cescenaloy que modvan quel ecompensh seafuerte Ficuna TL7. Asignaciom de cits. Cambie la sre deta ig La competencia es introducida a través de un proceso de subasta (vase la figura IL.8). Sélo las reglas cuyas condiciones estan satisfechas son eleyibles para competir, y silo los ganadores obtienen el derecho de enviar (‘vender") sus mensajes. El monto de la oferta de una regla esta determinada por su fuerza, Las reglas més fucrtes hacen ofertas mis altas, Después los ganadores pagan a sus proveedores, y los perde- dores no pagan nada, be : g Si elobetoestsala cues ENTONCES gia la cabers 15° a zquerde (8 1 elobjeto esta lninquerde ENTONCES gialacabera 3° aladereha {12 as egos ate como hips on competnca custo ms fuerte ‘ene de pevalecerenlacompatencn ‘Solas els que ganan[ncompetna transmitn sus mensen mis pstbildades Ficuna IS. Competencia de las las on wn sistema patel based ex ets. Después de competir, los ganadores tienen menos fuerza y sus pro- veedores mis. Los ganadores, sin embargo, han obtenido el derecho de enviar sus mensajes, y con esto la posibilidad de tener consumidores que se los compren y les paguen por ellos. En este escenario, una tegla ganadora prosperarsi —se hard mnds fuerte— s6lo si sus consumidores le Pagan una cantidad mayor de la que ésta pag6 cuando gané la subasta. (El viejo adagio del capitalismo dice: “Compra barato y vende caro”) AGENTES ADAPTABLES. a De qué manera exactamente este proceso de compra y venta ayuda al agente a resolver su problema de asignacién de crédito? Para hacer la conexién, debemos determinar quiénes son los consumidores Ccompradores") finales. Son las reglas que estan activas cuando el agente recibe una recompensa abierta del medio ambiente, El agente sabe que estas acciones son deseables —como en el caso del salto tri ple—, por lo que las reglas directamente responsables son antomtica- mente reforzadas. Debemos recordar que la recompensa explicita se reparte entre Jas reglas que estén activas en el momento en que se oto ga. Este proceso es muy parecido al del condicionamiento pavioviano, que consiste en el reforzamiento inmediata de las acciones deseables. ‘Ahora consideremos cualquier regla que sea un proveedor inmediato de otra regla considerada como un consumidor final reforzado. Su- pongamos que este proveedor ayuda a establecer el escenario que hace posible que esta regla produzca una recompensa del medio ambiente. Como las recompensas hacen mas fuerte al consumidor final, tan el monto de las propuestas, debido a que éstas son propor su fuerza. El proveedor, a su vez, se vuelve mas fuerte debido a que recibe un pago mayor. Después de un tiempo, los proveedores de los proveedores también se beneficiardn de este incremento de fuerza si contintian proveyendo de una plataforma (escenario) para que acttie el proveedor anterior. Podemos repetir este proceso a través de toda la cadena de proveedores que proporcionan la plataforma para la recom- pensa explicita de Ia acci6n del tiltimo consumidor. Todas kas regias de Ja cadena finalmente serain reforzadas debido al progresivo refuerzo de sus consumidores. Pero todavia queda una duda: ¢Qué ocurrivia si la regla-proveedor envia un mensaje que activa a la regla-tiltimo consumidor, pero “hace ‘trampa” al no establecer un escenario apropiado para la accién de este consumidor? La regla-consumidor, entonces, no sera recompensada, aun cuando haya pagado a su proveedor. Habra pagado sin ser re compensada, con la consiguiente disminucién de si fuerza, Como consecuencia de esto, durante el siguiente cielo de transacciones el proveedor que hizo trampa recibira una paga menor por parte del Consumidor. Debido a que el proveedor se encuentra en una etapa anterior a la del consumidor final en el proceso de construccién de fuerza, pronto llegara a un lugar situado por debajo del de sus compe tidores. Esto ocurrird con toda seguridad si hay otras reglas que cumplen con establecer una plataforma para el consumidor final Como puede verse, los tramposos no prosperan hajo este régimen. Se puede repetir este argumento a lo largo de cualquier cadena de pro- ‘veedores, 2 HL ORDEN OCULTO Este procedimiento de asignacién de crédito, al cual Vamaré el algo- 2itmo de la brigada de ta cubeta, refuerza las reglas que pertenecen a cade- ‘nas de accin que terminan en recompensas, El proceso constituye una confirmaciéa de la hipotesis sobre el establecimiento de plataformas y metas. Los teoremas de las matenvaticas aplicadas a la economia pue- den ayudar cuando Jos apliquemos a ambientes estadisticamente rege lares, y las simulaciones por computadora muestran que funcionan en ‘una gran variedad de ambientes, particularmente cuando se combi nan con la regla del proceso de descubrimiento, Modelos internos Existe una modificacién para el proceso de subasta que leva més ade- ante a la construccién de modelos internos, que esta basada en la per- ‘cepci6n intuitiva de que, en igualdad de circunstancias, un agente pre~ fiere reglas que utilicen mas informacién acerca de una determinada situaciOn. En nuestra sintaxis, la cantidad de informacion utilizada por una regla depende del ntianero de simbolos # en las condiciones de la re- ala. Una regla es mas eperfca si tiene menor cantidad de simbolos # en sus condiciones (véase la figura 11.5). Por ejemplo, la condicicn #4... # acepta cualquier mensaje, por lo que no proporciona informacion al- guna cuando es satisfecha, En el otro extreme, la condicin 11...1 es satisfecha por un mensaje especifico —una cadena de unos—, propor- Gionando el maximo posible de informacion. Para instrumentar la pre- fercncia debemos modificar el proceso de subasta, y la manera mas simple de lograrlo es haciendo a la oferta proporcional al producto de la fuerza y la especificidad, De este modo, si la fuerza o la especificidad estén cerca de cero, la oferta también estard cerca de cero. Sélo si am- bbas “la fuerza y la especificidad— son grandes, la oferta sera grande. ‘Veamos una nueva competencia entre una regla més especifica, r1, y tuna regla menos especitica, r2, Para que este ejemplo sea mas concre- to (figura IL), hagamos que rf sea la regla del estimulo respuesta SI (hay un objeto moviendose en el medio ambiente) ENTONCES (huye), y permite que »2 sea la rogla del estimmulo-respuesta. SI (hay un objeto pequento moviendase cerca en el medio ambiente) EN- TONCES (aproximate) Cualquier mensaje conceriente a un objeto que se mueve satisfard 1, pero solo un subconjunto de estos mensajes satisfara 12; es decir, aquellos mensajes que informan sobre las propiedades adicionales del objeto: que éste es pequerio y que est cerca, Sin embargo, cuando hay AGENTES ADAPTABLES 8 tun objeto pequeito moviéndose cerca, rly 12 deben estar en compe- tencia directa, Si 71 y 72 tienen una fuerza mas 0 menos igual, 12 ten- dra la ventaja, debido a su mayor especificidad. Por Jo tanto, +2 hace ‘una oferta mayor debido a que utiliza mas informacién acerca de la si tuacion. ‘Abort por primera vez estamos en posicion de discutir Ia formacién de los modelos internos. En efecto, las dos reglas 11 y r2forman un modelo simple del medio ambiente. Pero es un modelo evidentemen- te no resuelto, debido a que rf y 12 entran en contradiccién cuando son activados simulténeamente. No obstante, una inspeccién mas de cerca de esta contradiccién revela una especie de simbiosis entre estas dos reglas. Supongamos que este agente —una rana—vive en un medio ambiente en donde la mayoria de los objetos en movimiento —cigivetias y mapaches— son peligrosos, pero los objetos en movimiento cercanos y pequefios, Ins "moseas”, son alimento. La regla mas general, la 77, constituye tina regla genérica para ser wtilizada cuando no existe in- formacion detallada, Ia cual ordena: “Si se est moviendo, es peligro so”. Pero si esta regla fuera aplicada siempre, la rana perecerfa de hambre debido a que huirfa de todo objeto en movimiento, incluidas las moseas que constituyen su alimento. Por el contrario, la regia mis especifiea, la 2, produce una aeciGn correcta cuando las moscas estin cerca, constituyendo una excepcién para la regla genérica. Y, como es as especifica, compite ventajosamente con la otra debido a que con- tiene la restriccién “pequefio y cercano”. El siguiente argumento revela Ia simbiosis. Cada vez que la regla genérica rf comete un error, pierde fuerza. Cuando la regla r2 gana, previniendo el error, evita también el error de la ri. Asi, la presencia de la r2, aun cuando contradice a la r1, ‘en realidad la heneficia. Las dos reglas, juntas, proporcionan a la rana modelo una interaccidn mucho mejor con el medio ambiente que la {que le proporcionarfa tina sola ‘Al formar modelos internos con la presente sintaxis, ericontraremos ‘que es mas facil deseubrir y probar una regia general que una especifi- a, Para comprobar esto, consideremos a un agente que tiene L= 100 detectores. La condicién mas simple que utiliza cualquier informacion es la que depende de un solo detector, teniendo el simbolo # para to- dos los demas detectores. Un. caso tipico seria la regla genérica para nuestra rana, la cual utiliza s6lo la propiedad: “moviendose”.

También podría gustarte