Portal Iberoamericano de Gestin Cultural

www.gestioncultural.org

Reflexiones a Propsito de Indicadores y Estadsticas Culturales1

Director Cursos de Gestin Cultural Universidad de Barcelona Barcelona, Espaa

Llus Bonet i Agust

Artculo cedido por el autor al Portal Iberoamericano de Gestin Cultural para su publicacin en el Boletn GC: Gestin Cultural N7: Indicadores y Estadsticas Culturales, abril de 2004. ISSN: 1697-073X.

La dificultad de contar con sistemas estadsticos universales Como usuario habitual de todo dato fiable para conocer y analizar la actividad cultural contempornea les propongo compartir una breve reflexin sobre las caractersticas y limitaciones de los indicadores y las estadsticas culturales existentes. Dicha cuestin se puede observar desde el lado del que colecta datos y elabora estadsticas e indicadores, o desde el lado del que busca y utiliza la informacin estadstica disponible. Los primeros forman un grupo muy reducido de funcionarios, casi siempre con escasos medios, y de consultores privados contratados por empresas y organizaciones gremiales que intentan desvelar (o esconder) una parcela limitada de la realidad cultural. Los segundos estn formados por colectivos algo ms amplios pero de naturaleza e intereses diversos, a veces contrapuestos: agentes empresariales, responsables pblicos, representantes acadmicos. profesionales, comunicadores sociales e investigadores Todos ellos, vidos de informacin, comparten la necesidad de

contar con datos ms o menos vlidos para propagar opiniones, generar polticas pblicas, elaborar anlisis sesudos o poner en marcha estrategias de mercado que les ayuden a entender o labrar la escurridiza realidad cultural. Describir la situacin de la estadstica cultural en la mayora de pases iberoamericanos es presentar una realidad heterognea, llena de vacos, hija de una lgica administrativa bastante anticuada y a menudo opaca. Tampoco la situacin europea es extraordinaria, aunque en los ltimos aos se ha hecho un considerable esfuerzo de sistematizacin, transparencia y puesta en comn. Mxico y Chile son los dos pases latinoamericanos que ms han avanzado en la elaboracin de un sistema de estadstica culturales a lo largo de los ltimos cinco aos, pero sus instrumentos y sistemas de recogida y sistematizacin de la informacin, as como de elaboracin de resultados tienen poco en comn. Algunos pases andinos hicieron a finales de la dcada de los noventa, de la mano
www.gestioncultural.org portalgc@gestioncultural.org

del Convenio Andrs Bello, un gran esfuerzo para disponer de un cierto perfil comn de la realidad econmica del sector cultural. Esfuerzo que ha sido seguido ms recientemente por los pases del Mercosur. Sin embargo, es casi imposible dibujar un panorama de la realidad cultural regional mnimamente completo y coherente. Los pocos datos disponibles son simples aproximaciones pertrechadas por algunos investigadores valerosos, que prefieren arriesgar su prestigio antes de dejar el diagnstico de un sector en manos de verdades construidas a base de ser repetidas, no por su contratacin estadstica. Ms all de la particular situacin regional, la informacin estadstica disponible sobre el sector cultural es escasa, con limitadas series temporales, poco homognea pas a pas, y con una muy baja capacidad para ajustarse a las nuevas necesidades informativas del mundo contemporneo. Generar estadsticas es caro, requiere rigor y continuidad temporal. Los gobiernos y sus instituciones con responsabilidad o fondos para llevarlas a cabo (institutos de estadstica, bancos centrales, ministerios) tienden a concentrarse en las grandes magnitudes econmicas y sociales, o bien en aquellos indicadores requeridos desde las instituciones intergubernamentales. La cultura, en general, no forma parte de ellos. Por un lado, el bajo nivel de desarrollo de la actividad cultural como sector de actividad econmica autnomo no ha favorecido el despliegue de estadsticas culturales especficas. A esto cabe aadir la dificultad para definir los mbitos que componen la cultura como sector, y su heterogeneidad productiva al reunir en su seno actividades industriales junto a actividades artesanales y a un largo nmero de servicios. La dimensin y trascendencia econmica y social de cada uno de ellos es muy dispar. As, pues, no es extrao que se disponga de ms informacin sobre los subsectores industriales ms tradicionales (libro, cine), o con una mayor presencia de la administracin pblica (bibliotecas, archivos, museos), que sobre los ms nuevos (vdeo, multimedia) o artesanales (artes plsticas, artes escnicas).
www.gestioncultural.org portalgc@gestioncultural.org

Pero por otro lado, y con independencia del sector, no es fcil conseguir informacin que tenga una cierta carga confidencial (facturacin, posicionamiento de mercado, etc.), pues en el caso de existir es guardada celosamente por parte de aquellos responsables empresariales, gremiales o sindicales que las encargaron. gobernantes. El resultado es que sabemos bastante sobre las ventas por taquilla y el volumen de produccin cinematogrfica de un pas pero casi nada del nivel y estructura de las ventas y el alquiler de vdeos. Los medios de comunicacin, astutamente adoctrinados por las discogrficas y las sociedades de gestin de derecho de autor, nos detallan peridicamente el volumen de la piratera musical estimada pero es muy difcil saber la estructura de financiacin del sector y la distribucin de sus ventas. Lo mismo pasa con la programacin escnica, publicada en todos lo medios, pero ms complejo es conocer el nmero de asistentes a un espectculo, y mucho menos, el nivel de ingresos de sus empresas y profesionales. Esta es una realidad que se repite y repite, y que llega a su mayor paradoja con la enorme publicad que recibe el precio mximo pagado en subasta por una pintura conocida, y la enorme opacidad existente sobre la realidad econmica y social del mercado del arte. Pero pretender plasmar ms all de su dimensin econmica manifestaciones tan diversas como leer, escuchar, sentir, pintar o mirar, o las diferencias entre hacerlo como consumidor, participante activo, intrprete amateur o profesional, no es nada fcil. Existen mltiples aproximaciones metodolgicas y analticas posibles, desde la antropolgica a la esttica, pasando por la sociolgica, la politolgica o la econmica. Todas ellas enriquecen el conocimiento del sector, pero su peso no es homogneo en el momento el enfoque e hiptesis del trabajo estadstico convencional.
www.gestioncultural.org portalgc@gestioncultural.org

nicamente sale a la luz pblica, y aun parcialmente, cuando es

utilizada para hacer publicidad o presin sobre la opinin pblica y los

Pero si bien dichas dificultades existan ya hace diversas dcadas, la percepcin que tenemos de la realidad del sector cultural contemporneo es bastante ms enmaraada. El nivel de interdependencia, internacionalizacin y complejidad de los mercados culturales, as como la cantidad de agentes e intereses dispersos, hace casi imposible conocer la estructura y las dinmicas de cada uno de los sectores culturales de una regin o pas. Adems, la disparidad geogrfica de buena parte de las manifestaciones descritas es difcil de plasmar. Desde un punto de vista estadstico, conseguir un buen nivel de desagregacin territorial para cada una de las variables analizadas es muy raro, hecho que desdibuja una actividad que se plasma fundamentalmente a escala local. Finalmente, disponer de datos comparables a nivel internacional ha sido, tradicionalmente, un reto perseguido por investigadores y gobernantes, pues permite comparar realidades y situaciones diversas. Sin embargo, el Instituto de Estadsticas de UNESCO, que desde los aos setenta nutra de referentes comunes, ha decidido abandonar la recogida sistemtica y la publicacin de sus series histricas ante la imposibilidad de crear un sistema universal de indicadores de la realidad cultural planetaria. As se lo han dicho buena parte de los especialistas en anlisis comparado, muy a pesar de las implicaciones prcticas que comportaba (Montreal 2002).2 Pues, la mayora de nosotros, aun y ser crticos con la mayora de los sistemas de estadstica cultural existentes, continuamos necesitando datos para intentar comparar e interpretar la realidad, y la evolucin de los distintos sectores y manifestaciones culturales. Pero mientras en una regin la artesana puede ser un sector de gran impacto ocupacional y exportador, aun y mantenerse fundamentalmente dentro de la economa informal, en otro puede ser algo marginal si se compara con la produccin audiovisual o editorial, y por lo tanto que no merezca la pena

2 Actes du Colloque International sur les statistiques culturelles; Proceedings of the International Symposium on culture Statistics; Montral 21-23 Octobre 2002, Montral: UNESCO Institut for Statistics; Institut de la Statistique du Qubec.

www.gestioncultural.org portalgc@gestioncultural.org

dedicarle grandes esfuerzos estadsticos.

Adems, una misma palabra o

concepto puede llegar a tener significados muy distintos de un pas a otro, en especial cuando las distintas colectividades no comparten valores, contextos o cosmovisiones. Todas estas razones obligan a circunscribir buena parte del anlisis internacional comparado al seno de regiones culturalmente ms o menos homogneas, y con capacidad econmica y funcional de elaborar sistemas analticos e indicadores de evaluacin comunes. La realidad cultural que pretenden describir los distintos sistemas estadsticos no es algo esttico, sino dinmico en funcin de la relacin de fuerzas entre los distintos agentes que intervienen en un sector. Tal como se intenta mostrar en el esquema adjunto, las estadsticas y sus sistemas de indicadores no son algo neutro o ajeno a dicho proceso evolutivo, sino que su capacidad de espejo y diagnstico hacen de ellas un instrumento ms de las polticas de transformacin. As, los datos que se recogen, va encuesta o registro, dependen en buena manera del modelo o modelos interpretativos al uso. En funcin de cada uno de ellos, y de las variables consideradas como bsicas, se disearn y elaboraran indicadores distintos. El diagnstico resultante ser utilizado para plantear aquellos objetivos estratgicos que cada uno de los actores en liza considere conveniente para construir la realidad cultural alternativa por la que luchan (un sector cultural ms participativo y democrtico; un mercado audiovisual bajo el dominio del cine estadounidense; una industria cultural autctona potente; etc.). Por ejemplo, el Observatorio Europeo del Audiovisual elabora cada ao la balanza comercial audiovisual entre los Estados Unidos y la Unin Europea con el objetivo de reforzar los argumentos a favor de una poltica audiovisual europea. De todas formas, la mayora de sistemas de informacin tienden a estar al servicio de los agentes ms poderosos o dominantes, pues estos consiguen imponer a la colectividad, de forma ms o menos explcita o directa, su propia agenda de prioridades.

www.gestioncultural.org portalgc@gestioncultural.org

Algunas pautas y recomendaciones cara a la evaluacin de polticas pblicas de cultura En resumen, es importante diferenciar entre la realidad inicial que se pretende analizar, los datos que de ella se obtienen (o omiten), las variables clave de interpretacin, y los indicadores que la sintetizan. Variables e indicadores dependen del modelo interpretativo y la metodologa de anlisis escogida, pero tambin estn en funcin de la facilidad (y coste) para obtener la informacin, y tal como se ha visto, de aquella realidad que se pretende ayudar a construir. En la prctica, el investigador se encuentra con informacin parcial o poco adaptada al modelo de anlisis que desea realizar. En relacin a la primera cuestin, es importante intentar reequilibrar los datos disponibles, y las conclusiones implcitas que conllevan, con fuentes de informacin alternativas, con el objetivo de conseguir un anlisis lo menos subjetivo posible. En relacin a

www.gestioncultural.org portalgc@gestioncultural.org

la segunda cuestin, uno debe saber escoger aquellos indicadores que mejor se aproximan a la realidad analizada. De todas formas, el principal enemigo de todo investigador social son los propios prejuicios, pues es difcil ser consciente de ellos. Ms all de los objetivos y marco metodolgico de cada investigacin en particular, no existen modelos globales y completos de anlisis del sector cultural, ni probablemente nunca existirn. El contexto de cualquier ejercicio de diseo de un plan de estadsticas culturales debe, pues, aceptar la existencia de diversos modelos interpretativos al mismo tiempo, a veces a medio construir, que responden a enfoques disciplinares dispares. Uno debe aprender a trabajar con informacin asimtrica en un campo de actividad donde se mezcla lo mercantil con lo no mercantil, lo pblico con lo privado, lo industrial con lo artesanal, el bien con el servicio, lo tangible con lo intangible, etc. Ningn anlisis permite por si solo una evaluacin exacta de la realidad, y del impacto social y econmico sobre un territorio de las distintas polticas culturales pblicas y privadas existentes. Aceptar dicha fragilidad no quiere decir que no deba intentarse la construccin de modelos estadsticos lo ms completos posible con la finalidad de ayudar a contrastar los objetivos y las estrategias explcitas de poltica cultural. El trabajo de anlisis realizado en los ltimos veinticinco aos por economistas, socilogos, antroplogos, historiadores o politlogos es suficientemente extenso como para ayudar a construir un edificio estadstico al servicio de una mayor comprensin del sector y de evaluacin de la accin de la administracin pblica en el campo de la cultura. En sociedades complejas como las occidentales contemporneas analizar el sector cultural implica disponer de un instrumental informativo y estadstico suficiente. Solo as es posible conocer las dinmicas existentes, y prepararse para dar respuesta a los nuevos retos sociales, polticos, empresariales y tecnolgicos. Tal
www.gestioncultural.org portalgc@gestioncultural.org

como ya indicaba Agustin Girard hace ms de veinte aos, es necesario avanzar en la definicin de ratios que permitan evaluar los objetivos de las polticas pblicas a partir de un enfoque emprico.3 Indicadores que faciliten la formulacin de preguntas e hiptesis sobre la eficiencia interna (progresin de la oferta en relacin a los recursos financieros de que se dispone), y de evaluacin de la eficacia final de las polticas culturales a nivel de los resultados obtenidos. Es decir, se trata de poner un sistema estadstico al servicio de los distintos objetivos propuestos, con el fin de evaluar los resultados en funcin de los medios puestos a disposicin de la oferta (sobretodo por parte del sector pblico, pues se est jugando con unos medios que son de todos). De todas formas, avanzar en esta direccin es complejo y caro. Pero ms all de limitaciones estructurales - conceptuales y presupuestarias -, pocos profesionales e instituciones comparten una idea clara de lo que debera ser un sistema de estadsticas culturales, pues este depende no solo de la propia realidad sino del tipo de diagnstico que quiera realizarse. Tal como ya se ha comentado, el valor de buena parte de la informacin estadstica existente slo adquiere relevancia cuando permite la comparacin con otras realidades parecidas, o si se dispone de series temporales largas y homogneas. Por consiguiente, es necesario alcanzar consensos temporalmente durables con otros actores, nacionales e desarrollar ejercicios comparativos. De internacionales, interesados en todas formas, la comparacin Uno debe estudiar el

internacional no debe porqu ser un fin en s misma.

resultado de sus polticas en relacin a los objetivos que se haba propuesto y a los medios puestos a disposicin de dichos objetivos. Sin embargo, compararse con otras realidades parecidas puede ser de gran ayuda. Por este motivo, la existencia de una nomenclatura comn a nivel regional, ya que pretenderlo a escala universal es imposible, es un objetivo que merece dedicarle esfuerzos.
3

GIRARD, A. (1992), Indicateurs culturels: quelques exemples, Consel de l'Europe, Programme d'valuation des politiques culturelles nationales, document provisoire. www.gestioncultural.org portalgc@gestioncultural.org

Trabajar cada uno desde su pas para introducir las definiciones internacionales en la lgica interna de clasificacin administrativa es mucho ms til que pretender a posteriori homogeneizar datos e informacin. En paralelo, y aunque parezca contradictorio, es preciso introducir

peridicamente nuevos campos de anlisis a las estadsticas existentes. Mucha informacin que tradicionalmente se recoge y evala no refleja suficientemente una realidad dinmica y cambiante. Se trata, pues, de elaborar indicadores analticos especficos, ms coyunturales, y de adaptar de forma flexible el modelo informativo existente a aquellas nuevas exigencias de diagnstico de un sector en transformacin permanente. Lgicamente, para evaluar es necesario conocer previamente qu se quiere analizar, en relacin a qu, y con que criterios se han establecido los planes de accin y las prioridades polticas y gerenciales. Si las estadsticas deben ayudar a evaluar, los indicadores que de ellas nazcan deben partir de un buen conocimiento del objeto y del entorno que se quiere estudiar, as como de las finalidades de la intervencin pblica o privada que generaron en cada caso dicha oferta o actividad. Destinar recursos a contar el nmero de usuarios de un sistema bibliotecario, o el volumen de libros prestados en el mismo, solamente tiene sentido en relacin al esfuerzo histrico realizado y a la orientacin de una determinada poltica de lectura pblica. El dato estadstico, o el indicador cuantitativo que se utilice para evaluar debe estar en relacin al objetivo que se pretende medir. Y todo ello deber matizarse en relacin a la calidad del servicio ofertado, su evolucin histrica, la situacin comparada entre las diferentes bibliotecas del sistema y, en ltima instancia, el sentido que pueda tener para una determinada comunidad disponer de un servicio bibliotecario. Desde una perspectiva de evaluacin de la accin gubernamental uno debe determinar en primer lugar las finalidades extrnsecas e intrnsecas que orientan la poltica cultural a emprender. Estas dependen, respectivamente, de la misin
www.gestioncultural.org portalgc@gestioncultural.org

10

general y especfica recibida y se transforman en un nmero limitado de objetivos estratgicos una vez realizado un exhaustivo diagnstico de la realidad interna y externa de la organizacin que debe llevar a cabo una poltica. Un riguroso proceso de planificacin estratgica permite desarrollar el objetivo estratgico en mltiples objetivos operativos, que se desglosan respectivamente en programas y acciones especficas. Para evaluar el impacto cultural de una determinada poltica es necesario construir un modelo interactivo entre las finalidades, los objetivos estratgicos y operativos, y un conjunto de indicadores cuantificables de evaluacin. La clave consiste en especificar correctamente cada una de las variables fundamentales que describen las estrategias llevadas a cabo, y los respectivos de indicadores de evaluacin.4 Existen distintas tipologas de indicadores, aunque un mismo indicador puede utilizarse como evaluador del proceso, del resultado o del impacto final perseguido. A partir de sistemas de evaluacin como el descrito en el esquema, basados en un sistema eficiente de informacin estadstica, es posible realizar anlisis coste-beneficio o coste de oportunidad y contabilizar de alguna manera el impacto global obtenido con una determinada poltica. Sin embargo, una cosa es analizar la eficacia y eficiencia de una accin especfica dentro de un programa, y otra muy distinta es concluir la eficacia final de una poltica en relacin al conjunto de objetivos y finalidades perseguidas.

Ver una descripcin de dicho esquema aplicada a la gestin de servicios pblicos de cultura en BONET, L. (2001), Planificar y evaluar: dos fases indisociables de la gestin cultural, Perifrica [diciembre], p: 41-50. www.gestioncultural.org portalgc@gestioncultural.org

11

EVALUACIN DE UNA POLTICA CULTURAL

MISIN GUBERNAMENTAL MISIN CULTURAL GUBERNAMENTAL

DIAGNOSTICO INTERNO

ACTIVIDAD CULTURAL Escenarios de futuro

ANALISIS DEL ENTORNO

META-EVALUACIN
FINALIDADES INTRNSECAS OBJECTIVOS ESTRATEGICOS OBJECTIVOS OPERATIVOS INDICADORES DE RESULTADO

PROGRAMAS INDICADORES DE PROCESO ACCIONES

FINALIDADES EXTRNSECAS INDICADORES DE IMPACTO

EFICACIA

EFICIENCIA

En este sentido, evaluar el propio proceso de evaluacin (la meta-evaluacin del sistema analtico) es un ejercicio extremadamente interesante de realizar. En teora, la definicin de un indicador o ratio de evaluacin est al servicio de la finalidad que se quiere estudiar. En la prctica no siempre es sencillo conseguir. La mayor o menor adecuacin de un indicador a un sistema analtico depender de su versatilidad y, en cierta medida, tambin de su valor general. A modo de ejemplo, un indicador definido en trminos relativos (en porcentaje, tasa de variacin anual, per cpita o en relacin a una categora) permite normalmente una mayor comparabilidad que otro presentado en valores absolutos. Otras veces, como cuando se trabaja con series temporales con signo monetario, debe tenerse cuidado en restar el efecto de la inflacin y dar los datos en trminos constantes. Asimismo, se debe escoger con precaucin la divisa de referencia puesto que la fluctuacin de los tipos de cambio relativos puede alterar
www.gestioncultural.org portalgc@gestioncultural.org

12

sobremanera la serie analizada. En conclusin, es necesario seleccionar de forma cuidadosa y desde los primeros estadios del proceso planificador aquellos indicadores ms adecuados. Aprender de la experiencia de otros campos del saber es, asimismo, altamente recomendable. De todas formas, el principal reto analtico de toda poltica con un sistema complejo de finalidades de difcil jerarquizacin, que se superponen entre ellas, consiste en saber escoger el conjunto de indicadores ms adecuados para cada finalidad a evaluar. Obtener resultados globales no siempre es posible. A veces, solo es posible valorar una poltica cultural de forma parcial, finalidad a finalidad, y esto nicamente cuando es factible aislar causas y efectos con facilidad. Ser concientes de estos problemas no debera afectar nuestra voluntad para construir modelos interpretativos que ayuden a mejorar la eficacia y gestin de las polticas pblicas de cultura, y que permitan al conjunto de agentes culturales conocer mejor el sector en el que trabajan. El gran reto de todos aquellos que nos dedicamos a analizar la realidad cultural consiste en disponer de recursos estadsticos y modelos analticos que ayuden a interpretar una realidad plural, amenazada por una homogenizacin creciente de los mercados culturales. As pues, desarrollar aproximaciones analticas transversales, que incorporen lo sectorial y lo horizontal, en la produccin de datos estadsticos e interpretaciones con pretensiones cientficas me parece sumamente importantes. Finalmente, tecnificar el estudio y desarrollo del sector, con ciertas dosis de relativismo y escepticismo, me parece imprescindible desde todos los puntos de vista.

www.gestioncultural.org portalgc@gestioncultural.org

13