Está en la página 1de 5

COMUNICAÇÕES

Indicadores para apoio à


tomada de decisão*

Sandra Negraes Brisolla INTRODUÇÃO bre a atividade científica e tecnológica.


Torna-se imprescindível a criação de in-
A globalização dos mercados e a cres- dicadores relevantes e confiáveis para
cente importância do conhecimento na essa finalidade.
composição do valor da produção de
bens e serviços são fenômenos recen- Indicadores como ferramenta de
tes que vêm tornando a avaliação uma política
prioridade na política científica e
tecnológica. Por outro lado, a elevação Coloca-se inicialmente um problema
do custo da pesquisa e a redução de teórico na construção de indicadores
recursos públicos para financiá-la em científicos e tecnológicos relativo à na-
muitos países, devido à crise econômi- tureza especial dessas atividades. Mes-
ca que a partir dos anos 70 interrompeu mo na atividade econômica, em que se
o crescimento sustentado do pós- supõe ser possível associar claramente
guerra, também criaram a necessidade o investimento ao resultado econômico
de introduzir critérios mais rigorosos de esperado por meio de uma matriz de in-
avaliação da pesquisa pública e de sua sumo versus produto, existe o impon-
legitimação junto à sociedade que a derável, que faz com que muitas vezes
mantém. A tomada de consciência da esse produto final não seja sancionado
importância da atividade científica para pelo mercado, não se realize e, portan-
impulsionar a produção de bens e servi- to, o resultado seja menor que o previs-
ços foi responsável por um acréscimo to. No entanto, o risco associado ao in-
considerável das fatias que as socieda- vestimento em pesquisa é inerente às
des industriais destinam à pesquisa, atividades de C&T (ciência e tecnologia)
tanto nas universidades como nas em- e é muito maior.
presas industriais, principalmente no
pós-guerra. A construção de indicadores de C&T
enfrenta, portanto, um problema filosó-
Resumo A crise do capitalismo que se instala fico: será possível construir indicadores
a partir dos anos 70 gera uma sensa- que reflitam com algum nível de segu-
Aborda indicadores de ciência e tecnologia,
uma atividade que está tendo decisivo apoio ção de que o investimento em ciência rança a realidade que se supõe que eles
das instituições encarregadas do estava tendo rendimentos decrescen- representem? É teoricamente concebí-
planejamento e execução da política tes** . Assim, a onda de avaliação vel a construção de fórmulas capazes
setorial, devido a duas tendências: o de espelhar uma realidade multifaceta-
institucional que se propagou por todos
crescente conteúdo de conhecimento na
composição do valor da produção de bens e os órgãos públicos nos países centrais da, em que inúmeras variáveis correla-
serviços e a elevação do custo da pesquisa chegou ao setor científico e tecnológico. cionadas condicionam uma trama com-
e a redução de recursos públicos para Tratava-se de auferir a eficiência do sis- plexa de inter-relações de resultado im-
financiá-la, induzindo à introdução de previsível? Essa questão é semelhante
tema com a clara finalidade de aumen-
mecanismos de avaliação de desempenho
em todos os órgãos públicos. Utilizando um tar sua produtividade e, principalmente, à que coloca Keynes em relação ao
conjunto de indicadores em C&T o impacto sobre o setor econômico. Os cálculo econômico: mais do que consi-
desenvolvidos pela Fapesp, discute a indicadores de ciência e tecnologia sur- derar a complexidade do cálculo empre-
grande dificuldade teórica no sarial, em que o empresário deve levar
gem, portanto, para subsidiar a avalia-
estabelecimento de indicadores adequados
e como se pode fazer seu levantamento, ção institucional e permitir estudos so- em conta as respostas de cada concor-
como também as dificuldades práticas em rente e de cada cliente às suas deci-
construir um conjunto confiável de variáveis * Trabalho apresentado no Seminário sobre sões, Keynes aponta a impossibilidade
capaz de orientar os rumos da política Avaliação da Produção Científica, realizado em de que um agente econômico possa
científica e tecnológica. São Paulo pelo Projeto SciELO, de 4 a 6 de
prever todas as possibilidades de
março de 1998.
Palavras-chave evo lução do mercado. Nesse sentido,
** Cf. Ziman, em palestra pronunciada no a incerteza keynesiana é entendida
Indicadores de ciência e technologia; Departamento de Política Científica e como estrutural, integrando a lógica do
Política científica e tecnológica. Tecnológica/Instituto de Geociências, Unicamp. sistema.

Ci. Inf., Brasília, v. 27, n. 2, p. 221-225, maio/ago. 1998 221


Indicadores para apoio à tomada de decisão

Da mesma maneira, pode-se discutir se discussão com a comunidade acadêmi- pesquisa. Claramente, essa não é uma
existe viabilidade de construção de in- ca e a informação sobre o que está ocor- contribuição linear dos resultados de
dicadores das atividades científicas e rendo na fronteira do conhecimento em pesquisa para a prática: daí a
tecnológicas e, principalmente, se é cada área. Qual o impacto desse tipo complexidade.”
possível imaginar variáveis suficiente- de atividade, comum aos pesquisado-
mente ricas em determinação para re- res ativos, na formulação e execução “A segunda série de fluxos envolve as
presentarem o fenômeno social mais de seus projetos de pesquisa? Como pessoas. Como professores de
amplo do desenvolvimento científico, do individualizar esse impacto para deter- programas de pós-graduação, os
progresso tecnológico e da introdução minado evento ou projeto? A produção pesquisadores treinam profissionais
de inovações. A questão central é a científica de determinado pesquisador que irão atuar na prática. Como
seguinte: como se pode estabelecer re- ou grupo de pesquisa acaba influen- professores dos programas de
lação de causa e efeito entre a ativida- ciando a produção de bens e serviços graduação treinam estudantes que se
de científica e tecnológica e o impacto (no caso mais favorável), provocando uma tornam cidadãos, trabalhadores, pais e
socioeconômico que ela provoca? Exis- inovação. Mesmo nesse caso, como professores na sociedade global, é o
tem indicadores que possam dar con- proceder ao cálculo dos créditos devi- treinamento que essas pessoas
ta desse processo? dos ao financiamento de cada agência, recebem dos pesquisadores que
ao suporte institucional de origem do determina a freqüência com a qual eles
A segunda questão é mais prática e não pesquisador, aos agentes econômicos irão recorrer ao reservatório de
totalmente diferente da anterior. Trata- favoráveis à inovação e à própria deci- conhecimentos e a eficácia com a qual
se de saber se vale a pena construir in- são do empresário que assumiu o risco irão retirar daí insumos para suas
dicadores. Se, no estágio em que nos da inovação, além dos créditos devidos atividades ulteriores. Aí também os
encontramos de desenvolvimento das à formação dos pesquisadores envolvi- benefícios da pesquisa são indiretos e
ferramentas estatísticas e de coleta de dos e devidos ao enriquecimento de seus muito difíceis de serem determinados
informações, é possível esperar obter conhecimentos — seu currículo — com especificamente.”
um conjunto de determinações capaz apoios a eventos e outros?
de responder aos anseios dos O terceiro fluxo é o de bens e serviços,
planejadores e executores de políticas A questão é mais bem compreendida que circula do pilar da prática para o
e também daqueles que se dedicam a quando se examina a proposta de Susan setor educacional, com novos meios de
realizar a crítica e a reflexão acerca da Cozzens1 (p. 289-90, em tradução livre comunicação e aprendizado para as
política científica e tecnológica. Em ou- da autora), cuja idéia básica é a de que pessoas, na forma de bens úteis para o
tras palavras, os indicadores possíveis se deva estimar o impacto da pesquisa consumo e para a frente de pesquisa,
hoje realmente desempenham seu pa- por meio do produto da pesquisa, pois na forma de novos instrumentos e
pel de “indicar”o sentido do desenvolvi- esta tem como resultados produtos insumos científicos, e para a própria
mento científico e tecnológico? Essas imediatos que são mensuráveis: atividade prática como novos meios de
são as questões que nos preocupam produção.
neste trabalho. “Esses produtos não são benefícios
diretos para o país, mas colocam em Cozzens conclui que, na impossibilida-
A relação entre ciência e tecnologia movimento processos que produzem de de medir diretamente o impacto da
benefícios para o país, benefícios que pesquisa, este pode ser indiretamente
O caminho não linear percorrido pelo são reconhecíveis por pessoas como os medido por meio da avaliação de seus
processo de transformação de uma in- membros do Congresso e o público em produtos:
venção, um novo princípio ou uma nova geral.”O modelo supõe a existência de
idéia científica em uma inovação, ou três arcos: “Um arco é a base de “Um dos pontos-chave do modelo é que
seja, em um produto ou processo ino- conhecimentos, o segundo é a prática a pesquisa é mensurável apenas pelos
vador, dificulta, se não impossibilita, di- (industrial, médica etc.) e o terceiro é a seus resultados imediatos, os produtos
retamente a mensuração de todos os educação.” que entrega através do meio educacio-
fatores e do impacto de cada um deles nal e da frente de pesquisa. Mas o mo-
para que esse resultado seja atingido. “Há três fluxos nesse modelo. O primeiro delo ajuda os administradores a pensar
Se as linhas de atuação de uma agên- é o fluxo de conhecimento. O objetivo em outros processos através dos quais
cia de fomento e os resultados concre- primário do programa de pesquisa é o os produtos daquele ambiente imediato
tos de cada uma delas são enumera- de contribuir com conhecimentos para estão produzindo benefícios para a na-
dos, pode-se perceber esse impacto a fronteira de conhecimento da ção. Claramente, esses outros ambien-
diferenciado. O financiamento de teses pesquisa. O conhecimento de fronteira tes são responsáveis pelos benefícios
de doutorado e dissertações de vai para um amplo reservatório que últimos que o público deseja, tais como
mestrado tem como resultado a forma- alimenta as pessoas na prática e na uma cidadania competente e qualifica-
ção de pesquisadores para o país. Como educação. Só em casos especiais, a da e melhor qualidade de vida. [...] Pen-
se pode medir o impacto dessa ativida- fronteira de conhecimentos é utilizada sar através dessas cadeias de conexões
de sobre um projeto específico? O apoio diretamente, mas a qualidade da ajuda o avaliador a identificar os partici-
a pesquisadores para participação em informação obtida do reservatório de pantes que devem ser envolvidos nas
eventos científicos tem como resultado conhecimentos depende de que ele seja avaliações específicas. Por exemplo, a
a difusão de resultados de pesquisa, a renovado regularmente pela frente de prática média é diretamente responsá-

222 Ci. Inf., Brasília, v. 27, n. 2, p. 221-225, maio/ago. 1998


Indicadores para apoio à tomada de decisão

vel pela saúde e deve ser avaliada dire- FIGURA 1


tamente pelo público. Mas a pesquisa Diagrama de Susan Cozzens
biomédica precisa ser avaliada pelos
que praticam a medicina para tornar plau-
sível que a pesquisa esteja contribuin-
do em última instância para a saúde.”
(Cozzens1, p. 289-90, em tradução livre
da autora). Pais Pesquisadores
Pós-Graduação
Esse modelo supõe uma avaliação da Prática
relevância de cada um dos pilares (os Educação
arcos) para a sustentação do edifício que Profissionais
Graduação
integra a pesquisa científica ao siste- PROGRAMA
ma educacional e à prática econô- Professores
mica: Frente da
Pesquisa
O diagrama de Cozzens mostra a com-
plexidade das relações internas entre os Base de Conhecimento
sistemas de pesquisa, de educação e
econômico. Há um fluxo de pessoas
tanto por meio das atividades na área
educacional (formação de pais e profes-
sores pela graduação, e formação de ção dos recursos para fomento à pes- reguladas por uma instância alheia a
profissionais e pesquisadores pela pós- quisa deve ser avaliada como tal, por cada ministério. Essa instância é o Con-
graduação). Há um fluxo de conheci- seus próprios objetivos (Cozzens2). selho de Ciência e Tecnologia (CCT), cri-
mento na frente de pesquisa, por meio ado no papel há um bom tempo, mas
do qual os pesquisadores criam a base A percepção da insuficiência das análi- que só recentemente vem dando seus
de conhecimentos, na qual os profis- ses baseadas no modelo linear leva os primeiros passos.
sionais irão procurar os elementos ne- analistas a propor a intensificação das
cessários para reformar suas práticas, relações internas ao sistema como uma Para que a atividade em C&T pudesse
por um lado, e os professores irão se meta da política científica e tecnológica: ser organizada por uma política global
reciclar, por outro. As reflexões da au- “A falência amplamente reconhecida do de abrangência nacional e coerente,
tora são no sentido de que, para poder modelo linear colocou na ordem do dia seria necessário que ela fizesse parte
avaliar a efetividade econômica do a necessidade de maior interação entre de um Plano Nacional de Desenvolvi-
sistema de pesquisa, não se pode que- as diferentes partes do sistema. Essa mento. Nessas circunstâncias, cada
rer medir diretamente o resultado situação foi traduzida politicamente em centro de pesquisa teria sua parte de-
socioeconômico a que ele conduz a lon- duas prioridades maiores: maior núme- senhada nesse plano, que seria fruto de
go prazo, mas sim deve-se tratar de ro de pesquisadores treinados e um acordo prévio entre os ministérios
perceber em que medida o resultado maior número de conexões (Larédo de forma a permitir que se pudessem
diretamente almejado pela pesquisa é & Mustar3, p. 13). articular as diversas instituições vincu-
atingido, em termos de formação de ladas à pesquisa e ao desenvolvimento.
pessoal e de produtos científicos, como Ciência como atividade horizontal
publicações e patentes, pois muito ra- Nessas condições, a utilidade dos indi-
ramente será possível medir diretamen- Uma das dificuldades que existem na cadores de C&T seria grande para que
te o resultado socioeconômico. formulação da política em C&T é sua se pudesse fazer a distribuição dos re-
característica de atividade horizontal, cursos para pesquisa entre os vários
Por outro lado, é por atingir os resulta- que perpassa todas as funções gover- objetivos socioeconômicos e as disci-
dos especificamente buscados pelo sis- namentais. Isso pode ser observado, por plinas científicas. Também seriam úteis
tema de pesquisa que este consegue exemplo, na estrutura dos institutos para a distribuição de recursos entre as
criar a base de conhecimentos a partir públicos de pesquisa no país, como o especialidades, dentro de cada discipli-
da qual irá se produzir o impacto ne- Ministério de Ciência e Tecnologia na, e entre os diversos centros e insti-
cessário para provocar também resulta- (MCT), criado em 1985 e transformado tutos de pesquisa. Essas decisões, por
dos socioeconômicos. em Secretaria de C&T (SCT) em 1990 e sua vez, correspondem a diferentes ní-
em MCT em novembro de 1992, e os veis hierárquicos dentro do sistema de
Há alguns perigos que devem ser evita- demais institutos de pesquisa vincula- C&T (Martin4 et al., p.6-7).
dos na realização de estudos de avalia- dos a outros ministérios e à Secretaria
ção. O primeiro deles está referido à de Assuntos Estratégicos da Presidên- Para que os indicadores sejam ferramen-
tentação de administrar a política de cia da República. Para que pudesse tas úteis, devem ser produzidos com
fomento à pesquisa em função de obje- haver um plano ou um programa de regularidade para a formação de séries
tivos socioeconômicos preestabeleci- ciência e tecnologia, seria preciso que temporais que permitam visualizar ten-
dos, quando a condução da administra- as atividades relativas ao setor fossem dências no tempo; deve-se ter a possi-

Ci. Inf., Brasília, v. 27, n. 2, p. 221-225, maio/ago. 1998 223


Indicadores para apoio à tomada de decisão

bilidade de enfocar qualquer área ou Esses indicadores foram elaborados O Japão aparece direcionado para
especialidade; e os dados devem per- por uma equipe de pesquisadores da tecnologia e pesquisa aplicada, ten-
mitir comparações internacionais. As Universidade de São Paulo (USP) e da dendo mais para os insumos de C&T
estatísticas devem poder ser Universidade Estadual de Campinas nos anos mais recentes. Os EUA apa-
desagregadas para que se possa estu- (Unicamp), na qual me incluo, com o recem com ênfase nos insumos e nas
dar as estatísticas referentes a quais- ambicioso objetivo de constituir um pri- ciências básicas. A Alemanha tende
quer centros ou institutos de pesquisa. meiro passo no sentido da produção per- para a tecnologia, e a França e a In-
Finalmente, os dados devem estar dis- manente de indicadores muito mais de- glaterra aparecem com maior peso nas
poníveis para um público amplo e de for- talhados e abertos para o Estado de São ciências básicas. Os três tendem para
ma acessível. Estatísticas relativas à Paulo, visando a subsidiar as políticas o lado do produto. O Japão aparece do
produção científica podem permitir iden- públicas no setor. lado do insumo porque suas atividades
tificar áreas em que o resultado em ter- de C&T são principalmente aplicadas
mos de publicações é maior que em Os indicadores produzidos nessa pri- (portanto, o gasto em C&T é muito ele-
outros. Esse tipo de informação, acom- meira fase são globais, mas permitem vado), e os EUA também se colocam
panhado de outras ferramentas analíti- traçar um panorama do financiamento e do lado do insumo, devido principalmen-
cas, pode alimentar o processo de peer da execução das atividades científicas te aos gastos militares, que não têm
review. A disponibilidade de estatísticas no estado e do espaço que elas ocu- contrapartida em publicações ou mes-
exerce também certo controle sobre o pam dentro do cenário nacional. Trata- mo em patentes. As posições dos paí-
próprio sistema de revisão pelos pares. se de uma primeira aproximação que ses são correspondentes ao que se
Pode-se também resolver certas dúvi- possibilitará projetar o sistema de infor- conhece de seu sistema em C&T, o que
das sobre a divisão de recursos entre mação necessário para a formulação da revela o potencial dessa ferramenta para
as áreas com base em indicadores so- política setorial no estado, além de sub- a análise da política setorial e, portan-
bre a mudança na direção do impacto sidiar o governo federal na sua interação to, a utilidade até mesmo de indicado-
de disciplinas específicas (Martin4 et al., com a política estadual. res tão gerais como os utilizados no
p.7-10, 82-3). exemplo (Tomizawa & Niwa6, p. 87-8).
Para finalizar, vale a pena mencionar um
Indicadores regionais e indicadores exercício realizado por Tomizawa e A lista de indicadores utilizados nesse
integrados Niwa6, dois especialistas japoneses em exercício foi a seguinte:
política científica, tratando de construir
Uma tendência mais recente dentro da um pequeno conjunto de Indicadores Variáveis de insumo de C&T:
atividade de compilação de indicadores Gerais de Ciência e Tecnologia, que
é a construção de indicadores regionais, constituam indicações para orientação X1 = número de formados em ciência;
abrangendo uma região de um país ou, da política científica global dos países.
ainda, uma região contendo vários paí- Eles trabalham com um pequeno grupo X2 = número de formados em engenha-
ses, como a Comunidade Econômica dos países centrais: Japão, Estados ria;
Européia (CEE). Os estudos que estão Unidos, Alemanha, França e Inglaterra.
sendo realizados pelo Observatoire de Primeiramente, escolhem-se as variá- X3 = número de cientistas e engenhei-
Sciences et Techniques da França, ten- veis que serão objeto de análise. Pro- ros trabalhando em P&D;
do como objeto a atuação da CEE junto cede-se, então, à análise fatorial para
aos países membros, produziram resul- seleção dos indicadores que irão repre- X4 = orçamento do Governo para P&D;
tados muito interessantes sobre a es- sentar os países com base na correla-
X5 = dispêndio Interno Bruto em P&D;
tratégia dos cientistas e empresários ção existente entre as variáveis pré-
para combinar as fontes locais de re- selecionadas. Em segundo passo, utili-
X6 = importação de tecnologia (valor).
cursos para pesquisa com as fontes za-se a análise de componente princi-
regionais (Gusmão5). pal para construir novas variáveis inte- Variáveis de produto de C&T:
gradas, e a atividade de C&T de cada
Tendo em vista a existência de um sub- país é expressa pelo indicador integra- X7 = número de artigos científicos;
sistema de ciência e tecnologia no ce- do assim obtido. O resultado da análise
nário brasileiro com certa autonomia e estatística mostra a posição dos países X8 = citações de artigos científicos;
com expressiva representatividade no de acordo com os dois fatores analisa-
país, a Fundação de Amparo à Pesqui- dos: o primeiro diferencia ciência de X9 = número de patentes internas;
sa do Estado de São Paulo (Fapesp), tecnologia, ou pesquisa básica de ciên-
como parte integrante e ao mesmo tem- cia aplicada, enquanto o segundo dife- X10= número de patentes externas;
po observadora desse sistema, decidiu rencia fatores de insumo ou de produto
produzir um primeiro conjunto de infor- (Tomizawa & Niwa6, p. 84). X11 = número de citações de patentes;
mações relativas à ciência e tecnologia
em São Paulo, como um dos produtos X12 = exportação de tecnologia;
destinados a comemorar seus 35 anos
de existência. X13 = valor da produção industrial;

X14 = valor dos produtos high tech.

224 Ci. Inf., Brasília, v. 27, n. 2, p. 221-225, maio/ago. 1998


Indicadores para apoio à tomada de decisão

Desse conjunto, os indicadores para o REFERÊNCIAS BIBLIOGRÁFICAS


Estado de São Paulo contêm 10 variá- 1. COZZENS, Susan. Strategic evaluation and
veis. Os demais são relativamente fá- the keystone model of basic research. In:
ceis de levantar para que se faça um AAAS COLLOQUIUM ON SCIENCE AND
TECHNOLOGY POLICY, 1994, Washington,
exercício semelhante para a América D.C. 19th Annual… Washington, D.C.: [s.n.],
Latina. Poderíamos, assim, averiguar a [199-].
relevância do modelo de análise para a 2. COZZENS, Susan. Assessing fundamental
realidade latino-americana. Esse é nos- research: ten ways to get it wrong. In:
so próximo desafio. SIMPÓSIO FARMACÊUTICO DE SMITHKLINE
BEECHAM, 1995, Cambridge, UK.
[Proceedings… ]. Cambridge, UK: [s.n.],
1995.
3. LARÉDO, P., MUSTAR, P . France, the
guarantor model and the institutionalization
of evaluation. Research Evaluation, v. 5,
n. 1, Apr. 1995.
4. MARTIN, B. R., IRVINE, J., CROUCH, D.
Science indicators for research policy: a
bibliometric analysis of ocean currents
and protein. Sussex: University of Sussex,
1995. 105 p. (SPRU Occasional Paper
Series, n. 23)
5. GUSMÃO, R. L’engagement français dans
l’Éurope de la recherche. Paris: Editora
Econômica, 1997.
6. TOMIZAWA, H., NIWA, F. Evaluating overall
national science and technology activity:
General Indicator of Science and
Technology (GIST) and its implications for
S&T policy. Research Evaluation, v. 6, n.
2, p. 83-92, Aug. 1996.
7. COZZENS, Susan. U.S. research
assessment. Recent Developments in
Scientometrics, v. 34, n. 3, p.351-62, 1995.
8. GEORGHIOU, L. Research evaluation in
European national science and technology
systems in research evaluation benefits
from international exchange. Research
Evaluation, v. 5, n. 1, Apr. 1995.

Indicators to support
decision-making

Abstract

The author analyses indicators for science


and technology, which are receiving a
decisive support from institutions in charge
of planning and implementing sector
policies, due to new economic trends: the
growth of knowledge contents in the value
composition of goods and services, and the
increase of research costs and the reduction
of public resources to finance it, which
introduce the need of performance evaluation
in public institutions. Making use of S&T
indicators developed by Fapesp, this paper
discusses the great theoretical difficulty in
establishing suitable indicators and how to
collect them, as well as the practical
problems in gathering a reliable set of Sandra Negraes Brisolla
variables that makes possible the definition
and implementation of scientific and Coordenadora do Laboratório de Ciência,
technological policy. Tecnologia e Inovação do Departamento de
Política Científica e Tecnológica do Instituto de
Keywords Geociências da Unicamp.

Science and technonoly indicators; Science brisolla@turing.unicamp.br


and technology policy.

Ci. Inf., Brasília, v. 27, n. 2, p. 221-225, maio/ago. 1998 225

También podría gustarte