Evaluacin del impacto social

de proyectos de Investigacin
y Desarrollo tecnolgico (I+D):
Una aplicacin en el sector
de las comunicaciones industriales
D. MOUX
G. ALEIXANDRE
F.J. GMEZ
S. CCERES
L.J. MIGUEL
E. VELASCO

MESA 6

Este trabajo presenta a modo de caso de estudio, la evaluacin de impacto

social (EIS) de un Proyecto Integrado financiado por la Comisin Europea bajo el
amparo del Sexto Programa Marco (6PM). Se trata de un proyecto de I+D de grandes
dimensiones que todava se encuentra en fase de ejecucin, denominado Virtual
Automation Network (VAN, red de automatizacin virtual). El objetivo del proyecto
VAN consiste en la mejora de las comunicaciones industriales a partir de la promocin
del uso intensivo de las Tecnologas de la Informacin y de las Telecomunicaciones
(TIC). Las caractersticas del proyecto de cuatro aos de duracin y el compromiso
mostrado por los participantes, ha permitido la constitucin de un equipo de trabajo
dedicado ntegramente a la evaluacin del impacto social. Este equipo parte de una
concepcin interdisciplinar de los procesos de evaluacin y, consecuentemente, est
constituido por profesionales de distintas vinculaciones disciplinares: economistas,
socilogos e ingenieros. El proceso de evaluacin del proyecto ha empleado hasta el
momento una metodologa de listas de control similar a las utilizadas en los procesos
de seleccin de proyectos. Tambin se ha realizado una adaptacin de la metodologa
Delphi. El primer resultado del proceso evaluativo ha sido la elaboracin de un
conjunto de recomendaciones prcticas dirigidas a realimentar el proceso de toma de
decisiones y asegurar un impacto socioeconmico positivo de los resultados del
proyecto VAN.

1. Introduccin
En la actualidad las actividades de Investigacin y Desarrollo Tecnolgico (I+D)
e innovacin se caracterizan por una creciente relevancia de la sociedad como agente
involucrado en el cambio tecnolgico y por un mayor protagonismo de los programas
de ciencia y sociedad dentro de las acciones de promocin de la investigacin. Todo
ello ha dado lugar a que aparezcan crecientes demandas de integracin de cuestiones
sociales en la gestin de las actividades de I+D y, como consecuencia de esta situacin,
se est incrementando la atencin hacia los impactos sociales de los proyectos de I+D,
con la exigencia de desarrollar nuevas metodologas para su anlisis. En general, la
necesidad de la evaluacin de impacto social (EIS) de proyectos de I+D se encuentra
justificada desde una triple perspectiva: terica, poltica y empresarial.
La justificacin terica se basa en que las diferentes aportaciones provenientes
del estudio de la tecnologa y la vertiente evolucionista de la economa, insisten en la
necesidad de incorporar criterios sociales en el diseo de la investigacin cientfica y
la ingeniera. Estas contribuciones permiten establecer un nuevo concepto de cambio
tecnolgico fundamentado en la co-evolucin de la tecnologa y la sociedad (Rip and
Kemp, 1998; Kuhlmann, 1999; Smits, 2002).
Desde la perspectiva poltica, la necesidad de vincular la ciencia y los sistemas
tecnolgicos con la sociedad es un tema recurrente en las declaraciones polticas. As,
es posible identificar una tercera fase en la evolucin de las polticas de I+D e
innovacin, que se caracteriza por estar dirigidas prioritariamente hacia objetivos
sociales (European Commission 2000; European Commission 2003a; OECD, 2001).
Finalmente, desde una ptica empresarial, la responsabilidad social corporativa
gana relevancia y las empresas buscan encontrar un adecuado balance entre su
rentabilidad econmica y su responsabilidad social, existiendo un nmero cada vez
mayor de colectivos/agentes involucrados que deben ser tenidos en consideracin.
Adems, la inclusin de criterios sobre impactos sociales en la gestin de proyectos de
I+D comienza a ser contemplada como una potencial fuente de beneficios, ya que
incrementa el grado de confianza de los consumidores y reduce la probabilidad de

aparicin de conflictos entre los distintos grupos afectados (Carroll and Buchholtz,
1999; Halal, 2001, European Commission, 2001b, European Foundation for Quality
Management, 2003).
La Comisin Europea ha sido una de las fuerzas que ha dinamizado este proceso de
integracin de los impactos de las actividades de I+D. Dentro de esta labor de
dinamizacin, el Quinto Programa Marco (5PM) sirve como referencia de la
incorporacin de los objetivos socioeconmicos como una prioridad esencial de la
investigacin europea (European Commission, 1996). Ms recientemente y en este
mismo sentido, en la evaluacin del 5PM se plantean afirmaciones como la siguiente:
El impacto socioeconmico no debera considerarse nicamente como un
impacto ms junto a otros componentes en el marco de una evaluacin
multicriterio (por ejemplo, tcnicas u organizativas), sino que es el criterio
para valorar el xito (fracaso) ltimo de las actividades de investigacin,
(European Commission, 2003b, p. 10)

Este mismo cambio de actitud y la toma de conciencia de la relevancia de la faceta

social de las actividades de I+D tambin se puede apreciar en la introduccin de
indicadores sociales e institucionales en el anlisis del desempeo de los sistemas de
innovacin nacionales (European Commission, 2003b).
Este compromiso poltico se ha trasladado en cierta medida al nivel de la
gestin de proyectos. As, en los procedimientos de evaluacin previa de proyectos de
la Comisin Europea se ha incluido un mayor nfasis en la necesidad de valorar la
contribucin de los proyectos a los objetivos sociales de la Unin Europea (European
Commission, 2001a). Dentro de esta lnea de actuacin, el Sexto Programa Marco (6PM)
puso en marcha una nueva modalidad de instrumento los Programas Integrados con
una concepcin encaminada al logro de un mayor impacto cientfico y socioeconmico.
Al mismo tiempo, la creacin de proyectos de mayor dimensin permite dedicar
recursos a una eficaz supervisin del progreso de los programas y a la valoracin de
impacto de la dimensin no tecnolgica de las actividades de I+D, lo que al mismo
tiempo permite mejorar la tarea de rendicin de cuentas (accountability).
Aprovechando este escenario favorable, el consorcio del proyecto VAN decidi incluir
en su programa de trabajo una tarea enfocada a la realizacin de una Evaluacin de
Impacto Social (EIS) junto con un plan la mejora de aspectos relativos a gnero. El
objetivo del Proyecto Integrado VAN consiste en:
dotar de soluciones innovadoras, estndares y mejoras en los entornos
industriales, que reduzcan la distancia existente entre las tecnologas de
oficina y las tecnologas de automatizacin industrial, orientadas a la
configuracin de una red integrada y uniforme de procesos de produccin y
manufactura. Con lo que se conseguira definir unas bases, aceptadas
internacionalmente, para la gestin de plantas industriales y para la definicin
de conceptos de servicios y controles avanzados (Figura 1).

Figura 1. La creacin de redes virtuales para los entornos industriales. El contenido

del proyecto VAN
Dominios industriales remotos (subsidiarias, clientes,)

Subdominios de oficina

Dominio
conectado va
radio

Dominio en tiempo real

Integracin de dispositivo
aislado (telecontrol)

Dispositivos
mviles

Tecnologas heterogeneas /
internet (Redes pblicas)

Dominio WLAN
industrial

Dominio de oficina
Dominio
industrial

Estructura bsica industrial

Dispositivos mviles

Segmento industrial

Dominio WLNA
industrial
Dominio
intrinsecamente
seguro

Subdominiso industriales

Dominio en
tiempo real

Fuente: Proyecto VAN

En la presente comunicacin se sintetizan la primera fase de evaluacin del

proyecto VAN proponindola como caso de aplicacin de evaluaciones socioeconmicas
a proyectos de I+D. La estructura de la comunicacin est constituida por varias
partes, la primera de ellas profundiza en la EIS, comentndose su propsito,
metodologa, fases y el conjunto de impactos a considerar y su organizacin en
dominios (Epgrafe 2). En segundo lugar, se explica el proceso desarrollado para lleva a
cabo la evaluacin ex-ante, su estructura, la forma en que la informacin es
recopilada y se exponen, por un lado, algunas recomendaciones que permitan mejorar
de dicho proceso y, por otro, la informacin que puede extraerse de dicho proceso
(Epgrafe 3). Finalmente, se plantean un conjunto de conclusiones asociadas al
potencial que presenta la integracin de la EIS en la evaluacin de proyectos de I+D
(Epgrafe 4).

2. La evaluacin de impacto social

El campo de la evaluacin de polticas tecnolgicas y cientficas cuenta con una
larga tradicin de anlisis dedicada a comprender la dimensin social de la
tecnolgica. Esta tradicin mantiene fuertes vnculos con el campo del saber de la
Evaluacin de Tecnologas (Ende et al.; Rip, 2001; Schot, 1992; Schot and Rip, 1997),
pero tambin con las tradiciones de evaluacin de impacto ambiental o con el
desarrollo de indicadores. En esta lnea se han puesto en marcha experiencias
orientadas al desarrollo especfico de indicadores sociales para la ciencia y la
tecnologa como puede ser el caso de los seminarios organizados por la RICYT (La Red
Iberoamericana de Ciencia y Tecnologa)1. Respecto a las metodologas de evaluacin
ambiental, la tendencia reciente consiste en incluir categoras que recojan el impacto
social de los proyectos considerando la relacin entre la dimensin social y ambiental
de la realidad (Canter, 1996), pero sus resultados son todava difcilmente aplicables
a proyectos de I+D e innovacin.
Dentro de la literatura dedicada al campo de la evaluacin de proyectos se
puede encontrar un significativo nmero de metodologas, tanto cuantitativas como
cualitativas (Perlitz et al., 1999, Farrukh et al., 2000; Poh et al., 2001). Sin embargo,
la amplia mayora de stas se centran en facilitar a las organizaciones innovadoras un
instrumento prctico para la seleccin y jerarquizacin de proyectos y raramente se
1

Disponible en http://www.ricyt.edu.ar/

ocupan de aspectos relacionados con la mejora de decisiones tcnicas. Estas

metodologas de mejora demandan planteamientos participativos y, en este sentido,
son compatibles con los desarrollos de mtodos de evaluacin que tienen en
consideracin a los distintos participantes del proyecto como una va para ampliar y
mejorar los criterios de evaluacin (Elias et al., 2002),
En este contexto, la evaluacin del proyecto VAN ha encontrado dificultades
para localizar metodologas adaptadas a sus singularidades. En primer lugar, era
necesario un enfoque micro para analizar los impactos sociales de las actividades de
I+D, con la necesidad de discriminar los impactos derivados del proyecto de los
impactos genricos de las TIC. Por otra parte, la evaluacin debe realizarse en tres
momentos del ciclo de vida del proyecto, con la necesidad de utilizar metodologas y
disponer de informacin muy diferente en cada caso. Como resultado de lo anterior,
no se ha encontrado una metodologa estandarizada que sea suficientemente
satisfactoria para tratar con la faceta social del proyecto VAN, motivo por el cual se ha
intentado realizar un modelo de evaluacin ad hoc. La primera ocupacin ha sido la
identificacin de los impactos previsibles lo que constituye una primera y necesaria
etapa para llevar a cabo una evaluacin (Owen and Rogers, 1999).
2.1. El propsito de la EIS
Fundamentalmente, la finalidad de la evaluacin de la EIS de un proyecto de
I+D puede dividirse en tres elementos:
1) Ser una fuente de informacin adicional a los socios del proyecto para
mejorar el impacto social de los bienes y servicios que se generen gracias a
dicho proyecto.
2) Mejorar el grado de conciencia entre los gestores de actividades de I+D e
innovacin sobre las consecuencias de los bienes y servicios que surgen del
proyecto y de la utilidad de la evaluacin de impacto social.
3) Extender entre los responsables de proyectos la relevancia de la EIS como
una buena prctica de gestin de las actividades e I+D e innovacin.

Al tratarse de un instrumento cualitativo, la EIS no pretende cuantificar los

impactos esperados sino ser un apoyo para los socios del proyecto en su proceso de
toma de decisiones para asegurar un mejor y mayor impacto social de los resultados de
proyecto.
2.2. La metodologa de la EIS
La metodologa de EIS propuesta para este proyecto se basa, en parte, en la
experiencia previa del equipo de evaluacin en el desarrollo de listas de control
estructuradas para la evaluacin previa de proyectos de I+D e innovacin de un centro
tecnolgico (Moux et al., 2003), pero ajustada y mejorada a partir del anlisis de las
repercusiones de las TIC en entornos industriales y contando con las posibilidades que
brinda la metodologa Delphi para sintetizar informacin. El concepto de impacto
social es definido de forma amplia aglutinando una multiplicidad de aspectos
medioambientales socioeconmicos y cientficos que, con frecuencia, son dejados de
lado en los mecanismos tradicionales de evaluacin de proyectos de I+D, quedando
dichos aspectos fuera del proceso de toma de decisiones. En este sentido, la EIS
persigue cubrir todos los potenciales impactos asociados a los nuevos

productos/procesos de un proyecto de I+D. Es importante destacar que el objetivo de

la evaluacin no es analizar el impacto social del proyecto en s mismo, sino el de sus
resultados (productos, procesos o estndares que mejoren las comunicaciones
industriales utilizando las posibilidades tcnicas que proporcionan las TIC). Estos
resultados, que sern utilizados en diferentes contextos y que deben cumplir
diferentes exigencias industriales principalmente tiempo real, comunicaciones
inalmbricas, seguridad y fiabilidad, utilizan una diversidad de combinaciones de
alternativas tecnolgicas, que, por tanto, pueden tener diferentes impactos sociales.
La metodologa de la EIS asume que todos los socios del consorcio del proyecto
pueden y deben contribuir en el proceso de aportacin y sntesis de informacin, con
la finalidad de obtener una visin lo ms amplia posible de las dimensiones del
proyecto. Las encuestas que se utilizan para recopilar dicha informacin se
fundamentan en una lista de control de los impactos que abarca un amplio conjunto de
aspectos sociales, econmicos, medioambientales y tecnolgicos. En este sentido, se
trata de un mtodo cuantitativo que es consistente con los mtodos de ponderacin y
jerarquizacin propuestos para la evaluacin previa de proyectos de I+D,
complementarios con otros mtodo cuantitativas (p.e. el anlisis coste beneficio) (Poh
et al., 2001).
La lista de impacto aprovecha aportaciones de estudios previos, aunque el
nmero de trabajos que utilizan un enfoque de anlisis de los impactos similar al del
presente trabajo no es muy elevado (Molas Gallart J. et al., 2000; TAP-ASSESS
Consortium, 2000).
2.3. Las fases de la EIS
La EIS se lleva a cabo a lo largo de tres etapas: exante, initinere y expost,
teniendo en cada una un enfoque diferenciado. El ncleo de todas las fases, sin
embargo, es la lista de impacto anteriormente mencionada.

La evaluacin exante, que ha seguido un enfoque constructivista,

identifica y valora los impactos socioeconmicos y los elementos crticos de
las soluciones tecnolgicas a un nivel micro y meso- para realimentar el
proceso de toma de decisiones con recomendaciones para asegurar un mayor
impacto positivo de los resultados de proyecto. Este anlisis se ha realizado
en los primeros seis meses del proyecto.

La evaluacin in-itinere, que debe ser realizada cuando el proyecto est

todava en activo y manteniendo un nivel de ejecucin avanzado, en nuestro
caso a mediados del segundo ao. Esta evaluacin persigue garantizar la
supervisin de las actuaciones aplicadas para afrontar los impactos
socioeconmicos identificados en la fase ex-ante. Un especial nfasis debe ser
puesto en analizar el grado en que se han aplicado las recomendaciones del
informe ex-ante, siempre teniendo en consideracin el grado de flexibilidad
que los investigadores involucrados en el proyecto tienen para poder
implementarlas.
La evaluacin ex-post, que debe ser realizada una vez finalizado el proyecto,
sirve para actualizar las conclusiones sobre el impacto del proyecto desde un
punto de vista ms estratgico, permitiendo a la Comisin Europa tener
evidencias sobre el impacto del proyecto. Adems, es este momento es
posible obtener algunas consideraciones prcticas que pueden servir de pautas
a considerar en la implementacin industrial de la tecnologa desarrollada.
Estas consideraciones pueden reforzar el impacto socioeconmico de los

resultados del proyecto, tanto dentro de la industria como en la sociedad en

su conjunto.
Hasta el momento, el equipo de evaluacin ha llevado a cabo la evaluacin de
impacto exante. Esta fase ha consistido en un proceso de encuestacin en dos etapas,
similar a la metodologa Delphi, y un trabajo de investigacin en paralelo. El resultado
de esta evaluacin es un informe con recomendaciones de carcter prctico para los
investigadores involucrados en el proyecto VAN.
2.4. Los impactos del EIS y sus dominios
Los impactos potenciales de los proyectos de Investigacin y Desarorollo
Tecnolgico, sean o no apoyados por el sector pblico, forman un conjunto
heterogneo (European Commission, 2005b; Moux et al., 2003; European Commission,
2005a; Uotila et al., 2004). Estos impactos potenciales pueden organizarse en las
siguientes categoras:
1.
Impactos medioambientales: que se refieren al grado en que la
tecnologa contribuye al eco-diseo del producto y del proceso
(eficiencia energtica, ahorro de energa de materiales, etc.);
2.
Temas sociales: impactos sobre la seguridad y la calidad de vida
de los usuarios finales, desarrollo social, diseo universal (incluyendo
requisitos para la integracin de discapacitados), sobre las relaciones
sociales, etc.
3.
El sistema de innovacin: impacto sobre la estructura del sistema
de innovacin (capital humano, aportacin de poder a los agentes
innovadores, usos alternativos de la energa, etc) y sobre la cultura del
sistema de innovacin (cultura corporativa en innovacin,
shock
tecnolgico, etc.);
4.
Empleo: impactos sobre la creacin y transformacin de empleo
(efectos de la deslocalizacin, sustitucin de puestos de trabajo, salud y
seguridad humanas, etc.);
5.
Temas econmicos estratgicos: impacto sobre el desarrollo
endgeno, el desarrollo geogrficamente equilibrado y la atribucin de
poder a las pymes en un nivel regional.

Tabla 1. Lista de Impactos Sociales

Temas medioambientales

Campo

Nombre

Regulacin
medioambiental

Impacto sobre
el cumplimiento de las normas corporativas medioambientales
de los fabricantes.
el cumplimiento de las polticas medioambientales que afectan
a los usuarios finales de los productos del proyecto.
el consumo de energa de los fabricantes.

Ahorro energtico

Energa Renovable

el consumo de energa de los usuarios finales de los productos

del proyecto.
el diseo de los productos del proyecto debido a la integracin
de energas renovables.
el consumo de materias primas del fabricante.

Temas sociales

Sistema de innvoacin

Consumo de materias p

el consumo de materias primas del usuario final de los

productos del proyecto.

Fin de vida de los prod

VAN

la fase del fin de vida de los productos del proyecto.

Recursos

la cantidad de recursos humanos y fsicos dedicados a este

campo de investigacin en el largo plazo.

Potenciacin de los age

innovadores

la cohesin y los mecanismos establecidos del sistema de

innovacin (ej. fomentando cooperacin permanente entre
los socios implicados, aumentando la transferencia de
tecnologa a las pymes no-socios, apoyando el desarrollo de
polticas y regulaciones del sector).

Shock tecnolgico

el proceso industrial del usuario final (ej. shocks difciles

de abordar dentro de la cultura organizativa en innovacin)

Difusin del conocimie

la Industria Europea de Automatizacin como un todo,

una vez que el proyecto se completa, debido a una serie de
actividades de difusin planificadas

Multidisciplinaridad

la consolidacin o creacin de una lnea de investigacin

autnticamente multidisciplinar

Uso alternativo o adicio

de la tecnologa

los otros mbitos en los que los productos del proyecto

y / o el conocimiento generado por el proyecto pueden
ser aplicados (ej. otro uso adems del objetivo del proyecto)

Comprensin pblica d
Ciencia y Tecnologa

la comprensin pblica de las comunicaciones industriales

debido a los resultados de la difusin

Participacin pblica

el nmero de grupos de stakeholders que toman parte

en el proceso de toma de decisiones

Compromisos ticos

el compromiso tico adoptado por las organizaciones implicadas

(ej. un conflicto entre la organizacin un resultado del proyect

Temas econmicos

Conflictos relacionados
valores sociales

las controversias sociales de actualidad en el mbito de las

Tecnologas de la Informacin y la Comunicacin (ej. conflictos
relacionados con: seguridad vs. privacidad,
salud humana vs. campos electromagnticos, interacciones
humano-computadora y/o humano-humano, etc.

Cooperacin

la cooperacin entre organizaciones a lo largo de la cadena

de valor (ej. aumentando las comunicaciones entre los
usuarios finales y sus proveedores / clientes)

Proceso de innovacin
pymes

la posibilidad de las pymes de introducir los productos del

proyecto en sus procesos de fabricacin, teniendo en cuenta
las dificultades especiales que las pymes tienen a la hora
de innovar

Sectores no directamen
involucrados en VAN

la satisfaccin de las necesidades de los sectores industriales

no representados en el consorcio del proyecto, por medio
de los productos del proyecto (independiente de su nivel
tecnolgico)

Empleo

Cohesin regional

las regiones menos desarrolladas de la Unin Europea debido

a los esfuerzos planificados en relacin a la difusin del
proyecto en trminos de productos y conocimiento

Creacin /
destruccin
de puestos
de trabajo

la creacin o destruccin de puestos de trabajo en las

organizaciones de los usuarios finales

Prdida de puestos de
trabajo

la destruccin de puestos de trabajo perjudiciales para la salud,

peligrosos y / o exigentes fsicamente

Nuevas habilidades y
competencias

las habilidades y competencias requeridas a los empleados

de los usuarios finales

Sustitucin
en el empleo

la sustitucin de empleados en la organizacin de los usuarios

finales (ej. sustitucin de empleo consistente en que una
persona desempleada altamente cualificada encuentra
un trabajo relacionado con las tecnologas del proyecto
a costa de una persona ya empleada con cualificacin baja)

Deslocalizacin

la generacin de un efecto de deslocalizacin de los puestos

de trabajo (ej. nuevos puestos de trabajo son creados
a costa de que se pierdan puestos de trabajo en algn
otro lugar)

Creacin
de empresas

la creacin de nuevas empresas para explotar los resultados del

proyecto

Inclusin

la inclusin / exclusin de empleados (ej. Productos

del proyecto ayudan a los usuarios finales a dar forma
a los puestos de trabajo- descendiendo los requisitos
fsicos con el fin de recrutar individuos tradicionalmente
sin acceso a estos puestos)

Seguridad y salud
en el trabajo

la seguridad y salud en el trabajo (ej. a travs de mejoras

ergonmicas en los puestos de trabajo o a travs de la reducci
estrs o de los riesgos de daos fsicos)

Confianza
del trabajador

La confianza de los empleados en que el proceso de fabricacin

funcione correctamente, como resultado de la adopcin de los
productos VAN

3. La evaluacin ex-ante
La evaluacin de impacto ex ante consisti en una encuesta de dos pasos,
que sigue un enfoque similar a una metodologa Delphi, unido a un trabajo adicional
basado en la recogida de informacin producida previamente2. A partir de este
material se hace un informe ex ante con recomendaciones que proporcionan pautas
para dar forma a la investigacin asociada al proyecto con la finalidad de mejorar
los resultados socio-econmicos.
La primera ronda de la encuesta consisti en un cuestionario que pretende
identificar y clasificar los impactos sociales un ejemplo del cual se puede consultar
en la Tabla 2.

Podemos esperar que los resultados del proyecto VAN

lleguen a formar parte de las actuales controversias
en torno a la Sociedad de las Tecnologas
Conflictos
relacionados de la Informacin y la Comuniciacin; ej. Seguridad vs
privacidad; impactos sobre la salud humana en relacin
con valores
a los campos electromagnticos, o interacciones humano
sociales
computadora, o humano-humano que se hacen
posibles a travs de estas tecnologas?

Comentarios

Tabla.2 Ejemplo de una pregunta de la primera ronda

No

La segunda ronda consisti en un cuestionario ms especfico que recoge las

aportaciones de los socios formuladas en el primer cuestionario con el objeto de
confirmar los impactos sociales que se haban detectado en la primera ronda, al
tiempo que persigue un conocimiento ms profundo respecto al sentido, relevancia,
flexibilidad e incertidumbre de estos impactos (Tabla 3).
Ambos cuestionarios persiguen una evaluacin cualitativa basada en los puntos
de vista y en las experiencias previas de los socios. Este cuestionario intenta
recoger el conocimiento experto pero siempre asumiendo que las respuestas son
abiertas y que tienen un alto contenido subjetivo. Obviamente, se espera tanto un
sesgo optimista como pesimista puesto que lo que se expresan son opiniones no
totalmente contrastadas. Por otra parte, aunque se ha preguntado a una diversidad
heterognea de socios, slo se ha elaborado un cuestionario comn puesto que
todos los participantes tienen una visin amplia y suficiente del proyecto, a pesar
de que su tarea concreta est focalizada en un nico aspecto. Los dos cuestionarios
estn organizados como un conjunto de impactos sociales que podran surgir a partir
de la ejecucin del proyecto, pero ambos cuestionarios tienen enfoques diferentes:

La preparacin de la evaluacin de impacto se apoy tambin con un desk research consistente en

una revisin de documentos que abordaban temas como: la prediccin del cambio en la sociedad en
el contexto de la evolucin de las Tecnologas de la Informacin, el impacto de sistemas
automticos y la robtica sobre el modelo laboral y la futura prediccin de tecnologas para el uso
en procesos estratgicos en diferentes organizaciones.

10

 La primera ronda de la encuesta de evaluacin de impacto ex-ante es ms

simple que la segunda. Se proporciona una lista de impactos y cada impacto es
comprobado por una pregunta de SI o NO, pero abierta a comentarios (ej.
dificultades encontradas al responder): Se seleccionaron preguntas cerradas con un
formato que facilitara a los encuestados la comprensin de las alternativas incluso
cuando no se tratase de expertos socio-econmicos.
La segunda ronda de la encuesta de evaluacin del impacto ex-ante consisti en
un cuestionario ms centrado y especfico que pone en comn algunas de los
opiniones de los socios relacionadas con algunos de los impactos. Esto permite a los
expertos del proyecto considerar algunos de los puntos de vista de otros socios y
conseguir una confluencia comn en sus respuestas. Adems, en el segundo
cuestionario, se pidi a los socios que profundicen en su evaluacin de los posibles
impactos respondiendo algunas preguntas acerca de:
o
La probabilidad del impacto: la opinin de los socios sobre la
importancia de que esos impactos ocurran.
o
Efecto del impacto: se refiere al hecho de que el impacto podra ser
positivo o negativo. En el primer caso, seran convenientes acciones para
aumentar el efecto. En el segundo caso, seran recomendables las acciones
para mitigarlo. En este sentido, se requeriran cuando fuera posible la
aplicacin de las recomendaciones para dar forma a la investigacin VAN de
manera positiva o de alguna buena prctica.
o
Flexibilidad del proyecto: aunque los objetivos de los socios
industriales y su visin del mercado estn ya establecidos, las soluciones no
estn cerradas an. Por lo tanto, hay flexibilidad en las investigacin del
VAN para tener en cuenta las recomendaciones de la evaluacin ex ante de
forma que puedan mejorarse los impactos sociales del VAN.
Adems, en casos en que el encuestado contesta de manera negativa existiendo
una mayora de respuestas afirmativas, se solicita una explicacin ms en detalle
para comprender su posicin considerando que algn elemento importante se ha
podido omitir.

11

3.1. Anlisis de las respuestas

Este anlisis es til porque detecta el nivel de consenso o disenso entre los
encuestados respecto a los impactos futuros, permitiendo diagnosticar campos de
incertidumbre, campos que deben ser analizados con ms intensidad y, en su caso,
campos en los que la probabilidad de los impactos es alta.
Tabla 3. Muestra / Ejemplo de una pregunta de la 1 ronda
Podemos esperar qu Result TrespueComentarios
Conflictos
RespuestProbabilidEfecto dFlexibilid
de los socios
relacionados resultados del proyectgenera
Impacto impactoproyecto
los valores so lleguen a formar parte
SI, impactos sobre la priv Si
las actuales controvers: #
y la salud causados por la
torno a la Sociedad de
tecnologas sin hilos.
Tecnologas de la
no: #
Informacin y la
SI, se espera un
Comunicacin; ej. Seg
No
impacto directo
vs privacidad; impacto
y el VAN tendr que afro
recomendacin para dar fo
sobre la salud humana
las
relacin a los campos
la investigacin del VAN en
controversias
electromagnticos, o
sentido positivo o alguna b
mencionadas.
interacciones humano
prctica en esta rea:
computadora, o huma
Comentarios
humano que se hacen
del Equipo Evaluador
posibles a travs de e
tecnologas?
Por favor tenga
en cuenta que
pueden surgir conflictos a
partir
de las percepciones
de los diversos
stakeholders.
Si tu respuesta es no y ests en minora, puedes apuntar alguna
que apoye tu opinin

Variables consensuales, se trata de variables en que todos los encuestados

responden de la misma manera. Son impactos bastante seguros que tienen
baja incertidumbre. No necesitan anlisis ms profundos. Se recomienda
concentrarse en medidas preventivas o paliativas cuando sea necesario, pero
no es pertinente investigar de manera preferencial estos impactos.
Variables con consenso limitado, en este caso se hace referencia a variables
en que las respuestas se concentran claramente en una de las alternativas
pero que presenta un porcentaje reducido de opiniones contrarias (menor del
30%). Requieren anlisis por principio de precaucin. Conviene valorar la
posible relevancia de las posturas minoritarias para hacer recomendaciones.
Variables divididas, que requerirn un anlisis ms profundo, ms preguntas y
una fuerte insistencia sobre las medidas de evaluacin y prevencin. Puede
observarse que las variables medioambientales y laborales pertenecen
claramente a este grupo. Este hecho expresa el alto nivel de incertidumbre

12

relacionado con este tipo de impactos y surge la duda sobre su

comportamiento futuro. Las razones subyacentes a esta dispersin pueden
ser: opiniones diversas sobre los impactos pronosticados; concepciones
diversas sobre el proyecto VAN. Es posible que en algunos casos, los
encuestados hayan contestado en relacin a su experiencia ms prxima,
centrando su anlisis de impactos en su particular contribucin al proyecto y
no en una visin ms amplia del proyecto VAN. El cuestionario ha sido pensado
para minimizar la dispersin derivada de la segunda causa. En todo caso, es
aconsejable insistir en la comprensin comn del proyecto y evitar
compartimentos estancos.
Las variables que siguen un patrn comn se clasificaron en diversas categoras que
facilitan la generacin de recomendaciones:
Variables no participantes, se refiere a los impactos que tienen una
probabilidad muy baja de llegar a ocurrir. No se requiere prestarles ninguna
atencin especial. Estn caracterizados por bajo impacto, con efectos
positivos y baja flexibilidad. Este es el caso de los temas medioambientales
que, excepto en dos casos, siguen este perfil.
Variables de mejora, se refiere a impactos con probabilidad de ocurrir
causando un efecto positivo. Sera aconsejable fortalecer su efecto. Las
opiniones sealan la existencia de un impacto positivo con probabilidad alta y
niveles de flexibilidad de tipo medio-bajo. No parece que estas variables
precisen acciones para evitar impactos negativos, pero ofrecen posibilidades
para mejorar los impactos. Esta es principalmente la causa de los temas
econmicos y el sistema de innovacin, aunque hay excepciones para ambos
casos.
Variables problemticas, si los impactos relacionados son altamente
impredecibles. Sera recomendable hacerles un seguimiento y desarrollar
mtodos tiles para los expertos que deseen adquirir un control ms preciso
sobre estas variables. Estn caracterizadas por una fuerte divisin de
opiniones a cerca de la existencia del impacto, sobre el efecto de ste en
caso de existir, sobre su probabilidad y flexibilidad. En el cuestionario, esta
descripcin se corresponde sobre todo con temas sociales y empleo.
Variables estratgicas, sus impactos son predecibles y de carcter negativo,
adems los investigadores del proyecto VAN tienen flexibilidad de actuacin
para poder mitigarlos. Se requiere prestar una atencin primordial a estas
variables de cara al xito de un proyecto de investigacin, aunque en la
prctica ninguno de los impactos derivados del proyecto VAN queda dentro de
esta categora.

13

3.2. Recomendaciones para la mejora del proyecto

Las recomendaciones de la evaluacin ex-ante surgen de las respuestas de los
encuestados y a ellas se suman las aportaciones del equipo evaluador, todas ellas
centradas en impactos concretos del proyecto. Desde un punto de vista metodolgico,
las recomendaciones son de tres tipos:
1.
Recomendaciones de carcter general. Generadas por el equipo
evaluador como marco de interpretacin de las recomendaciones prcticas.
Abordan aspectos como prospectiva, participacin e informacin, con una
perspectiva de largo plazo y largo alcance.
2.
Recomendaciones prcticas. Se trata de pistas prcticas que el
consorcio puede emplear para redisear, sobre la marcha, ciertos aspectos del
proyecto que pueden mejorar su impacto social. Las recomendaciones surgen
del ejercicio Delphi y de la investigacin desarrollada en paralelo por el
equipo evaluador. Estn ligadas a los tipos de variables ya mencionados:
o Recomendaciones puntuales. Estas recomendaciones se formulan
cuando la mayora de los socios considera un impacto no relevante
aunque existen opiniones puntuales que si le otorgan cierta
relevancia. En este caso, las recomendaciones recogen las
aportaciones puntuales de los socios, as como ideas recopiladas
por el equipo evaluador.
o Recomendaciones de mejora. Aquellas que tratan de reforzar
impactos positivos detectados por los socios.
o Recomendaciones problemticas Aquellas que tratan de contemplar
ese impacto y seguir la evolucin del proyecto a ese respecto, con
el objetivo de prevenir posibles impactos negativos.
o Recomendaciones estratgicas. Quiz las de ms importancia. Son
aquellas que aprovechan aspectos flexibles del proyecto para
prevenir impactos negativos e impulsar otros positivos.
Cualquier recomendacin de tipo prctico debe manejarse de forma diferente en
funcin del tipo de proyecto. En este caso, el hecho de que los usuarios finales sean
empresas, y no ciudadanos, ha dificultado la inclusin de un nmero de aspectos del
debate ciencia-sociedad que estn directamente vinculados con conflictos sociales y
demandas del consumidor.
3.
Otras recomendaciones. Son una serie de aspectos de gran
relevancia en el debate ciencia-sociedad de la Unin Europea, que el equipo
evaluador ha considerado necesario incluir de acuerdo con su experiencia y
siguiendo las preocupaciones expresadas por algunos socios en los
cuestionarios. Se trata de propuestas difciles de implementar en un proyecto
de investigacin industrial como VAN: participacin pblica, comunicacin
social de los resultados, investigacin interdisciplinar. La respuesta de Van a
estas ideas, no obstante, puede ser de utilidad para futuros proyectos y para
el diseo de polticas.

14

3.3 Limitaciones del estudio

Pese al valor intrnseco de las recomendaciones, stas presentan tambin
limitaciones que deben tenerse presentes de cara a su implementacin. Su valor reside
en que se constituyen como una herramienta de apoyo a la decisin que introduce la
dimensin socioeconmica en la dinmica de la I+D. No obstante, como ya se ha
mencionado, la decisin sobre su aplicacin depende de los socios del proyecto.
Las principales limitaciones del estudio son la siguientes:
1.
Las recomendaciones se basan en las opiniones del limitado nmero
de socios del proyecto, por lo que el resultado est sesgado por sus
percepciones que pueden ser errneas.
2.
Si bien los socios son muy competentes en su campo tcnico, pueden
no tener una suficiente visin de conjunto del mbito socioeconmico en el
que se desarrolla su trabajo. Los resultados de otra tarea del proyecto un
anlisis de tendencias tecnolgicas VAN, tambin liderada por CARTIF
muestran que hay ciertos aspectos no tcnicos que son contemplados por
algunos socios pero pasan desapercibidos para otros.
3.
Las personas que han respondido a los cuestionarios de evaluacin
han tenido que atender paralelamente a varias tareas del proyectos, de modo
que pueden haber carecido del tiempo necesario para responder con calma.
4.
Alguna cuestin ha sido interpretada de forma distinta por los socios.
Esta diversidad se ha concentrado en la aplicabilidad de las recomendaciones:
el concepto de flexibilidad ha sido especialmente mal interpretado. En contra
de la voluntad del equipo evaluador, la flexibilidad se ha vinculado con la
estructura de toma de decisiones en el consorcio y, en particular, con el papel
del coordinador.
5.
Hay recomendaciones que se han incluido por considerarse aspectos
clave del debate ciencia y sociedad participacin pblica, comunicacin
social, interdisciplinariedad, pero han resultado ser de difcil aplicacin
dadas las particularidades de VAN.

15

4. Conclusiones
Del trabajo realizado hasta el momento se desprenden, principalmente, cuatro
conclusiones.
En primer lugar, el estudio muestra que es posible la integracin de aspectos
socioeconmicos en la evaluacin de proyectos de I+D siguiendo un enfoque
constructivista. A pesar de las restricciones impuestas por un proyecto financiado
pblicamente, que tiene que ajustarse a un contrato, la presente experiencia muestra
que el diseo tecnolgico cuenta con un grado de flexibilidad que permite integrar la
dimensin social, tal y como defienden los estudios sociales de la tecnologa.
En segundo lugar, la incorporacin de los propios investigadores VAN al
proceso de evaluacin prepara el camino para la subsecuente implementacin de la
recomendacin ex-ante si bien supone tambin la aparicin de cierto sesgo dado que
su preocupacin es principalmente tecnolgica. Su incorporacin en el proceso no es
sencilla, dado que deben concentrarse principalmente en tareas de I+D que les
imponen plazos y entregas. No obstante, el estudio muestra que involucrarlos es
posible y fructfero.
En tercer lugar, es posible identificar un nmero de impactos sociales que
son comunes a todos los proyectos de I+D, con independencia de su naturaleza.
Por ltimo, debe prestarse una atencin especial a la flexibilidad del
proyecto. Si se pretende que las recomendaciones ex ante se apliquen para mejorar
los impactos del proyecto, el equipo evaluador debe contemplar el grado de
flexibilidad existente para ello. Dicho grado de flexibilidad se corresponde
esencialmente con la flexibilidad ofrecida por el diseo del propio proyecto, cuya
evolucin debe ser seguida a medida que el proyecto avanza.

Agradecimientos
La presente investigacin ha sido posible gracias al apoyo de la Comisin
Europea, VI Programa Marco, prioridades temticas IST (tecnologas para la sociedad
de la informacin ) y NMP (Nanotecnologa y nanociencias, materiales muntifuncionales
y nuevos procesos de produccin), contrato No 016969.

16

Referencias
Canter, L. Environmental Impact Assessment, McGraw-Hill, New York, 1996.
Carroll, A. B. and Buchholtz, A. Business and Society. Ethics and Stakeholder
Management, South-Western Publishing, Cincinnati, 1999.
Elias, A. A.; Cavana, R. Y., and Jackson, L. S. "Stakeholder analysis for R&D project
management". R&D Management, 34, 4, 2002, pp. 301-310.
Ende, J. van den, Mulder, K., Knot, M., Moors, E., and Vergrat, P. Traditional and
modern Technology Assessment. Towards a toolkit. Second International Conference
and Bi-annual meeting of the International Association for Technology Assessment and
Forecasting Institutions (IATAFI), Brussels, 1996.
European Commission, Inventing Tomorrow COM(96)332, Office of Official Publications of
European Communities, Luxembourg, 1996.
------ Science, Society and the Citizen in Europe, Office of Official Publications of
European Communities, Luxembourg, 2000.
------ Manual of proposal evaluation,
Communities, Luxembourg, 2001.

Office of Official Publications of European

------ Promoting a European framework for Corporate Social Responsibility - Green Paper,
Office of Official Publications of European Communities, Luxembourg, 2001.
------ Innovation Tomorrow: innovation policy and the regulatory framework: making
innovation an integral part of the broader structural agenda, Office of Official
Publications of European Communities, Luxembourg, 2003a.
------ The overall socio-economic dimension of community research in the Fifth European
Framework Programme, Office of Official Publications of European Communities,
Luxembourg, 2003b.
------ Assessing the impact of energy research, Office of Official Publications of European
Communities, Luxembourg, 2005a.
------ Assessing the social and environmental impacts of European research, Office of
Official Publications of European Communities, Luxembourg, 2005b.
European Foundation for Quality Management, Introducing Excellence, European
Foundation for Quality Management, Brussels, 2003.
Farrukh, M.; Phaal, R.; Robert, D.; Gregory, M., y Wright, J. "Stakeholder analysis for R&D
project management". R&D Management, 32, 4, 2000, 301-310.
Halal, W. E..: "The Collaborative Enterprise A Stakeholder Model Uniting Profitability and
Responsibility". JCC , 2, Summer, 2001, pp. 27-42.
Kuhlmann, S. et al. Improving distributed intelligence in Complex Innovation Systems.
Final Report of the Advanced Science & Technology Policy Planning Network (ASTTP),
Karlsruhe, 1999.
Molas Gallart J.; Tang P., y Morrow, S.. "Assessing the non-academic impact of grantfunded socio-economic research: results from a pilot study ", Research Evaluation, 9,

17

3, 2000, pp. 171-182.

Moux, D.; Aleixandre, G.; Gmez, F. J; y Miguel, L. J.. Evaluacin del impacto social de
proyectos de I+D+I: gua prctica para centros tecnolgicos, CARTIF, Universidad de
Valladolid, Valladolid, 2003.
OECD, Social Sciences and Innovation, OECD, Paris, 2001.
Owen, J. M. and Rogers, P. Program Evaluation. Forms and Approaches, Sage. London,
1999.
Perlitz, M.; Peske, T., and Schrank, R. "Real options valuation: the new frontier in R&D
project valuation?". R&D Management, 29, 3, 1999, pp. 225-269.
Poh, K. L.; Ang, B. H., y Bai, F. "A comparative analysis of R&D project evaluation
methods". R&D Management, 31, 1, 2001, pp. 63-75.
Rip, A. Societal Challenges for R&D Evaluation. In: Shapira, P. and Kuhlmann S.
Proceedings from the 2000 US-EU Workshop on Learning from Science and Technology
Policy Evaluation, Bad Herrenalb, 2001.
Rip, A. and Kemp, R.. Technological Change. In: Rayner, S. and Malone, L. Human
Choice and Climate Change. Volume II. Resources and Technology, Batelle Press,
Washington D.C., 1998.
Schot, J. W. "Constructive Technology Assessment and Technology Dynamics: The Case of
Clean Technologies". Science, Technology and Human Values, 17, 1, 1992. 36-56.
Schot, J. W. y Rip, A. "The past and future of Constructive Technology Assessment".
Technology Forecasting and Social Change, 54, 1997, pp. 251-268.
Smits, R. "Innovation studies in the 21st century: questions from a user's perspective".
Echnological Forecasting and Social Change, 69, 2002, 861-883.
TAP-ASSESS Consortium 2000. TAP-ASSESS. Socio-Economic and Industrial Assessment of
FPIV Telematics Applications Projects completed between 1996 and 1998.
Uotila, M.; Kutinlahti; P.; Kuitunen. S.; Loikkanen; and T. Finnish participation in the EU
Fifth Framework Programme and beyond. TEKES, Finnish Secretariat for EU R&D,
Helsinki, 2004.

18

D. MOUX
diemon@cartif.es
CARTIF. Espaa.
G. ALEIXANDRE
galeixam@eco.uva.es.
Departamento de Economa Aplicada, Universidad de Valladolid. Espaa.
F.J. GMEZ
javier@emp.uva.es
Departamento de Sociologa, Universidad de Valladolid. Espaa.
S. CCERES
sancac@eis.uva.es
Departamento de Tecnologa Electrnica, Universidad de Valladolid. Espaa.
L.J. MIGUEL
luimig@eis.uva.es
Departamento de Ingeniera de Sistemas y Automtica, Universidad de Valladolid.
Espaa.
E. VELASCO
elevel@cartif.es
CARTIF. Espaa

19