Está en la página 1de 9

Fuente: Martnez, Eduardo y Escudey, Mauricio (eds.

) (1997), Evaluacin y decisin multicriterio:


reflexiones y experiencias, Santiago, USACH, UNESCO 1997

EVALUACION Y DECISION MULTICRITERIO: UNA PERSPECTIVA

Eduardo Martnez1

Errar es de humanos sin informacin


precisa,
... o de tontos que s la tienen

La insistencia en la racionalizacin y
formalizacin del anlisis termina
empobreciendo nuestro conocimiento de
la realidad

I. LA EVALUACION Y LA TOMA DE DECISIONES

La bsqueda de la eficiencia, la productividad y la competitividad;


la gestin por la calidad (total); la internacionalizacin de las economas
y los procesos de integracin regional (Tratado de Libre Comercio de
America del Norte, Mercosur, etc.) estn contribuyendo a la tmida
introduccin en Amrica Latina de una 'cultura de evaluacin' y de
metodologas racionales de toma de decisiones.

Hasta ahora, en la mayora de las instituciones, programas y


proyectos del sector pblico, de educacin superior y de investigacin no
se ha desarrollado una cultura de evaluacin; prevalece una racionalidad
interna de auto-reproduccin, con decisiones burocrticas y
corporativas, sin una funcin de evaluacin, y sin un juicio externo
respecto a los fines, eficacia y eficiencia, capacidad, pertinencia, y
calidad de los servicios y actividades.

Por otra parte, los mecanismos estatales de asignacin de


recursos continuan operando frecuentemente en forma inercial y
automtica, manteniendo los subsidios a la oferta tradicional de
servicios, sin una vinculacin con la 'responsabilidad formal'
('responsabilizacin'-accountability ), la calidad, el desempeo, la
productividad, y los resultados. Tampoco se ha avanzado en la
implantacin de mtodos racionales, de toma de decisiones
multicriterio. Una situacin similar, levemente atenuada, se observa en
la mayora de las empresas pblicas y en no pocas privadas.

La evaluacin y la toma de decisiones contienen intrnsicamente


una dimensin referida al ejercicio del poder (interno-externo) y al
control. Naturalmente, las metodologas de evaluacin y de toma de
1
Especialista Regional en Gestin de Ciencia y Tecnologa, UNESCO (Luis Piera 1992,
11200 Montevideo, Uruguay; fax (598-2) 4132094; tel. 4132075;
emartinez@unesco.org.uy)
E. Martnez (1997), Evaluacin y Decisin Multicriterio 2

decisiones son implementadas en un marco de referencia, con


subyacentes dimensiones conceptuales y valorativas. Las actuales
transformaciones econmicas, sociales, polticas, institucionales y
organizativas ofrecen una oportunidad para la implantacin de mtodos
de evaluacin y de toma de decisiones, de garantia de calidad, de
financiamiento asociado al desempeo. Aunque tambin pueden surgir
nuevas formas de regulacin y control poltico, institucional y
administrativo.

La evaluacin y la toma de decisiones deben enmarcarse en un


proceso continuo de "prospectivaplanificacin estratgica" : cada
programa o proyecto se debe analizar y gestionar como una unidad
autocontenida. Cul es la evolucin posible del entorno, de las variables
sociales, ambientales, econmicas, y tecnolgicas directa y
especficamente relevantes? Cul es: su misin, naturaleza, capacidad
establecida (fortalezas y deficiencias), desafos y oportunidades,
potencialidades, la evolucin de los campos (propios y afines) del
conocimiento?

Evaluacin significa estimar la magnitud o la calidad de un hecho,


de un proceso o producto. En consecuencia, la evaluacin implica el
anlisis de contexto, la determinacin de criterios, parmetros de
referencia, variables, mediciones e indicadores, y la seleccin del
agente evaluador. Por definicin, la evaluacin es relativa, est asociada
a un marco conceptual/lgico de referencia, no es posible plantearla en
trminos absolutos. Una definicin ms operativa podra ser:
Evaluacin: proceso orientado a la toma de decisiones y a la
accin, que busca determinar la pertinencia, eficiencia, efectividad,
impacto y sustentabilidad del uso de recursos, actividades y resultados
en funcin de objetivos pre-establecidos o criterios definidos.

La evaluacin, que puede ser 'ex-ante' o 'ex-post', constituye un


proceso dinmico, tcnico, sistemtico, riguroso, transparente, abierto y
participativo, apoyado en datos, informaciones, fuentes y agentes
diversos y explcitamente incorporado en el proceso de toma de
decisiones. La unidad de evaluacin (evaluador) debe ser independiente
de las instancias polticas y de los ejecutores e involucrados, y tener
credibilidad y autonoma. Actualmente, los mtodos multicriterio de
evaluacin se utilizan crecientemente en problemticas muy variadas,
obviamente incluyendo la evaluacin de proyectos.

La toma de decisiones es el proceso de convertir informacin en


accin. Es un proceso de identificacin y formulacin de soluciones
factibles, evaluacin de las soluciones y seleccin de la mejor solucin.
Las decisiones pueden ser: estratgicas, administrativas y operativas.

Los mtodos de apoyo a la toma de decisiones persiguen eliminar


las conjeturas improvisadas, el pensamiento no explicado, injustificado e
E. Martnez (1997), Evaluacin y Decisin Multicriterio 3

intuitivo que subyace en la mayora de las decisiones que se toman


respecto a problemas complejos.

Adicionalmente, sera til distinguir, por su pertinencia, los


siguientes conceptos:
Proyecto: conjunto integrado de actividades orientadas a alcanzar
objetivos y metas especficas, con un presupuesto definido, recursos
asignados, personas/entidades responsables, y en un plazo determinado.
Recientemente se reconoce la importancia de contar con un 'marco
lgico' del proyecto para facilitar el proceso de conceptualizacin,
diseo, ejecucin y evaluacin del mismo.
Eficiencia: optimizacin de los recursos utilizados para la
obtencin de los resultados previstos (logro de los objetivos
predefinidos). Esta nocin resulta particularmente prctica ya que
frecuentemente se utilizan recursos ptimamente en el logro de
objetivos irrelevantes.
Eficacia: contribucin de los resultados obtenidos al cumplimiento
de objetivos globales (de la sociedad); relevancia, pertinencia, validez o
utilidad socio-econmica de los resultados (objetivos predefinidos).
Efectividad: generacin sistemtica de resultados consistentes
integrando la eficacia y la eficiencia.

II. LOS METODOS DE EVALUACION Y DECISION MULTICRITERIO

A principios de la dcada del 50, en los medios acadmicos


estadounidenses,2 del novel campo de la investigacin de operaciones
surgi el estudio sistemtico acerca de las cuestiones tericas y
metodolgicas de la decisin multicriterio, aunque tomando distancias
de aqul, a travs de la crtica de la nocin de optimizacin. A partir de
los inicios de la dcada del 70,3 se produjo una expansin continua del
inters y los desarrollos tericos y prcticos de los mtodos de decisin
multicirterio.

Los mtodos de evaluacin y decisin multicriterio comprenden la


seleccin entre un conjunto de alternativas factibles, la optimizacin con
varias funciones objetivo simultneas y un nico agente decisor, y
procedimientos de evaluacin racionales y consistentes.

Los mtodos de Decisin Multicriterio Discreta se utilizan para


realizar una evaluacin y decisin respecto a problemas que, por
naturaleza o diseo, admiten un nmero finito de alternativas de
solucin, a travs de:

i. un conjunto de alternativas estable, generalmente finito (soluciones


factibles -que cumplen con las restricciones-, posibles o previsibles);
se asume que cada una de ellas est perfectamente identificada,

2
T. C. Koopmans (1951), y H. W. Kuhn and A. W. Tucker (1951)
3
1st. World Conference on Multiple Criteria Decision Making (South Carolina
University, U.S.A., 1972)
E. Martnez (1997), Evaluacin y Decisin Multicriterio 4

aunque no son necesariamente conocidas en forma exacta y completa


todas sus consecuencias cuantitativas y cualitativas
ii. una familia de criterios de evaluacin (atributos, objetivos) que
permiten evaluar cada una de las alternativas (analizar sus
consecuencias), conforme a los pesos (o ponderaciones) asignados
por el agente decisor y que reflejan la importancia (preferencia)
relativa de cada criterio; las propiedades de una familia de criterios
consistente son: exhaustividad, coherencia, no-redundancia
(independencia), operacionalidad, mensurabilidad y economicidad
iii. una matriz de decisin o de impactos que resume la evaluacin de
cada alternativa conforme a cada criterio; una valoracin (precisa o
subjetiva) de cada una de las soluciones a la luz de cada uno de los
criterios; la escala de medida de las evaluaciones puede ser
cuantitativa o cualitativa, y las medidas pueden expresarse en escalas
cardinal (razn e intervalo), ordinal, nominal, y probabilstica
iv. una metodologa o modelo de agregacin de preferencias en una
sntesis global; ordenacin, clasificacin, particin, o jerarquizacin
de dichos juicios para determinar la solucin que globalmente recibe
las mejores evaluaciones, y
v. un proceso de toma de decisiones (contexto de anlisis) en el cual se
lleva a cabo una negociacin consensual entre los actores o
interesados (analista -'experto'-, decisor, y usuario).

La tasa (razn) de intercambio entre dos criterios (trade-off)


representa la cantidad que se debe sacrificar en un criterio para obtener
a cambio una unidad de incremento en otro criterio.

Los mtodos de evaluacin y decisin multicriterio pueden ser


compensatorios o no. Un mtodo es compensatorio cuando, en la
asignacin de los pesos: (i) una mejora en un criterio permite
compensar un deterioro en otro, o (ii) el conjunto de criterios es
considerado en forma simultnea.

Los mtodos de Decisin Multiobjetivo se utilizan para realizar una


evaluacin y decisin respecto a problemas que pueden presentar un
conjunto infinito de alternativas de solucin. Las funciones objetivo
(criterios) pueden adoptar un nmero infinito de valores (un continuo).

Los mtodos de evaluacin y decisin multicriterio introducen una


lgica de anlisis con el fin de aprehender el conjunto de factores
involucrados en la consecucin de objetivos, y ofrecer una coherencia a
las apreciaciones individuales o grupales para obtener conclusiones
vlidas. Dicha lgica, que debe ser simple y accesible, se contrapone al
pensamiento y preferencias no explicitados, no justificados e intuitivos
que subyacen en gran parte de las evaluaciones y decisiones
relacionadas con programas, proyectos y actividades complejas.

En general, no existe una alternativa (solucin) que satisfaga y sea


preferible en cada una de las funciones objetivo (criterios).
E. Martnez (1997), Evaluacin y Decisin Multicriterio 5

Normalmente, se presenta el caso de alternativas factibles, o sea


aquellas que cumplen las restricciones, que son mejores que otras en
relacin a algunos criterios y que son peores que otras respecto a los
restantes criterios.

Una alternativa dominante es superior a otra en al menos un


criterio e igual en los restantes (o sea, no es superada en ninguno de los
criterios). Obviamente, la identificacin de una alternativa dominante
resuelve 'ipso facto' el problema de decisin.

Por el contrario, una alternativa dominada es inferior a otra en al


menos un criterio e igual en los restantes (o sea, no supera a la otra en
ninguno de los criterios). Estas soluciones pueden descartarse en
problemas en que se busca la mejor alternativa, aunque no en aquellos
en que se busca una ordenacin del conjunto de alternativas (algunas
alternativas pueden ser dominadas por otras pero no necesariamente
por todas -respecto a las que podran compararse ventajosamente).

Una alternativa es eficiente o no-dominada 4 cuando no existe otra


alternativa que sea superior a ella en al menos un criterio e igual en los
restantes (ninguna alternativa es dominante en relacin a ella), es decir,
o son iguales en todos y cada uno de los criterios, o la otra la supera en
uno o ms criterios y, a su vez, ella supera a la otra en al menos uno de
los criterios restantes.

La relacin de dominancia definida previamente resulta til como


una primera aproximacin, para la realizacin de un pre-anlisis (de
dominacin), aunque, obviamente, es insuficiente. La toma de decisiones
considera el conjunto eficiente de alternativas , de soluciones eficientes
o no-dominadas, y busca la seleccin de la mejor alternativa a travs de
la revelacin de las preferencias (subjetivas) del agente decisor. En
trminos estadsticos, e intuitivos, el nmero de alternativas eficientes
crece conforme aumenta el nmero de criterios (con 10 o ms criterios
las alternativas sern casi todas no-dominadas).

Los mtodos multicriterio responden tambin a la necesidad de


superar los anlisis o evaluciones de criterio nico ( unicriterio), como el
Anlisis (Social) de Costo-Beneficio (AC-B). El AC-B constituye una
estimacin y evaluacin de los beneficios netos asociados con
alternativas destinadas a alcanzar un objetivo (pblico), particularmente
el anlisis sobre la conveniencia econmica de emprender un proyecto
de inversin. El incremento del ingreso nacional constituye el objetivo
nico con el cual se mide la efectividad de las diversas alternativas. La
utilizacin del AC-B, como una alternativa a la rentabilidad comercial
(anlisis financiero privado), surge de la necesidad de 'corregir'
distorsiones en los mercados de productos y factores ocasionadas por
distintos tipos de imperfecciones de mercado y polticas fiscales; el AC-
4
Optimo de Pareto: el estado ptimo de una comunidad se presenta cuando
ninguna persona puede mejorar su situacin sin que empeore la de otra (Vilfredo
Pareto, 1896)
E. Martnez (1997), Evaluacin y Decisin Multicriterio 6

B calcula los costos y beneficios de un proyecto con base en 'precios


sombra' o 'precios de cuenta', que buscan superar las divergencias entre
los precios de mercado y los valores sociales. El AC-B requiere la
cuantificacin monetaria de todos los costos y beneficios por medio de
una comn unidad de cuenta (numerario), aunque frecuentemente no es
prctico ni posible evaluar alternativas con atributos exclusivamente en
valores monetarios. Las metodologas principales son: LMST-
OCDE/Banco Mundial, y ONUDI. El AC-B ha sido objeto de serias crticas
(en particular sus supuestos bsicos) y frecuentemente su aplicacin es
difcil,compleja e insegura. El AC-B ha sido utilizado en el mbito de las
grandes inversiones y decisiones del sector pblico y es preferido por los
organismos internacionales de financiamiento, pero no es aplicable o
apropiado para pequeos y medianos proyectos.

Los mtodos de evaluacin y decisin multicriterio no consideran


la posibilidad de encontrar una solucin ptima. En funcin de las
preferencias del agente decisor y de objetivos pre-definidos (usualmente
conflictivos), el problema central de los mtodos multicriterio consiste
en: (i) seleccionar la "mejor" alternativa(s) (problema tipo );
(ii) aceptar alternativas que parecen 'buenas' y rechazar aquellas que
parecen 'malas' (problema tipo ); (iii) generar una 'ordenacin'
(ranking) de las alternativas consideradas (de la 'mejor' a la 'peor')
(problema tipo ). Para ello han surgido diversos enfoques, mtodos y
soluciones.

Los principales mtodos de evaluacin y decisin multicriterio


discretos son:

A. Ponderacin Lineal (scoring)


Es un mtodo con una fundamentacin terica ortodoxa y directa 5,
que permite abordar situaciones de incertidumbre o con modestos
niveles de informacin, y que consiste en construir una funcin de
valor para cada alternativa. El mtodo de Ponderacin Lineal supone
la transitividad de preferencias o la comparabilidad. Es un mtodo
completamente compensatorio, y puede resultar dependiente, y
manipulable, de la asignacin de pesos a los criterios o de la escala
de medida de las evaluaciones. Es un mtodo intuitivo y sencillo de
utilizar y, por ello, ampliamente difundido.

B. Utilidad multiatributo (MAUT)


Para cada atributo se determina la correspondiente funcin de
utilidad (parcial), y luego se agregan en una funcin de utilidad
multiatributo de forma aditiva o multiplicativa. Al determinarse la
utilidad de cada una de las alternativas se consigue una ordenacin
5
La Teora de la Utilidad (y la Teora del Valor) postula que un individuo puede
elegir entre un conjunto de alternativas disponibles de forma que maximice su
satisfaccin. Ello implica que conoce cada una de las alternativas y es capaz de
evaluarlas. En el caso de un individuo racional y consistente es posible definir una
funcin de valor (determinstica) o una funcin de utilidad (probabilstica) que
represente sus preferencias.
E. Martnez (1997), Evaluacin y Decisin Multicriterio 7

completa del conjunto finito de alternativas. El mtodo de utilidad


multiatributo supone la transitividad de preferencias o la
comparabilidad, utiliza 'escalas de intervalo', y acepta el principio de
'preservacin de orden' (rank preservation). La condicin de
independencia preferencial mutua entre los atributos suele aceptarse
casi axiomticamente, e implcitamente la no-interaccin entre las
preferencias, cuando en realidad frecuentemente es cuestionable y
no refleja la estructura de preferencias del agente decisor. El rigor y
rgidez de los supuestos tericos de este mtodo, usualmente
controvertidos y difciles de contrastar en la prctica, lo que obliga a
relajarlos, requiere un elevado nivel de informacin del agente
decisor para la construccin de las funciones de utilidad
multiatributo, aunque permiten abordar fluidamente cuestiones de
incertidumbre y riesgo. No obstante las dificultades en su utilizacin,
este mtodo cuenta con una variedad de experiencias prcticas en el
mundo anglosajn (Estados Unidos e Inglaterra).

C. Anlisis jerrquico
(AHP-Analytic Hierarchy Process-Proceso de Jerarqua Analtica)
El AHP descompone una situacin compleja y no estructurada en sus
componentes, los ordena en una jerarqua, realiza comparaciones
binarias y atribuye valores nmericos a juicios subjetivos (respecto
de la importancia relativa de cada variable), y sintetiza los jucios,
agregando las soluciones parciales en una sola solucin. El AHP
utiliza 'escalas de razn', no admite el principio de 'preservacin de
orden' (pueden producirse indeseables efectos de 'inversin de orden'
-rank reversal-, aunque es posible evitarlos -Modo de Medicin
Absoluta o el Modo Ideal de Medicin Relativa), y permite realizar un
atractivo anlisis de sensibilidad. Normalmente, los objetivos
(criterios) son ordenados de los ms generales y menos controlables
a los ms especficos y controlables. Es un mtodo bastante intuitivo
en su aplicacin, difcilmente manipulable, posee un atractivo y
robusto software de apoyo (Expert Choice), y probablemente sea el
mtodo ms difundido y con la mayor gama de experiencias prcticas
tanto en los Estados Unidos como en el resto del mundo.

D. Relaciones de superacin ('surclassement', sobreordenacin,


sobreclasificacin, outranking)
(LECTRE-Limination Et Choix Traduisant la REalit, PROMTHE-
Preference Ranking Organization METHod for Enrichment Evaluations)
Estos mtodos constituyen instrumentos relativamente sencillos para
obtener una preseleccin de grupos de alternativas (elecciones) muy
amplios. El tamao del conjunto de soluciones eficientes se reduce
por medio de una particin en un subconjunto (ncleo) de alternativas
'ms favorables' y otro de 'menos favorables'. Una relacin de
superacin constituye un modelo de agregacin de preferencias, y
representa el caso particular de dos alternativas que son
'incomparables'. La construccin de relaciones de superacin no
necesita absolutamente efectuar comparaciones binarias de las
E. Martnez (1997), Evaluacin y Decisin Multicriterio 8

alternativas, no supone necesariamente la transitividad de


preferencias o la comparabilidad, utiliza escalas ordinales, es
indiferentes al principio de 'preservacin de orden', y no es
fcilmente manipulable. Los enfoques ms conocidos (Electre) se
basan en los conceptos de 'concordancia' y 'discordancia', y otros se
sustentan en el de 'tasas de sustitucin' o en una familia de
funciones de utilidad. El modelo de la relacin de superacin consiste
en admitir para cualquier par de alternativas que una 'supera' a la
otra cuando son satisfechas una condicin de concordancia y una de
discordancia (tests, ndices). La concordancia cuantifica el 'grado de
dominacin' de la alternativa A sobre la alternativa B; la discordancia
cuantifica el 'grado de no-dominacin' de la alternativa B sobre la A.
Conforme al nivel de incertidumbre, existen relaciones de superacin
determinsticas y 'difusas' (fuzzy). Los mtodos de superacin han
surgido de la Escuela Francesa, y su uso tambin es favorecido en
Blgica, Holanda y el resto de Europa.

REFERENCIAS

BARBA-ROMERO, Sergio (1991), Evaluacin multicriterio de proyectos; en Eduardo


Martnez (ed.)(1993), Ciencia, tecnologa y desarrollo: interrelaciones tericas y
metodolgicas (Nueva Sociedad/CEPAL/UNESCO/UNU/CYTED, Caracas, 1994, pp.
455-507)
BARBA-ROMERO, Sergio y Jean-Charles Pomerol (1996), Decisiones multicriterio:
fundamentos tericos y utilizacin prctica (Universidad de Alcal, Espaa, 1997,
pp. 5-36)
BRANS, Jean-Pierre and Bertrand Mareschal (1992), How to decide with PROMETHEE
DUCKSTEIN, L. and A. Goicoechea (1993), Value and utility concepts in multicriteria
decision making, in Janos Bogardi and Hans-Peter Nachtnebel (eds.) (1993),
Multicriteria decision analysis in water resources management (UNESCO, Paris,
1994, pp. 63-85)
FLAMENT, Michel (1991), Evaluacin multi-criterio de proyectos de inversin en ciencia
y tecnologa; en Eduardo Martnez (ed.)(1992), Estrategias, planificacin y gestin
de ciencia y tecnologa tericas y metodolgicas (Nueva Sociedad,
CEPAL/UNESCO/UNU/CYTED, Caracas, 1993, pp. 319-361)
HIPEL, Keith (1992), Multiple objective decision making in water resources (Water
Resources Bulletin, vol. 28, no. 1, Feb. 1992, pp. 3-12)
KOOPMANS, T. C. (1951), Analysis of production as an efficient combination of
activities; in T. C. Koopmans (ed.) (1951), Activity analysis of production and
allocation (J. Wiley, U.S.A., pp. 33-97)
KUHN, H. W. and A. W. Tucker (1951), Nonlinear programming; in J. Neyman (ed.) (1951),
Proceedings of the 2nd. Berkeley Symposium on mathematical statistical and
probability (University of California Press, U.S.A., pp. 481-91)
MARTINEZ, Eduardo (ed.) (1994), Ciencia, tecnologa y desarrollo: interrelaciones
tericas y metodolgicas (Nueva Sociedad/CEPAL/UNU/UNESCO/CYTED, Venezuela,
1994, 523 p.)
NACHTNEBEL, Hans-Peter (1993), Comparison of multi-criterion modelling techniques
and guidelines for selection, in Janos Bogardi and Hans-Peter Nachtnebel (eds.)
(1993), Multicriteria decision analysis in water resources management (UNESCO,
Paris, 1994, pp. 203-234)
E. Martnez (1997), Evaluacin y Decisin Multicriterio 9

NACHTNEBEL, Hans-Peter (1993), Multicriterion decision making methods with ordinal


and cardinal scales: Electre I-III, in Janos Bogardi and Hans-Peter Nachtnebel
(eds.) (1993), Multicriteria decision analysis in water resources management
(UNESCO, Paris, 1994, pp. 113-138)
ROMERO, Carlos (1992), Teora de la decisin multicriterio: conceptos, tcnicas y
aplicaciones (Alianza, Espaa, 1993, caps. 1-2, pp. 19-45)
ROY, Bernard et Denis Bouyssou (1993), Aide multicritre la dcision: mthodes et
cas (Economica, Paris, 699 p.)
SAATY, Thomas (1994), How to make a decision; in Thomas Saaty and Luis Vargas (eds.)
(1994), Decision Making in economic, political, social and technological
environments (RWS/University of Pittsburgh, USA, pp. 1-25)
SAATY, Thomas (1996), Toma de decisiones para lderes (RWS, Estados Unidos, 1997,
pp. 21-42)
STAKHIV, Eugene (1992), Does choice of multicriteria method matter ? An experiment
in water resources planning ? (Water Resources Research, vol. 28, no. 7, Jul. 1992,
pp. 1767-1779)
TECLE, A. and L. Duckstein (1993), Concepts of multicriteria decision making, in Janos
Bogardi and Hans-Peter Nachtnebel (eds.) (1993), Multicriteria decision analysis in
water resources management (UNESCO, Paris, 1994, pp. 33-62)
VARGAS, Luis (1994), Comparison of three multicriteria decision making theories: the
Analytic Hierarchy Process, multiattribute utility theory and outranking methods
(University of Pittsburgh, USA, photoc., 11 p.)
YI-XIANG, Wei and Wang Xiao-Yuan (1989), Application of AHP in the evaluation and
selection of the research projects applied to science foundations (A.I.T., Thailand,
1989, 13 p.)

También podría gustarte