Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Evaluación de La Evidencia Científica
Evaluación de La Evidencia Científica
740
tecnologa sanitaria. Las clasificaciones descritas en el apartado anterior tienen ciertas limitaciones, al no poder discriminar entre las posibles diferencias de calidad y rigor cientfico que puedan existir entre dos estudios situados en el
mismo nivel de evidencia cientfica, por ejemplo 2 ensayos
aleatorizados y controlados, cuando stos producen resultados contradictorios. Podra darse el caso de que un estudio
de menor gradacin cientfica presentara una mayor calidad
y rigor en comparacin con otro situado en un nivel superior
en el esquema de clasificacin. La validez interna de un estudio caso-control bien diseado podra ser mayor que la de
un ensayo controlado no aleatorizado en el que se produjera
un sesgo de seleccin en la asignacin de los pacientes.
Con el objeto de mejorar los esquemas de gradacin de la
evidencia cientfica antes descritos, se propone un sistema
de clasificacin que tiene en cuenta adems del diseo del
estudio una valoracin especfica de su calidad. El esquema
de gradacin propuesto por la AATM se describe en la tabla
3. Esta clasificacin considera en el anlisis de la evidencia,
adems del tipo de diseo, las denominadas condiciones de
rigurosidad cientfica. Estas condiciones permiten seleccionar, cuando se producen resultados dispares, el mejor estudio entre los de diseo similar o de igual nivel de evidencia.
El esquema de gradacin de la evidencia cientfica propuesto en la tabla 3 es similar a los descritos en las tablas 1 y 2.
La diferencia fundamental que presenta, aparte de la inclusin de las condiciones de rigurosidad, es la consideracin
del metaanlisis como el diseo de mayor rigor cientfico8.
Esto se debe a que el metaanlisis puede presentar la mejor
combinacin de validez interna u homogeneidad del diseo
y validez externa o capacidad de generalizar los resultados a
la poblacin general. A pesar de sus ventajas, el metaanlisis no est exento de sesgos ni limitaciones9,10. En el caso
del metaanlisis o revisin cuantitativa, las condiciones de
rigurosidad sealan un mayor rigor cientfico si se analizan
datos de pacientes individuales megaanlisis11, se tienen
en cuenta las posibles diferencias entre estudios metarregresin12, los estudios incluidos son homogneos y consistentes con respecto a los resultados, los ensayos seleccionados han sido valorados mediante un protocolo de
calidad13 y los resultados obtenidos se han confirmado por
ms de un mtodo de anlisis estadstico14. En el caso de
que los estudios seleccionados para el metaanlisis fueran
heterogneos o de baja calidad, habra que plantear la posibilidad de que el rigor cientfico y la calidad de un nico ensayo
aleatorizado y controlado fuera mayor que la del metaanlisis.
Hay que tener en cuenta la heterogeneidad en el nivel de calidad de los ensayos controlados y aleatorizados15,16.
Las restantes categoras del esquema de gradacin propuesto en la tabla 3 distinguen el mayor rigor cientfico de
los diseos que presentan una mejor combinacin de valiTABLA 1
Niveles de calidad de la evidencia cientficaa
I
II-1
II-2
II-3
III
a
De mayor (I) a menor (III) calidad de diseo y rigor cientfico. Tomado de U.S. Preventive
Task Force4. bEste tipo de evidencia tambin incluye resultados dramticos producidos
en experimentos incontrolados, como son los derivados de la introduccin de la penicilina
en los aos cuarenta.
TABLA 3
Niveles de calidad de la evidencia cientfica. Esquema
propuesto por la AATM
Nivel
Tipo de diseo
Condiciones de rigurosidad
cientfica*
Metaanlisis de ensayos
controlados y
aleatorizados
II
Ensayo controlado y
aleatorizado de
muestra grande
III
Ensayo controlado y
aleatorizado de
muestra pequea
Ensayo prospectivo
controlado no
aleatorizado
No heterogeneidad
Diferentes tcnicas de
anlisis
Metarregresin
Megaanlisis
Calidad de los estudios
Evaluacin del poder
estadstico
Multicntrico
Calidad del estudio
Evaluacin del poder
estadstico
Calidad del estudio
Controles coincidentes en
el tiempo
Multicntrico
Calidad del estudio
Controles histricos
Calidad del estudio
IV
VI
VII
VIII
IX
Ensayo prospectivo
controlado no
aleatorizado
Estudios de cohorte
Estudios de casos
y controles
Series clnicas no
controladas
Estudios descriptivos:
vigilancia
epidemiolgica,
encuestas, registros,
bases de datos
Comits de expertos
Ancdotas o casos nicos
Multicntrico
Apareamiento
Calidad del estudio
Multicntrico
Calidad del estudio
Multicntrico
741
TABLA 4
Idoneidad de las recomendaciones segn la calidad de la
evidencia cientficaa
Grado de las recomendaciones
Niveles de calidad
I
II-1
II-1
II-2
II-3
III
II-1
II-2
I
II-1
TABLA 5
Relacin entre los niveles de calidad de la evidencia
cientfica y el grado de recomendacionesa
Nivel de calidad de la evidencia cientfica
Grado de recomendacinb
B
C
La evaluacin de la evidencia cientfica se completa cuando, adems de valorar el tipo de diseo, se tienen en cuenta
otras consideraciones relacionadas con la metodologa del
estudio y las caractersticas de la intervencin sanitaria que
se evala. Las tablas de evidencia contribuyen a contextualizar las recomendaciones formuladas en funcin de otras
consideraciones no inherentes al diseo del estudio y relacionadas con la tecnologa sanitaria objeto de evaluacin.
stas son: la condicin clnica o el problema de salud objeto
de intervencin, las caractersticas de los pacientes y de los
proveedores, el tipo de intervencin y la forma de provisin,
la relevancia clnica de los posibles resultados clnicos y el
tipo de institucin sanitaria donde se va a adoptar la tecnologa. Las tablas antes descritas ponen en evidencia toda la
informacin que se debe considerar en el proceso de evaluacin de una tecnologa sanitaria antes de recomendar su
introduccin y adopcin en la prctica mdica habitual.
Ejemplos de esas tablas estn en la literatura19,20.
La informacin descrita en las tablas de evidencia permiten
la aplicacin de las tcnicas de sntesis de la evidencia con
el propsito de valorar la utilizacin de la tecnologa en grupos especficos de la poblacin y/o circunstancias clnicas
concretas anlisis de decisiones clnicas o el impacto de
la misma cuando se tienen en cuenta otro tipo de factores,
como son los costes anlisis coste-efectividad. En este
sentido, el metaanlisis tambin debera considerarse una
tcnica de sntesis, debido a que no podra aplicarse sin la
existencia de ensayos controlados y aleatorizados o estudios
epidemiolgicos a combinar. Otras tcnicas de sntesis, ms
complejas y poco comunes, se basan en la elaboracin de
modelos de simulacin o en la aplicacin de modelos matemticos de tipo multivariable que permiten clarificar las in-
742
certidumbres y ausencias de conocimiento en la interpretacin de la evidencia cientfica. Una ltima tcnica de sntesis, an en fase de desarrollo, es la denominada sntesis de
diseos cruzados que combina los resultados de ensayos
aleatorizados y controlados con estudios de tipo observacional21. El anlisis de la evidencia cientfica se completa con
la valoracin de las implicaciones ticas y de la aceptabilidad social de la tecnologa objeto de evaluacin.
Formulacin de recomendaciones
A partir del anlisis y de la clasificacin de la evidencia
cientfica descrita en la tabla 1, pueden formularse recomendaciones en torno a la idoneidad de las condiciones de
adopcin de una tecnologa sanitaria o procedimiento mdico22. El esquema de gradacin de las recomendaciones
ms utilizado en la literatura mdica se describe en la tabla
44. La clasificacin descrita califica a la evidencia cientfica
como adecuada (grado A) cuando permite formular recomendaciones conclusivas, como cierta (grado B) cuando es
factible expresar recomendaciones no concluyentes y como
insuficiente (grado C) cuando no se puede manifestar ningn tipo de valoracin. Un ejemplo de la aplicabilidad clnica de los esquemas de recomendaciones basados en la evidencia se describe en la tabla 523. Este ltimo esquema ha
sido modificado por sus autores por otro de mayor complejidad que considera la inclusin del metaanlisis, as como la
valoracin, en este ltimo tipo de diseo, de la significacin
clnica del efecto teraputico combinado y del grado de heterogeneidad de los estudios seleccionados24.
Las futuras escalas de recomendaciones basadas en la calidad de la evidencia cientfica deberan hacer ms nfasis
en la valoracin de las condiciones de aplicabilidad del diseo y la metodologa de anlisis estadstico. La valoracin
de la aplicabilidad del diseo considerar los diferentes aspectos que definen la validez interna y externa del estudio17,18. El anlisis estadstico permite valorar la magnitud
del beneficio teraputico estimado de la tecnologa, a partir
del clculo del efecto clnico combinado mediante tcnicas
metaanalticas y/o a travs de la estimacin del nmero de
pacientes en los que se necesita aplicar ese procedimiento
con objeto de obtener los resultados clnicos deseados25.
Las escalas de recomendaciones revisadas en este apartado
slo califican como buena a la evidencia cientfica procedente de metaanlisis y de ensayos aleatorizados y controlados. Esto supone un obstculo en la evaluacin de tecnologas o procedimientos en los que la asignacin aleatoria no
es tica, no existe tratamiento estndar con que comparar o
el diseo aleatorizado y controlado precisa de un gran nmero de pacientes y/o un largo perodo de seguimiento para
proporcionar la evidencia necesaria y/o no permite reproducir las condiciones de la prctica clnica habitual. Estas ltimas situaciones son frecuentes en el proceso de evaluacin
de tecnologas sanitarias. Los posibles inconvenientes y ventajas de adoptar o evitar el ensayo controlado y aleatorizado
como estndar ideal de diseo en la evaluacin de las tecnologas o procedimientos sanitarios, en comparacin a
otros diseos, pueden encontrarse en la literatura mdica26.
De todas maneras, la evaluacin de una tecnologa sanitaria
o procedimiento mdico debera considerar, siempre que
sea posible, los resultados procedentes de diseos controlados27. Estos diseos permiten comparar los beneficios, riesgos y costes de la tecnologa a evaluar con los de las posibles alternativas en condiciones de aplicacin equivalentes.
A pesar del debate existente en torno a cul debera ser el
diseo ideal, el proceso de evaluacin de tecnologas sanitarias supone la consideracin de toda la informacin disponi-
bles y su clasificacin mediante tablas de evidencia cientfica que permiten considerar aspectos complementarios al
mtodo utilizado. El informe de evaluacin debera explicar
los criterios en los que se basan las recomendaciones formuladas, incluyendo la procedencia de la informacin analizada, el esquema utilizado para clasificar la evidencia cientfica, la descripcin de las tablas de evidencia y la
interpretacin de su contenido, la metodologa de sntesis
de la evidencia y el anlisis de las posibles consecuencias
econmicas, sociales y ticas que se pueden anticipar
como resultado de la adopcin y difusin de la tecnologa
sanitaria evaluada.
Conclusiones
Las recomendaciones sobre la introduccin, la adopcin y
la difusin de una tecnologa sanitaria en la prctica mdica
habitual deberan estar avaladas por la confirmacin cientfica de su seguridad, eficacia, efectividad y relacin costeconsecuencia. La aplicacin de una tecnologa o procedimiento sanitario (nuevo o adoptado) para una indicacin
clnica cuya idoneidad no est probada cientficamente
plantea problemas de tipo tico que precisan ser estudiados
y abordados mediante propuestas concretas de evaluacin.
El proceso de evaluacin de tecnologas sanitarias supone la
formulacin de recomendaciones basadas en el anlisis, la
sntesis y la contextualizacin de la evidencia cientfica. Las
escalas de clasificacin de la evidencia cientfica contribuyen a determinar la calidad y el rigor cientfico de la informacin disponible. La gradacin de la evidencia cientfica
permite establecer recomendaciones objetivas respecto al
uso apropiado de la tecnologa evaluada. Las tablas de evidencia cientfica permiten la consideracin en el proceso
evaluador de otro tipo de caractersticas necesarias para
contextualizar las recomendaciones formuladas. Las tcnicas basadas en el anlisis de decisiones clnicas y en el
anlisis econmico contribuyen a completar el proceso evaluador al considerar otros factores, diferentes a los resultados procedentes de la evidencia cientfica, determinantes
en la adopcin y difusin de la tecnologa. El proceso evaluador se ampla y completa con la inclusin de una valoracin de las consecuencias sociales, ticas y econmicas derivadas de la introduccin, adopcin y difusin de la
tecnologa en un sistema sanitario concreto28. Este proceso
puede culminar con la elaboracin y aplicacin de las guas
de prctica clnica29 y la determinacin del nivel de cobertura sanitaria del sistema.
En el caso de que la gradacin de la informacin disponible
indique la carencia, insuficiencia o controversia de la evidencia cientfica respecto a la utilizacin de una tecnologa
concreta no debera recomendarse su adopcin universal
en la prctica mdica habitual. Su utilizacin tendra que
restringirse al contexto de un protocolo de investigacin experimental en instituciones sanitarias seleccionadas que
permitiera obtener la evidencia que se quiere evaluar. En
este sentido, se debera reflexionar en torno a cules son los
principios ticos que justifican la adopcin y difusin de una
tecnologa sanitaria en la prctica mdica habitual cuando
no existe evidencia cientfica sobre los posibles riesgos y beneficios derivados de su aplicacin a sujetos humanos. En
otras palabras, sin conocer los resultados del proceso de
evaluacin no se debera recomendar la provisin de una
tecnologa30. Quiz, si Hipcrates tuviera que rehacer su cdigo tico, al primer principio: no hacer dao le aadira
un pie de nota que dijera: antes de utilizar, primero investigar y evaluar. La produccin y la evaluacin de la evidencia cientifica constituyen la primera etapa del proceso.
Agradecimiento
Los autores agradecen los comentarios y las sugerencias realizadas
a una versin preliminar del artculo por ngela Boland, Josep M.
Borrs, Alicia Granados y Laura Sampietro-Colom.
REFERENCIAS BIBLIOGRFICAS
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
29.
30.
743