Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Guía para El Análisis Crítico de Publicaciones Cientificas
Guía para El Análisis Crítico de Publicaciones Cientificas
REV PARAOBSTET
EL ANLISIS
GINECOL
CRTICO
2004;DE
69(1):
PUBLICACIONES
67-72 CIENTFICAS / JORGE A. CARVAJAL C. 67
Documento
PASO 4. Evaluacin del diseo del estudio La medicin de un efecto sintomtico (dolor),
funcional (movilidad), psicolgico (ansiedad) o so-
Aunque el anlisis del diseo del estudio pue- cial (incomodidad social) est lleno de dificultades.
da asustar, mucho de lo que conocemos como En estos casos debe buscarse evidencia en el
apreciacin crtica es solamente sentido comn. artculo de que el resultado medido fue objetiva-
Debemos en primer lugar identificar el diseo del mente validado; esto es por ejemplo confirmar que
estudio. Esta identificacin permite saber cual es alguien ha validado la escala de dolor o ansiedad
el tipo de conclusiones a que el estudio puede utilizada, y que esta escala realmente mide lo que
conducir. Por ejemplo si el estudio es un diseo se desea que mida; y finalmente que cambios en
de caso control, las conclusiones pueden llevar a la medida del resultado reflejen verdaderos cam-
asociacin estadstica de riesgo, pero no a conclu- bios en el estado del paciente, esto porque cam-
siones de causalidad. Si el diseo es de un estu- bios importantes para el mdico no necesariamen-
dio prospectivo doble ciego randomizado, se su- te lo son para el paciente o viceversa.
giere seguir las instrucciones contenidas en el
Consort Statement (2) para verificar que el diseo PASO 5. Evaluacin de los posibles sesgos
contenga todos los elementos necesarios para que
el estudio se lleve a cabo. El anlisis debe conti- El sesgo sistemtico se define como cualquier
nuar luego con dos preguntas fundamentales: cosa que influya en las conclusiones acerca de los
Qu intervencin o maniobra est siendo grupos y distorsione las comparaciones. Ya sea
comparada?, y contra cual intervencin se est que el estudio sea randomizado y controlado, o un
comparando? Existe la tentacin a creer lo publi- estudio comparativo no randomizado, o de
cado como lo que efectivamente sucedi. Sin cohorte, o caso-control, el objetivo es que los gru-
embargo, muchas veces los autores (de modo pos sean comparables excepto respecto de la
consciente o inconsciente) efectan un arreglo particular diferencia que se est estudiando. As
cosmtico de sus decisiones y manejo, sobre por ejemplo, los pacientes deben, tanto como sea
estimando la originalidad, rigurosidad y potencial posible, recibir las mismas explicaciones, tener el
importancia del estudio. Para evitar este problema mismo contacto con los mdicos, ser evaluados el
debemos: 1. Evaluar el mtodo de obtencin de mismo nmero de veces y por los mismos resulta-
los datos, para determinar si efectivamente es dos. Diferentes diseos tienen diferentes necesi-
capaz de obtener con acuciosidad los datos de- dades para evitar el sesgo sistemtico.
seados (ejemplo: anlisis de fichas, las cuales no Estudios randomizados controlados: en un es-
necesariamente son 100% confiables); 2. Evaluar tudio randomizado el sesgo sistemtico, en teora,
si hay suficiente informacin respecto de la inter- es evitado por seleccionar pacientes de una po-
vencin efectuada (dosis del medicamento y natu- blacin dada y asignarlos al azar a los diferentes
raleza del placebo; caractersticas detalladas de la grupos. Sin embargo, potenciales fuentes de ses-
intervencin) y de los sujetos reclutados (cuantos go sistemtico en este tipo de estudios son:
fueron invitados a participar, cuantos realmente Sesgo de seleccin: el cual se origina por
aceptaron, hay balance entre razas y sexos, etc.); una randomizacin inadecuada, haciendo que los
3. Evaluar si se controlaron factores confundentes grupos tengan diferencias.
(evaluar si los pacientes del grupo estudio y con- Sesgo de intervencin: se origina si los pa-
trol difieren solo en la intervencin estudiada y no cientes son manejados de un modo diferente se-
en otra intervencin adicional); 4. Evaluar si la gn el grupo, de ese modo habr ms de una
informacin es realmente original y contributoria intervencin diferente sobre cada grupo.
(significa si ya hay muchos estudios similares). Sesgo de exclusin: se origina si la prdida
Qu resultado fue medido y como se mi- de pacientes es mayor en uno de los dos grupos,
di?. Debe evaluarse si el resultado medido es de principalmente si se pone menos atencin al gru-
importancia con relacin al problema que suscita po control.
el estudio. De este modo si se prueba un nuevo Sesgo de deteccin: si la medicin de los
tratamiento para una enfermedad potencialmente resultados se efecta de modo diferente, por ejem-
mortal, el resultado clnicamente relevante a eva- plo utilizando un mtodo ms sensible en el grupo
luar es el tiempo de sobrevida y la calidad de vida. estudio.
No es de inters evaluar el nivel plasmtico de Estudios clnicos controlados no randomizados:
alguna sustancia que potencialmente se correla- Estos estudios agregan a los sesgos descritos
ciona con la posibilidad de una mayor sobrevida. para los estudios randomizados, el sesgo poten-
70 REV CHIL OBSTET GINECOL 2004; 69(1)
cial de la falta de randomizacin. No rara vez los aparecer reflejado en la seccin de mtodos en
pacientes son asignados a un grupo mediante detalle, y no como una simple frase.
eventos que significan potencialmente un sesgo.
Por ejemplo: si los pacientes dados de alta del PASO 7. Evaluacin de los mtodos
hospital son asignados a un tratamiento, mientras estadsticos utilizados
que los en control en policlnico son asignados a
otro tratamiento. Para lograr este paso no se requiere ser un
Como regla general, si el estudio es no rando- experto en estadstica, pero si se requiere tener
mizado, se debe usar el sentido comn para eva- algunos conceptos claros sobre como y cuando
luar si las diferencias basales entre el grupo estu- aplicar un determinado tipo de test estadstico.
dio y el grupo control son suficientemente grandes Existen tres elementos estadsticos a los que se
como para invalidar las diferencias detectadas y debe poner especial atencin, y los cuales deben
adscritas a la intervencin en estudio. Con mucha estar explcitamente detallados en la seccin de
frecuencia este es el caso en este tipo de diseos. mtodos del paper:
Estudios de cohorte: La seleccin de un grupo 1. El clculo del tamao muestral.
comparable es el problema ms difcil en este tipo 2. La duracin estimada del seguimiento y el
de estudios. Solo pocos estudios de cohorte lo- nmero estimado de pacientes que lo completarn.
gran encontrar grupos que siendo equivalente en 3. El anlisis segn intencin de tratar.
edad, sexo, estatus socioeconmico, enfermeda-
des coexistentes, etc., difieren slo en la interven- 1. Tamao muestral: Un estudio debe ser sufi-
cin estudiada. En la prctica mucho del control cientemente grande para tener una alta probabili-
de variables en este tipo de artculos se efecta dad de detectar con significancia estadstica un
en la etapa de anlisis, en que observamos com- efecto benfico si es que existe, y estar razona-
plejas correcciones estadsticas para ajustar por la blemente seguro de que el beneficio no existe si
variabilidad basal de los grupos. el estudio no lo detecta.
Estudios caso-control: En estudios caso-con- Para calcular el tamao muestral, el clnico
trol (en el cual la experiencia de un individuo con debe decidir dos cosas. La primera decisin es
una enfermedad particular es analizado de modo cual nivel de diferencia entre ambos grupos cons-
retrospectivo para identificar un agente potencial- tituir un efecto clnicamente significativo. Este
mente causante), el proceso ms potencial de valor es por cierto diferente de la diferencia esta-
sesgo no es la medicin del resultado, sino que el dstica. En segundo lugar deber estimar el pro-
diagnstico de no caso (control) y la decisin de medio y desviacin estndar de la principal varia-
cuando el individuo se transforma en un caso. ble medida.
Mediante el uso de un nomograma los autores
PASO 6. Evaluacin del doble ciego podrn, antes de efectuar el estudio, saber el ta-
mao muestral necesario para tener una probabi-
Incluso los intentos ms acuciosos para gene- lidad moderada, alta o muy alta de detectar una
rar grupos comparables sern perdidos, especial- diferencia que realmente existe entre los dos gru-
mente si la persona que mide el resultado sabe a pos, esto es lo que se denomina poder estadsti-
que grupo pertenece el paciente. El investigador co, y habitualmente se fija entre 80-90%. Existen
podra reevaluar el resultado si este es inapropia- numerosos estudios publicados con bajo poder,
do al tratamiento que se est evaluando. Si por probablemente porque para los autores result
ejemplo se est probando una droga hipotensora, mucho ms difcil de lo estimado el reclutar a los
y la paciente es del grupo estudio, pero la presin pacientes. Esto lleva al error de tipo II o , que es la
arterial est ms alta, el evaluador tender a me- conclusin errnea de que la intervencin no tuvo
dir nuevamente la presin. efecto, que es lo opuesto del error de tipo I o , que
Es importante que se haga el mximo esfuerzo es ms raro y corresponde a la conclusin de que
posible por lograr el ciego tanto al paciente existe una diferencia que no existe.
como al mdico. Esto, muchas veces requiere, 2. Duracin y lo completo del seguimiento:
que el investigador no participe directamente en Aunque el tamao muestral sea suficientemente
la atencin de los pacientes. Si el estudio fue grande, el estudio debe continuar por un tiempo
metodolgicamente bien logrado, y los investi- necesariamente largo como para que el resultado
gadores pusieron especial nfasis en lograr el principal sea evaluado. La duracin depende ex-
enmascaramiento de la intervencin, ello debe clusivamente de la variable que se desee analizar.
GUA PARA EL ANLISIS CRTICO DE PUBLICACIONES CIENTFICAS / JORGE A. CARVAJAL C. 71
Los sujetos que se retiran del seguimiento no son tiles para obtener conclusiones cientfica-
comparado con los que siguen el estudio, con mente validadas. As por ejemplo, en pocas situa-
mayor probabilidad no tomaron los medicamentos ciones no se utiliza el anlisis segn intencin de
como se les indic, con ms frecuencia perdieron tratar; el ejemplo ms comn son los estudios
sus controles mdicos, o tienen mayor frecuencia para anlisis de eficacia, el que se utiliza para
de efectos adversos del medicamento. Las razo- evaluar los efectos de la intervencin en si misma,
nes para que un paciente se retire del seguimien- y por lo tanto analiza segn la intervencin efecti-
to son: vamente recibida. Pero, aun si los sujetos para un
Entrada incorrecta del paciente al estudio, anlisis de eficacia provienen de un estudio
esto es, que el investigador descubra durante el randomizado, para los propsitos del anlisis ellos
estudio que un paciente fue randomizado y entr constituyen un estudio de cohorte.
al estudio, pero no cumpla con los criterios de
inclusin. PASO 8. Evaluacin de los resultados y de las
Sospecha de reaccin adversa a la droga en conclusiones
estudio. Hay que notar que la tasa de reacciones
Los resultados son la parte ms importante del
adversas al medicamento debe compararse con la
trabajo. Habitualmente los datos ms relevantes
tasa de reacciones adversas en el grupo placebo;
aparecen presentados en tablas o grficos. Estos
las tabletas inertes son capaces de producir un
deben ser observados con cautela para ver los
rush alrgico en un nmero no despreciable de
datos crudos. Muchas veces los autores presen-
personas.
tan los datos como porcentaje de un valor, para
Prdida de la motivacin del paciente.
intentar hacer mayores pequeas diferencias. Al
Retiro del estudio por decisin de su mdico
final de los resultados el lector debe establecer
tratante. Esto sucede con frecuencia por la apari-
sus propias conclusiones. Son estas las que real-
cin de una enfermedad concomitante o por la
mente valen. La idea es que en este punto ya se
sensacin de falta de mejora.
conoce el problema a estudiar (introduccin), el
Prdida del seguimiento. Ejemplo: si la pa- mtodo usado (diseo experimental), y los resulta-
ciente se cambia de domicilio. dos, por lo tanto es posible hacer las conclusiones
Muerte del paciente. propias, la que sern adecuadas a los datos y no
3. Anlisis segn intencin de tratar: El ignorar estarn sesgadas por el deseo de determinado
a todos aquellos que se retiren del estudio produ- resultado, como ocurre a los autores.
cir un sesgo del resultado (sesgo de anlisis), No debe leer las conclusiones sin antes tener
usualmente a favor de la intervencin analizada las propias, extradas de los datos presentados.
(porque como se indic aquellos con efectos ad- En las conclusiones los autores presentan un re-
versos o mal resultado con mayor frecuencia se sumen de los datos y la interpretacin de los
retiran del estudio). Por eso el estndar actual es mismo, las que no rara vez difieren de las propias.
analizar los resultados de estudios comparativos Las conclusiones vlidas son slo aquellas que se
segn intencin de tratar. Esto significa que to- basan en los datos presentados, y no en tenden-
dos los datos de los pacientes randomizados a cias, o en grandes diferencias pero que no alcan-
una rama del estudio deben ser utilizados para el zaron significacin estadstica. Las conclusiones
anlisis, es decir todo paciente que se randomiza propias del lector orientan a lo que har con la
debe considerarse en aquella rama en que fue informacin obtenida, y no rara vez son diferentes
randomizado. Esto incluye aquellos quienes deja- de las de los autores.
ron el estudio antes de ser terminado, aquellos
que no se tomaron las tabletas, e incluso aquellos RESUMEN
que posteriormente recibieron la intervencin con-
trol por cualquier motivo. Del mismo modo aque- 1. Evaluar cuidadosamente el ttulo, los auto-
llos que fueron randomizados a placebo deben ser res y la introduccin.
analizados con ese grupo, ya sea que tomaron o 2. Determinar la contribucin del estudio al
no el placebo, y si completaron o no el seguimien- conocimiento (originalidad)
to. Las comparaciones entre aquellos que efecti- 3. Comprobar la poblacin estudiada (validez
vamente tomaron las tabletas o recibieron la inter- externa del estudio).
vencin completa, son slo tiles como anlisis 4. Caracterizar el diseo.
secundarios que motiven nuevos estudios, pero 5. Evaluar si se evit el sesgo.
72 REV CHIL OBSTET GINECOL 2004; 69(1)