Curvas ROC

Alberto Velzquez
Para qu sirven las curvas ROC?.
1.
2.

Para comparar dos tests

Para determinar cul es el mejor punto de corte (mxima utilidad).

Cmo se comparan los estudios diagnsticos?.

Primero examinar los grficos y luego comparar las reas bajo las curvas.
Es difcil comparar a ojo las curvas, lo que se ve es la dominancia, es decir, cul es la que est ms cerca del extremo
superior izquierdo en todos los puntos.
Es decir que lo que hay que hacer con las curvas es mirarlas, si hay algn cruce note esto y necesitar el ABC.
Cmo medir el ABC?.
No paramtricos: No asume distribucin alguna:
1.
2.

Cuente los cuadraditos.

Area trapezoidal (Mann-Withney-Wilcoxon).

Paramtricos:
Asume distribucin binormal.
1. Pendiente de la curva.
2. Area punteada usando la tcnica del mximo LR.

El ABC tiene un importante significado.

Es la probabilidad en la cual dado dos individuos, un paciente enfermo y otro sano, el resultado del test diagnstico
ser ms anormal en el paciente enfermo.
Esta probabilidad, es la misma obtenida por test no paramtricos Wilocoxon o Mann-Whitney.
W = Pr [XE >XS]
Donde
W = el ABC medido punto por punto por usar un mtodo de integracin trapezoidal.
Pr [XE >XS]: representa la p del resultado de un test en E (los pacientes enfermos) que ser mas anormal que en
pacientes sanos (XS).
Area de 1 = Test perfecto
Area de 0.5 = no discrimina poder
Por ejemplo, el ABC del VCM en la anemia ferropnica es de 0.77.
Esto implica que dado dos pacientes uno de los cuales tiene anemia ferropnica el enfermo tendr una probabilidad
de 0.77 de tener un VCM bajo.
El error standard de la curva ROC
2

ESw = {[W(1 W )+ (NA -1) (Q1 W ) + ( NN -1) (Q2 W ) / NANN

Q1 representa la probabilidad que los pacientes aleatorizadamente anormales tendrn ms resultados anormales que
un paciente normal elegido aleatorizadamente.
Q2 representa la probabilidad que los pacientes aleatorizadamente anormales tendrn ms resultados anormales que
dos pacientes normales elegido randomizadamente.
NA representa el nmero de pacientes anormales
NN el nmero de pacientes normales

Las curvas ROC comienzan con una TFP = 0 y una Sens = 0 ( es decir que conceptualmente si el CAGE es siempre
considerado negativo sin importar las respuestas de los pacientes no hay falsos positivos pero tampoco detecto a
ningn alcoholico) y terminan con una TFP de 1 y una sensibilidad de 1 ( una vez ms, si el CAGE es siempre
considerado positivo, sin importar la respuesta del paciente, el test tiene perfecta sensibilidad pero todos los no
alcohlicos resultarn en falsos positivos).

Puntos de corte

TFP

3 positivas
2 positivas
1 positivas
0 positivas

Sens
0.00
0.02
0.09
0.19

0.19
0.44
0.73
0.89

El ABC es 0.89 unidades( error standard 0.13 unidades). Es decir que los pacientes alcohlicos elegidos
randomizadamente de la muestra de la poblacin tienen un score ms alto del CAGE que los pacientes no
alcohlicos elegidos randomizadamente en el 89 % de las veces.
El ABC es un parmetro usado para cuantificar en un valor numrico nico de la ubicacin total de una curva en
relacin a la diagonal. Comprende 0.5 (sin aparente accuracy ) a 1 (perfecta accuracy) a medida que se desplaza
hacia arriba y a la izquierda.
Si el investigador desea testear estadsticamente si dos curvas son diferentes se debe testear con un test estadstico
bivariable
Cul es el mejor punto de corte?
Para elegir un punto de corte es necesario entender explcitamente:
a. Los riesgos de tratar a los pacientes sanos ( el costo de un falso (+))
b. Los beneficios de tratar a los pacientes enfermos
c. La prevalencia de la enfermedad.
Un mtodo utilizado para ello es determinar el punto de la curva ROC al cual la pendiente de la curva ROC relaciona
el costo, el beneficio y la probabilidad pretest.
Pendiente de la curva =

C
1
-------------- x ------------ =
B
ODDS