Documentos de Académico
Documentos de Profesional
Documentos de Cultura
65-Texto Del Artículo-128-1-10-20141110
65-Texto Del Artículo-128-1-10-20141110
ESTUDIO DE CONFIABILIDAD
Josa JUAN SANCIIl!Z-BÁEZ, M.C.P) _
MARIo GóMEZ-EsPINOSA, M.C.,(I)
PAULA PADllLA-GALINA(I)
RESUMEN: ABSTRACT:
Con la finalidad de estimar la prevalencia de trastornos ln order to estimare the prevalence 01 mental disorders
mentales en estudios epidemiológicos en la comunidad, tn epidemiologic studies in the community, our depan-
hemos desarrollado la Entrevista Psiquiátrica Modifi- ment has designed the Modified Psychiatric Interview
cada (EPM), un instrumento semiestructurado derivado (MPI), a semi-structured interview derived from the
de la Standardized Psychiatric Interview de Goldberg Standardized Psychiatric Interview by Goldberg et al.
y colaboradores, para ser aplicada por entrevistadores This instrument confirms the presence 01 "psychiatric
con experiencia cllnica en el área de la salud mental. cases" and is applied by interviewers witñ clinical
Este articulo tiene como finalidad evaluar el grado de experience. The purpose 01 this article is to evaluate the
acuerdo entre entrevistadores cltnicos (utilizando un degree 01 agreement between clinical interviewers (us-
diseño entrevistador-observador], empleando la EPM en ing an interviewer-observer design}, utilizing MPI in an
paoientes que asistieron a la consulta externa de un out-patient population attending a general hospital, as
hospital general de la Secretaria de Salud, como parte part 01 an investigation on prevalence 01mental disor-
de una investigación sobre prevalencia de trastornos ders at a 2nd. levet 01 medical careo The degree 01
mentales en un 2' nivel de atención médica. Se analizó agreement was calculated in the different sections 01 the
el grado de acuerdo entre los entrevistadores en las instrument by Pearson' s produa-moment correlaüon,
diferentes secciones que comprenden el instrumento en Kappa statistic and Yute' s "Y" coefficient. The results
base a tres estadlsticos: correlación producto-momento showed a high level 01 reliability amang the clinicai
de Pearson, estadlstico de Kappa y el coeficiente "Y" interviewers in each section 01 the MPI.
de rule. Los resultados obtenidos indicaron un alto
nivel de confiabilidad en cada una de las secciones de
la EPM.
Palabras clave: instrumento, entrevista psiquiátrica. confiabilidad Key words: instrumem, psychiatric intcrvicw, reJiability
Solicitud de sobretiros: Dr. Mario Gémez-Espincsa, Departamento de Investigaciones en Servlclcs de Salud. Divisi6n de Investigaciones
Epidemiológicas y Sociales, Instituto Mexicano de Psiquiatría. Calzada Méxíco-Xcchímilcc NI' 101, Col. San Lorenzo Huipuloo, TIaJpan 14370,
M6xico, D.F.
(1) Departamento de Investigaciones en Servicios de Salud, División de Investigaciones Epidemiol6gicas y Sociales, Instituto Mexicano de
PsiquiaLÓa, M~xico.
Fecha de recibido: 28 de noviembre de 1988 Fecha de aprobado: 16 de enero de 1989
dios de confiabilidad, estos han sido atinadamente una escala de cinco grados. La sección se encuentra
revisados por Bartko? y Maxwell," entre otros; recien- integrada por tres subsecciones, con 12 reactivos en
temente se ha propuesto una solución al problema de total.
Kappa en cuanto a su dependencia al base rate y margi- IV. Alcoholismo. Es una sección que detecta problemas
nales,' maximizando los valores estadísticos de Kappa con el consumo de alcohol. Se califica en una escala de
al utilizar la Y de Yule. No obstante, aún no se ha cinco grados. No influye en la calificación global, pero
generalizado su uso, dando preferencia en diversos es- sí en el total global de severidad. Está constituída por
tudios·""·1O a estadísticos tales como correlación, Kappa, un reactivo, con preguntas obligatorias y opcionales.
ICC, IAA, IAP, etcétera. Por otro lado, Bishop" trabaja V. Impresi6n diagnástica. Está integrada por los
con los estimadores Pseudo-Bayos cuando se presentan siguientes reactivos: a) confiabilidad de la información;
frecuencias de cero en alguna de las celdillas de b) Calificación Global de Severidad (puntaje obtenido
intersección de los atributos, en lugar de utilizar el por la sumatoria de los síntomas reportados, más 2
factor de corrección que adiciona 0.5 a las celdillas; veces las anormalidades manifiestas); e) impresión
ello tiene sus ventajas, ya que mantienc la proporcion- diagnóstica acorde a la Clasificación Internacional de
alidad estructural de las tablas de contingencia. las Enfermedades (crs) en su 9' revisión;" d) Total
Global de Severidad en escala de cinco grados y, fi-
lA EN1lIEVlSTA PSIQUIATRICA MODIFICADA: EPM nalmente, e) el nombre del entrevistador. Para la
confirmación de caso, se utilizan tres criterios de EPM:
La Entrevista Psiquiátrica Modificada (EPM) es un in- la Calificación Global de Severidad, la impresión
strumento de investigación para la confirmación de diagnóstica y el Total Global de Severidad.
"caso psiquiátrico", derivada esencialmente de la Stan-
dardized Psychyatric Interview (SPI), diseñada por Las características específicas a nivel estructural
Goldberg y colaboradores." La EPM corresponde a la están fuera del alcance de este artículo.
última versión, tras siete años de utilización en el Insti-
tuto Mexicano de Psiquiatria, incorporando las experi- MATERIAL Y METO DOS
encias de las modificaciones al instrumento SPI. No
obstante, los cambios para lograr una mayor adaptación Nuestro propósito fue que cuatro entrevistadores real-
a la cultura mexicana en particular, y latinoamericana izaran un total de 35 entrevistas psiquiátricas a pacien-
en general, la convierten en un instrumento diferente a tes del Hospital General "Dr. Manuel Gea González" de
los antes mencionados, aunque conserva la arquitectura la Secretaría de Salud, utilizando como instrumento a
global de la entrevista original. 2. la EPM.
La EPM está orgartizada en cinco secciones que dan El procedimiento para nuestro estudio de confiabili-
lugar a su estructuro general: dad de la EPM fue el de entrevistador-observador (inter-
rater), de manera simultánea e independiente: un entre-
1. Historia médica general. Capta información para vistador y un observador. Uno de los cuatro entrevista-
identificar al entrevistado, así como aspectos dores participantes funcionó en realidad como el obser-
sociodemográficos y antecedentes personales y familia- vador o estándar, contra el cual las calificaciones de los
res, tanto psiquiátricos como no psiquiátricos. Se en- demás entrevistadores fueron comparadas. Todos util-
cuentra constituída por siete reactivos. izaron la EPM para cada una de las entrevistas.
11.Sintomas reportados. Es un interrogatorio detallad') El diseño del estudio de confiabilidad de EPM estuvo
y sistemático de síntomas psiquiátricos, presentes du- integrado a un proyecto de investigación más amplio
mute el último mes, cuantificables en una escala de denominado "Prevalencia de Trastornos Mentales en el
intensidad de cinco gredas (de I a 5). Esta sección se Segundo Nivel de Atención Médica" (Proyecto 4410,
encuentra constituida por 10 reactivos con preguntas División de Investigaciones Epidemiológicas y
obligatorias y opcionales. Sociales, IMP, 1986), donde EPM fue uno de los instru-
m. Anormalidades manifiestas. Son alteraciones mentos utilizados, razón por la cual el estudio de
psicopatológicas percibidas por el clínico en la con- confiabilidad fue dividido en dos partes: la primera fue
ducta del sujeto entrevistado. Se califica igualmente en previa a la investigación, a la cual denominamos "fase
MOMENTO DE L\ EN1lWVISTA
Previo a los dos momentos del estudio de confiabilidad,
se llevó a cabo un curso de capacitación para el uso y Las entrevistas se realizaron en el área de Consulta
manejo de EPM el cual tuvo una duración de cinco días, Externa del hospital. A los pacientes que acudlan a
cumpliendo un total efectivo de 30 horas de trabajo; se recibir consulta médica se les invitaba a participar en
consideraron tanto aspectos teóricos como prácticos. En las entrevistas psiquiátricas. En el consultorio permane-
los primeros estuvieron incluidas las características de clan en un espacio cómodo tanto el paciente como el
la arquitectura global y específica de la EPM, así como entrevistador y el observador (estándar).
su manejo, y la revisión del sistema clasificatorio de la El entrevistador recibía a los pacientes y dirigía toda
cm-9 en su sección V (trastornos mentales). En cuanto la entrevista; el observador llevaba a cabo sus califica-
a los segundos, quedaron incluidas prácticas en el ciones sin intervenir. Las entrevistas tuvieron un pro-
manejo de la EPM mediante entrevistas filmadas (vídeo- medio de duración de 40 minutos.
tape) y pacientes "in vivo". Durante el periodo de a-
diestramiento, se aportaron críticas y sugerencias para ANALlSIS ESTADISTICO
el mejoramiento de la EPM.
Fueron sometidos al análisis estadístico cada uno de los
LA INDEl-ENDENCIA DH LOS ENTIUlVISTADORES Y ESTANDAR reactivos de EPM, así como todas las caIificaciones en su
conjunto. Igualmente, las secciones básicas de EPM
Aunque el estándar y el entrevistador calificaron sirnul- fueron expuestas al análisis de manera separada. Los
láneamente a un mismo paciente, se mantuvo total estadísticos utilizados fueron: Coeñcíente de Correla-
independencia uno del otro, tanto en la primera como ción Producto-Momento de Pearson, Kappa' Indice de
en la segunda parte del estudio de confiabilidad. El Acuerdo en Presencia y Ausencia.' y la Y de Y ule."
paciente entrevistado fue desconocido para ambos y las Para la eliminación de frecuencias cero, fueron usados
calificaciones independientes fueron vaciadas, para su los estimadores Pseudo-Bayes Pij*. Específicamente, se
manejo posterior, por un personal ajeno a las entrevis- utilizaron las fórmulas descritas por Bishop:"
tas. La regla fundamental fue la de no comunicación
entre entrevistador y estándar, la cual fue estrictamcete N Pij +_K
__ PI. P.¡ (1)
seguida. P"*_
JJ - N + K N+ K
n = 20 r = 15
Reactivos r k Reactivos r k
r= producto-momento de Pearson
r= producto-momento de Pearson ke Kappa
k= Kappa * Ausencia del síntoma en los pacientes
'".Ausencia del síntoma en los pacientes
Valores**
Reactivos BPM r k Y
Síntomas reportados
-Síntomas somáticos 0.87 0.86 0.84'
-Patiga 0.90 0.82 0.83
-Alteraciones en el sueñ.o 0.94 0.88 0.85'
·Irritabilidad 0.90 0.93 0.89'
-Dísmínución de la concentración 0.92 0.94 0.90'
'Depresión 0.&4 0.88 0.88
-Ansíedad y preocupación 0.92 0.74 0.79
-Fobias 0.89 0.84 0.86
-Obsesiones y compulsiones 0.87 0.69 0.73
-Despersonalizacíén 0.92 0.84 0.83'
Anormalidades manifiestas
-Lentitud y carencia de espontaneidad 0.93 0.20' 0.50'
'Suspicacia y defensividad 1.00
-Histrionismo 1.00
-Deprimido 0.87 0.60 0.67'
-Ansioso-tenso 0.82 0.66 0.63'
'Eufórico-exaltado 1.00
-Aplanadc-incongruente 1.00
-Trastomos del pensamiento-delirios 1.00
-Alucinacíones 1.00
-Alteracíones en el intelecto 0.92
-Excesiva preocupación por las funciones corporales 0.88 0.54 0.61
-Contenido depresivo del pensamiento 0.80 0.71 0.75
Alcoholismo 0.88
valores de Yule err6neamente perfectas' y los valores Síntomas Reportados con las Anormalidades Manifies-
encontrados y observados en el mismo cuadro III con tas encontrarnos que los valores de producto-momento
un asterisco distan de ser así. El reordenamiento se son inferiores en las primeras; sin embargo lo opuesto
llev6 a cabo con los estimadores Pseudo-Bayes, dando se presenta con el estadístico Kappa, donde los Sínto-
por resultado valores de Y más cercanos a la realidad mas Reportados alcanzan valores mayores que las
en el acuerdo entre clínicos. Estos valores encontrados Anormalidades Manifiestas.
en nuestro estudio son indicadores de una buena con- Los resultados estadísticos de la confiabilidad global
fiabilidad entre ellos. para todas las calificaciones de EPM, observados tam-
De los tres estadísticos utilizados, consideramos al bién en el cuadro IV, resultan ser mayores para la parte
estadístico Y de Yule como el más óptimo para estudios 2, comparado con la primera; los resultados de conña-
de confiabilidad entre calificadores. bilidad global en ambas partes, como un s6lo grupo
En la secci6n de Anormalidades Manifiestas, pode- muestral (n= 35), para todas las calificaciones de EPM,
mos observar resultados satisfactorios con el estadístico fueron de 0.91 para la correlaci6n producto-momento,
producto-momento donde el rango fue de 0.82 a 1.00. de 0.79 para el estadístico Kappa, y de 0.78 para la Y
Sin embargo, no en todos los reactivos fue posible la de Yule.
utilizaci6n de Kappa y de Y de Yule, ya que los fenó-
menos psicopatol6gicos medidos por dichos reactivos COMPARACION CON OTROS ESTUDIOS DE CONFlABll.IDAD
estuvieron ausentes en los pacientes entrevistados. Pero EN1REVlSTAOOR-OBSERVAOOR
en los que sí fue posible percibir la psicopatología, los
rangos de Kappa oscilaron entre 0.54 y 0.71; y los de En el cuadro V se observan algunos estudios de conña-
Y de Yule fueron entre 0.50 y 0.75. Todo ello de- bilidad realizados en tres décadas diferentes con dos
muestra la dificultad existente en la medición de la intrumentos en sus distintas ediciones o modificaciones.
psicopatología a través de la conducta observada y Todos los valores reportados de producto-momento son
explica el mayor acuerdo cuando los síntomas están mayores que los del estadístico Kappa. Los resultados
ausentes, lo cual puede ser visto como un ejemplo, en del estudio de EPM lograron ser mayores; sin embargo,
los reactivos del mismo cuadro Ill, cuyos valores r son los valores globales de todas las calificaciones de EPM •
mayores comparados con las de k y Y. Dadas las carac- con n= 35 (0.91 y 0.79 para r y k respectivamente),
terísticas de la muestra de estudio, es explicable la pueden considerarse como más reales (cuadro IV).
ausencia de sintomatolgía psic6tica en los entrevistados.
En cuanto a la sección de Alcoholismo únicamente DISCUSION
fue posible obtener resultados a través de r, el cual fue
de 0.88. En general, los resultados del acuerdo obtenido entre
Los resultados de acuerdo obtenidos para el Total los clínicos de nuestro estudio en el manejo de la En-
Global de Severidad, que es uno de los criterios para la trevista Psiquiátrica Modificada, no difiere mucho de
conñrmacíén de caso psiq uiátrico de la EPM, son de los obtenidos en 1980 por Campillo y colaboradores' y
0.89 para producto-momento, .84 para Kappa y 0.83 en 1970 por el doctor Goldberg."
para Y de Yule, los cuales son indicadores de buena Campillo reportó un producto-momento de 0.90 y
confiabilidad del instrumento. Kappa de 0.80, Goldberg por su lado public6 resultados
s6lo con producto-momento de 0.84 y los nuestros
COMPARACION DE LOS DOS MOMENTOS DEL ESTUDIO Y DE fueron con r de 0.91, con Kappa de 0.79 y Y de 0.78
LAS SECCIONES BASlCAS DE EPM (cuadro V). No obstante estas semejanzas, existen dif-
erencias en reactivos específicos, como es el caso en los
La comparaci6n de las medias de correlaci6n producto- Síntomas Reportados, que no guardan gran relevancia
momento y Kappa de las 2 fases en las secciones bási- debido a que los resultados obtenidos por Campillo y
cas de EPM -Síntomas Reportados y Anormalidades colaboradores muestran una Kappa de 0.61 yen nuestro
Manifiestas- las observamos en el cuadro IV. Los val- estudio fue de 0.69.
ores medios de ambos estadísticos son inferiores en la Las diferencias específicas en la secci6n de las
primera fase respecto de la segunda; comparando los Anormalidades Manifiestas, consisten en que nuestros
n= 20 ne 15 n= 35
Fase piloto Fase de campo Ambas
Sección r k k r k y
r= producto-momento de Pearson
k= Kappa
:L·i;!...·..II...:l.(.\i
li¡i¡.¡.ri ........••.••..... /;}.~~~~gy........(
•••. •.··.·.;.//.·.i ..·.}·(.· .
l••ti. :..............
•.....
,...
:..•.........•.•.
·.•
.•..
•.>c:¡¡jnpaí'M!6nl!#t!lllilíáS4~cWr~laci6¡J;pi9i1~(;tO:r#Qment9
••. ..
'.'•..•.••..•.•..•
¡:~. '....•...••.••
,.f·· .
L:::f:"';'
.. ""0'
. ·.,.Ka..
,y .•.••. '.e.•.
~".!l'
·..•.·.··
•...ª.\~.er·.e.•.•.
·.n.·.·. t
•••• ".::::::'::;;::::::::,;::::::;:{:}~;:(~,:::':';:':;::.:.:,....
···r.,.
.c. .s '.e.·
•..
.•.s.·. J.1i••..•.
"
O•..'.~..•·.•...••
PPl!.·
,
,•:.'.•.•
• ,..•..•..•.••...••.•..•.
,•'••....•..
•.." .•.•••
· .•.• .• •·.·• ,.,..••..
,.•••
,'.',.:
••,.'.•'.'.'
t1l. ..•.:.... ,.,.,•.
" " '
Autor Instrumentos r k
r= producto-momento de Pearson
k= Kappa
máximos acuerdos fueron durante la ausencia de la malidades manifiestas mide y califica en grados la
sintomatología (cuadros III y IV) en los entrevistados, conducta del entrevistado, para lo cual se requiere una
como puede observarse al comparar los valores de r con preparación que va más allá de un curso de capacitación
k y Y. Este fenómeno en que los entrevistadores logran en el uso y manejo de la entrevista. Estas observaciones
mayores acuerdos en la ausencia que en la presencia de se encuentran en oposición a las vertidas por otros au-
la sintomatología, es ampliamente conocido y reportado tores,' en donde se hace notar la posibilidad del manejo
por varios autores.6-8,14 por entrevistadores sin experiencia cllnica. La EPM no
Por otro lado, al comparar los resultados entre el es una entrevista altamente estructurada que impida los
primer grupo (n= 20) y el segundo (n= 15), encontra- fenómenos de variación de juicio clfnico, por lo tanto
rnos diferencias que benefician a éste último, lo cual se para su uso debe considerarse tal característica. En el
explica a través de un mayor conocimiento 'f contacto caso del DIS (Diagnostic Interview Schedule)," éste es
de los entrevistados con la EPM. Ello nos lleva a con- un instrumento altamente estructurado que no permite
cluir que en la medida que éstos mejoran su capacita- la influencia del juicio cllnico ni el conocimiento
ción y conocimiento en los instrumentos, dará lugar a amplio de un sistema clasificatorio para su manejo; así,
la posibilidad de mejores acuerdos. Lo que nos permite puede ser aplicado por legos. Esto no es posible en
enfatizar que los cursos de capacitación en el uso y instrumentos donde queda implícito que el juicio clíni-
manejo de la entrevista y la supervisión constanle co, la habilidad personal de entrevistador y la capacidad
mejoran la confiabilidad de las investigaciones. Por lo de detectar psícopatología en el comportamiento no
que respecta a la conjunción de ambos grupos (n= 35), verbal, forman parle de las características estructuradas
las diferencias de los valores entre los Síntomas Repor- o funcionales del propio instrumento. Por ésta razón, si
tados y las Anormalidades Manifiestas son claras, ya bien reconocernos la necesidad de contar con instru-
que los resultados de k y Y son más elevados en los mentos de bajo costo en su aplicación y de caracterís-
primeros que en los segundos, y con producto-momen- ticas sencillas, debemos tener en mente que la captación
to es a la inversa. Esto ya ha sido explicado por otros y medición de cierta psicopatología requiere de instru-
autores que han hecho referencia a la dificultad en la mentos que no sean aplicados por personal sin expe-
medición de la conducta observable al compararse con riencia clínica. El conocimiento de las características de
lo expresado verbalmente por los sujetos entrevista- los instrumentos y sus objetivos de uso no llevan nece-
dos;'~·IO·"se puede explicar, además, por las caracte- sariamente al uso racional de los mismos.
rísticas paniculares de nuestra muestra en que la pato- En cuanto a los estadísticos utilizados, creemos que
logía grave estuvo ausente (como son las manifestacio- el de mayor utilidad para este tipo de estudios de
nes psic6ticas). Podrían explorarse poblaciones más confiabilidad entre cllnicos, es el coeficiente de coli-
enfermas, aunque ello llevaría razonablemente a espe- gación de Yule, denominado por este autor "Y" en
rarse serias dificultades en la calificación de los Sínto- 1912," lo que nos lleva a compartir las ideas de
mas Reportados de la entrevista. Afortunadamente, es Spitznagel' de que este estadístico es "una Kappa
poco frecuente la patología psicótica en la comunidad, maximizada", dejando a la Kappa y producto-momento
lugar indicado para la aplicación de la EPM. para otras circunstancias. Asimismo, vemos con agrado
La utilidad de la EPM se ve confirmada en los resul- los beneficios del uso de los estimadores Pseudo-Bayes
tados· obtenidos en el Total Global de Severidad (los para la eliminación de las frecuencias cero, respetando
cuales no son reportados en estudios previos en nuestro la proporcionalidad de la estructura de la tabla de
país), que es uno de los criterios para la confirmación contingencia, y teniendo ventajas sobre la corrección a
de caso psiquiátrico en EPM (cuadro III). través de la adición de 0.5.'
La utilización de entrevistadores cllnicos para nues- En conclusión, podemos afirmar que EPM es un
tro estudio no fue una decisión arbitraria; por el con- instrumento confiable en manos de clínicos capacitados,
trario, estuvo basada en las características propias del siendo su principal utilidad en la investigacion psiquiá-
instrumento ya que a semejanza del Present State trica para la conñrmacíón de casos y con mayor adap-
Examinalion,~")O el juicio cllnico del entrevistador tación a la cullura mexicana. Nuestra experiencia nos
juega un papel importante en ambas entrevistas. lleva a poner en duda su utilidad con otro tipo de
En el caso especifico de la EPM, la sección de anor- profesionales. Asimismo, confirma su utilidad para los
estudios de comunidad, para lo cual fue creada. al Doctor en Psicología Marcelo Valencia Collazos y al
Médico Psiquiatra Enrique Valencia Huarte por la
AGRADECIMIENTOS valiosa colaboración prestada en esta investigación.
REFERENCIAS
1. Bond 1, Brooks P, Carstairs V, Leff JP. The reliability 11. Kendell RE. The influence of the 1968 glosarry on
of a survey psychiatric assessment schedule for the the diagnosis of English psychiatrists. Br J Psychiatry
elderly. Br 1 Psychiatry 1980;137:148-162. 1973; 123:527-530.
2. Campillo SC, Caraveo J, Medina-Mora ME, Martínez 12. Rutter M, Cox A. Psychiatríc interviewing techni-
LP. Confiabilidad entre clínicos utilizando la "Entre- ques, I. Methods and measure. Br J Psychiatry
vista Psiquiátrica Estandarizada" de Goldberg, en una 1981; 138:273-282.
versión mexicana. Acta Psiquiatr Psicol Am Lat 13. Cooper B, Schwarz T. Psychiatric case-identification
1981;27:44-53. in an elderly urban populatíon. Soc Psychiatry
3. Helzer lE, Robíns LN, Crughan JL, Welner A. Renard 1982;17:43-52.
Diagnostic Interview. Its reliability and procedural 14. González FC, Caraveo AJ, Ramos LL, Sánchez Bl.
validity with physicians and lay interviewers. Arch Confiabilidad de la Cédula de Entrevista Diagnóstica
Gen Psychiatry 1981;38:393-398. (mS) en pacientes psiquiátricos mexicanos. Salud
4. Copeland JRM, Kelleher MH, Kellet JM, Gourluy AJ, Mental 1988;11:48-54.
Gurland BJ, Fleiss JL, Sharpe L. A semi-structured 15. Maxwell AE. Coefficients of agreement between ob-
clinical interview for the assessment of diagnosis and servers and their interpretation. Br 1 Psychiatry
mental state in the elderly: the Geriatric Mental State 1977;130:79-83.
Schedule, I. Development and reliability. Psychol 16. Bishop MM, Frenberg SE, Holland PW. Discrete
Med 1976;6:439-449. multivariate analysis: theory and practico. Cambrid-
5. Spitznagel EL, Helzer JE. A proposed solution to the ge, Mass: MIT, 1975.
base rate problem in the Kappa statistic. Arch Gen 17. Organizaci6n Mundial de la Salud. Manual de la
Psychiatry 1985;42:725-728. Clasificaci6n Internacional de Enfermedades, 9' revi-
6. Wing JK, Nixon JM, Mann lA, Leff JP. Reliability of si6n. Washington D.C.: OMS, 1975.
the PSE (ninth edition) used in a population survey. 18. Yule UG, Kendall MG. Introducci6n a la estadística
Psychol Med 1977;7:505-516. matemática. Madrid: Aguilar, 1959;33-63.
7. Bartko JI, Carpenter TW. Gn the methods and theory 19. Cooper JE, Copeland JRM, Brown GW, Harris T,
of reliability. 1 Nerv Ment Dis 1976;163:307-317. Goylay Al. Futher srudies on interviewer training and
8. Caetano R. Causas de la baja confiabilidad del diag- inter-rater reliability of the Present State Exarnination
nóstico en psiquiatría. Acta Psiquiat Psicol Am Lat PSE. Psychol Med 1977;7:517-523.
1978;24: 115-131. 20. Kendell RE, Everett B, Cooper SR, Satorius N, David
9. Sanson-Fischer RW, Martin CJ. Standardized ínter- ME. The reliability of the Present State Exarnination.
view in psychiatry: issues of reliability. Br 1 Psychia- Soc Psychiatry 1968;3: 123-128.
try 1981;139:138-143. 21. Padilla GP, Sánchez BJ, Gómez EM, López GE. En-
10. Goldberg DP, Cooper B, Eastwood MR, Kedward HB, trevista Psiquiátrica Modificada. México, D.F.: Insti-
Shepherd M. A standardized psychiatric interview for tuto Mexicano de Psiquiatría, 1986.
use in community survey. Br HJ prev Soc Med
1970;24: 18-23.