¿CÓMO REALIZAR UN ECOE?

(Examen clínico objetivo estructurado)

El Examen Clínico Objetivo Estructurado (ECOE) es un método de evaluación donde se

simula un encuentro clínico mediante la representación ficticia de un paciente con un
padecimiento predeterminado en un caso clínico, es el examen más objetivo para
valorar la competencia clínica, entendida como el “el uso habitual y juicioso de
comunicación, conocimiento, habilidades, técnicas, razonamiento clínico, emociones,
valores y reflexión en la práctica diaria para el beneficio de los individuos y las
comunidades a las que se les brinda un servicio”. Este puede ser formativo si hay
retroalimentación al estudiante para que conozca sus fortalezas y debilidades, o
sumativo cuando permite establecer si los estudiantes alcanzaron un nivel estándar
aceptable de competencia clínica. Para la realización del ECOE se necesita un comité
ECOE formado por 10 médicos familiares, un médico internista, pediatra,
ginecoobstetra, cirujano general y urgenciólogo, con carrera y experiencia clínica y en
la realización de estos exámenes.

PASO 1: PLANEACIÓN GENERAL DEL EXÁMEN

1. Planear y coordinar el diseño de estaciones: características (tiempo, contenido,
cantidad, evaluador).
2. Recopilar y revisar las estaciones: para realizar correcciones
3. Seleccionar y capacitar a los profesores evaluadores y los pacientes
estandarizados.
4. Generar y gestionar un banco de estaciones mediante la realización de pruebas
piloto.
La seguridad y el control de calidad de los casos clínicos, se realiza bajo la
supervisión de todos los pasos por el Comité del ECOE.

PASO 2: DEFINICIÓN DEL CONTENIDO

El contenido de cada estación se define con base en el perfil de referencia del
programa académico del año o materia que se quiera evaluar, se realizará una tabla de
especificaciones donde se enlistarán los puntos a evaluar, y la descripción de las
dimensiones de la competencia clínica que el estudiante debe demostrar (Ej.:
interrogatorio, exploración física, interpretación de estudios de laboratorio y gabinete,
diagnóstico, manejo, relación médico-paciente, etc.)

PASO 3: ESPECIFICACIONES DE LA PRUEBA E INSTRUMENTO DE EVALUACIÓN

Especificar cantidad de estaciones, duración, tipo de paciente o prueba, áreas o temas a
evaluar, el contenido de la tabla de especificaciones, contenido de las estaciones (caso
clínico, instrucciones).

PASO 4: DESARROLLO DE LAS ESTACIONES. Considerar los siguientes elementos:

La estación: es el escenario de evaluación (ej.: emergencias, consulta, quirófano, etc.)
Capacitación del evaluador: mediante cursos para la elaboración de casos clínicos y en
la evaluación de la competencia clínica; los casos clínicos deberán ser un caso real que
se plasma en un libreto que describe la historia clínica de un paciente. Contiene: la guía
del evaluador, la rúbrica, los estudios de laboratorio y gabinete.
Guía del evaluador: Es la base en la que se describen las acciones más importantes y
detalladas que debe realizar el examinado, considerando las dimensiones de la
competencia que se va a evaluar.
La ponderación relativa de las dimensiones de la competencia de los casos clínicos se
realiza basada en el consenso de expertos.
La rúbrica: La herramienta de evaluación que utilizará el evaluador, ésta puede ser una
rúbrica con escalas globales, contenida en la tableta electrónica, para registrar el
desempeño clínico de los estudiantes en cada una de las estaciones. La rúbrica se
elabora con enunciados relacionados a la actividad que tienen que realizar los
estudiantes y su nivel de desempeño con el fin de estandarizar a los evaluadores.
Capacitación del paciente: O “paciente estandarizado”. Se les capacita a través de un
curso para representar un problema médico, se utiliza un libreto para que acudan con
la caracterización física apropiada al padecimiento simulado, para que su
representación sea consistente. Se utilizan también modelos anatómicos o maniquíes
dependiendo de la competencia clínica a evaluar. Asimismo, se deben considerar los
materiales adicionales que se requieren en cada estación (ej.: batas, sábanas, cintas
métricas, radiografías, electrocardiogramas, resultados de exámenes de laboratorio,
guantes, portaagujas, suturas, entre otros.)
Estudiante: Recibe instrucciones para que se enfoque en el problema y siga las
indicaciones que se le dan; estas se encuentran en cada consultorio para que las lea y
comprenda, antes de realizar cualquier actividad con el paciente.

PASO 5 Y 6: DISEÑO DEL ECOE Y PRODUCCIÓN

Prueba piloto: A una población similar académicamente a la que se evaluará, con el fin
de mejorar la claridad y relevancia. Afinar todos los detalles del material del alumno, de
las guías del evaluador, de los libretos y del desempeño de los pacientes.
El Comité del ECOE realiza una revisión final a todos los documentos de las estaciones
para afinar detalles y corregirlos y así estar preparados.
Diseño y producción: Después de conformar el ECOE, se revisan todos los formatos y se
verifica que todos los materiales y recursos necesarios estén disponibles para el
desarrollo del examen en el día de la prueba y se imprimen los materiales con medidas
de seguridad asociadas. Se realiza una clasificación de los materiales en cajas. Cada caja
contiene en carpetas todo el mate rial de cada estación.

PASO 7: APLICACIÓN DEL EXÁMEN

Es indispensable llevar un adecuado control de todas las variables relevantes durante la
aplicación del examen para poder interpretar las puntuaciones de los examinados de
manera uniforme, significativa y justa.
Admisión al examen: Se detallan los pasos a seguir y los tiempos de llegada, registro e
instrucción, tanto a estudiantes como a evaluadores, habrá un coordinador de la sede
que se encargará de resolver dudas de los evaluadores o inconvenientes que puedan
surgir, además de verificar que el cambio de estación se haga de manera adecuada.
Regulaciones del examen y reglas de conducta: Se les pide a los estudiantes seguir las
indicaciones de los coordinadores. El no hacerlo puede resultar en la suspensión del
examen. Los profesores y personal de apoyo monitorizarán a los estudiantes.
Inicio y término del examen: se especifica tiempo por estación, tiempo total del
examen, de descanso y tiempos de notificación.
PASO 8: CALIFICACIÓN DEL EXÁMEN Y ANÁLISIS ESTADÍSTICO
De acuerdo con la ponderación de la dimensión de la competencia clínica. (paso 4)
Interpretación de la calificación: Resultados reflejará el nivel de competencia clínica por
dominios y en forma global de los examinados.

PASO 9: ESTANDAR DE PASE

Con la ponderación se otorga una calificación de los alumnos para cada estación. Que
es la expresión de la sumatoria de cada una de las dimensiones de la competencia de
cada estación. Se debe establecer el nivel o estándar de pase que identifica al
estudiante que obtiene un resultado de aprobado o suspendido.

PASO 10: REPORTE DE LOS RESULTADOS

Éste incluye la calificación de cada estudiante (medidas de tendencia central, medias,
medianas, moda) y medidas de dispersión tales como la desviación estándar y el error
estándar de la medición. Esta información individual da al estudiante los datos que
reflejan su desempeño en el examen. También debe elaborarse un reporte global con
los principales resultados del ECOE, para ser analizados por el Comité del ECOE, los
evaluadores y las autoridades académicas.

PASO 11: BANCO DE CASOS PARA ESTACIONES

Es conveniente desarrollar un sistema de banco de casos clínicos para estaciones, con
los apartados: a) preparación de casos nuevos, b) almacén de casos, y c)
mantenimiento histórico de los casos. Los casos seleccionados serán responsabilidad
del comité del ECOE.

PASO 12: REPORTE TÉCNICO DEL EXAMEN

En el reporte se describe el ECOE en cada uno de los pasos que se han abordado (paso
1 al 11), incluyendo el análisis psicométrico de los casos, con el fin de resguardar todas
las evidencias documentales de este examen.
 FORMULARIO PARA EL PROCESO ONLINE DE ECOE

En este artículo plantea a preparación de los listados evaluativos o checklists que, una
vez acabados, permitirán su rellenado online desde ordenadores portátiles o tabletas,
incluso desde los teléfonos móviles actuales o smartphones. Todo esto por medio de
GOOGLE FORMS o formularios de Google. El método consta de 3 procedimientos:
- Creación del formulario de listado evaluativo de cada una de las estaciones de
la ECOE.
- Cumplimentación del formulario y obtención de respuestas de cada alumno en
cada una de las estaciones.
- Evaluación de las respuestas y obtención de las puntuaciones parciales de cada
estación y de la puntuación global de la ECOE.

Creación de listado evaluativo

Explica paso por paso la manera de hacer un formulario, y los datos más importantes
que este debe tener como ser: título, la introducción o indicaciones, nombre del
estudiante o su código (con la opción de respuesta corta y haciéndolo un paso
obligatorio para que este punto no pueda saltarse) y finalmente las preguntas según el
área de competencia a evaluar utilizando la opción de cuadrícula de varias opciones,
esto nos permite añadir ítems por cada título o punto a evaluar, por ejemplo, en
anamnesis (título) los ítems serán las preguntas que el estudiante debería formular y si
las hizo o no.

Cumplimentación del formulario y obtención de respuestas

Se explica la forma de guardar las respuestas como una hoja de cálculo, esto por medio
de la sección “Seleccionar destino de las respuestas”. También se explica cómo
configurar las respuestas del formulario, ya sea si queremos que se edite después de
enviar o no, limitar a los usuarios a una sola respuesta, por medio de la opción “ver un
resumen de respuestas” se puede permitir al evaluador ver un enlace a los resultados o
no, y por medio de la opción “mostrar enlace para enviar otra respuesta” para que el
evaluador tenga otra vez un formulario en blanco para otro estudiante.
Para enviar el formulario hay dos opciones: por medio de la sección “enviar” para
mandar a correo electrónico o por medio de enlace.
Una vez enviado el formulario se empiezan a guardar las respuestas por orden de
llegada en la hoja de cálculo.

Evaluación de las respuestas y obtención de las puntuaciones de cada estación

Se realiza una vez obtenidos todos los datos y terminadas las evaluaciones.
Crear una copia de seguridad: de la hoja de cálculo para mantener el archivo original
intacto, por medio de la opción “crear una copia”
Asignar un valor a cada uno de los ítems: Añadiendo una fila y poniendo ítem por ítem
el valor estipulado.
Transformar las respuestas (si/no/bien/mal) en números: por medio de la siguiente
fórmula: ‘=IF (C3=“Sí”;C$2;0)
Sumar la puntuación de cada competencia: por medio de una fórmula de suma de
todos los ítems al final de cada competencia.
Trasladar los datos de cada estación a la hoja global de ECOE: en otra hoja de cálculo.