Artículo publicado en el boletín científico APSalut de mayo 2023
Autor: Albert Casasa Plana. Médico de familia EAP Sardenya y Jefe de Estudios UDACEBA
En un artículo reciente en el APSalut explicábamos la puesta en marcha de la primera ACOE (Evaluación de la Competencia Objetiva y Estructurada) de la unidad docente UDACEBA, dirigida a residentes MIR de Medicina de Familia y Comunitaria.
La prueba se realizó el día 31 de marzo de 2023. Se convocaron todos los residentes de Medicina (R1, R2, R3, R4) (n=40).
Consistía en 10 estaciones, de 6 minutos de duración, con un espacio de 3 minutos entre estaciones. Se realizó en dos ruedas de dos turnos.
Había 16 actores, 14 evaluadores y un comité científico, además de todo el equipo operativo y de los tutores.
Participaron 37 residentes de los 40 convocados.
Resultados
- La mejor puntuación (sobre 100) fue de 81,4 y la obtuvo un R2. La peor fue 56,6 y también fue de un R2. La puntuación media fue de 71.
- Por año de residencia, de mejor a peor fue R3,R4,R2,R1
- Las competencias evaluadas con mejor puntuación fueron, por orden de mayor a menor: comunicación, habilidades.
- Y las que obtuvieron peor puntuación, por orden de menos a más: atención a la familia y anamnesis.
- Con puntuaciones intermedias quedaron las actividades preventivas, la exploración física y el manejo.
Discusión
Las puntuaciones tienden a ser coherentes con lo esperado: mejor por R grandes que pequeños. Por competencias, sorprende la mala puntuación del R4 en “atención a la familia”. Esto podría formar parte de las limitaciones de la prueba: sólo una estación evaluaba «atención a la familia».
También debe insistirse en que los residentes deben leer bien las instrucciones que se cuelgan en la puerta de la consulta antes de entrar, para centrarse en lo que se pide. Así se vio que se entretenían en exploración física cuando tocaba realizar anamnesis o manejo, o viceversa.
Algunas de las estaciones deben reformularse: una de habilidades (“sutura”), ninguno de los evaluados la ha conseguido acabar por falta de tiempo. En cuanto a la estación dedicada a «diagnóstico por la imagen», una pregunta no fue contestada bien por ningún evaluado, lo que no la hace discriminativa a la hora de comparar resultados.
Se ha verificado que no existían diferencias estadísticamente significativas entre las dos ruedas que se hacían a la vez, ni entre los dos turnos.
Puntuación final por año de Residencia
El retorno de la información se realiza a la Comisión de docencia (anonimizado), al residente, al tutor y al comité de evaluación.
La ACOE de UDACEBA tiene como finalidad la evaluación formativa. El objetivo es informar del proceso de aprendizaje de los residentes, utilizando la información de la evaluación para el feed-back posterior que pueden realizar individualmente y con su tutor.
Sabemos que la evaluación formativa y sumativa están interconectadas, pero la evaluación formativa tiene un mayor impacto sobre el aprendizaje y los resultados. Sin embargo se ha visto entre los tutores un interés por analizar los resultados a la vez con la evaluación sumativa. Sin embargo no forma parte de las variables actualmente vigentes para este objetivo.
A pesar de los nervios que muchos residentes han pasado, especialmente los R4 que peor lo vivieron, es un tipo de prueba que genera componentes emocionales que hacen perdurar en el tiempo sus conclusiones.
Su intención es celebrar anualmente la prueba para constatar el progreso de los residentes de medicina. E incorporar, a partir del próximo año, a los residentes de enfermería, con sus estaciones específicas.