Acción Innovación DocenteAcción Innovación Docente2003-20042003-2004

Vicerrectorado de Planificación, Vicerrectorado de Planificación, Calidad y Evaluación DocenteCalidad y Evaluación Docente

UNIVERSIDAD DE GRANADA

Innovación en la Evaluación Innovación en la Evaluación de la Formación Clínica de de la Formación Clínica de la Licenciatura de Medicinala Licenciatura de Medicina

Prof. César Chung SerranoProf. César Chung SerranoDepartamento de Obstetricia y GinecologíaDepartamento de Obstetricia y Ginecología

ResumenResumen

1ª Evaluación de las 1ª Evaluación de las CompetenciasCompetencias en la en la Facultad de Facultad de Medicina Medicina mediante una mediante una

ECOEECOE con pacientes simulados con pacientes simulados Montaje de ECOE tras Montaje de ECOE tras reunionesreuniones con con

profesoresprofesores Elección Elección componentescomponentes e e instrumentosinstrumentos Preparación de Preparación de ObservadoresObservadores y y ActoresActores Preparación Preparación logísticalogística de ECOE realizada de ECOE realizada

durante durante 10 días10 días a a 355355 alumnos alumnos

Profesores participantesProfesores participantes

Luis Navarrete López CózarLuis Navarrete López Cózar Tomas Segura SánchezTomas Segura Sánchez

Alberto Salamanca BallesterosAlberto Salamanca Ballesteros Rosa Sabatel LópezRosa Sabatel López

Miguel Angel Motos GuiraoMiguel Angel Motos Guirao Jose Luis Cuadros LópezJose Luis Cuadros López

Francisco González GómezFrancisco González Gómez

Ámbito de ActuaciónÁmbito de Actuación

Departamento de Obstetricia y GinecologíaDepartamento de Obstetricia y Ginecología de la Universidad de Granadade la Universidad de Granada

Asignaturas AfectadasAsignaturas Afectadas

Obstetricia y Ginecología I Y IIObstetricia y Ginecología I Y II

JUSTIFICACIÓNJUSTIFICACIÓNTras implantaciónTras implantación NUEVOS NUEVOS PLANES PLANES

Además de HABILIDADESAdemás de HABILIDADES COGNITIVAS COGNITIVAS

Para determinar la Para determinar la CONSECUCIÓN CONSECUCIÓN de losde los OBJETIVOS EDUCATIVOSOBJETIVOS EDUCATIVOS

Debemos VALORARDebemos VALORAR

HABILIDADES HABILIDADES PSICOMOTORASPSICOMOTORAS y de y de COMUNICACIÓNCOMUNICACIÓN

INSTRUMENTO EVALUATIVOINSTRUMENTO EVALUATIVO utilizadoutilizado

ECOEECOE (Examen Clínico Objetivo y Estructurado)(Examen Clínico Objetivo y Estructurado)

“ “El examinando demuestra sus El examinando demuestra sus Habilidades Habilidades rotandorotando por distintas por distintas

estacionesestaciones que que simulansimulan situaciones situaciones clínicas, muy parecidas a la clínicas, muy parecidas a la práctica realpráctica real””

FORMATO ADOPTADOFORMATO ADOPTADO

Education Comission for Foreign Medical GraduatesEducation Comission for Foreign Medical Graduates

National Board of Medical Examiners en EEUUNational Board of Medical Examiners en EEUU

Centre d´Evaluation des Sciences de la Santé, Centre d´Evaluation des Sciences de la Santé, Universidad de Laval, Cánada y la Universidad de Universidad de Laval, Cánada y la Universidad de Sherbrooke en QuébecSherbrooke en Québec

Universidades Continente Europeo, Australia y AsiaUniversidades Continente Europeo, Australia y Asia

España Catalunya y MadridEspaña Catalunya y Madrid

INSTRUMENTO DE INSTRUMENTO DE VALORACIÓN VALORACIÓN DEL DEL RENDIMIENTO, RENDIMIENTO, ANTE ANTE SITUACIONES SITUACIONES

CLÍNICAS Y PRÁCTICAS RELEVANTESCLÍNICAS Y PRÁCTICAS RELEVANTES

VÁLIDO Y FIABLEVÁLIDO Y FIABLE

IDONÉO IDONÉO PARA LA PARA LA EVALUACIÓN FINALEVALUACIÓN FINAL DE DE

UNAUNA FORMACIÓNFORMACIÓN O UNAO UNA

CERTIFICACIÓN PROFESIONALCERTIFICACIÓN PROFESIONAL

OBJETIVOS del ProyectoOBJETIVOS del Proyecto

1.- VALORACIÓN DE LA 1.- VALORACIÓN DE LA CAPACITACIÓN CLINICO PRÁCTICACAPACITACIÓN CLINICO PRÁCTICA

EN PREGRADOEN PREGRADO

2.- VALORACIÓN 2.- VALORACIÓN RENDIMIENTORENDIMIENTO Y Y CUMPLIMIENTOCUMPLIMIENTO DE DE OBJETIVOSOBJETIVOS

3.- ESTABLECIMIENTO 3.- ESTABLECIMIENTO ELEMENTOS ELEMENTOS ORGANIZATIVOS ORGANIZATIVOS DE UNA ECOEDE UNA ECOE

MetodologíaMetodología

1.-Alumnos Evaluados1.-Alumnos Evaluados 2.- Competencias2.- Competencias 3.-Contenido y Diseño de Etapas3.-Contenido y Diseño de Etapas 4.-Organización Logística4.-Organización Logística 5.- Realización de ECOE5.- Realización de ECOE 6.- Programación General6.- Programación General 7.- Evaluación estadística7.- Evaluación estadística

1.- Alumnos Evaluados1.- Alumnos Evaluados

TOTAL de ALUMNOS EVALUADOS 355TOTAL de ALUMNOS EVALUADOS 355 201 de 4º Curso 201 de 4º Curso 154 de 5º Curso154 de 5º Curso

En Consejo Departamento En Consejo Departamento

se se ApruebaAprueba

Evaluación mediante ECOEEvaluación mediante ECOE

de los alumnos matriculados en Obstetricia y de los alumnos matriculados en Obstetricia y Ginecología I y IIGinecología I y II

Para el Para el Curso Académico 2003-2004Curso Académico 2003-2004

ECOEECOE basado en basado en Objetivos del Plan DocenteObjetivos del Plan Docente

Tras Tras rotarrotar por por TalleresTalleres de habilidades, de habilidades, SeminariosSeminarios casos clinicos, Scasos clinicos, Salasalas, , ConsultasConsultas de hospitales y centro de hospitales y centro de salud y la de salud y la GuardiaGuardia de paritorio, los alumnos deben: de paritorio, los alumnos deben: Realizar una historia Realizar una historia Colocar un espéculo, Tomar una citologíaColocar un espéculo, Tomar una citología Hacer un tacto vaginalHacer un tacto vaginal Tomar medidas maternas etc.Tomar medidas maternas etc.

2.-Competencias2.-Competencias La determinación de las La determinación de las

COMPETENCIASCOMPETENCIAS a evaluar a evaluar Fueron establecidas tras Fueron establecidas tras reunión reunión de los de los

profesoresprofesores del departamento del departamento Donde se estableció el Donde se estableció el NIVELNIVEL de de

exigencia exigencia %% Y seleccionaron las Y seleccionaron las Situaciones Situaciones

ClínicasClínicas de una de una ECOEECOE en en GinecologíaGinecología y otra en y otra en ObstetriciaObstetricia

Ejemplo Competencias Ejemplo Competencias en Ginecologíaen Ginecología

PESOPESO de cada competencia en el de cada competencia en el resultado de la evaluación (%)resultado de la evaluación (%)

COMPETENCIASGINECOLOGIA

ETAPAS NUMERO PESO c/u

1. Comunicación 11 ,4 2 10 % 5

2.- Técnicas 2, 1 10 % 10

3.-Exploración Física

5, (observador)

8 2 20 % 10

4.- Anamnesis 11 (observador)

1 10 % 10

5.- Asesoramiento 1, 9, 4 3 20 % 6,2

6.-Interpretación, manejo y control situaciones

1, 6, 7, 9, 3 5 30 % 6

7.-Atención a familiares no

14 100%

3.-Contenido y Diseño de 3.-Contenido y Diseño de EtapasEtapas

CONTENIDO CONTENIDO 2 ECOE en Obstetricia y 2 ECOE en Obstetricia y

GinecologíaGinecología 11 Casos Clínicos en cada ECOE11 Casos Clínicos en cada ECOE 12 12 Estaciones en Ginecología y Estaciones en Ginecología y 1313 en Obstetricia en Obstetricia ContextoContexto: Urgencias, Atención primaria de Salud: Urgencias, Atención primaria de Salud InstrumentosInstrumentos: pacientes simulados, Radiografías, : pacientes simulados, Radiografías,

imágenes, maniquíes, videos, instrumentos, PEM, imágenes, maniquíes, videos, instrumentos, PEM, PRC etc.PRC etc.

Ejemplo: Ejemplo: ECOE en ObstetriciaECOE en Obstetricia

ETAPAS

CASO ESTACIONES PROBLEMA CONTEXTO INSTRUMENTOS DURACION ALUMNO

1 1Sospecha

Desproporción

APSRx(imagen)

4 minutos 1PRC

2 2 Exploración APS Maniquí (Observador)

4 minutos 1

3 3 Posición Fetal APS Imagen 4 minutos 1

4 4Serología durante

EmbarazoAPS

informe4 minutos 1

PRC

5 5Diagnóstico

Inicio del parto

APS maniquí

4 minutos 1PRC

6 6Diagnóstico

Presentación Urgencias Imagen/PRC 4 minutos 1

Tiempo espera 4 minutos

ETAPAS

CASO ESTACIONES PROBLEMA CONTEXTO INSTRUMENTOS DURACION ALUMNO

Tiempo espera 4 minutos

7 7Hemorragia 1

TrimestreUrgencias

Paciente Simulado/

observador/PRC4 minutos 1

8 8Asesoramient

o genéticoAPS

Imagen/PRC/PEM

4 minutos 1

9 9 Primera Visita

prenatalAPS Videos / PRC 4 minutos 1

10 10 Asistencia tras

expulsivoAPS Imagen/PRC 4 minutos 1

11 13Infeccion Vaginal y embarazo

APS Imagen/PRC 4 minutos 1

10 y 12 descanso 8 minutos 2

En lugar de 4 minutos, el tiempo real es de 5 minutos en total son 63 minutos, la duracion real

52minutos 13

Ejemplo Ejemplo ETAPA ETAPA

Interpretación Interpretación ANAMNESISANAMNESIS

CASO CASO CLINICOCLINICO

EN VIDEOEN VIDEO

Ejemplo ETAPAEjemplo ETAPAinterpretación Radiografía interpretación Radiografía

Etapa Evaluación Exploración Etapa Evaluación Exploración Clínica con EvaluadorClínica con Evaluador

Etapa Evaluación Etapa Evaluación Habilidades Comunicación con Habilidades Comunicación con

Paciente SimuladoPaciente Simulado

Etapa evaluación Interpretación de Etapa evaluación Interpretación de ImágenesImágenes

4.-Organización Logística4.-Organización Logística 1.- Localización Prueba1.- Localización Prueba: Aulas : Aulas

Laboratorios DepartamentoLaboratorios Departamento

2.- 2.- 1 Becario1 Becario

3.- 3.- 1 Técnico audiovisuales1 Técnico audiovisuales

4.- 4.- 10 Profesores10 Profesores Observadores Observadores en ECOE de Ginecología en ECOE de Ginecología

5.- 5.- 10 Profesores10 Profesores Observadores Observadores en ECOE de Obstetriciaen ECOE de Obstetricia

6.- 6.- 2 Actores2 Actores como como pacientes pacientes simuladossimulados

Carteles Informativos

Trípticos informativos

Cuadernillo de Preguntas y Respuestas

Normas para Observadores y Pacientes Simulados

Confección de Lista

Programación de fechas, horas y distribución de Etapas

Distintivos para alumnos

Carteles señalización

Fecha de la EvaluaciónFecha de la Evaluación

GINECOLOGIA del 10-14 MAYO 2004GINECOLOGIA del 10-14 MAYO 2004

OBSTETRICIA del 17-21 MAYO 2004OBSTETRICIA del 17-21 MAYO 2004

Horario Horario de mañana y tardede mañana y tarde

Una ECOE por HORAUna ECOE por HORA

3 ECOE por turno, 15 minutos intervalo3 ECOE por turno, 15 minutos intervalo

Se examinaron 355 alumnosSe examinaron 355 alumnos

DISTRIBUCION DE PLANTILLAS OBSTETRICIA17 AL 20 DE MAYO

OBSTETRICIA Lunes 17 Martes 18Miércoles

19Jueves

20

10.15-11.15 A01 C04 D07 E10

11.30-12.30 A02 C05 D08 E11

12.45-13.45 B03 B06 F09 F12

7.- APOYO LOGÍSTICO7.- APOYO LOGÍSTICO COMPROBACION E IDENTIFICACIÓN ALUMNOSCOMPROBACION E IDENTIFICACIÓN ALUMNOS

DISTRIBUCIÓN DE INSTRUMENTOS, MATERIALES Y DISTRIBUCIÓN DE INSTRUMENTOS, MATERIALES Y PLANTILLAS DE CADA ETAPA PLANTILLAS DE CADA ETAPA

SE ESTABLECIERON 3 TIPOS DE ECOE A, B Y CSE ESTABLECIERON 3 TIPOS DE ECOE A, B Y C

5.- Realización de ECOE5.- Realización de ECOE

11.- .- GinecologíaGinecología del 10 al 14 de mayo 2004 del 10 al 14 de mayo 2004 ObstetriciaObstetricia del 17 al 20 de mayo 2004 del 17 al 20 de mayo 2004 2.-2.- HorarioHorario 10.30- 14.30 3 turnos 10.30- 14.30 3 turnos 16.00-18.15 2 turnos16.00-18.15 2 turnos 33.- .- CitaciónCitación: ½ hora antes: ½ hora antes 4.-4.- IdentificaciónIdentificación, distintivo, normas y , distintivo, normas y cuadernillocuadernillo 55.- .- Breve presentaciónBreve presentación localización, distribución de etapas, localización, distribución de etapas, duración, aviso sonoro. duración, aviso sonoro.

Identificación de AlumnosIdentificación de Alumnos

6.- Programación General6.- Programación General 1.- Nov 20031.- Nov 2003. Reunión Profesores. Reunión Profesores 2.- Abril 20042.- Abril 2004. Componentes y Casos. Componentes y Casos 3.- Abril 20043.- Abril 2004: Instrumentos y Etapas: Instrumentos y Etapas Anuncio Becario y actores,Anuncio Becario y actores,

Establecimiento turno de observadoresEstablecimiento turno de observadores Personal apoyo y TécnicoPersonal apoyo y Técnico Audiovisuales. Audiovisuales. Entrenamiento actores Entrenamiento actores 4.- Mayo 2004 Presentación4.- Mayo 2004 Presentación en Clase e inscripción en Clase e inscripción 5.- Mayo 2004: Montaje Infraestructura5.- Mayo 2004: Montaje Infraestructura 6.- Mayo 2004: Realización de la prueba 6.- Mayo 2004: Realización de la prueba durante 2 durante 2 semanassemanas

7.- Evaluación estadística7.- Evaluación estadística

Preparación de Preparación de plantillasplantillas de 4 y 5 de 4 y 5 11 plantillas11 plantillas para Ginecología para Ginecología y y 1313 para Obstetricia para Obstetricia Calculo Calculo peso %peso % de cada elemento de cada elemento CorrecciónCorrección de resultados de resultados IIntroducciónntroducción en base de datos en base de datos

confeccionada con SPSSconfeccionada con SPSS ResultadosResultados

D.- RESULTADOSD.- RESULTADOS

HABILIDADES GINECOLOGIA 201 ALUMNOS

0%20%40%60%80%

100%

NO APTO APTO 94,52%

10% 10% 20% 10% 30% 20%

HABILIDADES OBSTETRICIA 154 ALUMNOS

0%20%40%60%80%

100%

NO APTO APTO 87,66

20%10% 10% 10% 30% 20%

E.- ENCUESTA E.- ENCUESTA Opinión de AlumnosOpinión de Alumnos

ESCALA utilizada:ESCALA utilizada: 1.- NADA RELEVANTE1.- NADA RELEVANTE

2.- POCO RELEVANTE, ESCASA2.- POCO RELEVANTE, ESCASA 3.- RELEVANTE, NORMAL3.- RELEVANTE, NORMAL 4.- MUY RELEVANTE, MUCHO4.- MUY RELEVANTE, MUCHO

E.1.- Organización y LogísticaE.1.- Organización y Logística

0% 20% 40% 60% 80% 100%

informacion

Estress

Comprension

organización

observadores

actores

nada poco normal mucho

E.2.- Contenido de la ECOEE.2.- Contenido de la ECOE

0% 20% 40% 60% 80% 100%

Agradable

Se han Dado

Nivel Aceptable

nada poco normal mucho

E.3.- IMPACTO se debe realizarE.3.- IMPACTO se debe realizar

0% 20% 40% 60% 80% 100%

PRACTICA

TODASASIGNATURAS

SEXTO CURSO

nada poco normal mucho

COMENTARIOSCOMENTARIOS

La ECOE permite evaluar La ECOE permite evaluar OTRASOTRAS HABILIDADES, no solo ConocimientosHABILIDADES, no solo Conocimientos

Primera vez Primera vez en Facultad de en Facultad de MEDICINAMEDICINA Española Española

Para la evaluación previamente se deben Para la evaluación previamente se deben ESTABLECER YESTABLECER Y ENSEÑARENSEÑAR las las

Habilidades según Objetivos DocentesHabilidades según Objetivos Docentes Necesita Respaldo de Necesita Respaldo de PROFESORADO, PROFESORADO,

DPTO, CENTROS Y UNIVERSIDADDPTO, CENTROS Y UNIVERSIDAD

Permite Permite MEJORAR CALIDADMEJORAR CALIDAD Conlleva una Conlleva una ORGANIZACIÓORGANIZACIÓN N

PLANIFICADA LABORIOSAPLANIFICADA LABORIOSA Deben establecerse Deben establecerse PRESUPUESTOS PRESUPUESTOS

ESPECÍFICOS ESPECÍFICOS para la mismapara la misma Cambio deCambio de MENTALIDAD MENTALIDAD DE DE

PROFESORES Y ALUMNOSPROFESORES Y ALUMNOS