preparaciÓn paso a paso prueba ecoe v20196 2.1 estaciones el núcleo central de todo el proceso...
TRANSCRIPT
PREPARACIÓN PASO A PASO PRUEBA ECOE v2019
Ver. 4x
28/01/2019
2
Contenido
1 Infografia ..................................................................................................................................... 4
2 Introducción ................................................................................................................................ 5
2.1 Estaciones ................................................................................................................................ 6
2.1.1 Verificación y ajuste global estaciones ............................................................................. 6
2.2 Formación de actores y observadores .................................................................................... 6
2.3 Logística de la prueba .............................................................................................................. 6
2.4 Días de la prueba ..................................................................................................................... 6
2.4.1 Organizar distribución de impresos y tabletas ................................................................. 6
2.4.2 Recogida de impresos y resultados generados ................................................................. 6
2.5 Obtención de resultados ......................................................................................................... 7
2.5.1 A partir de papel y tabletas ............................................................................................... 7
2.6 Informes finales ....................................................................................................................... 7
3 Momento inicial ........................................................................................................................... 8
3.1 Verificar se dispone de un escáner adecuado ......................................................................... 8
3.2 Verificar disponibilidad de software ........................................................................................ 8
3.3 Crear carpeta compartida para guardar información ............................................................. 9
4 Diseño de estaciones ................................................................................................................. 10
4.1 Crear descripción estaciones ................................................................................................. 10
4.2 Caso estaciones con actor y observador ............................................................................... 10
4.3 Verificación de las estaciones ................................................................................................ 10
5 Logística de la prueba ................................................................................................................ 11
5.1 Cuadro de mando .................................................................................................................. 11
5.2 Codificación de alumnos ........................................................................................................ 11
5.3 Crear fichero identificación pies de formularios ................................................................... 11
5.4 Generar formularios y hoja de ayuda .................................................................................... 12
6 Semana antes de la prueba ........................................................................................................ 13
6.1 Documentación para los evaluadores ................................................................................... 13
6.2 Preparar material auxiliar ...................................................................................................... 13
6.3 Crear fichero de alumnos ...................................................................................................... 13
6.4 Imprimir los formularios y hojas de ayuda ............................................................................ 13
6.5 Cargar tabletas ....................................................................................................................... 14
7 Día antes de la prueba ............................................................................................................... 15
7.1 Preparar sobres para evaluadores......................................................................................... 15
7.2 Preparar tabletas ................................................................................................................... 15
8 Día de la prueba ......................................................................................................................... 16
8.1 Preparación de la estación .................................................................................................... 16
8.2 Material a entregar a los evaluadores ................................................................................... 16
8.3 Finalizar la rueda .................................................................................................................... 16
8.3.1 Estaciones con impresos en papel ................................................................................... 16
8.3.2 Estaciones con tabletas ................................................................................................... 16
8.3.3 Subida de resultados de tabletas .................................................................................... 16
9 Obtención de resultados ............................................................................................................ 17
9.1 Preparación del material antes del escaneo ......................................................................... 17
9.2 Escaneo de los formularios de las estaciones ....................................................................... 17
3
9.3 Interpretación de resultados ................................................................................................. 17
9.4 Normalizar resultados ........................................................................................................... 18
9.5 Tratamiento de estaciones dobles ........................................................................................ 18
9.6 Tratamiento de estaciones que han utilizado tableta ........................................................... 19
9.7 Obtención de notas e informes de cada estación ................................................................. 19
9.8 Resolución de problemas de marcaje ................................................................................... 19
9.8.1 Reconocimiento erróneo de marcajes ............................................................................ 19
9.9 Obtención de notas transversales de competencias ............................................................ 20
9.10 Resumen global de notas ................................................................................................... 20
9.11 Resumen global de competencias...................................................................................... 20
9.12 Generación de informe final en formato Word ................................................................. 21
9.13 Generación de informe para alumnos ............................................................................... 21
10 ANEXOS .................................................................................................................................. 22
10.1 Anexo A. Fichero de identificación pie de formulario ........................................................ 22
10.2 Anexo B. Fichero de alumnos participantes ....................................................................... 23
10.3 Anexo C. Fichero de descripción de estación ..................................................................... 24
10.4 Ejemplo de formulario y hoja de ayuda ............................................................................. 29
10.5 Ejemplo de informe personalizado para cada alumno ...................................................... 30
4
1 Infografia
5
PASOS A REALIZAR
2 Introducción
Este documento va dirigido a guiar al responsable o responsables de la prueba ECOE sobre
las actividades que tendrá que realizar para evaluar la prueba ECOE utilizando el sistema
GEXCAT.
Nuestro objetivo es facilitar y simplificar su trabajo, por lo que le agradecemos nos indiquen
cualquier error, sugerencia o mejora.
De forma genérica tendrá que:
1) Coordinar el diseño de las estaciones con los distintos Departamentos
a) Informarles de las herramientas y ayudas que pueden utilizar para diseñar la esta-
ción
b) Disponer de las estaciones con suficiente antelación.
c) Comprobar que las estaciones cumplen los requisitos marcados previamente
i) Eventualmente hacer ajustes y/o modificaciones
2) Coordinar la formación de todos los participantes en la prueba (observadores, acto-
res, ayudantes, logísticos…)
3) Preparación de la prueba. En la parte que afecta a GEXCAT:
a) Generar los impresos que se utilizarán en cada estación y/o preparar las tabletas
b) Organización logística. Preparar sobres y/o tabletas
4) Días de la prueba. Coordinar con los ayudantes todos los aspectos de la prueba. Por
la parte que afecta a GEXCAT:
a) Organizar la distribución de los impresos / tabletas y material auxiliar
b) Organizar la recogida de resultados (impresos cumplimentados, ficheros proce-
dentes de tabletas…)
5) Finalizada la prueba. Obtención de resultados.
a) Si se han utilizado impresos en papel:
i) Coordinar su escaneo desde una fotocopiadora a un pen drive.
ii) Interpretar los resultados con GEXCAT
iii) Utilizar los programas proporcionados para obtener las notas y estadísticas de
cada estación.
iv) Comprobar no hayan errores y verificar la coherencia de resultados.
b) Si se han utilizado tabletas:
i) Utilizar los programas proporcionados para obtener las notas y estadísticas de
cada estación.
ii) Comprobar no hayan errores ni incoherencias.
6) Una vez disponibles los informes (notas) de todas las estaciones
a) Obtener los informes globales de la prueba (Conjunto estaciones)
b) Obtener los informes transversales de competencias (Conjunto estaciones)
c) Generar el informe final
d) Analizar los resultados
6
2.1 Estaciones
El núcleo central de todo el proceso GEXCAT es un fichero Excel (en formato .xlsx) que con-
tiene la descripción de cada estación (Ver 10.3 Fichero de descripción de estación).
La responsabilidad de su diseño es de cada Departamento.
Se deberá informar a los Departamentos de la existencia de la página:
http://www.gexcat.com/w4innocan/generar-estacion-ecoe/, donde se proporcionan ayudas y
herramientas para crear y verificar las estaciones.
2.1.1 Verificación y ajuste global estaciones
A medida que el responsable de la prueba va recibiendo las estaciones, dispone de una po-
tente herramienta, el cuadro de mando (gxCUADRODEMANDO), que le proporciona una vi-
sión global sobre cada estación y sobre el conjunto de ellas, permitiéndole detectar rápida-
mente situaciones anómalas e incluso hacer ajustes globales de forma automática.
Consultar la página: http://www.gexcat.com/w4innocan/ecoe-cuadro-de-mando/
2.2 Formación de actores y observadores
Además de las acciones de formación que se realicen, los actores y observadores deberán re-
cibir un manual dirigido específicamente a ellos, http://gexcat.com/ECOE/ECOE-
INSTRUCCIONESEVALUADOR-v20191.pdf en el caso de que vayan a utilizar impresos o del
vídeo https://youtu.be/fBUtqOGV370, en el caso de que vayan a utilizar tabletas.
El correcto seguimiento de las instrucciones indicadas en el manual y/o vídeo harán que las
incidencias se minimicen. Por el contrario, actores y observadores mal formados y que no si-
gan las instrucciones multiplicarán el trabajo posterior.
2.3 Logística de la prueba
Ver Capítulo 4) de este manual y la página: http://www.gexcat.com/w4innocan/ecoe-
generar-impresos-tabletas/
2.4 Días de la prueba
2.4.1 Organizar distribución de impresos y tabletas
Ver Capítulo 4) de este manual y la página: http://www.gexcat.com/w4innocan/ecoe-
generar-impresos-tabletas/
2.4.2 Recogida de impresos y resultados generados
Ver Capítulo 4) de este manual y la página: http://www.gexcat.com/w4innocan/ecoe-
generar-impresos-tabletas/
7
2.5 Obtención de resultados
2.5.1 A partir de papel y tabletas
Ver Capítulo 4) de este manual y la página: http://www.gexcat.com/w4innocan/ecoe-
generar-impresos-tabletas/
Ver página: http://www.gexcat.com/w4innocan/ecoe-resultados/
2.6 Informes finales
Ver Capítulo 4) de este manual y la página: http://www.gexcat.com/w4innocan/ecoe-
generar-impresos-tabletas/
Ver página: http://www.gexcat.com/w4innocan/ecoe-resultados/
8
3 Momento inicial
Verificar disponibilidad de tabletas / teléfonos móviles..
(Válido si se desea utilizar tabletas) GEXCAT permite la captura de las evaluaciones de la
prueba ECOE tanto a través de tabletas y teléfonos con sistema operativo Android, (IOS MAC
en breve) como en papel.
Si se desea utilizar la opción de tabletas, verificar que la aplicación GEXCAT-ECO funciona
correctamente en los dispositivos que se desea utilizar para solucionar con suficiente antela-
ción cualquier incidencia que aparezca.
3.1 Verificar se dispone de un escáner adecuado
Aunque el volumen de hojas que se va a manejar no es excesivamente elevado (una prueba
con 20 estaciones y 10 ruedas generaría 200 formularios), es conveniente verificar de que se
dispone de un escáner adecuado (fotocopiadora, impresora multifunción, escáner de so-
bremesa…) al que se tenga un acceso directo y sencillo y que disponga de alimentador de
hojas.
Deberá poder escanear hojas con las siguientes características:
Hoja DIN A4
Salida JPG
Escala de grises
300 ppp (puntos por pulgada)
Calidad alta
Prácticamente la totalidad de dispositivos cumplen esto requisitos, no obstante conviene ha-
cer una prueba con suficiente tiempo para asegurar que no haya problemas en el último
momento.
Llegado el momento, los escaneos se harán a nivel de estación, por lo que habrá que esca-
near en condiciones normales entre 6 y 12 hojas simultáneamente.
3.2 Verificar disponibilidad de software
Además de tener instalado GEXCAT como mínimo en la versión 4.x.x, se deberá comprobar
que en los equipos que se utilicen para la preparación de la prueba ECOE se tiene instalado:
Un sistema de almacenamiento en la nube (Dropbox, Google Drive…) que permita
compartir los ficheros de la prueba entre los responsables del montaje de la misma.
El sistema utilizado deberá estar instalado físicamente en el ordenador, de forma que
los ficheros compartidos estén en el equipo local (cada vez que se modifiquen, su
contenido se sincronizará en la nube). Ver 3.3.
Un sistema de impresión que permita generar ficheros PDF (impresora PDF). En caso
de no disponer, se deberá instalar un driver que permita generar salidas PDF. Existen
9
gran cantidad de alternativas gratuitas y de pago en Internet (hacer búsqueda impre-
sora pdf). Si tiene dudas, consulte con algún técnico informático de su entorno.
Programas Excel y Word (versión 2007 o posterior).
3.3 Crear carpeta compartida para guardar información
Con objeto de facilitar el intercambio de información entre todos los participantes, crear un
directorio compartido en Dropbox, Google Drive… al que puedan acceder todos los respon-
sables.
Una posible estructura inicial sería:
UXX-ECOE MACROS
VARIOS
ESTACIONES
Programas proporcionados por INNOCAN
Fichero de alumnos, de pie de formulario, fichero de competencias, logos
Ficheros específicos de cada estación (descripción estaciones, formularios, ficheros auxiliares, escaneos...)
EST01
EST02
ESTnn
Nube
RESULTADOS
NOTAS
IMAGENES
Resultado de la interpretación de los formularios de cada estación.
Notas de alumnos por estación, por competencia y globales
GRAFALUMNOS
Imágenes para informe final por estación
Graficas alumnos por estación y competencia
10
4 Diseño de estaciones
4.1 Crear descripción estaciones
Se ha de crear previamente para cada estación, una hoja EXCEL en formato .xls o .xlsx que
contenga la descripción de las preguntas a realizar.
En el caso de que en una evaluación haya observador y paciente, se habrá de crear dos for-
mularios (uno para cada uno de ellos). Una vez finalizada la prueba y obtenidos los resulta-
dos, los datos obtenidos se reúnen y tratan conjuntamente.
Ver formato en ANEXO 10.3 y http://www.gexcat.com/w4innocan/generar-estacion-ecoe/
4.2 Caso estaciones con actor y observador
En el caso de haber estaciones con actor y observador, se deberán tratar como si fuesen es-
taciones (subestaciones separadas). La numeración de las preguntas puede ser consecutiva,
es decir se pueden numerar las preguntas del observador, p.ej. de la 1 a la 20 y las del ob-
servador de la 21 en adelante.
Los resultados finales se reunirán en un solo informe tratando los resultados de las subesta-
ciones como si fuese una estación única.
4.3 Verificación de las estaciones
El programa gxGENEVAL permite verificar la corrección formal del diseño de las estaciones y
ajustar los % de las competencias que intervienen en cada estación.
11
5 Logística de la prueba
Una vez se hayan completado las estaciones, se ha de comprobar que cumplen globalmente
los requisitos marcados inicialmente para posteriormente comenzar a crear los formularios
de cada estación y/o cargar las tabletas.
5.1 Cuadro de mando
El programa gxCUADROCOMP proporciona una visión global de la prueba, permitiendo veri-
ficar cada estación individualmente, así como a todas ellas en conjunto.
En caso de tener que ajustar algún porcentaje de competencias, se puede hacer también au-
tomáticamente. De esta forma se puede comenzar a hacer los preparativos con todos los da-
tos completamente ajustados.
Ver: http://www.gexcat.com/w4innocan/ecoe-cuadro-de-mando/
5.2 Codificación de alumnos
GEXCAT permite una codificación muy flexible para identificar de forma unívoca a los alum-
nos, según la rueda y el orden que se les haya asignado.
Para ello, en las hojas de marcajes, los alumnos quedan identificados por el código de barras
situados en el pie de los formularios. Los marcajes de los alumnos se deben realizar en la co-
lumna correspondiente al orden asignado en la rueda.
En el caso de realizarse la prueba en más de una fase, será preciso que cada alumno dispon-
ga de una identificación diferente para cada una de las fases en que participe.
Finalmente, se dispone de un sistema que asigna una codificación única en la prueba.
En resumen:
Si la prueba se hace en una sola fase, los alumnos tendrán asignado un código único
(Identificación de rueda y orden dentro de la misma)
Si la prueba se hace en varias fases:
o Los alumnos tendrán asignado un código único por cada fase (Identificación
de rueda y orden dentro de la misma)
o Tendrán asignado un código único, al que se le asignará finalmente las califi-
caciones (se convertirán los códigos utilizados en cada fase a esté código )
5.3 Crear fichero identificación pies de formularios
Los formularios utilizados en cada estación se crean automáticamente por GEXCAT y están
personalizados para identificarlos individualmente. Se deberá crear una codificación que
permita identificar cada una de las ruedas que tenga la prueba.
12
Si se desea, se podrían utilizar etiquetas autoadhesivas para incorporar en este espacio (altu-
ra máxima 2cm).
Ver anexo 10.1 para ampliar información y http://www.gexcat.com/w4innocan/ecoe-
generar-impresos-tabletas/
5.4 Generar formularios y hoja de ayuda
Ver: http://www.gexcat.com/w4innocan/ecoe-generar-impresos-tabletas/
Una vez creado el fichero de descripción de cada estación:
Ejecutar la macro gxGENEVAL
o Esta macro genera los siguientes ficheros por estación, en el mismo directorio
donde se encuentre el fichero de descripción de la estación y con el mismo
nombre seguidos de:
-plantillann.csv. Contiene el diseño de la plantilla que utilizará GEXCAT
para generar el formulario
-ayuda.xlsx. Contiene información de ayuda para el evaluador. Tiene el
mismo formato que el formulario.
-tablet.csv. Fichero con formato para ser utilizado en tabletas y teléfo-
nos
Imprimir a un fichero PDF el contenido del fichero xx–ayuda.PDF. Es importante ha-
cerlo de esta forma, ya que los formularios se generan en formato PDF. De esta forma
se conseguirá que coincidan el formato del formulario y de la hoja de ayuda. Even-
tualmente utilizar el programa gxIMPRIMIRAYUDA.
Generar el formulario. ejecutar GEXCAT / Extensiones / Formularios Extendidos / Ge-
nerar Hoja de formulario y seleccionar:
o Fichero: seleccionar nombre fichero PDF de salida
o Fichero diseño: seleccionar el fichero xx–plantilla.csv generado en el paso ante-
rior (gxGENEVAL)
o Identificadores: seleccionar el fichero de pies de formularios descrito en 5.3
Se generará un fichero PDF que contendrá tantas hojas como ruedas haya en la estación.
En este momento ya se disponen los ficheros PDF (formulario y hoja de ayuda) que se utiliza-
rán en la prueba ECOE y que se deberán imprimir a papel y tener disponibles para la prueba.
13
6 Semana antes de la prueba
6.1 Documentación para los evaluadores
Ver: http://www.gexcat.com/w4innocan/ecoe-manuales/
Asegurarse de que los evaluadores están familiarizados con los formularios que van a utili-
zar, que conocen la forma de rellenarlos y que disponen de forma previa del documento:
ECOE-INTRUCCIONESEVALUADOR.pdf (se les debería haber entregado en las sesiones de
formación o por correo electrónico).
El que aparezcan o no problemas en el momento de la corrección dependerá en gran parte
de la formación previa que se hay dado previamente a los participantes. El reconocimiento
de las hojas de evaluación en papel requiere el cumplimiento de unos requisitos mínimos
que si se ignoran, provocarán errores que deberán ser corregidos de forma manual.
Lo mismo ocurre con el manejo de las tabletas, que deberán entregarse o utilizarse por los
evaluadores de forma que estén habituados y hayan podido practicar con ejemplos similares
a los que se encontrarán realmente.
6.2 Preparar material auxiliar
Se deberá adquirir o tener disponible:
Bolígrafos de tinta negra, tipo Pilot (tinta de gel), punta de 0,7, ya que son baratos,
cómodos de utilizar y facilitan un correcto marcaje. No obstante, siempre se podrá
utilizar bolígrafos/rotuladores de tinta negra o azul obscuro. No así los lápices, ya que
al tener grafito provocan reflejos que pueden provocar errores de escaneo.
o Cantidad: Nº estaciones x Numero de ruedas + 20% extra
Sobres grandes, para guardar hojas DIN A4
o Cantidad: Nº estaciones x nº de ruedas
6.3 Crear fichero de alumnos
Se deberá crear la lista de alumnos que participarán en la prueba. La codificación de los
alumnos deberá estar en concordancia con los identificadores asignados en cada rueda y su
número de orden dentro de la misma. Ver Anexo 10.2 para ampliar información.
6.4 Imprimir los formularios y hojas de ayuda
Los ficheros PDF con los formularios y la hoja de ayuda de cada estación se han creado pre-
viamente en el paso 0, por lo que simplemente hay que imprimirlos.
Se recomienda imprimir dos copias del formulario PDF (ya contiene tantas hojas como rue-
das) para tener en cada estación un formulario extra para situaciones de emergencia e im-
primir tantas hojas de ayuda como ruedas haya en la prueba.
14
6.5 Cargar tabletas
Se deberá haber creado una clave en cada tableta para evitar el manejo por parte de los ob-
servadores. Las tabletas deberán ser manipuladas por los administradores.
En cada tableta se cargará la estación que se desee evaluar
Se cargarán los ficheros de alumnos (tantos ficheros como ruedas se realicen)
Ver manual específico:
http://gexcat.com/ECOE/ECOE-TABLET-INSTRUCCIONESADMINISTRADOR.pdf
Aunque el proceso de impresión es muy sencillo (imprimir un fichero PDF), el ha-
cerlo correctamente tiene una gran importancia, ya que puede comprometer toda
la recogida posterior de datos.
Los impresos utilizan códigos de barras. Es muy importante que la calidad
con la que se impriman las hojas garantice la interpretación de los códigos
impresos.
o Se recomienda imprimir en calidad ALTA
o En cualquier caso y antes de hacer una impresión masiva, imprimir y
escanear cualquier documento generado y verificar que GEXCAT lo
reconoce correctamente.
Prestar atención a imprimir el documento PDF AJUSTANDO el contenido.
o Verificar especialmente que es claramente visible el cuadro exterior
que enmarca todo el documento.
Verificar visualmente que los impresos no tienen manchas, bandas o errores
producidos por la impresora.
15
7 Día antes de la prueba
7.1 Preparar sobres para evaluadores
Preparar tantos sobres como estaciones y ruedas se vayan a celebrar. Identificar claramente
en el exterior del sobre la estación y la rueda a la que corresponde el sobre. Incorporar:
Hoja de formulario de la estación (por duplicado, para situaciones de emergencia)
Hoja de ayuda del formulario
Hoja de incidencias (disponible en /INSTRUCCIONES)
Hoja de instrucciones para el evaluador (/INSTRUCCIONES/ECOE-
INTRUCCIONESEVALUADOR.pdf)
Bolígrafo de color negro
7.2 Preparar tabletas
Se deberá controlar estén cargadas y que disponen de un cargador accesible durante los días
de la prueba.
16
8 Día de la prueba
8.1 Preparación de la estación
Se deberá verificar que los evaluadores disponen de un espacio de trabajo donde poder apo-
yar y manejar las hojas de evaluación y ayuda.
8.2 Material a entregar a los evaluadores
Se deberá entregar a cada evaluador el sobre preparado con anterioridad (ver 7.1). Se reco-
mienda que el material a entre
8.3 Finalizar la rueda
8.3.1 Estaciones con impresos en papel
Los evaluadores al finalizar cada rueda, deberán dejar su puesto de trabajo completamente
limpio. Introducirán toda la documentación utilizada (formulario rellenado, hoja de ayuda,
hoja de incidencias e instrucciones) en el sobre. Deberá haber un punto centralizado de en-
trega de los sobres para evitar posibles extravíos.
Si hubiese una rueda posterior, recoger primero el sobre de la rueda finalizada antes de dis-
tribuir el sobre de la nueva rueda.
8.3.2 Estaciones con tabletas
Deberá haber logísticos que se encarguen de cargar la siguiente rueda de forma que el ob-
servador pueda comenzar a utilizarla sin tener que hacer ninguna manipulación.
8.3.3 Subida de resultados de tabletas
Al finalizar el día, se deben recoger las tabletas y subir los resultados de las tabletas a la pla-
taforma.
17
9 Obtención de resultados
9.1 Preparación del material antes del escaneo
El material generado en la prueba ECOE, deberá llegar en un sobre por estación, con todo el
material en su interior (hojas de respuestas, hojas de incidencias, posibles hojas contestadas
por los alumnos, hoja de ayuda…)
Se recomienda organizar este material de forma que facilite su manejo posterior. Para ello:
Agrupar todas las hojas de respuestas de cada estación o subestación. Si hay subes-
taciones se han de agrupar como si fuesen estaciones independientes.
Agrupar las hojas de incidencias
Agrupar el resto de material (Aunque no se necesita para la corrección, será preciso
guardarlo para posibles auditorias o revisiones)
9.2 Escaneo de los formularios de las estaciones
Se deberán escanear conjuntamente por cada estación o subestación todos los formularios
utilizados (tantos formularios como ruedas) con las siguientes características:
Salida JPG
Escala de grises
300 ppp (puntos por pulgada)
Calidad alta
Orientación vertical
En el caso de que existan más de 22 alumnos por rueda, se utilizarán dos hojas por rueda,
una con 20 columnas (alumnos) y la otra con el resto de alumnos. Las dos hojas han de ser
escaneadas conjuntamente.
Los ficheros obtenidos se deben almacenar en directorios independientes (uno por estación
o subestación). Se recomienda copiar estos directorios como subdirectorios de las estaciones
correspondientes (/ESTACIONES/ESTnn/ESCANEOS/), de forma que todos los datos de una
estación estén agrupados en el mismo directorio.
9.3 Interpretación de resultados
Se ha de utilizar el programa GEXCAT, Extensiones, Formularios avanzados, Interpretar
Directorio de escaneos: directorio donde se encuentren los escaneos de las n ruedas
de una estación (/ESTACIONES/ESTnn/ESCANEOS/)
Fichero de diseño: se utiliza el fichero xx–plantilla-nn generado en el punto 0, corres-
pondiente a la estación. (/ESTACIONES/ESTnn/xx-plantilla-nn.csv)
o En el caso de que haya más de 22 alumnos por rueda, se ha de utilizar la plan-
tilla de 20 alumnos: xx-plantilla-20.
Directorio de resultado: se recomienda utilizar el mismo fichero de escaneos para de-
jar los resultados generados por GEXCAT (/ESTACIONES/ESTnn/ESCANEOS/).
18
Marcar la casilla “Renombrar ficheros escaneados”. De esta forma, una vez acabada
la interpretación los ficheros .jpg que contienen los escaneos de cada rueda, se re-
nombrarán al identificador que tienen en el código de barras al pie de formulario, fa-
cilitando su posterior consulta.
La casilla “Utilizar fichero de diseño como base” se recomienda esté DESMARCADA
Una vez interpretados los formularios, se generarán n ficheros en formato CSV con la inter-
pretación realizada en cada uno de los formularios en /ESTACIONES/ESTnn/ESCANEOS/.
Los ficheros con la interpretación realizada por GEXCAT se renombrarán al nombre de la eti-
queta a pie de página con el que se identifica cada formulario. En caso de que existan más
de 22 alumnos, se generarán dos ficheros con el mismo nombre. El segundo llevará el sufijo:
-1.
En el caso infrecuente que se detecte algún fichero CSV con un nombre de fichero que no
coincida con el código existente en la etiqueta, se deberá editar el fichero CSV y colocar el
valor existente en la etiqueta en la primera línea del fichero CSV (Al lado de iD)
Estos formularios no son tratables de forma inmediata. Es preciso agruparlos en un solo fi-
chero, para ello:
9.4 Normalizar resultados
Utilizar el programa gxNORMALIZAR (/MACROS) para generar un fichero con los resultados
globales de las n ruedas de una estación. Se ha de ejecutar por cada una de las estaciones.
Se ha de informar:
Fichero descripción estación (/ESTACIONES/ESTnn/Descripcion-estación-nn.xlsx)
directorio de interpretaciones (ficheros generados por GEXCAT en paso anterior,
(/ESTACIONES/ESTnn/ESCANEOS/)
Fichero de salida
o Este fichero contendrá los datos conjuntos de todas las ruedas de la estación.
Se recomienda guardar estos ficheros en el directorio /RESULTADOS
En el caso de que haya más de 22 alumnos por rueda, el programa lo detectará automáti-
camente.
Aparecerá un mensaje informando del número de alumnos detectados para su confirma-
ción. En algunas circunstancias este valor puede ser erróneo. En este caso se ha de informar
el valor correcto.
9.5 Tratamiento de estaciones dobles
En el caso de querer tratar las estaciones dobles (actor y observador) como una sola estación
(que será la situación habitual), se deberá reunir en un solo fichero las subestaciones.
Para ello se recomienda:
Crear un nuevo fichero de resultados en blanco
19
Copiar en las n primeras columnas los resultados de la subestación con las preguntas
iniciales
Copiar a partir de la última columna los resultados
o Eventualmente renombrar las cabeceras añadidas en el paso anterior, de for-
ma que queden la numeración de las preguntas de forma consecutiva
Se deberá disponer de un fichero de descripción de la estación en que estén agrupa-
das las preguntas utilizadas por el observador y actor, en el orden en que se hayan
colocado los resultados del paso anterior.
9.6 Tratamiento de estaciones que han utilizado tableta
Las evaluaciones de cada estación están contenidas en un fichero que contiene los resulta-
dos de todas las ruedas. Descargar este fichero que es tratable directamente.
9.7 Obtención de notas e informes de cada estación
Se deberá ejecutar por cada estación el programa gxINFORME-ESTACION que calculará las
notas de cada estación y generará informes sobre las notas obtenidas (gráfica, histograma,
cuartiles), estadística del comportamiento de cada ítem, utilidad de cada ítem (informe de su
discriminación y facilidad), así como un mapa de colores de las respuestas realizadas, con
objeto de visualizar posibles patrones de comportamiento por parte de los evaluadores y
alumnos.
Para ello se deberá informar:
1. Fichero de resultados de la estación (obtenido en el paso anterior)
/RESULTADOS/ESTnn.csv
2. Fichero de descripción de la estación (/ESTACIONES/ESTnn/)
3. Opcional. Fichero de alumnos. Si se informa aparecerán los nombres de los alum-
nos. Si no se informa, sólo se mostrarán los códigos asignados a cada alumno.
Normalmente debería estar en /VARIOS
4. Directorio de salida de notas (/NOTAS). El fichero generado tendrá un nombre IN-
FORME-nombre entrado en punto 1.xlsx
5. Título informes: Si se informa, el texto introducido aparecerá en la cabecera del
informe generado
6. Se puede marcar una casilla para generar los informes con o sin los alumnos con
nota 0 (no presentados)
Se generará un fichero INFORME-xxx en el directorio /NOTAS
9.8 Resolución de problemas de marcaje
Una vez obtenidos las notas de deberá realizar un análisis de los resultados obtenidos.
Se recomienda inicialmente hacer una revisión sobre los alumnos con calificaciones más ba-
jas o con cualquier situación anómala que se detecte.
.
9.8.1 Reconocimiento erróneo de marcajes
20
En caso de obtenerse resultados erróneos causados por marcajes anómalos, existe la posibi-
lidad de ajustar los umbrales de reconocimiento en GEXCAT.
Se recomienda ponerse en contacto con Innocan (teléfono 922 290351 o sopor-
[email protected]) para recibir instrucciones.
9.9 Obtención de notas transversales de competencias
Ejecutar gxCOMPTRANSVERSAL para obtener de forma automática n informes COMPTRANS-
nn (uno por competencia) en el directorio /NOTAS.
Se ha de informar:
Directorio de ficheros a analizar (/NOTAS). Los resultados se dejarán en este mismo
directorio con los nombres COMPTRANS-n.xlsx
Opcionalmente el fichero de alumnos, para incorporar los nombres de los alumnos a
los informes.
Se generarán n ficheros COMPTRANS-n.xlsx en el directorio /NOTAS (siendo n el número
asignado a cada competencia)
9.10 Resumen global de notas
Una vez obtenidas las notas individuales de cada estación, gxRESFINAL-NOTAS (/MACROS),
genera un fichero que agrupa los resultados obtenidos por los alumnos en cada prueba, cal-
culando su nota media final.
Puede crear una gráfica para entregar a cada alumno, para informarle de su comportamien-
to individual en relación al conjunto de alumnos y en cada estación. Estas gráficas se gene-
ran en un directorio específico (p.ej. /GRAFALUMNOS)
También guarda gráficas que serán utilizadas en el informe global (Generación de informe
final en formato Word) en un directorio específico, p.ej. /IMAGENES
Se debe informar:
Directorio con notas de las estaciones (/NOTAS)
Opcional. Directorio específico para guardar imágenes de notas (se deberá haber
creado un directorio específico donde guardar las imágenes generadas para el infor-
me final, p.ej /IMAGENES). Si se deja en blanco, no se generarán.
Opcional. Directorio gráficas de cada alumno (se deberá haber creado un directorio
donde guardar la gráfica de cada alumno. P.ej. /GRAFALUMNOS). Si se deja en blan-
co, no se generarán.
9.11 Resumen global de competencias
21
Una vez obtenidas las notas de competencias a nivel de cada estación, gxRESFINAL-COMP
(/MACROS), agrupa los resultados obtenidos por los alumnos en cada competencia, gene-
rando un informe con la nota media final.
Opcionalmente, genera una gráfica para entregar a cada alumno, en el que se le informa de
su comportamiento individual en cada competencia en relación al conjunto de alumnos y en
cada estación en un directorio específico (p.ej. /GRAFALUMNOS-COMP).
También guarda gráficas que serán utilizadas en el informe global (Generación de informe
final en formato Word) en un directorio específico, p.ej. /IMÁGENES-COMP.
Se debe informar:
Directorio con las notas de competencias (/NOTAS)
Opcional. Directorio específico para guardar imágenes (se deberá haber creado un di-
rectorio donde guardar las imágenes generadas para el informe final, p.ej.
/IMÁGENES-COMP). Si se deja en blanco, no se hará nada
Opcional. Directorio gráficas de cada alumno (se deberá haber creado un directorio
donde guardar la gráfica de cada alumno, p.ej. /GRAFALUMNOS-COMP). Si se deja
en blanco, no se hará nada.
9.12 Generación de informe final en formato Word
Como resumen final, se utiliza gxGENERARINFORMEFINALv1 para generar un informe con el
resultado global a nivel de estaciones y competencias, así como un informe individualizado a
nivel de cada estación y cada competencia.
Una vez generado el resultado (Informe final-Prueba ECOEv1.docx), se recomienda editar es-
te informe para incorporar todos los aspectos relevantes que hayan sucedido durante la pre-
paración y realización de la prueba, así como de las conclusiones que se quieran detallar, de
forma que pueda servir de referencia y guía para próximas pruebas.
9.13 Generación de informe para alumnos
Para poder entregar a los participantes en la prueba informes personalizados, se puede utili-
zar el programa gxINFORMES-ALUMNOS
22
10 ANEXOS
10.1 Anexo A. Fichero de identificación pie de formulario
Los identificadores que aparecen a pie de formulario, se generan automáticamente por
GEXCAT a partir de un fichero CSV (comma separated values), para lo que se puede utilizar
Excel o cualquier editor básico.
Contiene tantos registros como ruedas haya.
o El primer campo contiene la codificación asignada a cada rueda
o El segundo puede contener cualquier texto y es informativo.
Se muestran a continuación tres ejemplos de posibles codificaciones.
Se puede observar que en algún caso se ha puesto el texto Evaluador…, Profesor… Se ha
hecho así porque se quiere que los evaluadores pongan su nombre al pie del impreso, con
objeto de tener constancia de quien ha evaluado cada formulario.
1. A, B, C, D…. Ocho ruedas, el mismo descritas desde A a H
2. V1,V2, V3, …S1,S2,S3…Prueba hecha dos días (viernes / sábado), con tres ruedas
(1,2,3)
3. UA-V01,UA-V02, … UB-V01,UB-V02,… para centro B, UC-V01,UC-V02, para centro
C…. La prueba se ha realizado en varios centros, dos días (viernes, sábado) y tres
ruedas (A, B y C)
Ejemplo 1. Ocho ruedas
A;RUEDA A Evaluador:
B;RUEDA B Evaluador:
C;RUEDA C Evaluador:
D;RUEDA D Evaluador:
E;RUEDA E Evaluador:
F;RUEDA F Evaluador:
G;RUEDA G Evaluador:
H;RUEDA H Evaluador:
Ejemplo 2. Seis ruedas
V1;VIERNES TURNO 1. Profesor
V2;VIERNES TURNO 2. Profesor
V3;VIERNES TURNO 3. Profesor
S1;SABADO TURNO 1. Profesor
S2;SABADO TURNO 2. Profesor
S3;SABADO TURNO 3. Profesor
Ejemplo 3. Tres ruedas
UB-VA;UB - Viernes Rueda A
UB-VB;UB - Viernes Rueda B
UB-VC;UB - Viernes Rueda C
23
10.2 Anexo B. Fichero de alumnos participantes
Los alumnos se han de informar en un fichero compatible con Excel (xlsx, xls, csv…) que
contienen tantos registros como alumnos. Puede tener hasta cuatro campos, los dos prime-
ros son obligatorios:
1. ID prueba ECOE. Codificación de su orden de participación en la prueba (rueda asignada y orden den-
tro de la misma), de acuerdo a la codificación utilizada en el punto anterior (C12, V312, UB-
V0312….para un alumno de la tercera rueda con número de orden 12)
2. Apellidos y nombre
3. Opcionalmente: Correo electrónico del alumno
4. Opcionalmente: DNI del alumno
Los identificadores de los alumnos tendrían las siguientes codificaciones, suponiendo 20
alumnos por rueda:
1. Identificación ruedas A, B, C… a. A01, A02,…A20,B01,B02,….B20,C01,C02….C20, …
2. Identificación ruedas V1, V2, V3, S1, S2, … a. V101, V102,…V120,V201,V202,….V220,V301,V302….V320,S101,S02…
3. Identificación ruedas UA-V01, UA-V02, …
a. UA-V0101, UA-V0102,…UA-V0120, UA-V0201, UA-V0202,…. UA-V0220,UA-V0301,UA-V0302….
24
10.3 Anexo C. Fichero de descripción de estación
En la página siguiente se muestra un ejemplo de la estructura del fichero de descripción de
estaciones. En el se evalúan 15 competencias divididas en cinco bloques (habilidades de co-
municación, conocimientos, juicio clínico, plan de manejo y relaciones interprofesionales).
Los textos que separan cada bloque son totalmente opcionales y se han puesto para hacer el
formulario más legible y para que el evaluador disponga de referencias visuales.
La respuesta a cada pregunta es Si o No. Sólo se ha colocado una casilla de respuesta, S, por
lo que si se deja en blanco, sería equivalente a haber marcado una casilla N.
Entrando en detalle:
Las dos primeras filas son informativas y no forman parte propiamente de la descrip-
ción de las competencias a evaluar
Las competencias a evaluar se describen a partir de la tercera fila. Cada competencia
admite tantas valoraciones como se desee (con el límite de 45 filas disponibles).
Se pueden insertar opcionalmente textos descriptivos que se mostrarán en el formula-
rio (en el ejemplo mostrado: habilidades de comunicación, conocimientos,…). Tam-
bién se pueden dejar el texto en blanco y se generaría un separador sin texto.
El fichero contiene
Primera fila
o Celda 1: Literal descriptivo. P.ej. Estación
o Celda 2: número estación
o Celda 3: Descripción informativa de la estación
Segunda fila
Se utiliza para identificar las columnas:
o Celda 1: Texto fijo: PREGUNTA
o Celda 2: Texto fijo: RESPUESTA
o Celda 3: Texto fijo: CALIF
o Celda 4: Texto fijo: ITEM
o Celda 5: Texto fijo: INSTRUCCIONES
Filas 3 hasta como máximo la 47
Identifica cada una de las competencias y las posibles valoraciones de cada una. Pue-
de haber también textos identificativos o líneas en blanco para separar los distintos
bloques de competencias.
o Celda 1:
Texto (informativo) a insertar en el formulario. El resto de celdas no se
tienen en cuenta o bien:
Número de la competencia. Las competencias mostradas en un formu-
lario han de tener números consecutivos. La primera competencia pue-
de ser diferente de 1, pero las siguientes han de ser consecutivas (caso
25
de un formulario que se haya de dividir en dos o más, el segundo y si-
guientes formularios no comenzarían por 1)
o Celda 2: Si una competencia admite varias valoraciones, identificador de cada
una de las valoraciones (Un solo carácter). Puede ser un valor 1, 2, 3, ...,
a,b,c... S,N. Si sólo se ha de marcar una casilla puede estar en blanco. (o bien
3,2,1… c,b,a…) No se hará ninguna comprobación sobre este valor.
o Celda 3: Nota (peso) asignada a la respuesta de la competencia
o Celda 4: (Opcional) Descripción de la competencia
o Celda 5: (Opcional) Instrucciones de los aspectos que se han de tener en cuen-
ta para el marcaje de esta respuesta
o Celda 6: (opcional). Identificador CNDMED de la competencia
Evaluación 17 Neurología Ictus
ITEM LITERAL PUNTOS LISTADO EVALUATIVO REFERENCIA
CNDMED Competencia (*)
HABILIDADES COMUNICACIÓN
1 S 3,3 ¿Se identifica en el informe y firma? 4
2 S 3,3 ¿Escritura correcta y legible? 4
3 S 3,3 ¿Lenguaje profesional? 4
CONOCIMIENTOS
4 S 5 ¿Identifica factores de riesgo?
5 S 5 ¿Señala hora del ictus?
6 S 5 ¿Describe perfil temporal del cuadro?
7 S 5 ¿Describe ctes vitales en momento asistencia?
8 S 5 ¿Gradúa el déficit neurológico?
9 S 5 ¿señala estaba basal paciente? (Rankin 0)
JUICIO CLÍNICO
10 S 10 ¿Identifica el problema como ictus? 5
PLAN DE MANEJO (DIAGNÓSTICO Y/O TERAPÉUTICO)
11 S 10 ¿Evita tratamiento para corregir TA? 5
12 S 10 ¿Inicia tratamiento para corregir hiperglucemia? 5
RELACIONES INTERPROFESIONALES
13 S 10 ¿Activa el código ictus? 7
14 S 10 ¿Decide llamar al neurólogo de guardia? 7
15 S 10 ¿Decide trasladar al enfermo a centro con Unidad de Ictus?
7
(*) Componentes competencias CNDMED
1 Anamnesis
2 Exploración clínica
3 Habilidades técnicas/procedimentales
4 Habilidades de Comunicación
5 Juicio Clínico, plan de manejo diagnóstico y terapéutico
6 Prevención y promoción de la salud
7 Relaciones interprofesionales
8 Otros (especificar)
Caso de haber más de una casilla de respuesta
Simplemente se añaden filas para cada una de las respuestas deseadas. Se ha de repetir en la
casilla 1 el nº de la pregunta.
Por ejemplo, si se desea evaluar la competencia ¿Pregunta sobre factores sociodemográficos? y se quiere tener tres posibles calificaciones: Si, Parcialmente, No. Se puede:
Utilizar dos casillas. Si se dejan en blanco sería equivalente a marcar No
o En el ejemplo mostrado a continuación 8.a sería equivalente a Si y 8.b sería equivalente a: Par-
cialmente. Si se dejan sin marcar las casillas a y b, sería equivalente a marcar N.
o Los literales a, b se pueden sustituir por 1, 2 … S, P. Es decir, los literales utilizados para identi-
ficar la respuesta son completamente libres, pero se recomienda sean coherentes con los utili-
zados en las otras preguntas del formulario. También pueden estar en cualquier orden: b,a…
2,1…
8 a 5 Pregunta sobre factores sociodemográ-ficos
Al menos 3: edad, educación, trabajo, residencia, …
8 b 2,5 Pregunta sobre factores sociodemográ-ficos
2 items
Utilizar tres casillas.
o En el ejemplo mostrado a continuación marcar 8.S sería equivalente a Si, 8.P sería equivalente a
Parcialmente y 8.N o dejar las tres casillas en blanco a No.
8 S 5 Pregunta sobre factores sociodemográ-ficos
Al menos 3: edad. Educación, trabajo, residencia, …
8 P 2,5 Pregunta sobre factores sociodemográ-ficos
2 items
8 N 0 Pregunta sobre factores sociodemográ-ficos
No
No hay límite para el número de valoraciones que se puede hacer para una competencia (ex-
cepto el tamaño del formulario, 45 líneas). No obstante cuantas más valoraciones se quieran
hacer, menos preguntas cabrán en el formulario.
En el caso de tener los ítems muchas respuestas (por ejemplo valorar de 0 a 10 el manejo del
paciente), se recomienda reducirlo a escalas más reducidas como la de Likert con 5-6-7 nive-
les.
Se muestra un ejemplo de posibles preguntas de comunicación.
COMUNICACIÓN
12 a 10
Sabe preguntar. Orden lógico de
preguntas, acogida exploración
resolución y fase final, preguntas
Maneja el lenguaje
adecuadamente, salu-
da y se despide, se
28
abiertas y cerradas con criterio. comunica de forma
fluida con el paciente
12 b 7,5 Tres aspectos
12 c 5 Dos aspectos
12 d 2,5 Un aspecto
12 e 0 Cero
13 a 10
Sabe escuchar. Interés por la per-
sona y no solo por los datos, sien-
te que le escuchan.
Totalmente de acuer-
do
13 b 7,5 De acuerdo
13 c 5 Escucha friamente
13 d 2,5 Parece ausente
13 e 0 No escucha
14 a 10
Facilita el discurso. Atento a la
comunicación verbal y no verbal,
captando la situación en la que se
encuentra y a las dudas persona-
les.
Totalmente de acuer-
do
14 b 7,5 Bastante de acuerdo
14 c 5 De acuerdo
14 d 2,5 En desacuerdo
14 e 0 Totalmente en
desacuerdo
29
10.4 Ejemplo de formulario y hoja de ayuda
Formulario Hoja de ayuda
La hoja de ayuda está preparada para ser utilizada conjuntamente con el formulario, de forma
que sirva tanto de ayuda, como de guía a la hora de evaluar a cada alumno, como se mues-
tra a continuación.
30
10.5 Ejemplo de informe personalizado para cada alumno