propuesta para el diseÑo de un sistema...

Ingeniería y Sociedad UC

PROPUESTA PARA EL DISEÑO DE UN SISTEMA AUTOMATIZADOPARA EVALUACIONES EN LINEA

Brito H, Carlos R. y Pacheco S., Lisbeth C.Departamento de Computación. Facultad de Ingeniería. Universidad de Carabobo

Valencia. Estado Carabobo. Venezuelae-mail: [email protected] , [email protected]

Resumen: El proyecto consiste en el diseño de un sistema integral para preparar, generar, aplicar y calificarevaluaciones de forma automática, como herramienta alternativa para facilitar a los profesores el proceso deevaluación, a través de un sistema confiable y de fácil acceso, que permita la valoración inmediata de losconocimientos. El proyecto, en fase de realización, adicionalmente permite: [1]almacenar preguntas conelementos multimedia en una base de datos para su reutilización, organizadas por tema y grado de dificultad;[2]optimizar el tiempo empleado por el profesor en la elaboración y corrección de las evaluaciones y el tiempode respuesta a profesores y estudiantes, del resultado de la evaluación, aumentando el efecto positivo de larealimentación; [3]generar evaluaciones diagnósticas, formativas o sumativas, con realimentación por pregunta;[4]almacenar los resultados para tratarlos estadísticamente, con la finalidad de determinar los objetivos quedeben retomarse y evaluar la calidad de la evaluación y las preguntas.

Palabras clave: Evaluación, examen en línea, software de evaluación, autoevaluación.

PROPOSAL FOR THE DESIGN OF AN AUTOMATED SYSTEM FOR ON LINE ASSESSMENTS

Abstract: This project is about designing an integral system to make, generate, apply and grade evaluationsin automatic form, as an alternative tool to make easier for teachers the process of evaluation through areliable and easy-access system, which allows faster knowledge assessment. The project additionally allows:[1] to store questions with multimedia elements in a database, organized by topics and degree of difficulty forits reutilization; [2] optimization of the time spent by the teacher in the production and grading of evaluationsand the teachers and students’ response time of the evaluation of results, increasing the positive effect of thefeedback; [3] to generate diagnostic, formative or cumulative evaluations with feedback per question; [4] tostore the results in order to treat them statistically with the purpose of determining the objectives that must berecaptured and to evaluate the quality of the evaluation and questions.

Key words: Evaluation, test on line, assessments system, auto evaluation.

INTRODUCCIÓN

A lo largo de la historia, los ambientes educativos hansido objeto de diversas transformaciones a medidaque las estrategias y la tecnología han cambiado. Eluso de nuevas tecnologías ha marcado un cambio enla forma en que actualmente, profesores e institucionesestán abordando el proceso de enseñanza-aprendizaje.La evaluación como parte integral de este proceso, noescapa a los cambios que se han generado del uso deestas tecnologías.

La evaluación entendida como un proceso integral queacompaña al de enseñanza y es coherente con él, sepropone servir de realimentación al proceso deenseñanza-aprendizaje, constituyéndose en una de lasetapas fundamentales para su mejoramiento continuo.

En la mayoría de las instituciones de enseñanzasuperior la evaluación es una realidad inevitable, queviene acompañada con demasiada frecuencia de una

importante carga de trabajo para el profesor, tantopor el tiempo empleado en el diseño y reproducciónde las evaluaciones, como por el tiempo empleado enla corrección de las mismas, lo que en gran medidahace que en la mayoría de las ocasiones larealimentación para el proceso de enseñanza-aprendizaje, tanto para el alumno, como para elprofesor, llegue de manera tardía [1].

Una de las herramientas que más se ha venidoutilizando para la evaluación del aprendizaje a travésdel uso de las tecnologías de la información ycomunicación, es el diseño de evaluaciones conposibilidad de autocorrección, debido a que aportabeneficios al proceso educativo, entre los que setienen: para el estudiante, la evaluación frecuente yperiódica le proporciona un refuerzo de los conceptosy aumenta su motivación, y debido a que los resultadosse generan de manera electrónica reciberealimentación inmediata; a los profesores por su

65

parte, les permite diseñar revisiones para cadaobjetivo o tema en particular, sin preocuparse de tenerque encontrar tiempo y recursos para analizar losresultados [1].

En los últimos años ha ocurrido un incremento del usode la tecnología en las clases y las evaluaciones enlínea se van convirtiendo en un recurso cada vez másdemandado [3], debido a que su implementaciónfacilita los procesos de administración y ahorra a losprofesores grandes cantidades de tiempo[4].

El tipo de evaluación que se puede diseñar con el usode estas tecnologías depende de muchos factores;entre ellos se encuentran, el grado de complejidadque se quiera implementar en el módulo de evaluación,el tipo de información que se está tratando de enseñar,y además, cómo se quiere verificar que el estudianteha asimilado el contenido. Además, al diseñar laevaluación se debe incluir una realimentación en larespuesta a cada pregunta, la cual puede hacer usode diferentes medios como texto, gráficos, audio yvideo; y en la aplicación de las mismas se debe permitirque los estudiantes salten preguntas y puedan retornara ellas después [3][5].

En el caso de las asignaturas de programación, lautilización de herramientas de autoevaluación en elweb facilita a los alumnos el aprendizaje de conceptosteóricos [2].

El sistema planteado comprende la implementaciónautomática de todo el proceso de creación, aplicacióny calificación de evaluaciones electrónicas de tiposelección de respuesta (verdadero/falso y opciónmúltiple), a partir de una base de datos de preguntas,así como el seguimiento de las preguntas a fin decorregir o actualizar las que así lo requieran y eliminaraquellas que ya no sean efectivas.

El diseño de evaluaciones electrónicas, al igual que eldiseño de cualquier evaluación, requiere de laplanificación y el análisis de los elementos queconstituyen las preguntas, así como de los momentosde aprendizaje en que se aplicarán.

MODELO CONCEPTUAL

Con base en la información recabada en entrevistasrealizadas a los potenciales usuarios, sobre la dinámicade las evaluaciones, se establecieron las etapasnecesarias para el diseño y aplicación de evaluacionesen línea, así como las tareas involucradas en cadaetapa.

Las etapas para elaboración y aplicación deevaluaciones se presentan en la figura 1.

Figura 1 Etapas de la Creación de Evaluaciones

1. Preparar la evaluación

La preparación de una evaluación es un proceso queva desde la concepción de la misma, hasta su ubicaciónen el sistema de evaluación de la asignatura. Esta etapacomprende las siguientes tareas:

• Seleccionar el tipo de evaluación a realizar:formativa, sumativa o diagnóstico

• Seleccionar el tema o tópico a evaluar.

• Seleccionar el tipo de pregunta a desarrollar,selección simple, múltiple o mixta.

• Elaborar preguntas y establecer la realimentaciónpara cada opción de respuesta o utilizar lasexistentes en la base de datos.

• Definir el número de preguntas que tendrá laevaluación.

• Definir el tiempo de duración de la evaluación.

• Definir el peso de la evaluación en la calificaciónfinal, si aplica.

Esta etapa es independiente de si la evaluación esautomatizada o no, es exclusiva potestad del profesory de él depende que el proceso posterior sea o noexitoso.

2. Construir la evaluación y elegir el formatode presentación

Esta etapa comprende las siguientes tareas:

• Seleccionar el origen de la pregunta, si es de labase de datos o se creará en el momento.

• Crear las preguntas definidas en la etapa anterior.

Preparar la Evaluación

Aplicar la Evaluación

Analizar los Resultados de la Evaluación

Construir la Evaluacióny elegir formato de

Presentación

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��





Presentación

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��





Presentación

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

66


• Seleccionar el nivel de dificultad de las preguntas.

• Seleccionar el número de preguntas y asignar lapuntuación por pregunta.

• Seleccionar el factor de corrección, si se aplica.

• Seleccionar el orden de presentación de laspreguntas, en forma aleatoria o definida por elprofesor.

• Seleccionar el orden de presentación de lasopciones, en forma aleatoria o la definida en lacreación de la pregunta.

• Establecer los parámetros de duración para eldesarrollo de la evaluación

• Definir el grupo de estudiantes a los que se lesaplicará la evaluación

• Seleccionar la fecha y hora de inicio de laevaluación

• Seleccionar el tiempo de vigencia de la evaluación.

3. Aplicar la evaluación


• Iniciar la evaluación.

• Guardar en la base de datos el resultado de laevaluación, para posterior análisis estadístico.

• Presentar la realimentación en el momentodefinido, si es evaluación formativa al momentode responder, si es sumativa al enviar la evaluación.

• Enviar la calificación al estudiante, así como laevaluación con su correspondiente realimentación,al finalizar la evaluación,

• Desactivar la evaluación una vez finalizada.

4. Analizar los resultados de la evaluación


• Observar las calificaciones de los estudiantes.

• Imprimir y exportar calificaciones a otros formatos.

• Generar estadísticas por evaluación, por pregunta,por estudiante y por grupo o sección.

Es de notar que el profesor tiene un rol relevante enel desempeño de estos procesos, dado que es evidenteque la responsabilidad de la configuración recaetotalmente sobre su gestión.

Por otra parte, es posible que no todas las tareasplanteadas para el diseño de evaluaciones esténpresentes en todas las evaluaciones, todo depende

de las características propias de la evaluación adiseñar.

FUNCIONES DEL SISTEMA

La automatización de los procesos para la creación deevaluaciones electrónicas, con el objeto de sercalificadas de manera inmediata, requiere de ladefinición de las funciones del sistema que permitirásu automatización, con base en los requerimientos delos potenciales usuarios y del proceso que se deseaautomatizar. Se establecieron las funciones que seindican a continuación, como prioritarias en el diseñodel sistema:

a) Generar evaluaciones electrónicas de tiposelección de respuesta para ser aplicadas en línea.

b) Almacenamiento de la información de laspreguntas y las opciones de respuesta en una basede datos, para permitir su reutilización.

c) Establecer control de tiempo para el examen.

d) Establecer parámetros para la corrección de lasevaluaciones.

e) Organización de las preguntas por tema.

f) Categorización de las preguntas por nivel dedificultad.

g) Diseñar evaluaciones electrónicas de carácterformativo, sumativo ó diagnóstico.

h) Diseñar preguntas con elementos multimedia.

i) Permitir que, en la aplicación del examen, lapresentación de las preguntas y las opciones derespuesta se realice de forma aleatoria para cadausuario.

j) Generar el resultado de la evaluación o calificaciónde manera inmediata.

k) Permitir la aplicación de criterio o factor decorrección, para evitar la influencia del azar enlas calificaciones.

l) Permitir establecer realimentación inmediata.

m) Permitir el almacenamiento de los resultados delas evaluaciones en una base de datos.

n) Permitir la generación de listados de los resultadosde las evaluaciones, para su publicación.

o) Permitir la generación de estadísticas de losresultados de las evaluaciones.

p) Permitir la impresión de las evaluacionesgeneradas, para aplicación fuera del entorno encaso necesario.

67

q) Permitir la impresión de las evaluacionesgeneradas junto a las respuestas correctas, parasu publicación.

EL MODELO CONCEPTUAL

Se diseñó un modelo conceptual, figura 2, que sirvade base para el desarrollo de la aplicación de software.

1.1. Creación de la Evaluación

Esta etapa comprende el esquema de la evaluación adesarrollar e involucra definir los siguientesparámetros:

a) Tipo de Evaluación: De acuerdo a esteparámetro se determinará el momento apropiadode la realimentación, así como su consideraciónen la calificación final del estudiante. Los diferentestipos de evaluación y los momentos en que puedenaplicarse, así como las interacciones quecualquiera de éstos genera en el sistemaplanteado, se presentan en la Figura 4.

b) Tópico o tema de la evaluación: Define el temasobre el cual se generará la evaluación, paraubicarla y a través de éste se filtrarán laspreguntas que pudieran formar parte de laevaluación, si ésta se obtuviera a partir de la basede datos.

c) Nivel de dificultad máximo de las preguntas:A través de este parámetro se filtrarán, de acuerdoal tópico, las preguntas de la base de datos quepueden ser utilizadas para generar la evaluación.

d) Tipo de pregunta: El profesor puede escogerentre preguntas de verdadero/falso, selecciónmúltiple o una mezcla de las anteriores. Una vezseleccionado el tipo de pregunta, se filtrarán, delos resultados obtenidos en la etapa anterior, laspreguntas con posibilidades de ser utilizadas paragenerar la evaluación.

e) Cantidad de preguntas de la evaluación: Esteparámetro permite filtrar las preguntas de la basede datos obtenidas al aplicar los parámetros tópicoo tema, nivel de dificultad máximo y cantidad depreguntas; si existen suficientes preguntas sepodrá generar la evaluación de maneraautomática, en caso contrario se deberán crearpreguntas para completarla. En caso de existir máspreguntas en la base de datos que las que sedesean utilizar, el profesor puede seleccionaraquellas que desea colocar o pedirle al sistemaque las tome de forma aleatoria.

f) Configuración de la corrección: Permiteestablecer puntaje por pregunta, la aplicación ono de factor de corrección y de aplicarse factorde corrección, cual se aplicará.

Figura 2 Modelo Conceptual

Las etapas que contempla se describen a continuación.

1. Configuración de los Procesos de Evaluación

La creación de evaluaciones involucra el conjunto detareas ya descritas. En la figura 3 se presentan loselementos principales del modelo para la configuraciónde los procesos de evaluación, los cuales se describenbrevemente a continuación.

Figura 3 Modelo para la Configuración de losProcesos de Evaluación

68


Figura 4 Interacciones de los DiferentesTipos de Evaluaciones en el Sistema

1.2. Selección de la plantilla de estudiantes

Una vez que el profesor determine la evaluación arealizar, debe conformar el grupo de estudiantes alque se le aplicará la misma. Para este fin se requiereespecificar la asignatura y la sección. Estos datospermiten filtrar los grupos de estudiantes, los cualesse constituirán, finalmente, en los usuarios de laevaluación

1.3. Creación de las Preguntas

Esta etapa comprende la creación de las preguntasque se agregarán a la base de datos para su posteriorreutilización. Involucra los parámetros que se describena continuación:

a) Asignatura donde se ubicará la pregunta: Através de este parámetro se ubicará la preguntadentro de una asignatura en la base de datos.

b) Tópico o tema donde se ubicará la pregunta:A través de este parámetro se establecerá el tópicoo tema dentro del cual se ubicará la pregunta acrear, en la base de datos.

c) Nivel de dificultad: Permite establecer el nivelde dificultad que categoriza a la pregunta. Seproponen cuatro niveles [7]:

Nivel 1. Preguntas que requieren solamenterecordar el conocimiento adquirido,generalmente verdadero/falso.

Nivel 2. Preguntas que requieren aplicación delconocimiento.

Nivel 3. Preguntas que requieren la aplicación deun conocimiento y su razonamiento,apreciación de la mejor respuesta.

Nivel 4. Preguntas que requieren de análisis ysíntesis para su solución; varias preguntasbasadas en un mismo esquema oenunciado, denominadas multiítem debase común [7].

Es potestad del profesor ubicar la pregunta en elnivel que considere apropiado, el cualposteriormente será verificado y adecuado, de sernecesario, por los demás profesorespertenecientes a la cátedra.

d) Enunciado: Define el enunciado de la pregunta,el cual puede ser sólo texto o combinación decualquier elemento multimedia.

e) Opciones de respuesta: Define las posiblesopciones de respuesta a la pregunta formulada,las cuales pueden ser sólo texto o cualquierelemento multimedia.

f) Realimentación: Define la realimentación que sele mostrará al estudiante al momento deseleccionar una opción, correcta o incorrecta. Larealimentación puede ser sólo texto o cualquierelemento multimedia que permita al estudiantecomprender la respuesta correcta.

1.4. Programación de la Evaluación

Comprende la definición de los parámetros para loseventos de inicio y finalización de la evaluación. Paralo que se requiere especificar la fecha y la hora deinicio, la duración y la vigencia. La vigencia se utilizarápara determinar el tiempo en que permanecerá activala evaluación. La duración es el tiempo que tiene elestudiante desde el momento que comienza acontestar la evaluación. Para el inicio y cierre de laevaluación, existe la opción de ejecución inmediata,de acuerdo a lo que el profesor considere másapropiado.

2. Ejecución de los Procesos de Evaluación

La aplicación de las evaluaciones, una vez generadasy activadas por el profesor, presenta un conjunto deinteracciones en el sistema las cuales se explicanbrevemente a continuación.

a) Inicio de sesión del estudiante en el sistema. Paraello debe usar su nombre de usuario y contraseña.

b) Una vez ubicada la evaluación a presentar, darinicio a la misma.

c) El sistema ubica en el servidor las preguntas de laevaluación y se las presenta al estudiante una auna.

Eventos

�o�� os� e�en ��e

EvaluacionesFormativas

EvaluacionesSumativas

Eventos


Eventos



��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

Evaluación de Diagnóstico

(Post-aprendizaje)

Evaluación Formativa

Exámenes de Práctica


(Pre-aprendizaje)


Evaluación Sumativa

Eventos



Eventos







Eventos


Eventos




��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��

��


(Post-aprendizaje)


Exámenes de Práctica


(Pre-aprendizaje)


Evaluación Sumativa

69

d) El estudiante contesta cada pregunta y surespuesta va al servidor donde se almacena y severifica si es correcta o no.

e) El sistema de acuerdo a la verificación o correcciónde la pregunta del estudiante presenta larealimentación correspondiente; por pregunta sila evaluación es formativa o de diagnóstico, o alfinalizar la evaluación junto a la calificación, si laevaluación es sumativa.

f) Una vez finalizada la evaluación se guarda eltiempo que demoro el estudiante en culminarla,con la finalidad de evaluar la calidad de laevaluación y finaliza la sesión del estudiante en elservidor.

3. Resultados de los Procesos de Evaluación

Durante la aplicación de las evaluaciones, se guardanen la base de datos todas las interacciones delestudiante en el sistema, a fin de emitir resultadosestadísticos. Entre los reportes que se podrán emitirse encuentran:

a) Reporte de notas por evaluación: Medianteeste reporte se podrá generar por evaluación unlistado de los estudiantes con sus notas, el cualse realizará en formato web, documento htm, parasu publicación o impresión.

b) Reporte de desempeño del estudiante:Mediante este reporte se podrá observar para cadaestudiante todas las evaluaciones presentadas ysus correspondientes calificaciones para ver sucomportamiento hasta el momento; esto con lafinalidad de brindarle al profesor una herramientaque le permita llevar un registro del desempeñodel estudiante a lo largo del curso.

c) Reporte de estadísticas por grupo o sección:Mediante este reporte se podrán observarestadísticas básicas del grupo: Porcentaje deaprobados, porcentaje de reprobados, porcentajede estudiantes que no presentaron, nota máxima,nota mínima, nota promedio.

d) Reporte de estadísticas por evaluación:Mediante este reporte se podrán observarestadísticas básicas que permitirán establecerconclusiones respecto al rendimiento y calidad dela evaluación, así como los objetivos no logrados.

e) Reporte de estadísticas por pregunta:Mediante este reporte se podrán establecer laspreguntas que requieren ser revisadas, las querequieren ser eliminadas y las que requieren sermodificadas, así como las opciones de respuesta

que no están efectuando su trabajo de distractor(opción incorrecta que puede ser seleccionadacomo correcta, por un estudiante que no conocela respuesta correcta).

4. Procesos Adicionales

Como los procesos automatizados presentan laposibilidad de fallar por múltiples razones, secontemplan procesos adicionales entre los que seencuentran la impresión de la evaluación generadacon o sin las respuestas, y la posibilidad de exportarde notas o calificaciones a otros formatos.

DISEÑO DE LOS MODULOS

1. Modulo del Profesor

El módulo del profesor comprende las tareas deconfiguración y análisis de los resultados de laevaluación.

Antes de efectuar cualquiera de las tareasinvolucradas, se procede a la verificación de seguridad,la cual certifica el acceso del profesor a la aplicación yes identificado en el sistema, como se presenta en lafigura 5.

Inicio de SesiónInicio de Sesión

Identificación del Profesor

Aceptar Cancelar

lpacheco

**

Usuario

Clave

Lisbeth C. Pacheco S.

Figura 5 Pantalla de Identificación

Después de verificar el acceso del usuario, se presentala pantalla inicial, figura 6, en la cual se presenta elmenú principal. Este le permita las siguientes acciones:Crear y editar o modificar una evaluación existente,agregar preguntas, ver los resultados de lasevaluaciones, así como acceder a los diferentesreportes, herramientas y ayuda.

70


1.1. La creación o edición de evaluaciones

El proceso de crear la evaluación involucra definir lossiguientes parámetros: Tipo de evaluación, forma degeneración de la evaluación, sí es automática: tópicoo tema de la evaluación, nivel de dificultad máximo delas preguntas, tipo de pregunta, cantidad de preguntasde la evaluación y configuración de la evaluación y dela corrección. La pantalla que permite definir todosestos parámetros se presenta en la figura 7.

preguntas», con lo que se mostrará la pantalla deselección de preguntas de la base de datos, desde laque es posible también llamar al módulo de creaciónde preguntas. La pantalla es similar a la anterior, sóloque donde dice preguntas aparecerán desplegadas laspreguntas de la base de datos. Existirá un botón«eliminar preguntas», el cual permitirá desmarcarpreguntas seleccionadas y un botón «modificarpreguntas», el cual creará una copia de la preguntacon los cambios realizados, que será la que se utilizaráy se agregará como una pregunta nueva en la basede datos. Las preguntas originales en la base de datosno se afectan por los cambios realizados aquí.

1.2. La creación de las preguntas

El proceso de crear las preguntas involucra desde laubicación de las mismas en una asignatura enparticular, hasta el nivel de dificultad de las mismas.Se establecieron tres etapas a través de las cuales sepuede realizar la creación completa de una pregunta.

En la primera etapa, figura 8, debe crearse elenunciado de la pregunta, ubicarla en un tema, definirel tipo de pregunta (verdadero y falso u opciónmúltiple), establecer el nivel de dificultad e indicar elestado de la misma, activa o en edición.

Software Evaluaciones Software Evaluaciones

��?

Evaluaciones Preguntas AyudaReportes Herramientas

Figura 6 Menú del Módulo de Profesores

Figura 7 Creación de la evaluación automática

Si la cantidad de preguntas en la base de datos esinsuficiente para crear la evaluación, se le preguntaráal usuario, sí desea corregir la cantidad o agregarnuevas preguntas accediendo al modulo de creaciónde preguntas.

Si la evaluación no se generara de manera automática,las preguntas se seleccionarán desde la base de datoso se crearán, para ello se pulsará el botón «agregar


��?

��

��

��

Selección de Estudiantes��eación de E�aluación


Figura 8 Creación del Enunciado de la Pregunta

Se puede escribir el texto de la pregunta directamenteo en caso de que desee que el enunciado tengacaracterísticas particulares (html), puede llamar a lapantalla que contiene el editor de texto y el formulariopara la inserción de elementos multimedia o imágenes,figura 9, diseñado para darle a los textos característicasparticulares, así como para permitir la búsqueda (parainserción), de elementos multimedia ó imágenes queconstituyan parte del enunciado de la pregunta.


��?

��

��

��

Opciones de Respuesta Rea�i�entaci�n�nunciado

Escriba texto

Escriba el texto del enunciado de la pregunta; las opciones de respuesta se especificarán después

Si selecciona quedará activada

� ontinua� � ance�a�

��


71

Figura 9 Editor de Texto e inserción deimágenes y elementos multimedia

Una vez obtenido el enunciado se deben crear lasopciones de respuesta correspondiente, para lo cualse le presentará una pantalla como la que se muestraen la figura 9, que permite escribir el textodirectamente o llamar al editor de texto.

La realimentación por cada opción, se define en unapantalla similar a la presentada en la figura 10.

En cada realimentación, si lo desea, además deelementos multimedia y texto enriquecido, puedecolocar hipervínculos a páginas con contenido que lepudiera servir al estudiante para comprender larespuesta.

1.3. La Selección de la Plantilla de Estudiantes

Una vez definidos todos los parámetros de unaevaluación, se debe seleccionar el grupo de estudiantesa los cuales se les aplicará la misma, en la pantallaque presenta en la figura 11.


��?

��

��

��


Editor de texto HTML

Insertar imagen

Insertar elemento multimedia

C��

C��


��?

��

��

��

Realimentación�n�ncia � ��ci�ne�� e�Re��e�ta

��ción

�� ontin�a� � ancela�

Escriba el texto de correspondiente a cada una las opciones de respuesta, si no necesita alguna déjela en blanco. Seleccione la respuesta correcta.

�e�t�� e�la��ción

��ción �e�t�� e�la��ción




Correcta

��

��

��

��

��


Figura 10 Pantalla para la creación de lasopciones de respuesta y selección de la

opción correcta

Figura 11 Pantalla de Selección de Estudiantesa los que se le aplicará la Evaluación

1.4. La Impresión de las Evaluaciones

Una vez definidos todos los parámetros de unaevaluación y generada la misma, se puede imprimirpara aplicar fuera del entorno o para revisión; sepuede escoger entre dos modalidades de impresión:

a) La evaluación sin respuestas, para su aplicación opublicación

b) La evaluación con respuestas, para su publicacióno revisión.

1.5. Los Reportes de los Resultados de lasEvaluaciones

Realizadas las evaluaciones, los resultados de lasmismas se almacenan en la base de datos, con estosse pueden generar reportes en formato html, quepodrán ser exportados a otros formatos, así como alModulo del Sistema de Notas que también se encuentraen desarrollo. Entre los reportes que se pueden emitirse encuentran:

a) Reporte de notas por evaluación

Mediante este reporte, figura 12, se podrá obtener unlistado de los estudiantes con sus notas por evaluación,el cual se realizará en formato Web (documento html),para su publicación o impresión.


��?

Evaluaciones Preguntas AyudaHerramientas

��

��

��

Creación de Evaluación �elección de E��udian�e�

1.- Asignatura 2.- Secciones

3.- Estudiantes

Seleccionar todos �es�arcar todos

�� re� �arcano� �edro �os�

�o��taci�n

�o��taci�n

�o��taci�n !"an�ada

#�

#�

#$

Seleccionar todas

�es�arcar todas

�� $�� %�� re� �iranda� ��nica !le&andra

�� %'� �rado �artine�� ar(a !le )andra

�# �� %'� �ac*eco Sierra� !i"in �!r+arita

�, ��%�� re� �arcano� �ar(a �os�

�% �$'��%%� -odr(+ �e� .rito� �ariol+a !ndre(na

�� %'� �rado �artine�� ar(a !le )andra

�# ��%'� �ac*eco Sierra� !i"in �!r+arita

72


Figura 12 Reporte de notas por evaluación

Este reporte referido a una única sesión de evaluación,consta de tres secciones:

La primera sección estará constituida por elencabezado que contiene la información acerca de laevaluación, incluye Nombre de la Asignatura, Sección,Nombre del Profesor, además Fecha, Nombre, Tipo yDuración de la Evaluación.

La segunda sección contiene la información de losestudiantes: Datos de identificación del estudianteNombre, número de la cédula de identidad y lacalificación. Además, cantidad de preguntas correctas,incorrectas y sin contestar, y tiempo que tardó enrealizar la evaluación.

La tercera sección consiste de un análisis estadísticode la evaluación, el cual es opcional y contiene:Porcentaje de aprobados, porcentaje de reprobados,porcentaje de estudiantes que no presentaron, notamáxima, nota mínima, nota promedio. Adicionalmente,para determinar la calidad de la evaluación: Porcentajede estudiantes que terminaron a tiempo, porcentajede estudiantes que terminaron antes de tiempo,cantidad de preguntas que no fueron contestadas porningún estudiante e identificación de las mismas.

b) Reporte de notas por grupo o sección

Este reporte es similar al anterior solo que por cadaestudiante aparecerían todas sus calificaciones, asícomo estadísticas básicas del grupo.

c) Reporte de desempeño del estudiante

Mediante este reporte, figura 13, se podrá observarpara cada estudiante todas las evaluacionespresentadas y sus correspondientes calificaciones parapoder observar su desempeño hasta el momento.

Figura 13 Reporte del desempeño porestudiante

El reporte constará de dos secciones:

La primera sección, llamada encabezado contiene lainformación de identificación del estudiante,incluyendo: Nombre y número de cédula de identidad,asignatura, sección y el nombre del profesor.

La segunda sección contiene la información de lasevaluaciones asignadas al estudiante; indicando paracada una, estadísticas básicas entre las que se tienen:cantidad de preguntas correctas, incorrectas y sincontestar; fecha, hora de inicio y finalización de laevaluación, tiempo que tardó en realizar la evaluacióny calificación.

Además, le permitirá tener acceso a través delhipervínculo, a las evaluaciones del estudiante de quese le mostrará en una página aparte, figura 14.

Asignatura: Computación IProfesor: Carlos BritoSección: 15Fecha: 15 de Julio de 2004Duración: 30 minutos

Universidad de CaraboboFacultad de IngenieríaDepartamento de ComputaciónCátedra de Computación I

Página 1

QUIZ 1Evaluación Sumativa

Cédula ��lld�� a � � ��

14 �1�� 1 14 �� 14 � �

14 �1�� !� �� 4��

1�� " �� #�� $ � � ��

1� �� %�&� �� #� � � �� !#�'� &$�4 �� 4��

1"�� (� &� � �'�� ) � � �* $�� 14 �� 14 4 �

14 �� +#,�� - �# �* �#� .�� 1� �� 41� 4 �

"

�

�

EstadísticasPorcentaje de Aprobados: 75 %Porcentaje de Reprobados: 15 %Porcentaje que no presentó: 10 %

Estudiante: Pedro LópezCédula: 7.586.985Asignatura: Computación ISección: 15Profesor: Carlos Brito

Universidad de CaraboboFacultad de IngenieríaDepartamento de ComputaciónCátedra de Computación I

Página 1

Reporte de Desempeño

Tipo �� i�� o� � Ti� �po

Formativa ar�ar� � �o�t�ar� �� 14 � �

��mativa ��i� � � i�ta� ��

��mativa ��i� � ��ri� � ��

� i� � �i� �i��

1��4��1�

1�� 4��

1��4��1�

� i� ��i� �i��

1��4��4�

� ��4��4�

�1��4��4�

Figura 14 Reporte del desempeño delestudiante en una evaluación

Contiene una sección de encabezado con los datosbásicos del estudiante y la evaluación; y una seccióncon todas las preguntas del examen, en la que semostrará por cada pregunta:

• El enunciado de la misma, junto al cual semostrará una imagen que indicará de maneragráfica, si la pregunta fue contestada, si escorrecta o incorrecta. Además, permitirá a través

Reporte de DesempeñoDetalles de la Evaluación


Evaluación: Quiz pascal 1Tipo: SumativaDuración: 30 minutos

Pregunta

Para darle formato a la variable POR, de tipo real, para la cual se desean imprimir 7 dígitos enteros y tres dígitos decimales, la instrucción apropiada es:

Respuesta Correcta : Writeln( ´ Porcentaje: ‘, por:11:3);

Respuesta Seleccionada : Writeln( ´ Porcentaje: ‘, por:11:3);

Pregunta �

Para que en un programa se agregue información en un archivo de datos, se usa la instrucción:

Respuesta Correcta: Append

Respuesta Seleccionada : Reset

Pregunta �

Si se tiene la siguiente instrucción: B:= A* 8 DIV 5 + 5 MOD 3 * 10

Para A=4, que valor toma B.


Respuesta Seleccionada :

73

de un hipervínculo, acceder en una ventanaaparte, al contenido completo de la pregunta:Enunciado, opciones y respuesta correcta.

• La respuesta correcta

• La respuesta seleccionada por el estudiante.

d) Reporte de estadísticas por grupo o sección

Mediante este reporte se podrán observar estadísticasbásicas del grupo: Porcentaje de aprobados,porcentaje de reprobados, porcentaje de estudiantesque no presentaron, nota máxima, nota mínima, notapromedio.

e) Reporte de estadísticas por evaluación

Mediante este reporte se podrán observar estadísticasbásicas: Porcentaje de aprobados, porcentaje dereprobados, porcentaje de estudiantes que nopresentaron, nota máxima, nota mínima, notapromedio. Adicionalmente para determinar la calidadde la evaluación: Porcentaje de estudiantes queterminaron a tiempo, porcentaje de estudiantes queterminaron antes de tiempo, cantidad de preguntasque no fueron contestadas por ningún estudiante eidentificación de las mismas.

f) Reporte de estadísticas por pregunta

Mediante este reporte se podrán establecer laspreguntas que requieren ser revisadas, eliminadas omodificadas. Para ello entre las estadísticas apresentar se encuentran; el porcentaje de aciertos dela respuesta correcta, así como también los índicesde frecuencia de las opciones dentro de las preguntas,a fin de determinar las opciones que no están haciendosu trabajo de distractor, cantidad de veces que ha sidoutilizada; porcentaje de estudiantes que la han dejadosin contestar.

El análisis de éstas estadísticas permitirá medir ladificultad y la calidad de las preguntas, así comoestablecer con base en los resultados, qué tantopermite medir cada pregunta el conocimiento adquiridopor los estudiantes.

Este reporte mostrará para cada pregunta: Elenunciado de la misma, indicando el universo depersonas que han tenido acceso a la pregunta, cantidadde respuestas correctas, incorrectas y sin contestar;y para cada opción de respuesta, de manera gráfica ynumérica se presentará la cantidad de personas quehan seleccionado esa opción y qué porcentajerepresentan.

Podrá obtenerse este reporte por evaluación o en casode revisión de la base de datos, por tema, porasignatura o de toda la base de datos.

2. Modulo de Administración

En el caso de que el profesor que acceda al sistemasea el administrador, accederá al módulo demantenimiento que le permitirá agregar, actualizardatos, activar o desactivar usuarios, además derealizar cambios en las demás tablas y campos de labase de datos. Se consideran administradores delsistema los Jefes de Cátedra.

3. Modulo del Estudiante

El módulo del estudiante se diseñó con la finalidad deser aplicado en formato Web. La primera acción quedeberá realizar el estudiante es acceder al sistema através de cualquier navegador de Internet, una vezrealizada, se pedirá la autenticación en el sistema,por lo que deberá suministrar la información requeridaen la pantalla que se muestra en la figura 15 y pulsarel botón «entrar».

Figura 15 Pantalla de Identificación del Usuario

Una vez verificada la seguridad y autenticado el usuario,el sistema busca las evaluaciones definidas para eseusuario y pasa a la pantalla de evaluaciones existentes,como se muestra en la figura 16, desde donde podrátener acceso a las evaluaciones activas para contestary a las inactivas para ver el contenido de las mismas,así como para verificar las respuestas y la calificaciónobtenida.

Figura 16 Evaluaciones a las que puedeacceder el Estudiante

74


Para acceder a cualquiera de las evaluaciones Paraacceder a cualquiera de las evaluaciones mostradasel usuario debe hacer clic sobre el nombre de laevaluación, la cual, una vez seleccionada, le presentaráun cuadro de diálogo indicándole si realmente deseacomenzar la evaluación, si responde que sí, seconsiderará iniciada y le comenzará a mostrar cadauna de las preguntas que constituyen el examen.

3.1. La Sesión de Evaluación Diagnóstica oSumativa

La secuencia de pasos durante una sesión deevaluación sumativa, son los siguientes:

1. Una vez seleccionada la evaluación, se actualizala base de datos para indicar que el participanteha empezado la evaluación.

2. Se construye la primera pregunta de la evaluacióny se envía al participante.

3. Cuando el participante contesta la pregunta, seactualiza la base de datos con la respuesta dada.

4. Si el estudiante selecciona otra pregunta de laevaluación, ésta se construye y se muestra. Elproceso se repite entonces a partir del paso 3.

5. Una vez que haya contestado a todas las preguntaspresentadas el participante debe hacer clic en elbotón Calificar

6. Finalizada la evaluación, se actualiza la base dedatos con las respuestas y se guarda además eltiempo de finalización. Se envía una página finalal participante, incluyendo cualquierrealimentación programada, así como lainformación apropiada del puntaje obtenido.

El estudiante en una evaluación sumativa puede entodo caso, dejar preguntas sin contestar y marcarpreguntas para revisión, a las que podrá retornar unavez que seleccione nuevamente dicha pregunta. Unavez finalizada la evaluación, bien sea porque se terminóel tiempo de la misma o el estudiante envió susrespuestas, pasará al estado de inactiva. La pantallatípica de presentación de las preguntas se presentaen la figura 17, en la que se muestran tres seccionesclaramente diferenciadas, la primera contiene laidentificación de la evaluación del usuario, de losbotones de acción y del tiempo restante.

En la segunda sección, la más amplia, aparece lapregunta con sus opciones, para contestar sólo debehacer clic sobre el botón de opción de la respuestaque considere correcta. En la tercera sección aparecenlos números de las preguntas que constituyen elexamen, en la cual se puede observar las preguntasactivas, inactivas y contestadas.

Figura 17 Pantalla de las preguntas de laEvaluación

Cuando el estudiante desee puede marcar unapregunta para la revisión posterior de la misma, solotiene que hacer clic sobre el botón «marcar» y en esemomento aparecerá una marca en el listado depreguntas de la derecha. La pregunta estará así hastaque el estudiante la desmarque.

Finalizada la evaluación, una vez que el estudiantepulsa el botón «calificar», se le envía una página final,que incluye la información del estudiante, losenunciados de las preguntas del examen, la respuestadada, así como cualquier realimentación programaday el puntaje obtenido, ver figura 18. Observe que allado del enunciado de cada pregunta aparece un botónéste permite ver el contenido completo de la pregunta,en una ventana aparte.

Preguntas

4

�

�

�

�

�

� �

a) Writeln( ´ Porcentaje: ‘, por:10:3);b) Writeln( ´ Porcentaje: ‘, por:7:3);

Pregunta


c) Writeln( ´ Porcentaje: ‘, por:11:3);d) Writeln( ´ Porcentaje: ‘, por:10:7);

Quiz 1Estudiante: Pedro LópezAsignatura: Computación ISección: 15

Tiempo Restante

00:45

�

Anterior Siguiente Calificar InformaciónMarcar

Figura 18 Pantalla del reporte finalde la evaluación.

Reporte FinalCalificación: 15 de 20 ptos.


Evaluación: Quiz pascal 1Tipo: SumativaDuración: 30 minutos

Pregunta



Respuesta Seleccionada : Writeln( ´ Porcentaje: ‘, por:11:3);

Pregunta �Para que en un programa se agregue información en un archivo de datos, se usa la instrucción:

Respuesta Correcta : Append

Respuesta Seleccionada : Reset

Pregunta �

Si se tiene la siguiente instrucción: B:= A* 8 DIV 5 + 5 MOD 3 * 10

Para A=4, que valor toma B.


Respuesta Seleccionada :

Correcto!!!! Un formato 11:3, permite lo siguiente

_ _ _ _ _ _ _ . _ _ _ Enteros Decimales

Realimentación

Incorrecto!!!! La instrucción reset abre un archivo para leer la información contenida en el, dicho archivo debe existir, en caso contrario se produce el error de ejecución # 2

Realimentación

75

3.2. La Sesión de Evaluación Formativa

La secuencia de pasos durante una sesión deevaluación formativa son los siguientes:

1. Una selección da la evaluación, se actualiza la basede datos para indicar que el participante haempezado la evaluación.

2. Se construye la primera pregunta de la evaluacióny se envía al participante.

3. Cuando el participante contesta, se actualiza labase de datos con la respuesta dada.

4. Si existe una realimentación definida, esta aparecedespués de cada pregunta. El servidor espera queel participante haga clic en Continuar para seguiradelante.

5. Si hay otra pregunta, ésta se construye y se mandaal participante. El proceso se repite entonces apartir del paso 3.

6. La base de datos se actualiza para indicar que lasesión ha terminado, y se envía una página final,que incluye la información del estudiante, losenunciados de las preguntas del examen, larespuesta dada, así como cualquier realimentaciónprogramada y el puntaje obtenido, igual alpresentado en la figura 18.

La base de datos se actualiza cada vez que elestudiante contesta una pregunta, a la cual sólo puederegresar para verla.

CONCLUSIONES

El diseño de un software con intencionalidad educativa,implica necesariamente conocer, para cada etapainvolucrada, la mejor manera de efectuar el procesodeseado, para que el producto generado sea deprovecho a todos los actores del proceso educativo.

En el desarrollo de la investigación, se establecieronlas etapas esenciales para la creación de evaluacioneselectrónicas de tipo selección de respuestas, que vandesde el diseño de la misma hasta la evaluación delos resultados de su aplicación, se espera la conclusióndel software y la implantación del mismo para evaluarsus bondades; así como sus deficiencias y paracorregirlas antes de la implantación definitiva.

Todos los elementos presentados constituyen las basespara la elaboración del software, que proporcionarábeneficios a todos los integrantes del procesoeducativo, profesores y estudiantes. Al estudiante, laevaluación frecuente y periódica le proporcionará unrefuerzo de los conceptos y aumentará su motivación,

además, le permitirá identificar lo que es importanteaprender, lo que han aprendido bien y a qué necesitadedicar más tiempo[7]; a los profesores, por su parte,les permitirá diseñar evaluaciones para cada tema uobjetivo sin preocuparse de tener que encontrar eltiempo y los recursos para analizar los resultados, yaque el software ofrecerá informes automáticos. Sinembargo, se requerirá de múltiples evaluaciones paraconseguir un producto totalmente refinado. Se esperacontinuar la investigación y ampliar el tipo de preguntasque se puedan diseñar.

REFERENCIAS BIBLIOGRÁFICAS

[1] Lavié Martínez, J. M. (1999). La Evaluación delAprendizaje a Través de Internet. Documentoen línea consultado en Junio 2003. Disponibleen: http://tecnologiaedu.us.es/edutec-paginas/92.html

[2] Gayo, Daniel y Otros (2002). La autoevaluacióncomo método de aprendizaje. VIII Jornadassobre la enseñanza Universitaria de laInformática. JENUI 2002. Cáceres, España.Documento en línea consultado en Diciembre2002. Disponible en: http://di002.edv.uniovi.es/~dani/publications/P012LaGa.PDF

[3] Perurena C., Lilliam (2003). Sistema deherramientas para la construcción de cursosmultimedia. Píxel Bit Revista de Medios yEducación I.S.S.N: 1133-8482. Universidad deSevilla, España. Numero 21.

[4] Ossandón N. Yanko y Barrientos N. Victor(2003).Evaluación De Los Aprendizajes EnIngeniería. Revista Facultad De Ingeniería, U.T.A.(CHILE), VOL. 11 N°1, 2003, pp. 57-64.

[5] Sobrino M., Ángel & Naval D., Concepción (1999).Una nueva herramienta para la evaluación alservicio del profesorado universitario. RevistaElectrónica Interuniversitaria de Formación delProfesorado, 2(1). Documento en líneaconsultado en Mayo 2003. Disponible en: http://www.uva.es/aufop/publica/revelfop/99-v2n1.htm.

[6] Thomas, Pete G. (2003). Examinations inComputing Over the Internet. SIGCSE Bulletin.Volumen 35. Number 2. 2003, June: 22-24

[7] Carrasco, José B. (2000). Técnicas y Recursospara el Desarrollo de las Clases. Cuarta Edición.Ediciones Rialp, S.A. Madrid.

Fecha de recepción: 16 de abril de 2007Fecha de aceptación: 13 de agosto de 2007

76

propuesta para el diseÑo de un sistema...

Documents