elaboraciÓn de pruebas segÚn indicadores de mediciÓn de la prueba de comprensiÓn lectora ece

Primaria 2015

ELABORACIÓN DE PRUEBAS SEGÚN INDICADORES DE MEDICIÓN DE LA PRUEBA DE COMPRENSIÓN

LECTORA - ECE

Capacitadora: Rosa Amalia Salcedo Lobatón

Rosa Rodríguez Cháves

COLECCIÓN 2015 Ingresa a:

WWW.COREFO.COM

CAPACITACIÓN DE VERANO 2015 LIMA

2

Contactos Corefo: 1. Prof. Jacobo Miranda C.

Subgerente de Capacitaciones y Proyectos especiales Correo electrónico: [email protected] Cel: 946043976

2. Prof. José G. Landeo P. Supervisor de Capacitaciones Correo electrónico: [email protected] Cel.: 961593980

3. Prof. Willy Silva A. Coordinador de Capacitaciones y Soporte técnico Correo electrónico: [email protected] Cel.: 943216042


3

ELABORACIÓN DE PRUEBAS SEGÚN INDICADORES DE MEDICIÓN DE LA PRUEBA DE

COMPRENSIÓN LECTORA- ECE

“La evaluación no sólo evalúa los resultados, sino que condiciona lo

que se enseña, y cómo, y muy especialmente lo que aprenden los

estudiantes y cómo”.

Neus San Martí

¿Estás de acuerdo con lo expresado en la frase anterior?

¿Por qué se señala en esta que la evaluación condiciona lo que se enseña, y cómo se enseña? ¿A que hace referencia la frase cuando señala que la evaluación condiciona lo que los estudiantes aprenden y

cómo lo hacen? 1. LA EVALUACIÓN 1.1. Definición Independientemente del campo en el que se aplique, el término evaluación se vincula estrechamente con el hecho de juzgar o determinar el valor de algo o de alguien: características de las personas, procesos, cosas, fenómenos, sistemas, ideas, situaciones etc. Cotidianamente evaluamos una situación social o política, un programa de televisión, las características de dos productos antes de decidir cuál de ellos comprar. Estas son evaluaciones informales, generalmente basadas en perspectivas parciales de la realidad, en sentimientos, intereses o gustos personales muy diferente a la evaluación formal, la cual implica formular juicios de valor de manera consciente, siguiendo un procedimiento formal y a la luz de criterios válidos y definidos. Llevada al contexto educativo, el término “evaluación” es definido como:

▪ “Un enjuiciamiento sistemático sobre el valor o mérito de un objeto, para tomar decisiones de mejora”. 1

▪ “Una actividad o proceso sistemático de identificación, recogida o tratamiento de datos sobre elementos o hechos educativos, con el objetivo de valorarlos primero y, sobre dicha valoración, tomar decisiones”.2

▪ “Proceso sistemático, diseñado intencional y técnicamente, de recogida de información, que ha de ser valorada mediante la aplicación de criterios y referencias como base para la posterior toma de decisiones de mejora, tanto del personal como del propio programa”.3

▪ "Un proceso sistemático continuo e integral destinado a determinar hasta qué punto fueron logrados los objetivos educacionales previamente determinados".4

La evaluación educativa, por lo tanto, se caracteriza por:

▪ Ser un proceso, que implica varios pasos o fases, planificación, recojo de información, el tratamiento de la misma , y la valoración de la información obtenida en función de criterios y referencias

1 Joint Committee- Desde los test hasta la evaluación educativa actual- 1988 2 Juan Manuel García Ramos, Investigación y Evaluación y Efectos 1989

3 Ramón Pérez Juste. Evaluación de Programas Educativos 2006

4 Manuel Fermín Sanchez. -Evaluación Formativa

http://www.monografias.com/trabajos16/objetivos-educacion/objetivos-educacion.shtml


4

▪ Ser un proceso sistemático, es decir que responde a normas y procedimientos es minuciosamente planificados y desarrollados, a una finalidad y objetos de evaluación claramente definidos.

▪ Ser criterial, es decir que se orienta por referentes o criterios establecidos previamente.

En el caso de la evaluación de los aprendizajes esta puede definirse como “un proceso sistemático y continuo mediante el cual se determina el grado en que se están logrando los objetivos de aprendizaje”. El objetivo de la evaluación del aprendizaje, es valorar el aprendizaje en su proceso y resultados. 1.2. Fases del proceso de evaluación En la sección anterior se señaló que la evaluación es un proceso que comprende varias fases o etapas. Dichas etapas son: La Planificación o diseño de la evaluación, el Recojo y Selección de la información, la Interpretación y valoración de la información.

Teniendo en cuenta su finalidad, en el presente documento abordaremos únicamente la primera de

estas etapas. La etapa de Planificación o Diseño de la Evaluación.

Planificación o Diseño de la Evaluación

La Planificación implica esencialmente dar respuesta al ¿para qué?, ¿qué? y ¿cómo se evaluará?

Así, en esta etapa se definen los siguientes componentes del proceso de evaluación:

el objeto de evaluación,

el propósito de la evaluación,

y los instrumentos mediante los cuales se obtendrá la información.

Planificación Recojo y selección de información

Interpretación y

valoración de la

información

FASES DEL PROCESO DE EVALUACIÓN


5

Definición del objeto de evaluación

Definir el objeto que se evaluará es la primera decisión importante que se debe tomar al planificar

una evaluación.

En el caso de la evaluación de los aprendizajes es en este momento que debe definirse el área

curricular, el dominio y la capacidad y/o capacidades de dicho dominio que se evaluarán. Sin

embargo, una capacidad puede ser bastante imprecisa para definir cuál es nuestro objeto de

evaluación.

Por ejemplo:

En el área de Comunicación Integral, en el dominio de Expresión Oral, definir que la capacidad

que se va a evaluar es “Expresa ideas, emociones y experiencias con claridad, empleando las

convenciones del lenguaje oral en cada contexto”, no permite tener suficiente claridad

respecto a si las actividades de evaluación deben recoger información referida a: El uso

adecuado de conectores, al ordenamiento lógico de las ideas que expresa el niño o referidas al

uso de vocabulario apropiado.

Al definir nuestro objeto de evaluación es necesario precisar no sólo el área curricular, el dominio y la capacidad en la que centraremos nuestra atención, sino también y fundamentalmente los indicadores de logro que serán evaluados en el marco de la capacidad seleccionada. Definición del propósito de la evaluación Definir el propósito de una evaluación implica responder a la pregunta ¿para qué voy a evaluar? Cómo se señaló anteriormente, el o los objetos de la Evaluación Educativa pueden ser muy diversos. Y en el caso de un determinado objeto de evaluación como pueden ser los docentes , los propósitos o finalidades pueden muy diversos. Así, las evaluaciones que tienen como objeto “el desempeño docente” tienen como finalidad:

Orientar al docente para realizar mejor su trabajo;

asignar al docente una calificación, con el fin de promover o no su ascenso.

En otros casos los docentes también son evaluados para acceder a una plaza. Al igual que con el objeto de evaluación “desempeño docente”, las evaluaciones que tienen por objeto los “aprendizajes de los estudiantes” pueden tener diversas finalidades, por ejemplo:

Conocer qué han aprendido y cuáles son sus dificultades, de modo de ayudarlos en su proceso de aprendizaje

Determinar si son promovidos de grado o curso. Esta decisión puede derivarse tanto de la acumulación de información sobre lo que el alumno aprendió a lo largo del año, como de una prueba o examen final.


6

En muchos países los estudiantes también deben presentarse a evaluaciones con el fin de acceder a otro nivel del sistema educativo.

En los últimos años en muchos países se aplican pruebas de logro educativo a los alumnos con la finalidad de conocer en qué medida están siendo logrados los conocimientos y competencias que se espera que los estudiantes hayan adquirido cuando finalizan un ciclo o nivel del sistema educativo.

La finalidad de cualquier proceso de evaluación debe ser, comprender mejor la realidad con la

que se está trabajando y contribuir a mejorarla, como las evaluaciones de los alumnos realizadas

por su profesor con el fin de comprender el proceso de aprendizaje y apoyar a cada alumno en

función de sus dificultades, y las evaluaciones nacionales e internacionales de logros educativos

cuyo propósito es contribuir a identificar las principales debilidades de los sistemas educativos y

orientar la reflexión y formulación de las políticas educativas.

Es necesario destacar que la definición de los propósitos es de importancia decisiva para el

resto del diseño de una evaluación.

Por ejemplo:

“Si el propósito de una evaluación es calificar a los docentes, y esta calificación tendrá consecuencias para sus carreras funcionales, se requiere una gran confiabilidad y precisión en los puntajes que se les asignen, porque diferencias de puntajes muy pequeñas entre los individuos pueden determinar que unos accedan a un cargo y otros no. En cambio, si la evaluación tiene como finalidad principal orientar a los docentes para mejorar su trabajo como forma de desarrollo profesional, la asignación de puntajes precisos pasa a tener importancia secundaria, dado que no está en juego la carrera de los individuos”5.

La selección y definición de instrumentos

Una práctica bastante generalizada cuando se habla de una “evaluación” es que la primera tarea

que se emprende es la elaboración de los instrumentos. Sin embargo cómo se puede concluir de

lo expuesto en la sección anterior, los instrumentos se diseñan sólo después de haber definido el

objeto y la finalidad de la evaluación.

Los instrumentos de evaluación, son todos aquellos dispositivos diseñados para el recojo

sistemático de la información relevante.

5 PREAL- Para comprender las Evaluaciones Educativas- Ficha N 2


7

Los instrumentos que se utilizan para la recolección de información en las evaluaciones educativas

pueden ser muy diversos. No obstante cabe señalar que una dificultad que presentan muchos de los

instrumentos diseñados por los docentes para evaluar los aprendizajes de sus estudiantes, es la falta

de coherencia entre los referentes o indicadores de evaluación y las actividades o ítems propuestos

para evaluarlos, lo que afecta la validez de la información obtenida .

Por ejemplo:

Un error bastante generalizado es el uso de ítems de tipo opción múltiple para evaluar indicadores como “Opina sobre las acciones de los personajes y los hechos en textos de estructura simple, con o sin imágenes”6, dándole al estudiante respuestas de opinión ya construidas para evaluar un indicador que busca que el estudiante dé su propia opinión crítica y libre frente a una situación, o la acción de un personaje.

2. LA EVALUACIÓN CENSAL DE ESTUDIANTES - ECE La Evaluación Censal de Estudiantes (ECE) consiste en la aplicación de pruebas estandarizadas a todos los estudiantes de segundo grado de primaria del Perú, para medir cuánto han aprendido en Matemática y en Comprensión lectora. Desde el año 2007, el Ministerio de Educación realiza esta evaluación al final de cada año. El propósito de la ECE es mejorar los aprendizajes de los estudiantes de 5 a 7 años. Los resultados de esta evaluación deben ser monitoreados anualmente por el Ministerio de Educación para poder evaluar la eficacia de las intervenciones que se están realizando. Los resultados de la ECE son devueltos a todos los actores involucrados en la tarea educativa con la finalidad que estos puedan tomar decisiones de mejora desde el nivel de responsabilidad que les corresponde 2.1. Qué evalúa la ECE El objeto de evaluación de la ECE son los aprendizajes de los niños de 5 a 7 años referidos a la comprensión lectora, a la apropiación de la noción de número y sus operaciones, y a su habilidad para resolver problemas en este campo. En relación al área de Comunicación y específicamente al dominio de Comprensión lectora, la ECE evalúa las capacidades de los estudiantes consideradas más relevantes. La selección de dichas capacidades se realiza a partir de lo que se propone en el Diseño Curricular Nacional7

6 Indicador para primer grado, área Comunicación, dominio: Comprensión de textos escritos, capacidad: 6. Reflexiona

sobre laforma, contenido y contexto del texto.- Rutas del Aprendizaje- MINEDU 2014

7 El documento revisado Marco de Trabajo de la ECE ha estado vigente para la prueba 2014. En este se establece que las capacidades

evaluadas en esta prueba son extraídas del DCN.


8

CAPACIDADES LECTORAS INDICADORES DE LOGRO

LEE ORACIONES Establece correspondencia entre una oración y un dibujo.

LOCALIZA INFORMACIÓN LITERAL Identifica datos explícitos. Reconoce sucesiones de hechos o

acciones.

INFIERE INFORMACIÓN Deduce relaciones de causa-efecto. Deduce el significado de palabras o

expresiones a partir del contexto. Deduce el tema central del texto. Deduce la idea principal de un párrafo del

texto. Deduce las cualidades o defectos de los

personajes de una narración. Deduce la enseñanza del texto. Deduce el propósito del texto.

Fuente: Marco de Trabajo-Evaluación Censal de Estudiantes-UMC-MINEDU

Estas capacidades son evaluadas a través de los siguientes tipos de textos: A continuación

se describe cada uno de los indicadores de logro que evalúa la ECE.

INDICADOR DESCRIPCIÓN

Establece correspondencia

entre una oración y un

dibujo.

Consiste en leer una oración, interpretarla y asociarla con su dibujo.

Identifica datos explícitos. Consiste en identificar información que está presente de manera explícita en los textos.

Reconoce sucesiones de

hechos o acciones.

El estudiante identifica la secuencia en que ocurren los hechos o acciones explícitas del texto, en el caso de los textos narrativos, y secuencias de procedimientos, en el caso de textos instructivos.

Deduce relaciones de

causa-efecto

Consiste en deducir una relación causal entre dos afirmaciones explícitas del texto, descubriendo que una de ellas es causa o consecuencia de la otra.

Deduce el significado de

palabras o expresiones a

partir del contexto

Consiste en descubrir, a partir de la información del texto, el significado de palabras o expresiones cuyo significado no es accesible a priori al lector.


9

Deduce el tema central del texto.

Consiste en inferir la información más importante y que sintetiza el contenido de todo el texto

Deduce la idea principal de un párrafo del texto.

Consiste en jerarquizar la información que se presenta en alguno de los párrafos de un texto y, a partir de ahí, inferir cuál es la idea más importante y que engloba a las demás.

Deduce las cualidades o defectos de los personajes de una narración.

Consiste en deducir algunas características principales de los personajes de una narración a partir de las pistas que el texto ofrece (acciones, diálogos, comentarios, etc.).

Deduce la enseñanza del texto.

Consiste en inferir el mensaje o la lección que busca transmitir el texto leído.

Deduce el propósito del

texto.

Consiste en inferir el propósito para el que fue escrito el texto (contar, describir, opinar, informar, etc.).

3. CÓMO ELABORAR PRUEBAS SEGÚN INDICADORES DE LA ECE De acuerdo con lo ya expuesto los instrumentos de evaluación deben diseñarse después de haber definido con precisión el para qué y el qué se va a evaluar, es decir después de definir la finalidad, el objeto, las capacidades e indicadores a ser evaluados. Las pruebas escitas constituyen uno de los diversos instrumentos mediante los cuales las evaluaciones de los aprendizajes recogen información relevante en relación a estos. La elaboración de una prueba implica una serie de pasos, cuyo objetivo fundamental es garantizar la validez y confiabilidad de la misma, dichos pasos son:

Selección de propósito y contenidos didácticos.

Definición de los resultados de aprendizaje a evaluar

Elaboración de la tabla de especificaciones.

Construcción de la prueba de evaluación. Para los fines del presente documento nos centraremos en desarrollar el tercer paso del proceso de elaboración de la una prueba: Elaboración de la tabla de Especificaciones. 3.1 Elaboración de la Tabla de Especificaciones Una tabla de especificaciones es una herramienta que permite planificar los instrumentos convenientes, brindando la posibilidad de comprobar su grado de validez, es decir, si realmente se ajustan a los propósitos y contenidos de aprendizaje. La tabla de especificaciones puede utilizarse en evaluaciones diagnósticas, formativas y sumativas; centrarse en contenidos de orden declarativo, procedimental y actitudinal; abarcar distintos niveles cognitivos (conocimiento, comprensión, aplicación, etc.), así como instrumentos tan diversos como las pruebas objetivas, las preguntas abiertas de respuesta corta y de ensayo. Las tablas de especificaciones pueden variar en cuanto a sus elementos. En el presente documento presentamos un modelo básico que comprende:


10

Las capacidades a evaluar.

Los indicadores de evaluación.

La descripción de cada uno de los indicadores, es decir la explicación del sentido cada indicador.

El tipo de ítem mediante el cual se recogerá la información referida a cada indicador.

El detalle, que es la formulación detallada del ítem.

Número y puntaje de cada ítem.


11

Modelo de tabla de especificaciones

Capacidad Indicador Descripción Contenido Items Puntaje

Tipo Detalle N°

Localiza

informaci

ón literal

Identifica

datos

explícitos.

Consiste en

identificar

información

que está

presente de

manera

explícita en

los textos.

Texto

descriptivo

Selección

única

Según el texto ¿dónde

crece el eucalipto?

a) sólo en climas secos.

b)en todo el mundo

c) sólo en climas fríos.

1 2


12

▪ Capacidades e indicadores de evaluación Los aprendizajes esperados están dados por las capacidades e indicadores de aprendizaje en el DCN, o fascículos de las Rutas del Aprendizaje, para cada grado y/o ciclo. A partir de los indicadores de aprendizaje se formulan los indicadores de evaluación. Los indicadores de evaluación de los aprendizajes son evidencias, señales, signos observables, que permiten determinar si el estudiante está logrando los aprendizajes.

Ejemplo

Capacidad Indicador Indicador de evaluación

Identifica información en

diversos tipos de textos

según el propósito.

Localiza información ubicada

entre los párrafos de

diversos tipos de textos de

estructura simple, con

imágenes y sin ellas.

Identifica el espacio

geográfico en el que se

desarrollan los hechos de un

texto narrativo sin imágenes

Los indicadores de evaluación deben contar con una acción, un contenido sobre el cual se desarrolla la acción y una condición o producto. Ejemplo:

▪ Tipos de Items Un ítem es una pregunta que en conjunto con otras conforman una prueba. En las pruebas escritas se utilizan dos clases de ítems: objetivos y de desarrollo. Los ítems objetivos pueden ser a su vez de diferente tipo:

Tipo Descripción

Selección única Consta de un enunciado que hace referencia a una situación y varias opciones de respuesta entre las cuales sólo una es correcta.

Respuesta corta o completamiento

Estos items brindan información a partir de la cual el estudiante responde en forma breve lo solicitado, en los espacios en blanco.

Correspondencia o apareamiento

Se presentan dos columnas paralelas de enunciados y respuestas cuyo contenido se relaciona entre sí.

Identificación Se presenta al estudiante diagramas, croquis, diagramas

Identifica el espacio geográfico en el que se desarrollan los hechos de un texto Acción contenido

narrativo sin imágenes condición


13

para que los estudiantes identifiquen las partes de acuerdo a lo solicitado.

Verdadero-falso Se presenta a base de una serie de cuestiones afirmativas en donde unas son falsas y otras verdaderas.

Ejemplos

▪ Item de Selección Única: ¿Qué quiere decir “Creo que te han estafado”?

- Creo que te han pagado. - Creo que te han engañado. - Creo que te han molestado.

▪ Item de apareamiento

Lee cuidadosamente las proposiciones siguientes y luego coloco en el paréntesis respectivo la

letra de la columna derecha que concuerde con la posición de la izquierda.

( ) es un rumiante a- el burro

( ) es un roedor b- el gato

( ) es un acuático c- el león

( ) es feroz d- el pez

( ) es un animal de carga e- el ratón

f- la vaca

g- el perro

▪ Item de completamiento

Completa los espacios en blanco con la información del texto:

El ratón de campo ……………………………asustado al oir los pasos del cocinero.

A su vez los ítems “de desarrollo” pueden ser también de diversos tipos:

Tipo Ejemplo

Respuesta restringida Es un tipo de ítem de de desarrollo en el cual se indica claramente al estudiante la respuesta esperada.

Respuesta abierta El estudiante debe organizar, sintetizar y expresar sus pensamientos a partir de un tema o una pregunta

▪ Determinación de puntajes para cada indicador Este proceso consiste en calcular cuánto puntaje tendrá cada indicador en función de la significatividad del aprendizaje para el logro de la capacidad

BIBLIOGRAFÍA

Ministerio de Educación (2006) Evaluación Censal de Estudiantes-Marco de Trabajo.

PREAL-Para comprender las evaluaciones educativas-Fichas 1,2, 3, 4, 5, 6, y 7.

Ministerio de Educación (2014). Rutas del aprendizaje “Comprensión de Textos iii Ciclo”. Lima.

MINEDU-Cómo mejorar la Comprensión Lectora de nuestros estudiantes- Informe para el docente. ECE 2013

Ministerio de Eduacación Pública. Guatemala- La Prueba Escrita 208.

Danilo Quiñones Reyna- Universidad Pedagógica “Pepito Tey- Cuba”- Evaluar para que aprendn más.

Nydia Elola, Lilia Toranzos -Evaluación Educativa Una Aproximación Conceptual-Buenos Aires 2008.

Juan Manuel García Ramos, Investigación y Evaluación -1989

Ramón Pérez Juste. Evaluación de Programas Educativos 2006

elaboraciÓn de pruebas segÚn indicadores de mediciÓn de la prueba de comprensiÓn lectora ece

Education