06/02/2021

1

J.F. Lukas

Concepto, componentes y fases de la evaluación

• Señala las palabras conceptos relacionados con la evaluación

• Diferencias entre medir, calificar y evaluar

• ¿Cómo definirías la evaluación educativa?

06/02/2021

2

Concepto, componentes y fases de la evaluación1. Concepto de evaluación2. Componentes

1. El Propósito2. El Objeto3. La Información4. El/La Evaluador/a5. El Momento6. La Valoración

3. Fases del proceso de evaluación4. Estándares de la evaluación educativa

1. Normas de utilidad2. Normas de viabilidad3. Normas de legitimidad4. Normas de precisión5. Normas de responsabilidad de la evaluación

Concepto (1)• "Proceso para determinar en qué medida los

objetivos educativos han sido alcanzados” (Tyler, 1950).

• "Etapa del proceso educacional que tiene por fin controlar de modo sistemático en qué medida se han logrado los resultados previstos en los objetivos que se hubieran especificado con antelación” (Lafourcade, 1977).

• “Reunión sistemática de evidencias a fin de determinar si en realidad se producen ciertos cambios en los alumnos y establecer el grado de cambio en cada estudiante“ (Bloom, 1975).

06/02/2021

3

Concepto (2)

• "Proceso de recopilación y utilización de la información para tomar decisiones” (Cronbach, 1963).

• “Proceso que consiste en obtener información sistemática y objetiva acerca de un fenómeno y en interpretar dicha información a fin de seleccionar entre distintas alternativas de elección” (Livas, 1980).

• "Proceso de obtener información y usarla para formar juicios que a su vez se utilizarán en la toma de decisiones“ (Tenbrik, 1984).

https://www.youtube.com/watch?v=olOjPUL6Wck&nohtml5=False

Concepto (3)

• "Es un proceso de recogida y análisis de información relevante con el fin de describir cualquier realidad educativa de manera que facilite la formulación de juicios sobre la adecuación a un patrón o criterio de calidad debatido previamente, como base para la toma de decisiones" (Mateo, 2000).

• "Proceso sistemático de obtener información relevante acerca de un objeto educativo, con el propósito de enjuiciar su adecuación a unos criterios, previamente establecidos, que pueden servir de base a unas posibles decisiones educativas“ (Rodríguez Lajo, 1987)

• "Investigación sistemática del valor o mérito de algún objeto“ (Scriven, 1967; Joint Commiittee, 1988).

06/02/2021

4

Concepto (4)

• "La evaluación es el proceso de identificación, recogida y análisis de información relevante, que podrá ser cuantitativa o cualitativa, de manera sistemática, rigurosa, planificada, dirigida, objetiva, creible, fiable, y válida basados en criterios y referencias prrestablecidos para determinar el valor y el mérito del objeto educativo en cuestión a fin de tomar decisiones que ayuden a optimizar el mencionado objeto” (Lukas y Santiago, 2009).

Estructura Básica del Concepto de Evaluación

Evaluación

Proceso Sistemático

1ª fase 2ª fase 3ª fase

Recogerinformación

Manifestarlas opiniones

Tomardecisiones

06/02/2021

5

Evolución del Concepto de Evaluación

Centrada en el alumno

Función de control

Puntual

Métodos cuantitativos

Monolítica

Informal

Estática

Aséptica

Aislada del proceso

Objetivo certificar

Trabajo técnico

Holística

Mejora

A lo largo del proceso

Metodologías diversas

Pluralista

Formal, sistemática

Dinámica

Valorativa

Integrada en el proceso

Mejora

Responsabilidad social

2.-Componentes de la evaluación

2.1.-Propósito

2.2.-Objeto

2.3.-Información

2.4.-Evaluador/a

2.5.-Momento

2.6.-Valoración

06/02/2021

6

2.1.-Los Propósitos

Evaluación sumativa– Su objetivo es certificar– Utilizable para valorar procesos que se consideran

finalizados o para valorar productos.– Ejemplos:

• Elección de libros de texto• Titulaciones• Oposiciones, selectividad, EGA, ...

Evaluación formativa– Su objetivo es mejorar– Utilizable para la evaluación de procesos– Se lleva a cabo paralelamente al proceso– Necesita de la evaluación continua– Características:

• Recopilación de datos de las dificultades de aprendizaje y de los avances de los alumnos

• Interpretación criterial: individual y no normativa

• Debe acarrear la adaptación de las actividades

Aplicación de la Evaluación FormativaProceso de enseñanza-aprendizaje

Observación de su desarrollo

El resultado que se está obteniendo está dentro de lo admisible

Si No

Seguir con el proceso tal y como se diseño

Hay alternativa para esa propuesta

Poner en marcha una nueva propuesta(global o parcial)

Es necesario cambiar la propuesta global o

parcial?

Seguir con la misma propuesta

Si Si

No

No

06/02/2021

7

Evaluación Formativa y Sumativa

Lo que se busca con los exámenes

Calificar, poner notas, firmar actas:

Evaluación Sumativa

Evaluación Formativa: evaluar a tiempo para

lograr:

Pero suceden otras cosas

El alumno se da cuenta de qué y cómo debía estudiar.

Se consolida lo aprendido. Algunos estudiantes llegan a

comprender aquello que nuncahabían entendido..

Se corrigen los errores. …

¿Demasiado tarde?

Diferencias entre la evaluación formativa y sumativa(Casanova, 1995):

Evaluación formativa Evaluación sumativa

Puede aplicarse a la evaluación de los procesos

Puede aplicarse a los productos finalizados

Hay que integrarlo en el mismo funcionamiento del proceso como si se tratase de un elemento más

Se sitúa al final del proceso, cuando éste se da por terminado

Su objetivo es la mejora del proceso evaluado

Su intención es concretar hasta qué punto los objetivos preestablecidos han sido logrados y valorar positiva o negativamente el producto evaluado.

Ayuda a tomar medidas a corto plazo Ayuda a tomar medidas a medio y largo plazo

06/02/2021

8

Nuevos significados de la Evaluación Formativa

• Retroalimentación (feedback) y proalimentación (feedforward). Evaluación orientada a la mejora

• Evaluación del desarrollo (Developmental evaluation). Patton, 2010. Evaluador proactivo.

• Evaluación formativa, Evaluación formativa de resumen y Evaluación sumativa. Alkin, 2011.

• “Es un proceso planificado en el que tanto los profesores como los alumnos usan la evidencia basada en la evaluación para realizar ajustes en lo que están haciendo” (Popham, 2013: 14)

1. Preguntas orales a toda la clase.

1. Buenas preguntas.

2. Para qué se hacen las preguntas.

3. Los estudiantes han de conocer el propósito de las preguntas.

2. Pruebas objetivas breves

1. Válidas para la autoevaluación.

2. Sirven para años venideros.

3. Mejor sin calificación.

Estrategias para llevar a cabo la Evaluación Formativa (1):

06/02/2021

9

3. Preguntas abiertas de respuesta muy breve.

1. Al comienzo, en medio o al final.

2. Resumir la idea principal, definir un concepto, dar una opinión, un problema,…

4. Prueba de un minuto (One Minute Paper)

5. Actividades de grupo pequeño en el aula.

1. Responder preguntas breves, realizar algún ejercicio, comentar los problemas de comprensión,…

Estrategias para llevar a cabo la Evaluación Formativa (2):

2.2.-Ámbitos de la Evaluación Educativa

• Evaluación de Programas

• Evaluación de Alumnos/as

• Evaluación de Centros

• Evaluación de Profesores/as

• Evaluación del Sistema Educativo

06/02/2021

10

2.3.-La Información

• Estrategias, técnicas y procedimientos para la recogida de información…

• Procedimientos para el análisis de la información

HETEROEVALUACIÓN

AUTOEVALUACIÓN

Evaluación mutua de un trabajo realizado entre varios

Una persona evalúa eltrabajo de otra persona

Cuando evaluador y evaluado son coincidentes

COEVALUACIÓN

2.4.-El/La Evaluador/a

EVALUACIÓN ENTRE IGUALES

Cuando un/a estudianteevalúa el trabajo de

otro/a estudiante

06/02/2021

11

2.4.-El/La Evaluador/a

• En el caso de la evaluación de centros y programas– Evaluación externa

– Evaluación interna y Autoevaluación

– Evaluación mixta

2.5.-El momento

• Evaluación inicial: se aplica al comienzo del proceso.

• Evaluación del proceso: evaluación continua del aprendizaje del alumno y de la enseñanza del profesor. Se lleva a cabo durante el proceso mediante la recogida y el análisis sistemático de la información y la toma de las decisiones pertinentes.

• Evaluación final: se trata de la evaluación que se realiza al finalizar algún proceso (ciclo, curso, unidad, …).

06/02/2021

12

INICIAL

Antes

PROCESUAL

Durante

FINAL

Después

Ubicar

Clasificar

Adecuar

Orientar

Acreditar

Promocionar

Contexto

Dificultades

Logros

Atención de la evaluación

Objetivos Estimación de los conocimientos de los/as alumnos/as Características del contexto Ideas previas de los/as alumnos/as Encontrar: necesidades, intereses, habilidades, …

Precisar los desajustes Proporcionar las ayudas pedagógicas adecuadas Revisar los comportamientos de los/as alumnos/as y de los/as profesores/as Autoevaluación Trabajo complementario Gestión de los errores

Resultados finales

Nivel general del éxito/fracaso

2.6.-La valoración

– Evaluación Nomotética

• Evaluación normativa: Se tiene en cuenta el nivel del grupo y en función de ese nivel se evalúa al resto.

• Evaluación criterial: Se utiliza un referente externo.

– Evaluación personalizada o idiográfica: Los referentes son las propias capacidades, cocnocimientos previos y actitudes.

06/02/2021

13

3.-Fases fundamentales del proceso de evaluación (Mateo, 2000)

Planificación

Desarrollo

Contrastación

Metaevaluación

Concretar el objetivo, la intención, la función, las decisiones potenciales, las audiencias, el objeto de evaluación, las fuentes de información, los procedimientos, los agentes y los tiempos

Recogida, codificación, registro, análisis, etc. de los datos. Es decir, tratamiento de la información

Análisis de los resultados, expresar los juicios (interpretación, clasificación y comparación), toma de decisiones, difusión de los resultados, negociar con las audiencias y seguimiento

Evaluación de la evaluación

4.-Estándares de la evaluación educativa

– Normas de utilidad

– Normas de viabilidad

– Normas de legitimidad

– Normas de precisión

– Normas de responsabilidad de la evaluación

06/02/2021

14

U: NORMAS DE UTILIDAD

• U1 Credibilidad del evaluador: Las evaluaciones deben ser realizadas por personas cualificadas para establecer y mantener la credibilidad en el contexto de evaluación.

• U2 Atención a las audiencias: Las evaluaciones deben prestar atención a las diferentes personas y grupos que participan o son investigados en el programa y afectados por la evaluación.

• U3 Fines negociados: Los fines de la evaluación deben ser identificados y continuamente negociados en base a las necesidades de las audiencias.

• U4 Valores explícitos: Las evaluaciones deben aclarar y especificar los valores individuales y culturales que sustentan los propósitos, los procesos y los juicios.

• U5 Información Relevante: La información de la evaluación debe servir a las necesidades identificadas y emergentes de las partes interesadas.

• U6 Procesos y productos significativos: Las evaluaciones deben construir las actividades, descripciones y juicios de manera que anime a los participantes a redescubrir, reinterpretar o revisar sus interpretaciones, conocimientos y comportamientos.

• U7 Oportuna y adecuada comunicación y presentación de los informes: Las evaluaciones deben atender a las necesidades de información continua de sus múltiples audiencias.

• U8 Preocupación por las consecuencias y la influencia: Las evaluaciones deben promover el uso responsable y adaptado, tomando medidas de protección ante las consecuencias negativas del posible uso indebido y/o alguna perdida no intencionada.

• F1 Gestión de Proyectos: Las evaluaciones deben utilizar estrategias efectivas de gestión de proyectos.

• F2 Procedimientos prácticos: Los procedimientos de evaluación deben ser prácticos y sensibles a la forma en que funciona el programa.

• F3 Viabilidad contextual: Las evaluaciones deben reconocer, controlar y equilibrar los intereses culturales y políticos y las necesidades de los individuos y de los grupos.

• F4 Uso de Recursos: Las evaluaciones deben utilizar los recursos de manera eficaz y eficiente.

F: NORMAS DE VIABILIDAD

06/02/2021

15

• P1 Orientación de confianza e integradora: Las evaluaciones deben responder a los interesados y sus comunidades.

• P2 Acuerdos formales: Los acuerdos de evaluación deben ser negociados para hacer explícitas las obligaciones y tener en cuenta las necesidades, expectativas y contextos culturales de los clientes y otros grupos de interesados.

• P3 Derechos Humanos y Respeto: Las evaluaciones deben ser diseñadas y realizadas para proteger los derechos humanos y legales y mantener la dignidad de los participantes y de las audiencias (los interesados).

• P4 Claridad y Equidad: Las evaluaciones deben ser comprensibles y justas para atender las necesidades y fines de los interesados.

• P5 Transparencia y Divulgación: Las evaluaciones deben facilitar una descripción completa de los objetivos, las limitaciones y las conclusiones a todos los interesados a menos que el hacerlo violara las obligaciones legales.

• P6 Conflictos de Intereses: Las evaluaciones deben abierta y honestamente identificar y abordar los conflictos de intereses reales o percibidos que puedan comprometer la evaluación.

• P7 Responsabilidad Fiscal: Las evaluaciones deben calcular todos los recursos asignados y cumplir con los procedimientos y procesos fiscales.

P NORMAS DE LEGITIMIDAD

• A1 Conclusiones y decisiones justificadas: Las conclusiones y decisiones de la evaluación deben ser justificadas explícitamente en las culturas y contextos en los que tienen consecuencias.

• A2 Información válida: La información de la evaluación debe responder a los fines previstos y ser la base de interpretaciones válidas.

• A3 información fiable: Los procedimientos de evaluación deben proporcionar información lo suficientemente confiable y consistente para los usos previstos.

• A4 Descripciones explícitas del programa y del contexto: Las evaluaciones deben documentar los programas y sus contextos con el detalle y amplitud adecuados a los propósitos de evaluación.

• A5 Gestión de la Información: Las evaluaciones deben emplear métodos sistemáticos de recogida, revisión, verificación y almacenamiento de la información.

• A6 Diseños y análisis adecuados: Las evaluaciones deben emplear diseños y análisis técnicamente adecuados y que sean apropiados para los fines de la evaluación.

• A7 Razonamiento explícito de la evaluación: El razonamiento de la evaluación que desde la información recogida y su análisis conduce a los resultados, las interpretaciones, las conclusiones y los juicios debe ser claramente y completamente documentado.

• A8 Comunicación y presentación de los informes: Las comunicaciones de la evaluación deben tener la perspectiva adecuada y protegerse contra los conceptos erróneos, los prejuicios, las distorsiones y los errores.

A NORMAS DE PRECISIÓN

06/02/2021

16

• E1 Documentación de la evaluación: Las evaluaciones deberán documentar plenamente sus propósitos negociados y los diseños, procedimientos, datos y resultados aplicados.

• E2 Metaevaluación interna: Los evaluadores deben utilizar estas y otras normas aplicables para rendir cuentas del diseño, los procedimientos empleados, la información recopilada y los resultados obtenidos de la evaluación.

• E3 Metaevaluación externa: Los patrocinadores, los clientes, los evaluadores y otras partes interesadas en la evaluación del programa deberían alentar la realización de metaevaluaciones externas usando estas y otras normas aplicables.

E NORMAS DE RESPONSABILIDAD DE LA EVALUACIÓN