cuestionarios de contexto
Post on 21-Dec-2014
16.632 Views
Preview:
DESCRIPTION
TRANSCRIPT
Lucia Monroy CazorlaDirectora general Adjunta Técnica y de Investigación
Los cuestionarios de contexto: una herramienta medular para investigación
Septiembre, 2008
1. Las pruebas de logro educativo
• Pruebas que se aplican en México
• Usos
2. Los cuestionarios de contexto
• ¿Qué son?
• ¿Para que sirven?
• ¿Cómo se diseñan?
3. Estructura de los cuestionarios de contexto del Ceneval
4. Líneas de investigación
Contenido
9
1.- Las pruebas a gran escala
Las pruebas se distinguen porque están diseñadas para dar cumplimiento a diferentes
propósitos
PISA
EXANI
EGEL
ENLACE
EXCALE
1.- Las pruebas a gran escala
Pruebas de selección
Pruebas diagnósticas
Pruebas de certificación
10
Algunas pruebas aplicadas en México Prueba Dirigido a Uso Población Alineación
curricularResultado Individual
Impacto
PISA Evaluar al sistema
educativo al término de la
educación obligatoria
Impactar política
educativa
Estudiantes de 15 años
No No Bajo
Excale Evaluar al sistema
educativo
Impactar política
educativa
Estudiantes de educación
básica
Si No Bajo
Enlace Evaluar el logro académico de los estudiantes
Informar sobre el
desempeño
Estudiantes de educación
básica y media superior
Básica: SíEMS: No
Si Bajo
EXANI Evaluar el logro académico de los estudiantes
Ayudar en las
decisiones de admisión
Candidatos a ingresar a educación
media-superior, superior y posgrado
No Si Alto
2.- Usos de las pruebas de logro
Todas las pruebas de logro académico a gran escala
están orientadas a evaluar los conocimientos y/o
habilidades que han adquirido los sustentantes a
través de procesos formales o informales de
aprendizaje
Normativas• Porcentaje de respuestas correctas• Escalas institucionales (Índice Ceneval)• Escalas de habilidad con modelos IRT
Criteriales• Proporción de estudiantes en cada segmento
Ejemplo:
• Prueba = Resultados del EXANI-I
• Entidad = Zx
• Propósito = Seleccionar a los estudiantes que
ingresarán a las escuelas públicas de educación media
superior
2.- Usos de las pruebas de logro
Media de la entidad = 1009
Resultados del EXANI-I. Media nacional, regional y estatal.
Media de la entidad = 1009
Media nacional = 997
Media de la región 1 = 1037
800 11001000 1150900
ÍNDICE CENEVAL
En
tid
ad Z
x
Ent
idad
1
Ent
idad
3
Ent
idad
2
Ent
idad
4
Resultados del EXANI-I. Medias de los estados de la región 1
Modalidad BModalidad A
-2 10 2-1
Gradiente Socioeconómico
1000
1150
1300
850
700
ÍND
ICE
CE
NE
VA
L
Promedio de la entidad ZX
Modalidad A
Promedio nacional ponderado
Resultados del EXANI-I.Puntaje obtenido x Gradiente socioeconómico
Modalidad B
• Son instrumentos de medición que se aplican para obtener información y hacer inferencias cuantitativas acerca de la población.
• A diferencia de los exámenes en un cuestionario de contexto no existen respuestas correctas e incorrectas.
11
2.- Los cuestionarios de contexto
¿Qué son?
• Describir las características de los sustentantes evaluados,
identificando el contexto familiar y económico en el que se
desenvuelven.
• Conocer las características de los docentes, de los directores de las
escuelas, así como las características de los salones de clase y de
las escuelas.
• Comparar resultados del logro en las variables de contraste de
interés; siempre y cuando los datos con los que se dispone permitan
hacer las comparaciones deseadas.
2.- Los cuestionarios de contexto
¿Para que sirven?
• Identificar los factores que afectan el aprendizaje, detectando
su aportación en los niveles estructurales del sistema educativo.
• Detectar las prácticas de los alumnos, de la familia, de los
docentes y del director que generan mejores resultados
académicos.
• Proponer modelos de explicación sobre el rendimiento escolar.
• Comparar los hallazgos nacionales con la información
internacional.
2.- Los cuestionarios de contexto
¿Para que sirven?
Describir: ¿Cuántos sustentantes son mujeres u hombres? ¿De qué condición socioeconómica provienen? ¿Cuál es su escuela de procedencia?
Contextualizar: ¿En matemáticas obtienen un mayor puntaje las mujeres o los hombres? ¿Existen diferencias en los puntajes obtenidos por los estudiantes que estudiaron la secundaria en una telescundaria o en una secundaría técnica?
Explicar: ¿Cómo impactan el nivel socioeconómico y el capital cultural de la familia en los resultados que obtienen los estudiantes en la prueba de logro?
2.- Los cuestionarios de contexto
¿Para que sirven?
− Participación en comportamientos de riesgo
− Amigos anti-sociales
− Baja socialización en la escuela
− Niveles bajos de capital social familiar
− Bajo nivel socioeconómico
− Género masculino
Battin-Pearson, S., Newcomb, M. D., Abbott, R. T., Hill, F. G., Catalano, R. F., & Hawkins, J. D. (2000). Predictors of Early High School Dropout: A Test of Five Theories. Journal of Educational Psychology, 92(3), 568-582.
El bajo rendimiento escolar es una variable mediadora del efecto que ejercen las siguientes variables sobre la deserción escolar:
Un cuestionario bien diseñado debe generar información:
• Válida. Las variables que se incorporan responden a definiciones claras de lo que se pretende medir.
• Confiable. Las mediciones deben ser consistentes, por lo que cambios en las puntuaciones deben reflejar cambios en la situación de los respondientes. Los resultados de los cuestionarios deben ser reproducibles en poblaciones similares.
• No sesgada. Las mediciones deben presentarse a los respondientes de forma tal que no favorezcan a grupos de la población.
16
2.- Los cuestionarios de contexto
¿Qué características deben tener?
• Responder a los propósitos de la medición.
• Cada una de las preguntas debe ser útil y pertinente para lograr el objeto de medición.
• Los constructos explorados deben incorporar variables manifiestas acordes a la definición conceptual.
• La escala de medición de las variables debe corresponder de manera natural a la pregunta.
• Los modelos estadísticos que se utilicen para el análisis de los datos deben contemplar la métrica de las variables manifiestas y de los constructos definidos.
17
2.- Los cuestionarios de contexto
¿Qué características deben tener?
2.- Los cuestionarios de contexto
Modelo conceptual
• Modelos multifactoriales que proponen interacciones complejas
de las variables.
• Premisa medular asume que los individuos son agentes
dinámicos que transforman y son transformados por una amplia
gama de variables personales, sociales, escolares y económicas.
• Exploran aspectos históricos de los individuos, así como aspectos
puntuales de su contexto actual.
1. Definir el propósito de la evaluación.
2. Revisar el estado actual del conocimiento.
3. Determinar el perfil de los investigadores que
conformarán el Consejo Técnico del Cuestionario.
4. Determinar el diseño del estudio y los requerimientos para
la aplicación.
19
2.- Los cuestionarios de contexto
¿Cómo se diseñan?
5. Seleccionar las variables que se incorporarán en los
instrumentos de medición.
6. Construir el instrumento.
7. Analizar el instrumento con grupos focales.
8. Realizar un piloteo del instrumento en poblaciones similares.
9. Analizar los resultados del piloteo y conformar las versiones definitivas.
20
2.- Los cuestionarios de contexto
¿Cómo se diseñan?
10. Aplicar el instrumento.
11. Lectura y elaboración de bases de datos.
12. Analizar el comportamiento de las preguntas.
13. Elaborar los indicadores de los constructos medidos.
14. Elaborar los perfiles descriptivos de la población.
15. Generar modelos explicativos del aprendizaje (mediano plazo).
16. Difundir los resultados.
21
2.- Los cuestionarios de contexto
¿Cómo se diseñan?
2.- Los cuestionarios de contexto
¿Quiénes los diseñan?
• Grupo básico.- Da lineamientos y acuerda asuntos administrativos
Usuario y Ceneval.
• Consejo Técnico.- Define las variables que se explorara el
cuestionario de alumnos, maestros y directores (Investigadores).
• Comités de apoyo.- Proporciona información sobre la planta
docente y las características de los planteles (Docentes y
autoridades educativas de diferentes subsistemas de EMS)
24
2.- Los cuestionarios de contexto
¿Cuál es su estructura?
Módulo básico(permanente)
Módulo de Investigación(temporalidad
limitada)Módulo propuesto
por usuarios(cambios anuales)
Área Dominio VariableEscala/
PreguntaNum.
Preguntas
Nombre P 1Número de hermanos P 1
Lugar entre los hermanos P 1Número de hermanos de la madre P 1Lugar de nacimiento P 1Sexo P 1Edad P 1Lengua materna P 3
Motivación P 3Auto-control E 4Manejo de tiempo E 10Compromiso académico E 6Inglés E 44Cómputo E 24Antecedentes laborales P 2Trabajo actual P 1Rendimiento académico en la secundaria E 5Beca en la secundaria P 1
Características de la escuela de procedencia
Características de la secundariaP 4
Exigencia de la escuela P 2Calidad de los maestros E 3Familiaridad opción múltiple P 1EXANI I P 5Estructura familiar P 7Capital cultural E 10Capital económico E 21
Involucramiento de los padres P 2165
Área Dominio VariableConsumo de sustancias adictivas legalesConsumo de sustancias adictivas ilegales
Movibles: Inamovibles Temporales
Personal Conductas de riesgo
Recursos no cognitivos
Recursos cognitivos (módulo extra)
Trayectoria académica
TOTAL
Social Familiar
Identificador
Situación laboral
Escolar
Exámenes presentados
Calidad de la escuela
Personal
Datos generales
Estructura del cuestionario de Contexto EXANI-I
Estructura del cuestionario de Contexto EGEL
Área Dominio VariableEscala/
PreguntaPreguntas
Nombre P 1Lugar de nacimiento P 1Número de hermanos P 1Lugar entre los hermanos P 1Hermanos de la madre P 1Nombre del examen P 1Clasificación P 1Edad P 1Sexo P 1Estado civil P 1Lengua materna P/E 3Rendimiento académico bachillerato
P 1
Duración de licenciatura P 1Rendimiento académico licenciatura
P/E 3
Año ingreso licenciatura P 1Créditos cubiertos P/E 1Beca licenciatura P/E 1Antecedentes laborales P 2Trabajo actual P 6Motivación E 3Autocontrol E 4Manejo de tiempo E 10Compromiso académico E 6Uso de la computadora P/E 24Dominio del inglés P/E 45Nombre y clave P 1Tipo de institución P 1Modalidad P 1Exigencia de la escuela P/E 2Calidad de los maestros P/E 3Familiaridad opción múltiple P 1EXANI I P 1EXANI II P 1EGEL P/E 7Estructura familiar P/E 8Capital económico E 21Capital cultural E 10
178
Movibles: Inamovibles Temporales
TOTAL
Identificador
Identificación del examen
Datos del examen
Personal
Datos personales
Trayectoria académica
Situación laboral
Recursos no cognitivos
Recursos cognitivos
Social
Escuela
Características de la escuela de procedenciaCalidad de la
escuela
Exámenes presentados
Familia
Cuestionario de Contexto para alumnos ENLACE
Área Dominio VariableEscala/
PreguntaPreguntas
Sexo P 1Edad P 1Estado civil P 1Discapacidades P 6Motivación E 3Manejo de tiempo E 7Compromiso académico E 9
Situación laboral Trabajo actual P 5Consumo de sustancias adictivas E 5Consumo de sustancias ilegales E 5Comportamiento antisocial E 5Inglés E 6Cómputo E 4Primaria P/E 5Secundaria P/E 7Nivel Medio Superior P/E 19Primaria P 1Secundaria P 2Nivel Medio Superior P 4Exigencia de la escuela E 2Calidad de los maestros E 10Clima escolar E 13Capital cultural E 10Capital económico E 17
148TOTAL
Escolar
Características de las escuelas de procedencia
Calidad de la escuela
Social Familiar
Personal
Datos generales
Comportamientos de riesgo
Trayectoria académica
Recursos cognitivos
Recursos no cognitivos
Estructura y Número de preguntas
del CC-
Docentes Enlace
Bachillerato
Área Dominio VariablesEscala /
PreguntaPreguntas
Clave de identificación Clave del centro de trabajo P 1
Ubicación del centro de trabajo Estado donde se encuentra el centro de trabajo P 1
Sexo P 1Edad P 1Preparación profesional y actualización P 22Empleo adicional P 1Experiencia docente P 3Función docente P 10Contratación P 2Tiempo dedicado a la función académica P 1Requisitos de ingreso para docentes P 4Prestaciones P 10Evaluación docente P 12Estímulos P 5Libertad de cátedra E 7Trabajo colegiado P 8Evaluación de la función directiva P 9Estado general de la infrestructura E 7Computadoras P 3Biblioteca P 5Espacios para actividades extra-clase P 3Programa de estudios P 9Cobertura curricular P 2Sistema de tutorías P 1Tiempo de clase P 11Autoevaluación de la función docente E 4Planeación didáctica P 4Evaluación diagnóstica P 4Técnicas enseñanza-aprendizaje P 7Recursos didácticos P 7Actividades extra-clase P 6Tareas P/E 5Evaluación de los alumnos P 14Mecanismos apoyo P 2Medidas disciplinarias P 1Asistencia P 1Reprobación P 2Retardos y ausentismo P 2Problemas para aprender P 5Exigencia académica P 3Clima escolar P 33
239
Ide
ntifi
caci
ón
Prácticas pedagógicas
Organización escolar
Infraestructura, equipo y materiales
Aca
dé
mic
a
Eficiencia escolar
En
torn
o
esc
ola
r
TOTAL
Pe
rso
nal
Calidad de la escuela
Oportunidades de aprendizaje
Datos generales
Perfil profesionalA
dm
inis
tra
tiva
Estructura y Número de preguntas
del CC-
Directores Enlace
Bachillerato
Área Dominio VariableEscala /
preguntaPreguntas
Clave Clave del centro de trabajo P 1
Ubicación Estado donde está ubicado el centro de trabajo P 1
Sexo P 1Edad P 1Preparación profesional y actualización P 4Examen de oposición P 1Experiencia con la computadora e internet E 9Habilidad en inglés E 3Experiencia como director P 2Horas frente a grupo P 2Contratación P 1Régimen de la escuela P 1Modalidad de enseñanza P 6Tamaño de escuela P 1Fuentes de financiamiento P 1Tamaño de la localidad P 1Modalidad de bachillerato P 1Reconocimiento de estudios P 5Áreas o carreras P 2Servicios P 10Instalaciones para alumnos P/E 21Instalaciones para docentes P 3Mantenimiento de la planta física E 6Equipo P 6Computadoras P 7Página de Internet P 1Biblioteca P/E 5Tiempo de los docentes dedicado a la escuela P 4Características personales de los docentes P 2Características educativas y actualización de los docentes P 5Requisitos de selección de la planta docente P 7Afiliación sindical P 1Participación (libertad de cátedra) E 7Evaluación docente P/E 12Estímulos y prestaciones P 16Problemática y sanciones P 26Ciclos y turnos escolares P 5Tiempos reglamentarios para conlcuir el NMS P 2Reglamento: normas y sanciones P 11Espacios para quejas o denuncias P 1Asociaciones P 2Relación con padres de familia P 12Becas P 6Función directiva E 21Criterios de asignación de grupos a los docentes P 5Criterios de admisión de estudiantes P 4Criterios de asignación de turno a los estudiantes P 1Diagnóstico de los estudiantes de nuevo ingreso P 4Sistema de evaluación del logro P 5Entrega de calificaciones P 1Criterios de acreditación de asignaturas P 2Reprobación P 6Apoyo académico a estudiantes de bajo rendimiento P 2Reuniones de consejos académicos P 1Actividades extracurriculares E 6Acciones preventivas P 3Servicios especializados P 4Oportunidades de aprendizaje (tiempo clases) P 2Contenidos curriculares (programa de estudios) P 29Prácticas profesionales exigidas dentro del programa P 3Sistema de tutorías P 3Incentivos para estudiantes de buen desempeño P 4Actividades de apoyo y fomento a la investigación P 6Oportunidades laborales P 9Intercambio académico P 3Retardos y Ausentismo P 2Tasa de reprobación Español y Matemáticas P 2Eficiencia terminal P 1Deserción P 2Seguimiento a egresados P 1Exigencia de la escuela P 1Clima escolar P/E 30
385TOTAL
En
torn
o e
scola
r
Gestión escolar
Planta docente
Eficiencia escolar
Calidad de la escuela
Organización escolar
Acad
ém
ica
Programa Académico
Iden
tifica
ció
n
Perfil profesional
Datos de la escuela
Pe
rson
al
Ad
min
istr
ativa
Datos generales
Infraestructura, equipo y
materiales
top related