politicas de evaluacion en mexico

Polticas y sistemas de evaluacin educativa en MxicoAvances, logros y desafos

Informe para la Reunin Ministerial del Grupo E-9 (UNESCO)

MXICO 13 - 15 de febrero 2006

AVANCES, LOGROS Y DESAFOS

Instituto Nacional para la Evaluacin de la Educacin

POLTICAS Y SISTEMASDE EVALUACIN EDUCATIVA EN MXICO

AVANCES, LOGROS Y DESAFOSInforme para la Reunin Ministerial del Grupo E-9 (UNESCO)

Mxico, 13-15 de febrero de 20061


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICO

POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICO. AVANCES, LOGROS Y DESAFOS Autores:

Mtro. Israel Banegas Gonzlez Mtro. Emilio Blanco BoscoCoordinacin editorial: Miguel . Aguilar R. Beatriz Cepeda Hinojosa Omar Torreblanca Navarro Diana Luz Flores Vzquez Diseo y formacin: Juan Cristbal Ramrez Peraza Luis Enrique Ramrez Jurez INSTITUTO NACIONAL PARA LA EVALUACIN DE LA EDUCACIN Jos Ma. Velasco 101, Col. San Jos Insurgentes, Delegacin Benito Jurez, C.P.03900, Mxico, D.F. Primera Edicin 2005 El contenido, la presentacin y disposicin en conjunto y de cada pgina de esta obra son propiedad del editor. Queda prohibida su reproduccin parcial o total por cualquier sistema mecnico, electrnico u otro, sin autorizacin escrita. Impreso en Mxico ISBN 968-5924-09-0

2



ndicePrefacio 0. Introduccin 1. Mxico y su sistema educativo 2. Los objetivos del Sistema Educativo Mexicano 3. Las principales polticas de evaluacin de la educacin en Mxico 4. Las formas de difusin y uso de la evaluacin 5. Los desafos y logros de la evaluacin 6. Planes y recomendaciones para el futuro Comentario nal Bibliografa Anexos 5 7 11 17 21 47 59 69 77 79 85

3

LaCalidaddelaEducacinBsicaenMxico

CAPITULO 3EL APRENDIZAJE DE LOS ALUMNOS EN 2000 Y 2005Introduccin 3.1 Metodologa 3.1.1 Dominios de las pruebas 3.1.2 Cualidades tcnicas de las pruebas 3.2 Resultados 3.2.1 Medias nacionales 3.2.2 Niveles de ejecucin 3.2.3 Puntuaciones percentilares 3.2.4 Variabilidad de las respuestas 3.2.5 Matemticas de 3 de secundaria Sntesis y conclusiones



PrefacioPocas dudas pueden abrigarse en cuanto a la importancia de la educacin para todo pas, tanto en lo relativo al avance de la economa y la mejora de la competitividad, como en lo que tiene que ver con la cohesin social y la riqueza de la vida cvica y cultural. En este marco, la evaluacin adquiere una importancia cada vez mayor en los sistemas educativos, como elemento fundamental de todo esfuerzo de mejora. Esta tendencia se aprecia tambin en la creciente presencia de proyectos internacionales de evaluacin, como los que lleva a cabo la Asociacin Internacional para la Evaluacin del Logro Educativo v. gr. el TIMSS- y el Programa para la Evaluacin Internacional de los Estudiantes (PISA) de la Organizacin para la Cooperacin y el Desarrollo Econmicos. Por lo anterior, como antrin de la VI Reunin Ministerial del Grupo E-9, que rene a los nueve pases ms poblados del mundo en desarrollo, Mxico escogi como tema central precisamente el de la evaluacin educativa. Desde hace ms de tres dcadas, Mxico ha desarrollado diversas iniciativas para la evaluacin de su sistema educativo. En el ltimo lustro destacan, en este sentido, la creacin del Instituto Nacional para la Evaluacin de la Educacin y los trabajos para integrar las mltiples actividades y programas de evaluacin en un autntico Sistema Nacional. La experiencia de participar en proyectos internacionales en este campo ha dejado tambin valiosas lecciones. Estas experiencias han mostrado el benecio potencial de la evaluacin educativa, pero tambin la necesidad de desarrollarla cuidadosamente y teniendo en cuenta siempre nuestra realidad, que es la de un pas con una poblacin numerosa, en parte concentrada en grandes ciudades, pero tambin dispersa en un extenso territorio, con una gran diversidad tnica e importantes sectores que viven todava en situacin de pobreza. La tarea de preparar el documento mexicano para la Reunin Ministerial se encomend al Instituto Nacional para la Evaluacin de la Educacin, que ha recogido la rica experiencia de nuestro pas en este mbito, tanto en sus avances como en sus tropiezos. Con este documento Mxico espera aportar elementos valiosos para la discusin que sostendr el Grupo E-9 durante la reunin de Monterrey. De esta manera podrn derivarse acuerdos que permitan a los pases miembros desarrollar polticas y sistemas de evaluacin que contribuyan al propsito comn ltimo de mejorar la calidad educativa. Reyes S. Tamez Guerra Secretario de Educacin Pblica de Mxico

5

LaCalidaddelaEducacinBsicaenMxico

CAPITULO 3EL APRENDIZAJE DE LOS ALUMNOS EN 2000 Y 2005Introduccin 3.1 Metodologa 3.1.1 Dominios de las pruebas 3.1.2 Cualidades tcnicas de las pruebas 3.2 Resultados 3.2.1 Medias nacionales 3.2.2 Niveles de ejecucin 3.2.3 Puntuaciones percentilares 3.2.4 Variabilidad de las respuestas 3.2.5 Matemticas de 3 de secundaria Sntesis y conclusiones



0. IntroduccinObjetivos, cobertura, y condiciones de elaboracin del informe El presente informe se enmarca en el contexto de los preparativos para la reunin ministerial del Grupo E-9, a celebrarse en Mxico en febrero de 2006. Su objetivo general es exponer las polticas y sistemas de evaluacin de la educacin en Mxico, de conformidad con los lineamientos acordados en el encuentro de El Cairo en julio de 2005. Las evaluaciones abordadas comprenden fundamentalmente el nivel de educacin bsi1 ca . El perodo considerado abarca desde la dcada de 1970 hasta la actualidad, destacndose signicativos avances en la calidad tcnica, regularidad y difusin de las evaluaciones. Para la elaboracin del informe se ha recurrido principalmente a dos tipos de fuentes. El primero comprende los numerosos documentos elaborados por diferentes organismos relacionados con la evaluacin educativa en Mxico. Por otra parte, se han realizado entrevistas y reuniones con funcionarios de algunos de estos organismos, directamente involucrados en las experiencias de evaluacin ms relevantes a nivel nacional. Una vez elaborada la versin preliminar se present a un conjunto de expertos acadmicos y funcionarios vinculados a la evaluacin educativa en Mxico, incorporndose sus aportaciones a la versin nal2. Posteriormente se recibieron e incorporaron comentarios y sugerencias de la UNESCO. Una breve denicin de evaluacin educativa Se entender por evaluacin un proceso que comienza por la medicin de una ciertaPor educacin bsica se entiende la educacin inicial, preescolar (de 3 a 5 aos), primaria (6 aos) y la educacin media bsica (3 primeros aos de educacin secundaria). 2 Los autores de este documento desean agradecer la invalorable colaboracin de las siguientes personas: Lic. Felipe Martnez Rizo (Director General del Instituto Nacional para la Evaluacin de la Educacin INEE); Mtro. Rafael Santiago Vidal Uribe (Director General Adjunto - INEE); Mtro. Juan C. Palafox Prez de Salazar (Consultor Internacional de UNESCO); Dr. Eduardo Backho Escudero (Director de Pruebas y Medicin INEE); Dra. Guadalupe Ruiz Cullar (Directora de Evaluacin de Escuelas INEE); Mtra. Ma Luz Zaraza (Directora de Relaciones Nacionales y Logstica INEE); Ing. Roberto Pea Resndiz (Director de Evaluacin de Polticas y Sistemas Educativos de la Direccin General de Evaluacin DGEP, SEP); Dr. Carlos Muoz Izquierdo (Director del Instituto de Investigaciones para el Desarrollo de la Educacin - Universidad Iberoamericana); Dra. Teresa Bracho Gonzlez (Profesora e Investigadora del Centro de Investigacin y Docencia Econmicas); Lic. Sergio Martnez Dunstan (Director de Evaluacin y Anlisis del Proceso Educativo DGEP, SEP); Dr. Antonio Gago Huget (Coordinador de Asesores del Secretario de Educacin Pblica); Dr. Leonel Ziga Molina (Titular de la Unidad de Planeacin y Evaluacin de Polticas Educativas de la SEP); Dra. Sylvia Schmelkes del Valle (Coordinadora General de Educacin Intercultural Bilinge); Lic. Ana Mara Aceves Estrada (Directora General de Evaluacin de Polticas de la UPEPE); Dr. Jos ngel Pescador Pescador Osuna (Miembro del Consejo Tcnico del INEE); Mtro. Guillermo Ortz Vzquez (Director de Evaluacin y Estadstica - Secretara de Educacin de Coahuila); Mtro. Andrs Magaa Moreno (Subdirector de Evaluacin e Informacin Educativa - Secretara de Educacin de Colima); Montserrat Bataller Sala (Directora General de Poltica Educativa Secretara de Educacin de Guanajuato).1

7


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICOvariable, seguida de la comparacin de esta medida con un estndar determinado, a n de realizar un juicio sobre el carcter adecuado o inadecuado de la realidad observada. Evaluar, por lo tanto, no es simplemente medir una realidad, sino tambin juzgarla de acuerdo con criterios relevantes. Esta breve denicin tiene la ventaja de no limitar de antemano qu aspectos de la educacin pueden ser evaluados. La evaluacin educativa debera partir de un criterio de calidad sucientemente amplio como para abarcar todos los aspectos signicativos del sistema: gestin y administracin; polticas y programas; recursos y eciencia; capacitacin de los maestros; acceso y permanencia de los alumnos; aprendizajes y habilidades adquiridas; impacto en las vidas de los individuos y en la sociedad en su conjunto; etctera. La evaluacin, asimismo, no debe recurrir exclusivamente a un solo tipo de metodologa, dado que la complejidad de los aspectos a evaluar requiere de mltiples aproximaciones. Una buena evaluacin del sistema educativo debera recurrir tanto a enfoques macro como micro, tanto a estrategias cuantitativas como cualitativas, tanto a acercamientos censales como muestrales. Finalmente, la denicin propuesta busca abarcar diversos objetivos de la evaluacin: formulacin de diagnsticos; diseo de polticas y programas; asignacin de recursos; rendicin de cuentas por parte de las autoridades y los actores educativos; retroalimentacin de escuelas, maestros y alumnos; decisiones sobre aprobacin o desaprobacin; etctera. La evaluacin educativa en los pases del E-9 Los pases integrantes del E-9 se caracterizan fundamentalmente por el gran volumen de su poblacin educativa, as como por marcadas desigualdades regionales, socioeconmicas y culturales. Los elevados niveles de pobreza y marginacin de estos pases, particularmente agudos en las reas rurales o geogrcamente aisladas, presentan el reto ms importante para ofrecer una educacin equitativa y de calidad para todos. En particular, persisten elevadas tasas de inasistencia, repeticin y desercin por causas socioeconmicas. El marcado multiculturalismo que suele existir al interior de algunos de estos pases plantea adems la necesidad de ofrecer una educacin adaptada a las cosmovisiones y necesidades de diversos grupos. Esto implica que los sistemas educativos de nuestros pases enfrenten retos muy diferentes a los de los pases desarrollados: universalizar el acceso y la permanencia en el sistema, ampliando la oferta educativa de calidad y evitando la desercin; reducir las desigualdades regionales, socioeconmicas y de gnero, a travs de polticas compensatorias que trasciendan el mbito educativo; mejorar la gestin y administracin del sistema educativo, volvindolo ms ecaz y eciente; satisfacer las demandas de grupos culturalmente diferentes; y fortalecer las capacidades de los actores locales para demandar servicios educativos de calidad. Por lo anterior, es necesario pensar en el desarrollo de sistemas de evaluacin adecuados a tales caractersticas, que brinden informacin pertinente sobre estos mltiples desafos. En primer lugar, la complejidad de los sistemas educativos debera promover la participacin de mltiples actores de manera descentralizada. En

8

AVANCES, LOGROS Y DESAFOSsegundo trmino, el gran tamao de estos sistemas supone que no siempre son deseables las evaluaciones censales, sino que en ocasiones es necesario utilizar diseos robustos basados en muestras. En tercer lugar, la evaluacin deber guiarse por criterios amplios, sin limitarse a los aprendizajes de los alumnos; otros aspectos como las trayectorias y procesos escolares, la gestin del sistema, y el impacto de la educacin a nivel de la sociedad en general deberan ser considerados. Finalmente, los estndares utilizados debern contemplar la diversidad socioeconmica y cultural de los contextos educativos; en este sentido, en pases con las caractersticas del E-9 es fundamental evaluar el funcionamiento y los efectos de los programas educativos orientados a los alumnos ms pobres. La evaluacin educativa en Mxico y el presente informe En el caso de Mxico, construir un buen sistema de evaluacin es un proceso complejo de largo plazo. El gran volumen de poblacin en edad escolar y su acelerado crecimiento; su dispersin y movilidad territorial; las profundas desigualdades socioeconmicas, culturales y demogrcas entre las regiones y las entidades; todos estos factores han condicionado la construccin de un sistema educativo que opera en condiciones heterogneas y muchas veces difciles, a travs de mltiples modalidades y programas. Dadas estas caractersticas, no es posible pensar en un sistema de evaluacin de la educacin centralizado, o guiado por criterios restrictivos de calidad. De forma progresiva, la evaluacin de la educacin en Mxico ha asumido una estructura diferenciada y relativamente descentralizada, aunque an no totalmente articulada. Debido a ello, sintetizar el conjunto de evaluaciones en Mxico es una tarea compleja, necesariamente selectiva. En este informe se privilegian aquellas iniciativas especcamente orientadas a obtener un diagnstico sobre el sistema educativo con vistas a su mejora, no obstante lo cual, tambin se reportan evaluaciones destinadas a la certicacin de conocimientos y competencias. Existen otras experiencias meritorias que no ha sido posible incluir por razones de espacio, particularmente a nivel de las entidades federativas. Debido a su complejidad y diversidad, tampoco ha sido posible presentar una revisin exhaustiva del sistema de evaluacin en el nivel de educacin superior. Sntesis de los captulos Los primeros dos captulos del informe resumen las caractersticas del sistema educativo mexicano, su desarrollo histrico y los objetivos por los que se rige. El nfasis est puesto en la complejidad operativa del sistema, la multiplicidad de servicios que brinda, y su carcter relativamente descentralizado. Los objetivos formales de la educacin mexicana se caracterizan por su amplitud y su carcter humanista, destacndose adems del desarrollo de habilidades cognitivas la capacidad de crtica y creacin, el respeto a la diversidad, el fomento de actitudes democrticas y el desarrollo de capacidades para la vida. El tercer captulo desarrolla las caractersticas de las principales evaluaciones na-


9


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICOcionales e internacionales aplicadas en Mxico, en las reas de aprendizajes, escuelas, y maestros. Debe resaltarse la progresiva construccin de un sistema nacional de indicadores, comparables a travs del tiempo, que permite realizar diagnsticos sobre una amplia gama de aspectos; entre ellos, la evaluacin de aprendizajes es la que muestra un desarrollo ms avanzado. Sin embargo, la evaluacin de maestros y escuelas se ha fortalecido progresivamente mediante diversas iniciativas, entre las que se incluyen interesantes experiencias de autoevaluacin. El informe privilegia aquellas experiencias que, por su rigurosidad tcnica o su carcter innovador, pueden ser tiles para la mejora de la calidad de la evaluacin en pases con las caractersticas del E-9. En el captulo cuarto se aborda la situacin actual de Mxico en materia de difusin y uso de los resultados de las evaluaciones. Si bien existe un consenso extendido sobre la necesidad de difusin, sta no siempre se realiza en forma idnea, y no siempre tiene los resultados esperados. En particular, es notoria la falta de mecanismos institucionales de difusin, de forma que sta resulte de utilidad para la innovacin en las escuelas y la rendicin de cuentas frente a las familias. No obstante, existe un conjunto de experiencias positivas cuya presentacin podra ser de gran utilidad para ejemplicar de qu manera puede optimizarse el uso de los resultados. El captulo quinto evala el presente de la evaluacin educativa mexicana desde una perspectiva crtica. En la primera seccin se sealan las carencias que an muestra el sistema en trminos de calidad, cobertura, articulacin, difusin y uso de los resultados. Es probable que en la mayor parte de los pases integrantes del E-9 se presenten problemas similares, por lo que es necesario asumirlos y compartirlos para buscar soluciones ecaces. Posteriormente, se indican algunas fallas acontecidas en la participacin en experiencias internacionales. Por ltimo, se resumen las caractersticas positivas y los avances realizados. Finalmente, en el captulo sexto se ofrece un conjunto de recomendaciones que pudieran ser tiles para la mejora de los sistemas de evaluacin educativa en los pases del E-9. Se enfocan aspectos como la ampliacin de la cobertura de reas y temas, la mejora en la calidad de los instrumentos, la coordinacin de las iniciativas, la capacitacin tcnica, y el fomento a la difusin de los resultados.

10



1. Mxico y su sistema educativo1.1. Caractersticas demogrcas y econmicas 1.1.1. Demografa Los Estados Unidos Mexicanos constituyen una federacin compuesta por 32 entidades. Su rea total es de 1,964,375 Km2, de los cuales 1,959,248 Km2 con supercie continental y 5,127 Km2 corresponden a supercie insular (INEGI3, 2004: 49). Su poblacin total para el ao 2005, segn proyecciones del Consejo Nacional de Poblacin (Conapo), es de 106, 451,679 habitantes. La distribucin de la poblacin muestra que, para el ao 20004, cerca de la tercera parte se ubicaba en el tramo de cero a 14 aos (INEGI 2004: 83), y alrededor del 20% de la poblacin se encontraba en edad de asistir a la educacin bsica, esto es, en los tramos de cinco a 14 aos5. No obstante, las cifras indican una tendencia a la estabilizacin del crecimiento: la pirmide poblacional comienza a ensancharse en su punto medio, lo que deriva en una progresiva estabilizacin de la demanda en educacin bsica. Actualmente, el mayor crecimiento de la demanda educativa se concentra en los niveles medio superior y superior (INEE 2003a: 34). Esto representa un primer desafo para el Sistema Educativo Nacional (SEN). Existe una fuerte heterogeneidad en la distribucin de la poblacin entre las 32 entidades federativas, lo que implica condiciones diferentes para la prestacin de servicios educativos. La poblacin en edad escolar bsica del estado de Mxico, por ejemplo, es de aproximadamente 4, 000,000 de individuos, mientras que en el estado de Baja California Sur esta cifra se acerca a los 130,000 individuos. Estas diferencias poblacionales deben tenerse en cuenta para comprender que cada entidad enfrenta condiciones y necesidades diferentes para la prestacin de los servicios educativos. En cuanto a la distribucin segn el tipo de localidad, el XII Censo General de Poblacin y Vivienda (2000), indica que un 74.6% de la poblacin vive en localidades urbanas, mientras que un 25.4% habita en localidades rurales6 (INEGI 2004: 76). Nuevamente, se observa una gran heterogeneidad entre las entidades a este respecto:

INEGI: Instituto Nacional de Geografa, Estadstica e Informtica. Muchos de los indicadores presentados reeren a este ao, ya que es el ao en que se realiz el ltimo Censo en Mxico. 5 En la tabla 1 del Anexo I se especica la poblacin correspondiente a cada tramo de edad. 6 Denidas stas como localidades con menos de 2,500 habitantes.4

3

11


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICOen el Distrito Federal la poblacin urbana prcticamente alcanza el 100%, mientras que en el estado de Oaxaca este porcentaje ronda el 23%. Por otra parte, aunque la proporcin de poblacin rural respecto de la urbana va en descenso, el nmero de pequeas localidades va en aumento (actualmente existen alrededor de 150,000 localidades con menos de cien habitantes). Esta dispersin implica un segundo e importante desafo para la prestacin de servicios educativos (INEE 2003a: 32). 1.1.2. Economa El Producto Interno Bruto (PIB) total de Mxico ascenda, para el ao 2003, a 483,645 millones de dlares a precios constantes de 1995 (CEPAL 2005: 195). Para el mismo ao, el PIB per cpita ascenda a 4, 682 dlares (precios constantes de 1995). El PIB actual est compuesto mayoritariamente por el sector de servicios (casi un 70% del total)7. La distribucin del ingreso en Mxico est caracterizada por una marcada desigualdad. El coeciente de Gini fue de 0.4541 para el ao 2002, mostrando una leve mejora respecto del ao 2000 (INEGI 2002). Estas cifras representan un tercer desafo para el sistema educativo mexicano si se tiene en cuenta la amplia diversidad de situaciones socioeconmicas que debe afrontar. Un cuarto desafo para el sistema educativo mexicano est representado por la heterogeneidad de las estructuras productivas entre las entidades y regiones. Algunas zonas del pas concentran la mayor parte del crecimiento econmico, recibiendo elevados niveles de inversin en las ramas industrial y de servicios. En otras regiones predomina una estructura econmica estancada, basada en la produccin agrcola para autoconsumo. Tales diferencias repercuten en otros aspectos signicativos para el funcionamiento del sistema educativo, como el acceso a servicios pblicos bsicos, que muestra profundas diferencias a lo largo del territorio nacional. 1.1.3. La poblacin y el sistema educativo Uno de los indicadores bsicos para evaluar el desempeo de los sistemas educativos de la regin es la tasa de analfabetismo. En Mxico este indicador asciende, para el ao 2000, al 9.5% de la poblacin mayor de 15 aos (INEGI 2000). Como es de esperarse, su incidencia es mayor entre la poblacin de ms edad. Lo destacable es, como sucede con otros indicadores educativos bsicos, la existencia de una fuerte heterogeneidad regional. A modo de ejemplo: en la capital del pas la tasa de analfabetismo es de slo 2.9%, mientras que en el estado de Chiapas alcanza un 22.9%. Para el ao 2000, la escolaridad promedio de la poblacin en el tramo de 15 a 64 aos era de 7.9 aos. En este punto tambin se observan marcadas diferencias entre las entidades federativas: en la capital del pas este indicador alcanza los diez aos, mientras que en el estado de Chiapas es de 5.6 aos (INEE 2004b: 138). Tambin es un indicador bsico del desarrollo educativo el porcentaje de la poblacin que tiene al menos educacin media, respecto de la poblacin de 15 a 64

7

En la tabla 2 del Anexo I se indican los porcentajes para cada sector junto a una denicin de cada sector.

12

AVANCES, LOGROS Y DESAFOSaos. Para el ao 2000 este indicador alcanza 21.8%, existiendo importantes diferencias entre las entidades (INEE 2004b: 138). Por su parte, el porcentaje de la poblacin entre 24 a 64 aos que tiene al menos educacin superior era, para el ao 2000, del 15% (INEE 2004b: 139). Otra de las caractersticas poblacionales que histricamente ha representado un desafo para el sistema educativo mexicano es su marcado multiculturalismo. Actualmente, el porcentaje de poblacin indgena se estima superior al 10% del total, con algunas variaciones dependiendo de los criterios utilizados. Esta poblacin se divide en 62 grupos etnolingsticos diferentes8, con sus propias culturas y costumbres. Esto ha llevado al establecimiento de la educacin indgena en el nivel primario, diferenciada de la educacin primaria general. Para el ao 2002, el total de poblacin indgena en edades escolares era de 2, 745,000 personas (INEE 2004b: 59). Tambin en este aspecto se observa una fuerte heterogeneidad entre las entidades. En seis de stas, el porcentaje de poblacin indgena en edad escolar supera el 25% del total, mientras que en otras cinco entidades este porcentaje no alcanza el 1%. 1.2 El sistema educativo mexicano 1.2.1. Situacin actual El sistema educativo mexicano se caracteriza por su gran tamao y complejidad9. En el presente ciclo escolar, cerca de 32,000,000 de alumnos integran el sistema, de los cuales aproximadamente 25,000,000 se encuentran en el nivel de educacin bsica. Las caractersticas geogrcas del pas, la dispersin territorial de una parte importante de su poblacin, el multiculturalismo, y los cambios en la insercin econmica del pas han implicado que el sistema educativo mexicano haya debido diversicar ampliamente su oferta educativa. A esto debe agregarse que, a partir de 1993, la educacin bsica y obligatoria abarca la educacin preescolar, la educacin primaria y la educacin secundaria (LGE 1993: artculo 37), lo cual supone que deba realizarse un gran esfuerzo para cumplir con este mandato en todo el territorio nacional. Otro aspecto fundamental a tener en cuenta es la federalizacin del sistema educativo, iniciada en 1992 a partir del Acuerdo Nacional para la Modernizacin de la Educacin Bsica y Normal (ANMEB), y consagrada en la Ley General de Educacin (LGE) de 199310. A grandes rasgos, la federalizacin del sistema consisti en la transferencia de los servicios educativos del mbito nacional al mbito de las entidades federativas. Este proceso implic la reestructura de la administracin educativa tanto a nivel nacional como en cada uno de los estados, y una redenicin de las facultades nacionales y estatales en diversos mbitos, sin que esto congure una radical


8

En la tabla 3 del Anexo I, se ofrece el detalle de la poblacin que habla las lenguas principales de Mxico, as como su distribucin porcentual. 9 En la tabla 4 del Anexo I se muestran las cantidades totales de escuelas, maestros y alumnos para cada subnivel educativo, en el ciclo escolar 2003 2004. Las tablas 5 y 6 presentan la estructura del sistema educativo mexicano, junto a los servicios pblicos que se ofrecen. 10 Los fragmentos ms signicativos de ambos documentos pueden ser consultados en el Anexo II.

13


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICOdescentralizacin de los servicios. Si bien las entidades cuentan hoy con un margen de accin considerable en la administracin de sus sistemas educativos, la responsabilidad por la unidad del sistema nacional como un todo contina bajo la rbita del gobierno central. La Secretara de Educacin Pblica (SEP) mantiene, a nivel nacional, la autoridad en el diseo de los planes y modalidades de estudio, la elaboracin de libros de texto, junto con la responsabilidad de aportar recursos a las entidades y compensar las desigualdades entre stas. La estructura actual del sistema educativo mexicano est compuesta por: a) educacin bsica, que comprende: tres grados de educacin preescolar, seis grados de educacin primaria (1 a 6 grado), y tres grados de educacin secundaria (7 a 9 grado); b) educacin media superior (10 a 12 grado); c) educacin superior, cuyos grados dependen de la carrera tcnica, licenciatura o posgrado de que se trate (INEE 2003a: 29). A su vez, esta oferta educativa se realiza en dos modalidades: escolarizada y no escolarizada. La enseanza escolarizada se corresponde con la estructura mencionada anteriormente. Dentro de cada uno de los niveles existen diferentes tipos de servicios. En preescolar y primaria se distinguen la educacin general, educacin indgena, y educacin comunitaria. En secundaria los planteles se dividen en generales, tcnicos, de trabajadores y las denominadas telesecundarias11. En educacin media superior se encuentran los bachilleratos y planteles de bachilleratos tcnicos, como los del Colegio Nacional de Educacin Profesional (Conalep). En educacin superior se distinguen los niveles de tcnico superior, licenciatura y posgrado. La educacin no escolarizada incluye educacin inicial, especial, semiescolarizada, de adultos y diversas formas de capacitacin para el trabajo (INEE 2003a: 27). A pesar de las dicultades que el tamao de la poblacin y la diversidad de sus condiciones presentan al sistema educativo, se verican importantes avances en los indicadores bsicos. La tasa de cobertura neta para primaria, en el ciclo escolar 2003 2004, alcanza el 98.6%. En secundaria, para el mismo ciclo escolar, dicha tasa alcanza el 72.1%12 (INEE 2004b: 310). Asimismo, se ha logrado una tasa de supervivencia para el quinto ao de primaria del 90.5%, en el ao 2000 (UNESCO 2005: 305). La magnitud del esfuerzo de Mxico por lograr una cobertura universal en educacin bsica se vuelve evidente cuando se observa la evolucin del gasto pblico en educacin, el cual ha crecido a partir del compromiso federal y de las entidades (SEP 1992)13. 1.2.2. Breve resea histrica del sistema educativo mexicano Las difciles condiciones geo-demogrcas referidas, as como los elevados niveles

Esta es una modalidad de educacin secundaria implementada desde 1968 para alcanzar a localidades rurales, marginadas, de difcil acceso o con un nmero muy bajo de egresados de primaria. Su caracterstica es el uso de la tecnologa televisiva para impartir las diferentes asignaturas, mientras los alumnos trabajan con un docente orientador por grado. En el ciclo 2004-2005 asistan a esta modalidad ms de 1,200,000 alumnos (22% de la poblacin total de la educacin secundaria). 12 En la tabla 7 del Anexo I se encuentran estos indicadores junto a los de desercin y eciencia terminal para los ciclos escolares 2002 2003, y 2003 2004. 13 En las tablas 8 y 9 del Anexo I puede observarse la variacin del gasto pblico y privado en educacin, as como el gasto por alumno, entre los aos 1980 y 2004.

11

14

AVANCES, LOGROS Y DESAFOSde pobreza y segmentacin cultural de Mxico han representado desafos histricos persistentes para el logro de una educacin con calidad y equidad. Conforme se han modicado las caractersticas de la sociedad mexicana a lo largo del siglo XX, tambin se han modicado las estrategias que han regido al sistema educativo para la superacin de las dicultades antedichas. A lo largo de la mayor parte del siglo XX, el principal objetivo orientador del sistema educativo fue la expansin de la alfabetizacin a toda la sociedad, lo que implic un esfuerzo de universalizacin de la educacin primaria. Esto requiri la construccin de escuelas y la capacitacin de docentes en todo el territorio, tarea que qued a cargo de la Secretara de Educacin Pblica (SEP), creada en 1921. Dadas las grandes diferencias en el desarrollo nacional, las dicultades para acceder a las zonas ms alejadas, y la relativa debilidad de las capacidades locales para sostener este proyecto educativo, la primera mitad del siglo se caracteriz por una tendencia a la centralizacin del sistema (Arnaut 1998: 245), misma que se consolid en la dcada de 1930. El control de la administracin, los recursos, programas y textos por parte de la autoridad central presentaron diversas resistencias, cuya superacin implic un trabajo poltico de largo plazo, aunado a un gran esfuerzo logstico y econmico por parte del gobierno federal. Esto permiti, al menos en el nivel primario, avanzar signicativamente en la reduccin del analfabetismo, la cobertura del nivel primario, y la ampliacin del acceso a niveles educativos superiores. No obstante, subsistan problemas histricos como la atencin a las diversidades culturales y locales, la desigualdad en las oportunidades de acceso y permanencia, y en la calidad de los servicios ofrecidos; estos problemas se hicieron ms notorios a medida que avanzaba la segunda mitad del siglo XX. Otros aspectos se fueron problematizando con mayor nfasis, como las cargas burocrticas de un sistema centralizado, la desarticulacin entre los diferentes actores educativos, y la ambigedad en sus atribuciones. Los primeros proyectos desconcentradores de la SEP fueron desarrollados en 1958, aunque en ese momento no lograron concretarse en una descentralizacin. Diversas transformaciones sociales haban comenzado a evidenciar la necesidad de avanzar en esa descentralizacin. En particular, las denominadas cuatro transiciones de Mxico demogrca, econmica, poltica, y social (SEP 2001, INEE 2003a) hicieron evidente la necesidad de desconcentrar la educacin pblica, a n de lograr mayores niveles de calidad, eciencia y equidad (SEP 2001: 16), as como formas de participacin social en la educacin acordes al nuevo clima de apertura democrtica (SEP 2001: 37 y 38). A n de lograr estos objetivos y de consolidar los logros obtenidos, en 1992 se comenz un proceso de reforma del sistema educativo, particularmente de la educacin bsica y normal. El mismo est basado en un amplio consenso logrado entre el gobierno federal, los gobiernos de los estados y el Sindicato Nacional de Trabajadores de la Educacin (SNTE), plasmado en el ANMEB de 1992, y la LGE de 1993. Las principales lneas del ANMEB reeren, como se ha resumido en la seccin anterior, a la federalizacin del sistema. Este proceso ha supuesto grandes desafos, ya que la descentralizacin implica el desarrollo de nuevas habilidades de gestin, administracin y evaluacin por parte


15


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICOde las entidades. No todas han resuelto sus problemas de la misma forma, ni con el mismo grado de xito. En el mbito de la evaluacin, es evidente que no todas las entidades le han otorgado hasta ahora la misma relevancia, lo que ha derivado en un desarrollo heterogneo de las reas estatales encargadas de esta actividad. Actualmente, pueden observarse diferencias muy importantes entre las capacidades y las actividades de evaluacin desarrolladas en cada entidad.

16



2. Los objetivos del Sistema Educativo Mexicano2.1 Objetivos generales 2.1.1. Objetivos educativos plasmados en la Constitucin El artculo tercero de la Constitucin Poltica de los Estados Unidos Mexicanos establece los principios y objetivos generales del sistema educativo14. El criterio central que orienta a la educacin est basado en el progreso cientco a la vez que se intentan desarrollar los valores democrticos, los valores nacionales y se fomenta el mejoramiento de la convivencia humana, a travs del desarrollo de los ideales de fraternidad e igualdad de los hombres, evitando los privilegios de razas, de religin, de grupos, sexos o de individuos. Un primer objetivo es la universalidad de la educacin bsica, derecho de todos los sujetos que ser atendido por el Estado en forma gratuita. Asimismo, se establece la laicidad de la educacin. Un segundo objetivo es que se imparta educacin superior y se apoye la investigacin cientca y tecnolgica as como la difusin de la cultura nacional. En el plano de la formacin, se establecen objetivos generales que reeren al desarrollo armnico de las facultades del ser humano, junto con el fomento de valores nacionales de independencia y justicia. 2.1.2. La Ley General de Educacin La Ley de Educacin aprobada en 1993 retoma los objetivos constitucionales al tiempo que especica nuevas metas. Desde entonces, los objetivos en su conjunto se han mantenido como una poltica de Estado relativamente estable (Martnez Rizo 2001). Las principales metas establecidas en la Ley consisten en: 1) la adquisicin de conocimientos por parte de los educandos, as como su capacidad de observacin, anlisis y reexin crtica; 2) el fomento del conocimiento y la valoracin de las tradiciones y particularidades culturales de las diversas regiones del pas; 3) la promocin del conocimiento de la pluralidad lingstica de la Nacin y el respeto de los derechos lingsticos de los pueblos indgenas15; 4) el fomento de actitudes que estimulen la investigacin y la innovacin cientca y tecnolgica; 5) el impulso a la creacin artstica y a la adquisicin, el enriquecimiento y la difusin de los bienes y valores de

En el Anexo II puede consultarse la totalidad del artculo tercero de la Constitucin. A este respecto, la fraccin IV, del artculo 7 de la ley establece que Los hablantes de lenguas indgenas, tendrn acceso a la educacin obligatoria en su propia lengua y espaol.15

14

17


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICOla cultura universal; 5) el estmulo a la educacin fsica y el deporte; 6) el desarrollo de actitudes responsables sobre la preservacin de la salud, la paternidad y la planeacin familiar; 7) la educacin en conceptos y principios bsicos de la ciencia ambiental, el desarrollo sustentable, la valoracin y proteccin del medio ambiente; 8) el fomento de actitudes positivas hacia el trabajo, el ahorro y el bienestar general16 (LGE 1993: artculo 7). La Ley establece adems la equidad como objetivo central del sistema educativo. Para avanzar en esta direccin se establecen medidas como la atencin prioritaria a estados y regiones con mayor rezago educativo y socioeconmico, as como el desarrollo de diversos programas compensatorios. En el plano del funcionamiento del sistema educativo, la Ley ocializa los acuerdos sobre la descentralizacin de la gestin alcanzados con el ANMEB. Otro de los objetivos plasmados en la Ley reere al desarrollo de la participacin social en la educacin, como forma de fortalecer y elevar la calidad, as como de aumentar la cobertura educativa, en el marco de una estrecha colaboracin entre la escuela y la comunidad. Para los nes de este trabajo, interesa destacar especialmente lo que la Ley establece respecto de la evaluacin del sistema educativo (LGE 1993: Captulo II, Seccin 4). All se indica que la evaluacin corresponde a la Secretara de Educacin Pblica, sin perjuicio de las evaluaciones que las Secretaras de cada entidad desarrollen dentro de sus propias competencias. Tanto las evaluaciones de nivel nacional como las de nivel estatal debern tener un carcter sistemtico y permanente, tomndose sus resultados como base para la adopcin de medidas a nivel de las autoridades correspondientes. Se establece, asimismo, que las instituciones educativas debern colaborar con esta tarea, facilitando oportunamente la informacin necesaria y apoyando los procesos de evaluacin. Finalmente, se seala que las autoridades educativas darn a conocer los resultados de las evaluaciones a los maestros, alumnos, padres de familia, y la sociedad en general, con el objetivo de conocer el desarrollo y los avances de la educacin en cada entidad. 2.2 Objetivos educativos del perodo de gobierno actual 2.2.1. El Programa Nacional de Educacin 2001 2006: objetivos en educacin bsica El Programa Nacional de Educacin vigente actualmente retoma y especica las metas educativas reseadas anteriormente. En este programa, adems, se incorporan ciertos cambios en la visin y objetivos del sistema educativo que imprimen una nueva visin de conjunto, sobre todo en lo que respecta a la gestin, evaluacin y transparencia del sistema. Tres objetivos estratgicos estructuran el programa: 1) justicia educativa y equidad; 2) buena calidad de los procesos y logros educativos; y 3) reforma de la gestin

16

En el Anexo II pueden consultarse los artculos 7 y 8 de la Ley General de Educacin.

18

AVANCES, LOGROS Y DESAFOSdel sistema. Tales objetivos son desagregados, para cada nivel educativo, en diversos objetivos particulares, metas, y programas para alcanzarlos. Los objetivos propuestos para el nivel de educacin bsica son: 1. En el plano de la justicia educativa y la equidad: Garantizar el derecho a la educacin brindando igualdad de oportunidades en el acceso, permanencia y el logro educativo para todos los nios y jvenes del pas (SEP 2001: 130). Esto implica particularmente considerar la situacin de los grupos social y culturalmente ms vulnerables, canalizando recursos para compensar estas desventajas, y diseando modalidades educativas exibles. 2. En el plano de la calidad del logro y el proceso educativos: Garantizar que todos los nios y jvenes que cursen educacin bsica adquieran los conocimientos, habilidades, valores y actitudes necesarios para desempearse plenamente como miembros de familia, ciudadanos, y trabajadores (SEP 2001: 137). Para esto es necesaria la adecuacin curricular y de las prcticas pedaggicas, la transformacin de la gestin escolar hacia modalidades ms comprometidas y participativas, la mejora en los materiales y recursos educativos, as como el fortalecimiento de la formacin y la participacin de los docentes. 3. En el plano de la reforma de la gestin institucional: Reformar el funcionamiento del sistema a n de asegurar su ecacia, la continuidad en su evaluacin, as como la eciencia y la transparencia en el uso de los recursos (SEP 2001: 153). Ello implica fortalecer el carcter federalizado de la educacin, ampliar las facultades de decisin de los actores educativos de base as como la participacin social, promover la evaluacin contina del sistema, y fortalecer la rendicin de cuentas hacia la sociedad. 2.2.2. La gestin y evaluacin del sistema educativo: nuevos nfasis El programa educativo asigna una de las tres partes que lo constituyen a la exposicin de los objetivos y polticas transversales a todos los niveles educativos, destinados a mejorar la gestin, evaluacin y transparencia del sistema. Estas metas se enlazan al logro de la equidad y la calidad del sistema en su conjunto17. La necesidad de estas mejoras est directamente referida a la segmentacin geogrca y social del pas. La reforma de la gestin se compone de cinco objetivos particulares que intentan elevar los aspectos de calidad, transparencia y evaluacin. Estos son: 1. Coadyuvar a la consolidacin del Sistema Educativo Nacional mediante el fortalecimiento del federalismo y la adecuacin de la estructura de la SEP. 2. Incrementar los recursos de que dispone el sistema educativo, mejorar su distribucin y establecer mecanismos para hacer ms eciente y transparente su uso. 3. Fortalecer los mecanismos de coordinacin entre autoridades educativas, consulta a especialistas en el campo educativo, y participacin social.


17 El documento hace nfasis en la calidad como una dimensin de la equidad educativa (SEP 2001: 42). A este respecto, en el Anexo II puede encontrarse un fragmento del Programa Nacional de Educacin.

19


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICO4. Actualizar el marco jurdico de la educacin para que constituya un sustento slido, completo y funcional para la operacin de un Sistema Educativo Nacional equitativo y de calidad. 5. La ltima de las metas estratgicas est directamente referida a la evaluacin del sistema. En lneas generales, el programa se propone fortalecer el funcionamiento del sistema educativo mediante la consolidacin del sistema de evaluacin, el fomento de la investigacin y la innovacin educativa, y la renovacin de los sistemas de informacin e indicadores (SEP 2001: 91 a 101). Los pasos establecidos para alcanzar esta meta son: a) La Consolidacin del Sistema Nacional de Evaluacin Educativa. Este objetivo pretende garantizar la sistematicidad, amplitud y coordinacin de la actividad de los diferentes actores involucrados en la evaluacin (p. 25). Las medidas propuestas por el programa para avanzar en esta direccin son: la creacin del Instituto Nacional para la Evaluacin de la Educacin (INEE), encargado fundamentalmente de evaluar el nivel bsico (ver p. 31); la propuesta de creacin de un organismo para la evaluacin de la educacin media superior; la creacin y consolidacin de diversos organismos de evaluacin de la educacin superior; el establecimiento de criterios para asegurar tanto la calidad de las evaluaciones como la adecuacin de su difusin. b) El fomento a la investigacin y la innovacin educativa. Se destaca la necesidad de recopilar los productos de la investigacin e innovacin educativas, fortaleciendo la difusin de sus resultados. Tambin se establece la necesidad de fomentar el dilogo sistemtico entre investigadores y tomadores de decisiones. c) El fortalecimiento de la cultura de la planeacin y evaluacin de programas y proyectos. En este punto interesa destacar el nfasis otorgado por el programa a transitar de una concepcin de la evaluacin como mecanismo de scalizacin, a otra que entienda a la evaluacin como un fomento al aprendizaje organizacional e individual. d) El desarrollo del Sistema Nacional de Indicadores Educativos. Este objetivo apunta a generar nuevos indicadores educativos para integrarlos a los ya existentes, en vista de las nuevas realidades que enfrenta la educacin nacional. El Sistema Nacional de Indicadores se concibe como el elemento articulador e integrador de la informacin sobre el sistema educativo (aprendizajes de alumnos, gestin de escuelas y subsistemas, etctera), de manera que sta sea relevante para la planeacin educativa, y para que los actores educativos formulen proyectos destinados a la mejora de la calidad educativa (este sistema se expone en detalle en la Seccin 3.4). e) La consolidacin del Sistema Nacional de Informacin Educativa. El Sistema de Informacin tiene una importancia estratgica para el programa, dado que est orientado a que la informacin necesaria para la toma de decisiones educativas y rendicin de cuentas en todos los niveles del sistema est disponible en forma oportuna, amplia y conable. Las principales reas que debera cubrir este sistema son los aprendizajes de los alumnos, as como el desempeo de maestros, escuelas, instituciones y entidades. Esto implica incrementar la coordinacin y colaboracin de las diferentes instancias encargadas de evaluar al sistema y difundir los resultados.

20



3. Las principales polticas de evaluacin de la educacin en MxicoPanorama General En la historia del sistema educativo mexicano, las polticas de evaluacin tienen un carcter reciente, no mayor a cuatro dcadas. La sistematizacin de los esfuerzos, la mejora de su calidad, y la difusin de los resultados, son rasgos que slo en la ltima dcada se han aanzado. Tres periodos se distinguen en este desarrollo: 1. El primero abarca las dcadas de 1970 y 1980. A principios de 1970 la Secretara de Educacin Pblica (SEP) mejor y sistematiz signicativamente la recoleccin de informacin censal para la construccin de estadsticas referidas a la educacin nacional. Es tambin en este perodo cuando, en el mbito de la SEP, se realizaron las primeras evaluaciones de aprendizajes en educacin primaria. 2. El segundo periodo comprende la dcada de 1990. En esta etapa se implement un amplio conjunto de instrumentos de evaluacin de aprendizajes en primaria y secundaria, con diversos objetivos: desde la acreditacin de niveles educativos, y asignacin de incentivos a maestros, hasta la evaluacin de aprendizajes en sentido estricto. El proceso de federalizacin del sistema educativo marc fuertemente el periodo, lo que incentiv el desarrollo de un Sistema Nacional de Evaluacin de la Educacin (SNEE) que integrara y coordinara las diversas iniciativas, incluyendo a las reas Estatales de Evaluacin (AEE)18. Es notoria en esta dcada la preocupacin por mejorar la calidad de los mtodos de evaluacin, as como por obtener informacin sobre los contextos culturales y organizacionales donde se desarrollan los aprendizajes. Las iniciativas ms destacables son: a) la evaluacin de los factores de Aprovechamiento Escolar y Preparacin Profesional del Programa de Carrera Magisterial; b) la expansin y consolidacin del Instrumento para el Diagnstico de Alumnos de Nuevo Ingreso a Secundaria (IDANIS); c) los exmenes de ingreso a la educacin media superior y superior desarrollados por el Centro Nacional de Evaluacin para la Educacin Superior (Ceneval); d) las evaluaciones de alumnos y escuelas desarrolladas en el marco de los programas educativos compensatorios del Consejo Nacional de Fomento Educativo (Conafe); e) el programa Evaluacin de la Educacin Primaria (EVEP); y f ) las pruebas de aprendizaje denominadas Estndares Nacionales de Espaol y Matemticas. Asimismo, en esta etapa se aplicaron en Mxico las primeras pruebas de aprendizajes de carcter internacional: a) En 1995: Third International Mathematics andDenominacin que reciben las dependencias evaluadoras del sistema educativo de cada entidad federativa.18

21


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICOSciences Survey (TIMSS, a cargo de la IEA19); b) En 1997: Laboratorio Latinoamericano de Evaluacin de la Calidad de la Educacin (LLECE, a cargo de la OREALC20 UNESCO); c) En 2000: Programme for International Student Assessment (PISA, a cargo de la OECD21). Sin duda, esto constituy el comienzo de una experiencia muy importante para la mejora de las evaluaciones a nivel nacional. 3. El tercer periodo comienza en 2001, a partir de la asuncin del actual gobierno. Esta etapa se caracteriza por dos avances de importancia en relacin a los periodos anteriores. En el terreno poltico, se conere un papel estratgico a la evaluacin de la educacin, como elemento imprescindible para la planeacin y la rendicin de cuentas por parte de la autoridad educativa (SEP 2001: 100). En el mbito institucional, se da un paso fundamental hacia la reestructuracin de las instancias encargadas de la evaluacin, a travs de la creacin del Instituto Nacional para la Evaluacin de la Educacin (INEE)22. Otras evaluaciones iniciadas en la dcada de 1990 se han continuado durante este periodo, mejorando progresivamente sus instrumentos y ampliando su cobertura. La SEP, a travs de la Direccin General de Planeacin y Programacin (DGPyP23), releva peridicamente las estadsticas bsicas del sistema educativo en su conjunto. Tambin se han continuado y mejorado los exmenes de Carrera Magisterial que realiza la DGEP, el IDANIS, las evaluaciones de los programas compensatorios del Conafe, y los exmenes aplicados por el Ceneval. Asimismo, se han instrumentado nuevas evaluaciones para abarcar otras reas y programas del sistema, destacndose el fomento a la autoevaluacin de las escuelas impulsado por la DGEP, la evaluacin cualitativa del Programa Escuelas de Calidad (PEC)24, el Instrumento Diagnstico de Habilidades para la Iniciacin a la Lecto-Escritura y a las Matemticas (IDHILEM) en el nivel preescolar. El Sistema de Evaluacin de la Poltica Educativa (SEPE) y El Sistema Nacional de Evaluacin Educativa (SNEE) A partir del ltimo perodo se ha desarrollado progresivamente la idea de consolidar el denominado Sistema de Evaluacin de la Poltica Educativa (SEPE), con el objetivo19 20

International Association for the Evaluation of Educational Achievement. Ocina Regional de Educacin para Amrica Latina y el Caribe. 21 Organization for Economic Cooperation and Development. 22 Dicho Instituto ocupa actualmente un lugar central en el Sistema Nacional de Evaluacin, desarrollando nuevas pruebas nacionales de aprendizajes en educacin bsica, y participando en la aplicacin las pruebas internacionales. Tambin toma a su cargo el desarrollo de un sistema nacional de indicadores, y la realizacin de investigaciones a partir de los resultados de las pruebas. Al mismo tiempo, difunde los resultados a travs de diversos medios. Esta tarea ha requerido de la colaboracin de mltiples instituciones, entre ellas las reas Estatales de Evaluacin (AEE) y diversas dependencias de la Secretara de Educacin Pblica. 23 Anteriormente, Direccin General de Planeacin, Programacin y Presupuesto (DGPPyP). 24 Este Programa, cuya evaluacin se presenta ms adelante en este mismo captulo (ver seccin 3.3), constituye una de las principales iniciativas del periodo de gobierno 2001-2006 en materia de educacin bsica. Tiene como objetivo principal mejorar la calidad de la educacin en este nivel a travs de la modicacin de las condiciones materiales y de gestin de las escuelas. La meta ocial para nes del periodo de gobierno es cubrir 25,000 escuelas con este Programa.

22

AVANCES, LOGROS Y DESAFOSde dar seguimiento al avance y los resultados del Programa Nacional de Educacin. La concrecin de dicho proyecto est pensada para fortalecer la cultura de la evaluacin y avanzar en los procesos de rendicin de cuentas de las autoridades educativas a la sociedad. La construccin del SEPE es un proyecto de largo plazo, e implica un complejo proceso de coordinacin de esfuerzos, construccin de indicadores, y desarrollo de criterios de evaluacin. Actualmente, el SEPE an no puede considerarse completamente conformado, dado que es necesario realizar importantes avances en diversas reas. El marco conceptual del SEPE se funda en la metodologa conocida como Gestin Integral de Programas Sociales Orientada a Resultados, promovida por la UNESCO y utilizada en varios pases de Amrica Latina en programas de gestin de polticas sociales. Bajo esta metodologa, se entiende como gestin integral de un programa social el proceso de planicacin, ejecucin y evaluacin de dicho programa, buscando la retroalimentacin entre estos momentos. Para ello es necesaria una fuerte articulacin y colaboracin entre el conjunto de actores involucrados en cada etapa del programa, as como la circulacin de informacin vlida y adecuadamente contextualizada. Con base en esta metodologa, el SEPE concibe a la evaluacin como un proceso dinmico, que debe abarcar las tres fases de desarrollo de Programa Nacional de Educacin: Planeacin, Ejecucin y Finalizacin. La evaluacin de la Planeacin comprende bsicamente la valoracin poltica e institucional del Programa. Por su parte, la etapa de Ejecucin implica el monitoreo permanente en el desarrollo de las polticas y el cumplimiento de los compromisos asumidos, como forma de diagnosticar posibles desvos y tomar medidas correctivas. En ltimo trmino, la etapa de Finalizacin es evaluada a partir de los resultados nales del perodo, as como por estudios especcos de impacto de polticas y programas. Tal como se establece en el Programa Nacional de Educacin 2001-2006, los objetivos del SEPE implican adems de la consolidacin del Sistema Nacional de Evaluacin de la Educacin (SNEE, el cual se analiza en las pginas siguientes), el desarrollo de un sistema nacional de indicadores educativos dinmico, conceptualmente pertinente y tcnicamente riguroso25. A esto deben agregarse otros dos aspectos fundamentales: por una parte, la evaluacin integral de polticas y programas especcos (lo que supone no evaluar nicamente su impacto, sino todas las fases del proceso: diseo, comunicacin e implementacin, teniendo en cuenta para ello diversos estndares e instrumentos); y por otra, la sistematizacin de las pruebas de aprendizajes, habilidades y conocimientos en todos los niveles del sistema. La informacin generada en el marco de este sistema debe ser de utilidad tanto para las autoridades educativas nacionales y estatales, los actores de base del sistema educativo, como para la sociedad en general. En el primer mbito, se espera que el SEPE brinde informacin actualizada y conable sobre la marcha de las polticas y programas educativos establecidos en el programa, as como sobre el cumplimiento de los objetivos y sub-objetivos estratgicos (equidad, calidad, reforma de la gestin). En el mbito de los actores de base, se destaca la funcin que el SEPE podra


Las caractersticas de este sistema de indicadores, tal como est desarrollado en la actualidad, son desarrolladas en la Seccin 3.4.

25

23


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICOtener para el intercambio de opiniones en el seno de la comunidad educativa. Finalmente, con respecto a la sociedad en general, la principal funcin del sistema se entiende a partir de la rendicin de cuentas. La construccin de un sistema nacional de evaluacin de la educacin (SNEE) eciente y articulado, ha constituido otro gran desafo de la evaluacin educativa nacional durante la ltima dcada. Este proceso puede considerarse an en un estadio intermedio de concrecin. El avance en este sentido requiere de la denicin y coordinacin, para cada nivel del sistema educativo, de las atribuciones de los organismos vinculados con la evaluacin (federales, estatales, e instancias externas), as como el fortalecimiento de sus capacidades. El panorama global que se presenta a continuacin representa una propuesta simplicada de estructura para el SNEE, la cual debe interpretarse tomando en cuenta el largo camino que an queda por recorrer. Como puede observarse en el cuadro 3.1 (ver nal del apartado), el SNEE debe articular tres mbitos de evaluacin: el que corresponde a la autoridad federal, el de las autoridades estatales, y el de las instancias externas de evaluacin. En cada uno de estos rdenes deben establecerse las responsabilidades y funciones respecto de la visin estratgica del sistema (es decir, la denicin de aspectos a ser evaluados, as como de los indicadores y estndares a utilizar), la evaluacin de aprendizajes, y la evaluacin de escuelas y maestros26. En la actualidad, tanto la autoridad federal como las instancias externas tienen un papel decisivo en la visin estratgica de las evaluaciones, as como en la conceptualizacin de las pruebas, mtodos, instrumentos y estndares. Dichos mbitos son adems los que coordinan normativa y operativamente la mayor parte de las evaluaciones que se detallarn en las prximas pginas. Las autoridades estatales, en su mayor parte, han tenido hasta ahora un papel generalmente pasivo, limitndose a ser aplicadores y recolectores de las pruebas diseadas en los niveles superiores. Esta armacin general no debe ocultar la considerable heterogeneidad existente entre la iniciativa de las AEE respecto de la evaluacin. Como se ha expresado en los primeros captulos, las autoridades estatales enfrentan condiciones muy heterogneas en la provisin de los servicios educativos. Esto, aunado al hecho de que an no se ha consolidado una cultura de la evaluacin en la forma que sera deseable, lleva a que las autoridades estatales otorguen pesos diferentes a la evaluacin en los programas educativos. Por lo tanto, pueden observarse notorias diferencias en la forma como los estados se involucran en la evaluacin educativa, y en el modo como difunden y utilizan sus resultados. Por lo anterior, si bien an es necesario realizar avances en la integracin de la actividad de la autoridad federal y de las instancias externas, sin duda el aspecto susceptible de mayores mejoras es el que concierne a la participacin de las reas Estatales de Evaluacin (AEE). Debe promoverse que, en el futuro cercano, todos los estados participen activamente en la elaboracin de los instrumentos (tanto conceptuales como tcnicos) de evaluacin, enriqueciendo los criterios utilizados de forma que reejen la diversidad de situaciones educativas nacionales. Al mismo tiempo, debe fortalecerse la capacidad

26 Por razones de simplicidad en la presentacin no se ha considerado el rea de evaluaciones internacionales.

24

AVANCES, LOGROS Y DESAFOSde las AEE para que realicen evaluaciones propias, tanto de los programas y polticas educativas de nivel estatal, de las formas de gestin y administracin del sistema educativo, como de las pruebas de aprendizaje aplicadas por las instancias externas o la autoridad federal. Esto contribuira a que los resultados fuesen aprovechados en forma ms sistemtica para la toma de decisiones y la rendicin de cuentas a nivel estatal. Algunas entidades muestran avances signicativos en este sentido, pero es necesario que la totalidad de los estados se integren a este proceso. En lo que concierne especcamente al nivel de educacin bsica, la construccin del SNEE supone la articulacin de la actividad de los organismos evaluadores dependientes de la autoridad federal (en particular de la nueva Unidad de Planeacin y Evaluacin de Polticas Educativas, UPyEPE), de las subsecretaras para cada nivel educativo (Subsecretara de Educacin Bsica, SEB; Subsecretara de Educacin Media Superior, SEMS), las reas Estatales de Evaluacin, y el INEE. En el nivel medio superior, se agrega la participacin de las Comisiones Estatales para la Planeacin de la Educacin Media Superior (CEPEMS) para el rea de visin estratgica, del Ceneval en la evaluacin de aprendizajes, y se tiene prevista la creacin de un nuevo organismo encargado especcamente de la evaluacin de este nivel. En el nivel superior, la actividad de evaluacin a nivel de la autoridad federal correspondera a la Subsecretara de Educacin Superior (SES), articulndose con instancias externas como el Ceneval, los CIEES, y el Copaes (ver Seccin 3.5). A nivel de las entidades, se integraran las Comisiones Estatales para la Planeacin de la Educacin Superior (COEPES) en el rea de visin estratgica.


CUADRO 3.1: EL SISTEMA NACIONAL DE EVALUACIN NivelesEducacin Bsica Visin estratgica Evaluacin de aprendizajes Evaluacin de escuelas y maestros Educacin Media Superior Visin estratgica Evaluacin de aprendizajes Evaluacin de escuelas y maestros Educacin Superior Visin estratgica Evaluacin de aprendizajes Evaluacin de escuelas y maestrosAEEs UPyEPE (DGEP) SEMS

Autoridad federal

Autoridades estatales

Instancias externas

UPyEPE (DGEP) SEB

AEEs

INEE

UPyEPE (DGEP) SEMS

CEPEMS

INEE, nuevo organismo INEE, Ceneval, nuevo organismo INEE, nuevo organismo

SES

COEPES Ceneval

SES

CIEES, Copaes

Fuente: Adaptado del Plan Maestro de Desarrollo 2004-2012 del INEE (INEE 2004a, Anexo C).

25


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICOEn las secciones siguientes se exponen en detalle las iniciativas de evaluacin ms importantes desarrolladas en Mxico, como forma de dar a conocer la magnitud, diversidad y calidad de los esfuerzos requeridos para la construccin del sistema nacional de evaluacin. 3.1. Evaluaciones de aprendizajes en el mbito nacional 3.1.1. Primeras experiencias de evaluacin: las dcadas de 1970 y 1980 En esta etapa se implementan las primeras iniciativas de evaluacin del sistema educativo. Debido a este carcter inicial, as como al estado del conocimiento sobre evaluacin, las pruebas de aprendizaje de este periodo no posean la calidad que caracteriza a las actuales. No se dispona, por ejemplo, de tcnicas psicomtricas y estadsticas que garantizaran la comparabilidad de los resultados y la estabilidad de las escalas (SEP 2002a: 388). Por otra parte, consideraciones de orden poltico se oponan a la difusin de resultados, y dicultaban su incorporacin como insumo sistemtico para el diseo de polticas. No exista, en este sentido, una cultura de la evaluacin desarrollada. A pesar de estas dicultades, los esfuerzos realizados denotan la inquietud creciente de las autoridades por conocer el estado de la educacin como forma de mejorar las decisiones de poltica. Destaca particularmente en este periodo, el esfuerzo realizado por la SEP para mejorar la informacin censal sobre el sistema educativo, con el objeto de desarrollar estadsticas conables y comparables a travs del tiempo. Gracias a estos esfuerzos es posible contar hoy con series extensas que permiten conocer tanto la evolucin de aspectos bsicos (matrcula, cobertura) como algunos procesos escolares relevantes para la calidad (eciencia terminal, desercin, rezago). Las primeras evaluaciones de aprendizajes que tuvieron lugar en esa poca estaban ms orientadas a la seleccin para el ingreso a niveles educativos superiores que a la evaluacin en sentido estricto. En 1972 se aplican las primeras pruebas en gran escala, como insumo de decisin sobre el ingreso de alumnos a la educacin secundaria. En el ao 1974 se crea la Subdireccin de Evaluacin y Acreditacin27, dentro de la Secretara de Educacin Pblica (SEP), y se continan aplicando pruebas de seleccin. La primera evaluacin de aprendizajes, en sentido estricto, se realiza durante el sexenio 1976-1982 a travs de un proyecto denominado Evaluacin del rendimiento acadmico de los alumnos de 4 y 5 grado de educacin primaria, basado en muestras de alumnos con representatividad nacional. 3.1.2. Evaluaciones de aprendizajes desarrolladas en la dcada de 1990 La dcada de1990 represent un avance signicativo respecto del perodo anterior. La federalizacin del sistema educativo coincidi con un aumento en la preocupacin de las autoridades educativas por desarrollar instrumentos de evaluacin con-

27 Esta Subdireccin sera transformada, en 1984, en la Direccin General de Evaluacin (DGE), y en 2005 se denomin Direccin General de Evaluacin de Polticas (DGEP).

26

AVANCES, LOGROS Y DESAFOSables y sistemticos, que pudieran ser utilizados para disear polticas educativas ecaces. La Ley General de Educacin de 1993 establece explcitamente que la evaluacin general del sistema corresponde a la SEP; que esta evaluacin deber ser sistemtica y permanente; que deber contribuir a la toma de decisiones por parte de las autoridades educativas; y que deber ser difundida entre los diferentes actores del sistema, las familias y la sociedad en general (artculos 29, 30 y 31). En este contexto, la DGEP se convierte en un actor central (Fernndez y Midaglia 2003), encargndose del diseo y la coordinacin de mltiples evaluaciones. Sus funciones generales, a cumplir de manera coordinada con las instancias correspondientes, son: Evaluar de manera sistemtica y permanente el desarrollo del sistema educativo, el cumplimiento de sus objetivos, programas y proyectos, as como su impacto, de acuerdo con lo establecido por el Programa Nacional de Educacin. Evaluar la asignacin de recursos pblicos por parte de la Secretara de Educacin Pblica, proponiendo medidas correctivas cuando fuera necesario. Participar en el desarrollo y coordinacin de la poltica nacional de evaluacin educativa, del sistema nacional de evaluacin educativa, y de la participacin de Mxico en las evaluaciones internacionales. Participar en el desarrollo de criterios y parmetros de evaluacin. Proponer lineamientos generales de evaluacin a las autoridades locales. Proponer, a partir de la evaluacin, prioridades, polticas y programas de carcter estratgico. Durante la dcada de 1990, la DGEP continu con la aplicacin del Instrumento para el Diagnstico de Alumnos de Nuevo Ingreso a Secundaria (IDANIS), iniciado sistemticamente en 1989. A partir de 1994, desarroll la evaluacin del Aprovechamiento Escolar en el marco del Programa de Carrera Magisterial y la evaluacin del Programa para Abatir el Rezago Educativo (PARE); desde 1996, el programa Evaluacin de la Educacin Primaria (EVEP); a partir de 1998, las pruebas de Estndares Nacionales. Algunas de estas pruebas continan aplicndose en la actualidad, mientras que otras han sido sustituidas o sustancialmente modicadas. Instrumento para el Diagnstico de Alumnos de Nuevo Ingreso a Secundaria (IDANIS) El IDANIS se aplica sistemticamente desde 1989 a los alumnos de 6 ao de educacin primaria con el objetivo de tener un conocimiento individualizado de las habilidades bsicas en las reas verbal, matemtica, y de razonamiento, a n de distribuirlos en las escuelas secundarias. Inicialmente, se aplic selectivamente en dos entidades, y en 1991 se expandi a 16, con carcter censal. Actualmente la prueba se aplica en veinte de las 32 entidades del pas28. Los resultados de las pruebas aportan informacin sobre las habilidades de cada alumno, que se ubican en cuatro niveles de logro. Estos resultados tambin se agrupan por escuela, pero no permiten realizar comparaciones rigurosas entre sus niveles


28

En la tabla 10 del Anexo I pueden consultarse otras caractersticas relevantes de esta prueba.

27


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICOde logro, debido a que, con excepcin del Distrito Federal, las pruebas no se acompaan de cuestionarios de contexto. Dichos cuestionarios s fueron aplicados durante los primeros aos de desarrollo de la prueba en todas las entidades participantes, lo que permiti la realizacin y publicacin, a nivel internacional, de los primeros anlisis multivariados de base censal orientados a conocer el impacto de los factores de contexto sobre la calidad de la educacin en Mxico (Palafox, Prawda y Vlez 1992). Evaluacin del Factor de Aprovechamiento Escolar (Carrera Magisterial) El programa de Carrera Magisterial se inicia en 1992. Su objetivo principal es establecer una estructura de incentivos econmicos y escalafonarios a los maestros y directores, de acuerdo a su desempeo y al de sus alumnos. Se evalan dos factores bsicos: la preparacin profesional del docente, y el aprovechamiento (aprendizaje de los alumnos). Actualmente a travs de este ltimo se evala a cerca de 7,000, 000 de alumnos de Educacin Bsica. Esto no constituye, sin embargo, una muestra representativa de la realidad nacional, debido a que el programa es de naturaleza voluntaria: los docentes eligen si desean inscribirse. La DGEP tiene la responsabilidad principal en la evaluacin. Su amplitud ha requerido del establecimiento de estructuras orgnicas donde se involucra tanto al personal centralizado como a las autoridades educativas estatales (Velzquez 2000: 663). Las pruebas utilizadas son del tipo basadas en normas29, lo que ocasiona que no pueda conocerse en sentido estricto lo que los alumnos han aprendido con respecto a los Programas ociales. A esto debe agregarse que no se recoge informacin sobre el contexto sociocultural del alumno, lo que no permite hacer estimaciones del valor agregado de las prcticas docentes. Todos estos rasgos derivan en que estas pruebas no puedan ser consideradas como evaluaciones de la calidad de los aprendizajes en sentido estricto. Con excepcin de reportes bsicamente descriptivos, no se conocen anlisis evaluativos de esta informacin. La evaluacin del Programa para Abatir el Rezago Educativo (PARE) y el Programa Evaluacin de la Educacin Primaria (EVEP) El PARE fue un programa compensatorio a cargo del Consejo Nacional de Fomento Educativo (Conafe), iniciado en el ciclo escolar 1991-1992, orientado a mejorar la calidad de las escuelas en los cuatro estados con mayor nivel de marginacin. Uno de los componentes del programa fue la evaluacin de los aprendizajes y de los procesos de aula. Se pretenda contar con elementos que permitieran conocer los impactos del programa sobre los aprendizajes, as como mejorar la calidad de los procedimientos de evaluacin que utilizan los docentes, y propiciar la autoevaluacin de las escuelas (Velzquez 2000: 655).

El diseo de estas pruebas supone que tanto los reactivos ms sencillos como los ms difciles sean eliminados. Asimismo, los resultados individuales se reportan por referencia a la media poblacional.

29

28

AVANCES, LOGROS Y DESAFOSLa evaluacin abarc de 1991 a 1995, considerndose niveles de aprendizaje y habilidades de los alumnos, caractersticas socioeconmicas y antecedentes escolares, as como las condiciones de la oferta educativa (diversas caractersticas de los maestros y directores). A partir de estas evaluaciones la SEP present informes descriptivos, de gran exhaustividad, desde el ao 199230. A partir de esta experiencia, se dise el Programa para Abatir el Rezago en la Educacin Bsica (PAREB), en cuyo marco se desarroll el Programa Evaluacin de la Educacin Primaria (EVEP). Su objetivo era obtener informacin que permitiera generar series histricas sobre el nivel de aprendizajes no solamente en los estados que eran objeto de polticas compensatorias, sino tambin en el resto de las escuelas del pas. Desde el primer levantamiento del EVEP, en 1996, se aplicaron pruebas de aprendizaje de Espaol y Matemticas a alumnos de 3 y 6 grado, junto con cuestionarios de contexto a padres, docentes y directores. En los aos siguientes se ampliaron las reas de conocimiento evaluadas, totalizando cinco levantamientos en una muestra panel de escuelas hasta el ao 2000, y se publicaron los resultados en la pgina Web de la SEP, desagregados de diversas formas. No se conocen anlisis ms complejos de la informacin a nivel cuantitativo. La importancia del EVEP radica en que constituye el primer intento de realizar una evaluacin de aprendizajes exhaustiva, del tipo de las que estaban difundindose en la dcada de 1990 en Amrica Latina. Constituye un valioso antecedente para la evaluacin de aprendizajes que actualmente desarrolla el INEE. Por otra parte, el desarrollo de este programa contribuy a fortalecer a las reas Estatales de Evaluacin (AAE), dado que se capacit al personal tcnico de las entidades mediante diversos diplomados, seminarios, cursos y talleres. Olimpadas del Conocimiento Infantil El objetivo principal de este instrumento, creado en 1993, es estimular el esfuerzo de los estudiantes a travs de un sistema de incentivos y becas. La prueba est destinada a alumnos de 6 grado de primaria, as como de tercer nivel de Cursos Comunitarios, Escuelas Indgenas y Escuelas Particulares. Diversas instituciones son responsables de la implementacin de esta prueba, incluyendo a las autoridades educativas estatales, lo que supone una importante coordinacin de esfuerzos. Se cubren seis reas de conocimiento en las pruebas, vinculadas al currculo vigente: Espaol, Matemticas, Geografa, Historia, Ciencias Naturales y Educacin Cvica. Cada una de estas reas es evaluada a travs de un conjunto de reactivos de opcin mltiple. No obstante, las Olimpadas no constituyen un instrumento de evaluacin de aprendizajes en sentido estricto, debido a que se selecciona para su aplicacin a los alumnos que obtienen resultados ms destacados en cada entidad (-


30 Existen, adems, investigaciones cualitativas que enriquecieron signicativamente el conocimiento de la situacin de las escuelas rurales y de la educacin indgena, as como de los desafos para su mejora (Ezpeleta y Weiss 1996, 2000).

29


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICOnalmente participan entre diez y treinta alumnos por entidad). De esta forma, en el ciclo 2003-2004, participaron ms de 3,200 alumnos en todo el pas. Exmenes del Centro Nacional de Evaluacin para la Educacin Superior (Ceneval) En educacin media y media superior destacan, por la amplitud de su cobertura y la calidad de sus instrumentos, los exmenes que aplica el Ceneval. Dicho centro es una Asociacin Civil constituida en 1994, con el objetivo de aplicar exmenes de ingreso a educacin media superior y superior, a solicitud de las instituciones interesadas. Los resultados de estos exmenes son utilizados por mltiples instituciones para la admisin de alumnos a los cursos de educacin media superior y superior. Interesa destacar aqu los Exmenes Nacionales de Ingreso denominados EXANI-I y EXANIII31. El EXANI-I se aplica anualmente desde 1994 a los alumnos que desean ingresar a la educacin media superior. Las pruebas evalan la habilidad verbal y matemtica, conocimientos disciplinarios, e informacin sociocultural de los estudiantes. Actualmente el nmero anual de sustentantes es de aproximadamente 600,000. El EXANI-II tambin se aplica desde 1994, y evala las habilidades de quienes desean ingresar a la educacin superior (ms de 250,000 sustentantes anualmente). En la denicin del contenido de las pruebas ha participado un gran nmero de instituciones de educacin superior, debido a la necesidad de consensar mecanismos de evaluacin acordes a sus mltiples necesidades. Las pruebas estn divididas en diversos mdulos, algunos comunes, y otros optativos segn las demandas de las instituciones interesadas. Es importante destacar que el Ceneval no toma decisiones sobre ingreso y asignacin de estudiantes a las instituciones educativas, sino que provee la informacin necesaria para que las propias instituciones conozcan las caractersticas de su demanda y tomen las decisiones sobre admisin de estudiantes. Estndares Nacionales de Espaol y Matemticas Las pruebas de Estndares Nacionales (EN) representaron una innovacin dado que se orientaron a conocer el grado en que los alumnos alcanzaban los estndares mnimos propuestos en los programas ociales. La DGEP tuvo a cargo la elaboracin de las pruebas y el diseo de los mecanismos de evaluacin entre los aos 1998 y 2003. A partir de ese ao, su aplicacin se traslad al Instituto Nacional para la Evaluacin de la Educacin (INEE). Su diseo busc elevar la validez y conabilidad de los instrumentos, para lo cual la SEP convoc a diversos especialistas y funcionarios. No obstante, las pruebas presentaron diversas fallas debido a factores tcnicos, administrativos, al gran volumen de las aplicaciones, y al propio carcter novedoso de la iniciativa. La mejora en la conceptuacin y observacin de los aprendizajes se reeja en la adopcin de un modelo

31

En la tabla 11 del Anexo I se encuentra un resumen de las caractersticas de ambas pruebas.

30

AVANCES, LOGROS Y DESAFOSde evaluacin basado en estndares, as como en la estimacin de los resultados mediante el mtodo Rasch. Sin embargo, la denicin de dominios y estndares no est sucientemente fundada en el currculo nacional; tambin se han detectado fallas tcnicas en las escalas de resultados (INEE 2003a: 45). Se aplicaron cuestionarios de contexto para los alumnos, as como cuestionarios para revelar las caractersticas de los docentes, directores y escuelas. No obstante, hasta el ao 2003 no se dispona de un marco conceptual denido para su diseo. En parte debido a esto, se aplicaron cuestionarios diferentes en cada ciclo, lo cual dicult el uso de los datos para contextualizar los resultados, as como para realizar comparaciones entre ciclos escolares. Durante los primeros aos de la aplicacin predomin una lgica que llevaba a recoger informacin para seis grados escolares cada ao, lo cual es poco eciente dado que la informacin necesaria para construir buenos diagnsticos puede recogerse a partir de diseos menos costosos, espaciando la evaluacin de los grados en el tiempo. La misma aplicacin de las pruebas presentaba debilidades: no se realizaban pilotajes, y los levantamientos de datos no se realizaron en los mismos momentos del perodo escolar en todos los aos. Estos factores ocasionaron que no se realizaran estudios intensivos de la informacin (INEE 2003a: 46). 3.1.3. La evaluacin a partir del ao 2000 La mayor parte de las evaluaciones implementadas durante la dcada de 1990 se han continuado y ampliado durante los ltimos aos, aanzndose como elementos permanentes en la construccin de un sistema nacional de evaluacin. En forma progresiva, se han mejorado los instrumentos utilizados para evaluar aprendizajes, y se observa un incremento en la calidad de la participacin de algunas entidades, as como en la difusin de sus resultados. Diversos esfuerzos se han realizado durante los ltimos aos para avanzar en la consolidacin del sistema nacional de evaluacin. De entre estos cabe destacar particularmente la creacin del Instituto Nacional para la Evaluacin de la Educacin (INEE), el cual ocupa actualmente un lugar central en la evaluacin educativa nacional. El Instituto Nacional para la Evaluacin de la Educacin (INEE) El INEE se crea en el mes de agosto de 2002 por decreto presidencial32. El decreto de creacin establece que al Instituto le corresponde evaluar la educacin bsica y media superior, a travs de las siguientes actividades: el desarrollo de un sistema de indicadores que permita evaluar la calidad del Sistema Educativo Nacional; apoyar la realizacin de evaluaciones nacionales de aprendizaje; desarrollar modelos de evaluacin de escuelas; apoyar la evaluacin educativa en las entidades federativas; disear instrumentos y sistemas de evaluacin adecuados a cada nivel, apoyando en su aplicacin y anlisis, as como supervisando su implementacin; impulsar y forta-


32

Los artculos 1 a 5 de este Decreto pueden consultarse en el Anexo II, Fragmento 6.

31


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICOlecer la cultura de la evaluacin, difundir resultados y capacitar en materia de evaluacin; realizar investigaciones en la materia, y coordinar la participacin de Mxico en los proyectos de evaluacin internacionales. El INEE cuenta con condiciones institucionales de trabajo que favorecen la calidad de las evaluaciones. Uno de sus principios denitorios es la autonoma tcnica respecto de las autoridades educativas (INEE 2004a), que garantiza la imparcialidad de los juicios sobre el sistema educativo. De esta manera, el INEE es reconocido como una autoridad conable y rigurosa en materia de evaluacin. Un elemento decisivo de esta autonoma est dado por la composicin de su Consejo Tcnico, integrado por reconocidos acadmicos y especialistas en materia de educacin, tanto mexicanos como extranjeros. El segundo principio denitorio del INEE es la cercana, esto es, una relacin estrecha tanto con las autoridades educativas nacionales y estatales, como con la sociedad en general y las familias de los alumnos en particular. A travs de este principio se busca acercar los resultados de las evaluaciones a los actores mencionados, con el n de contribuir al desarrollo de polticas educativas ecaces, y fomentar la participacin social. En tercer lugar, el INEE representa un cambio importante en la poltica de difusin y uso de los resultados, aspecto en el cual se busca explcitamente la mayor transparencia posible, y al que se dirigen mltiples actividades de difusin (ver captulo 4). Las pruebas de aprendizaje desarrolladas por el INEE Actualmente, el INEE evala al sistema educativo en diez grandes reas, las cuales integran el denominado Sistema Nacional de Indicadores (ver Seccin 3.4). Entre estas reas destacan por su relevancia los resultados educativos de los alumnos de nivel bsico, en las asignaturas de Espaol, Matemticas, Ciencias Naturales y Ciencias Sociales. En este apartado se presentan las caractersticas de las pruebas de aprendizajes desarrolladas por el INEE para generar dicha informacin, y de los cuestionarios de contexto que acompaan tales pruebas. A partir de 2003, el INEE est a cargo de las pruebas nacionales de aprendizaje, basadas en muestras con representatividad nacional y estatal, en los niveles primario y secundario de la educacin bsica. Desde entonces se ha buscado mejorar la calidad de los instrumentos, desarrollndose en 2005 una nueva generacin de pruebas denominadas Exmenes de la Calidad y el Logro Educativos (Excale), cuyas caractersticas se enumeran a continuacin33.

33 La tabla 10 del Anexo I resume los rasgos distintivos de estas pruebas, desarrolladas en sustitucin de Estndares Nacionales. Constituyen una experiencia indita en Mxico debido al carcter colegiado, la exhaustividad, y la calidad de sus procesos de planeacin y construccin. Se han recogido experiencias de reconocida calidad en el mbito nacional e internacional, y se ha contado con el asesoramiento de numerosos especialistas, acadmicos, y actores del sistema educativo. Cada etapa del diseo, construccin, aplicacin, anlisis y validacin de las pruebas Excale est cuidadosamente especicada en manuales tcnicos y marcos de referencia (de acceso pblico en la pgina Web del INEE www.inee.edu.mx o www.inee.com. mx). Informacin ms detallada sobre el proceso de elaboracin puede consultarse en el documento Plan General de Evaluacin de Aprendizaje. Proyectos Nacionales e Internacionales (INEE 2005).

32

AVANCES, LOGROS Y DESAFOS Se trata de pruebas de tipo criterial. A diferencia de las pruebas de tipo normativo (donde los resultados individuales se interpretan por referencia a las puntuaciones obtenidas por otros individuos), stas se interpretan de acuerdo con el grado en que los sujetos evaluados dominan un conjunto especco de contenidos. Las pruebas estn alineadas al currculo nacional. Dado que Mxico cuenta con programas unicados, libros de texto gratuitos y una formacin docente homognea, es posible elaborar reactivos de aplicacin nacional, los cuales se evalan de acuerdo con los estndares jados por estos mismos programas. Esto ha supuesto la realizacin de un gran esfuerzo de identicacin y precisin de contenidos, en el que han participado numerosos especialistas. Los reactivos se aplican siguiendo un diseo matricial. Esto implica, en trminos simplicados, que para evaluar un dominio curricular no es necesario que todos los alumnos respondan la totalidad de los reactivos, sino que stos pueden muestrearse entre el conjunto de individuos. Esta tcnica permite que cada alumno responda un nmero menor de reactivos (perdindose precisin a nivel individual), pero que en la totalidad de la muestra se cubra un espectro muy amplio de contenidos (garantizando su validez a nivel agregado). Se ha diseado un plan de aplicacin que comprende la evaluacin de cinco grados del sistema educativo, desde el nivel preescolar hasta la educacin media superior, a travs de pruebas especcas. Debido a que los resultados tienden a mostrar escasa variacin de un ao a otro, no se considera necesario evaluar en cada oportunidad a todos los grados, sino que se ha diseado un programa cclico hasta el ao 2016 en el cual los grados evaluados se alternan34. En cada nivel, las pruebas abarcan diferentes dominios curriculares y cognitivos. Los dominios curriculares son considerablemente ms amplios en estas pruebas que en la generacin anterior, ya que a la evaluacin de matemticas y comprensin lectora agregan adems de una seccin de redaccin de espaol dos nuevos dominios temticos: Ciencias Naturales y Ciencias Sociales35. Estas pruebas tambin evalan las destrezas cognitivas o habilidades de los alumnos en los dominios curriculares relevantes (capacidad de interpretacin y recuperacin de informacin; capacidad de razonamiento y resolucin de problemas; elaboracin de explicaciones, etctera). Los reactivos utilizados son fundamentalmente de opcin mltiple. Sin embargo, debido a que estos presentan limitaciones cuando se pretende evaluar contenidos complejos o habilidades, se han incluido reactivos de respuesta construida36 en una sub-muestra nacional (como es el caso de la seccin de redaccin en la prueba de espaol). En este punto importa destacar la complejidad conceptual de las pruebas, que incluyen en cada rea reactivos de diferentes niveles de dicultad, y orientados a diferentes aspectos del aprendizaje. El complejo proceso de


3435

La tabla 13 del Anexo I presenta el ciclo de evaluaciones previsto por el INEE hasta 2016. La tabla 14 del Anexo I ofrece una sntesis de los dominios evaluados en cada grado. 36 En este tipo de reactivos, a diferencia de los de opcin mltiple, los sujetos evaluados deben elaborar y escribir la respuesta.

33


POLTICAS Y SISTEMAS DE EVALUACIN EDUCATIVA EN MXICOconstruccin, validacin y piloteo de estos reactivos puede ser consultado en los Manuales Tcnicos disponibles en la pgina Web del INEE. Las muestras de alumnos y escuelas han sido cuidadosamente diseadas para garantizar la representatividad de los resultados a nivel nacional y de cada una de las 32 entidades. En 2005 se evaluaron aproximadamente 50,000 alumnos en cada nivel, 2,800 escuelas de nivel primario (6 ao), y otros tantos en 2,400 escuelas de nivel secundario (3er ao). Finalmente, los resultados de las pruebas se presentan mediante escalas construidas a travs de procedimientos estadsticos basados en la Teora de Respuesta al Item. Los resultados de alumnos, escuelas, entidades y modalidades pueden compararse dentro de cada escala. No obstante, la forma de construccin de cada escala hace que stas no sean comparables entre s (es decir, no pueden compararse los resultados en Matemticas y Espaol). Estas escalas son divididas en niveles de logro, a travs de los cuales es posible interpretar los resultados en forma conceptualmente signicativa. Simultneamente con las pruebas de aprendizaje se aplica un conjunto de cuestionarios denominados de contexto, cuya informacin es fundamental para conocer los procesos implicados en la calidad de los resultados educativos. Dichos cuestionarios son el producto de un proceso de elaboracin riguroso conceptual y metodolgicamente, en el que participan numerosos especialistas tanto internos como externos al INEE. Concretamente, se aplican los siguientes instrumentos: Un cuestionario de alumnos, orientado principalmente a obtener informacin sobre su contexto familiar y sociocultural, as como aspectos psicolgicos y pedaggicos que afectan su rendimiento acadmico, tales como: trayectorias escolares; expectativas, preferencias y estrategias de aprendizaje; apoyo acadmico en la familia; uso de recursos informticos; clima de aula; y percepciones acerca del maestro. Un cuestionario de maestros (aproxima

politicas de evaluacion en mexico

Documents