PRUEBA PILOTO LAMPPARAGUAY 2010

Temario

• Objetivos de la prueba piloto

• Trabajo interinstitucional

• Etapas del estudio piloto

• Población objetivo y muestra

• Recolección de datos

• Procesamiento de datos

• Lecciones aprendidas para el estudio principal

• Principales resultados

• Encuesta principal 2011

Objetivos de la prueba piloto

• Evaluar el marco muestral y la muestra adoptada.

• Comprobar la tasa de respuesta esperada.

• Evaluar el funcionamiento y pertinencia de los ítems delCuestionario de Antecedentes (CA) y de los instrumentoscognitivos y revisar los manuales operativos adaptados alcontexto nacional.

• Poner a prueba el proceso de capacitación y ensayar losprocedimientos operacionales y logísticos en las distintasetapas de la recolección y procesamiento de datos.

• Comprobar las previsiones en materia de diseño, tiempoy costo para el estudio principal.

• Evaluar la factibilidad de la implementación del estudioprincipal a partir de la formación de capacidades técnicasnacionales.

Trabajo interinstitucional

• Constitución de la Comisión Mixta Interinstitucional,integrada por las máximas autoridades del MEC, DGEEC yOEI para la implementación del estudio LAMP, a través deun convenio.

• Conformación de un Equipo Técnico Nacional (ETN),integrado por representantes del MEC, DGEEC y OEI.

• Coordinación Nacional encargada de las actividadesprevistas en el LAMP.

• Constitución de Equipos Técnicos ad hoc, integrados porfuncionarios de las instituciones involucrados en lasfunciones operativas de las diferentes etapas del proceso.

• Fortalecimiento del trabajo intra e interinstitucional conun enfoque interdisciplinario, lo cual constituyó un valoragregado al propiciar el desarrollo de actividadescooperativas, complementando criterios y estrategias apartir de los aportes de cada integrante en torno a unproyecto común.

• Fortalecimiento de capacidades técnicas y metodológicasen las instancias intervinientes para la realización deestudios de esta naturaleza.

Como resultado se constató la instalación y arraigo de capacidades para la realización del estudio LAMP con un efecto inclusivo, que dio lugar a la suma de las capacidades institucionales durante el proceso.

Trabajo interinstitucional

Población objetivo y muestra (i)

• La encuesta LAMP está dirigida a la población paraguaya de15 años o más de edad que reside en viviendas particulares.

• Con esta definición quedan excluidos los ocupantes deviviendas colectivas y de otros tipos de establecimientos.

• Además fueron excluidas las comunidades indígenas (1,7%de la población) y los distritos de difícil acceso (Norte yOeste del Chaco) 1,3 % de la población. Con estasexclusiones, se mantuvo un nivel de cobertura poblacionalaceptable para el LAMP, de más del 95% de la poblaciónobjetivo.

• El estudio piloto fue aplicado en 8 distritos del paísseleccionados según criterios definidos para el diseñomuestral.

• Inicialmente se realizó una selección de viviendas análoga a ladel estudio principal, para poner a prueba el diseño de lamuestra. Para la mitad de los distritos se adoptó una muestraintencional, con el fin de completar los tamaños de muestrade los módulos del LAMP recomendados para el estudiopiloto.

• La muestra final fue de 820 viviendas de las cuales seconcretaron 622 entrevistas personales, con un 30% de norespuesta

• Para la selección de las viviendas se realizó previamente unaactualización cartográfica en las áreas de empadronamiento.

Población objetivo y muestra (ii)

Etapas del estudio piloto

Adaptación de instrumentos LAMP

• Adaptación de la batería de instrumentos y manualesoperativos LAMP al contexto sociocultural y lingüístico deParaguay, conforme a los estándares del Programa LAMP.

• Idioma de aplicación: castellano, a excepción del CA(según perfil sociolingüístico del encuestado).

• Pre-test de instrumentos aplicado a personas de distintosniveles educativos.

• Ajustes, validación y aprobación final de losinstrumentos.

• Sistematización del proceso de adaptación a través dedocumentación técnica.

Etapas del estudio piloto

Capacitación

• Se capacitó en forma diferenciada a grupos de personassegún funciones y ámbitos de competencia en el estudio.

• La capacitación a supervisores y encuestadores incluyó:

• Actividades de autoaprendizaje.

• Actividades presenciales de 7 jornadas a tiempocompleto.

• Actividades de simulaciones y prácticas de campo de 2días.

• Jornada exclusiva dirigida a supervisores de trabajo decampo.

Objetivos de la capacitación

• Adquisición de conocimientos y habilidades relacionados a:

⁻ Métodos y técnicas de la entrevista.

⁻ Conceptos y procedimientos estandarizados del LAMP.

⁻ Selección del encuestado y del módulo a aplicar.

⁻ Administración del CA y de los instrumentos cognitivos.

⁻ Asignación de puntajes.

• Simulaciones de entrevistas a hogares seleccionados en Asunción con consentimiento previo de los miembros del hogar.

• Selección del personal de campo.

Recolección de datos (I)

• Marzo-abril del 2010 (19 días incluyendo algunos sábadosy domingos).

• Realizada por 8 equipos de trabajo, cada uno compuestopor 1 supervisor, 3 encuestadores y un chofer.

• Personal de campo constituido en su gran mayoría porfuncionarios del MEC.

• Monitoreo y seguimiento permanente por supervisores yobservadores nacionales e internacional. Sesiones deretroalimentación.

Recolección de datos (II)

• Carácter singular no comparable a otro estudioestadístico realizado en el país.

• Importante esfuerzo de logística y organización.

• Campaña de comunicación y difusión, incentivos para laparticipación.

• Tasa de respuesta: 70%.

• Estudio etnográfico.

Secuencia de la entrevistaCuestionario de antecedentes (a

toda la muestra)

Módulo Filtro (PDN)(a toda la muestra)

ALEATORIOMODULO B

(COMPETENCIAS MEDIAS - ALTAS)

MÓDULO A (BAJAS COMPETENCIAS)

• LOCALIZADOR(PDN)

•EJERCICIOS DE COMPONENTES DE LECTURA (CR)

CUADERNILLO 1 (PDN)

CUADERNILLO 2 (PDN)

José Falcón

cronómetro

grabadora

Rotafolio

Cuadernillo de Registro

APLICACIÓN ROTAFOLIO-MÓDULO A-

Procesamiento de datos (I)

• Corrección y doble corrección del 100% de las pruebasPDN y 25% de los Componentes de Lectura con guías deasignación de puntajes estandarizadas.

• Realizada por 6 correctores y una jefa correctora conprocedimientos de rotación.

• Consistencia de 97% entre las correcciones realizadas enterreno y en gabinete (Módulo Filtro).

• Retroalimentación durante el trabajo de campoespecíficamente para la asignación del Filtro y Rotafolio.Ajustes de criterios de asignación de puntajes.

• Más del 97% de consistencia para los demásinstrumentos PDN en gabinete.

Procesamiento de datos (II)

• Crítica y codificación del CA conforme a clasificadoresinternacionales.

• Realizada por 3 crítico-codificadores y una jefa.

• Doble crítica y codificación del 100% de los CA.

• Digitación y doble digitación de 100% de losinstrumentos.

• Consistencia y depuración de la base de datos.

• Importante esfuerzo de organización y logística por elnúmero de instrumentos, actores involucrados yprocedimientos de rotación.

Lecciones aprendidas para el estudio principal

• Mejorar el trabajo de actualización cartográfica.

• Enfatizar y concienciar acerca de las funciones yresponsabilidades del personal de campo.

• Reforzar los mecanismos de monitoreo de la recolección dedatos.

• Aumentar la duración de la capacitación así como lassimulaciones y prácticas de campo, y proponer móduloscomunes y diferenciados según roles.

• Tener en cuenta la complejidad e intensidad del trabajo decampo para el personal involucrado, lo cual supone lanecesidad de implementar estrategias de motivación.

• Considerar opciones para alivianar el CA a fin de agilizar suaplicación.

• Considerar fenómenos lingüísticos del contacto en guaraníy castellano para definir criterios de asignación de puntajesmás apropiados al contexto sociolingüístico.

Lecciones aprendidas para el estudio principal

Principales resultados

• El estudio piloto no arroja resultados estadístico válidos. No es una muestra representativa.

• Permitió verificar la validez y pertinencia de los instrumentos, calibrarlos y ajustarlos.

• Correlaciones entre CA y pruebas cognitivas .

• Los resultados para la población se dispondrá luego de realizar la encuesta principal.

Estudio principal LAMP 2011

• El estudio principal se realizará en todo el país e incluirá

una muestra de aproximadamente 4.000 jóvenes y adultos

de 15 años o más de edad.

• La muestra será representativa a nivel nacional, urbano,

rural y por niveles educativos: alto, medio y bajo.

Estudio principal LAMP 2011

Acciones en curso:

• Análisis del desempeño estadístico de los ítems utilizando elTRI.

• Ajustes y adaptación de los instrumentos y manuales.

• Campaña nacional de comunicación y difusión de la encuestaLAMP.

• Reclutamiento y selección del personal.

• Preparación de las capacitaciones y material didácticoaudiovisual.