diseÑo y validaciÓn de cuestionarios

Leticia Sánchez Álvarez

l e t i c iasanchez@let s ta t . e s

644 18 1 166

DISEÑO Y

VALIDACIÓN DE

CUESTIONARIOS

mailto:[email protected]

Contenido del curso

1. Introducción a la encuesta

2. Características, objetivo y etapas de la encuesta

3. El cuestionario

4. Objetivos, ventajas y limitaciones del cuestionario

5. Tipos de cuestionarios

6. Diseño del cuestionario

7. Validación y fiabilidad del cuestionario

Introducción a la encuesta

Procedimiento de recolección de datos mediante el uso de instrumentospreviamente diseñados, aplicados a un grupo representativo de lapoblación para detectar ideas, opiniones u otros objetivos queposteriormente se analizan.

1. Introducción2. Características, objetivo

y etapas de la encuesta

3, El cuestionario4, Objetivos, ventajas y

limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del

cuestionario

ENCUESTA CUESTIONARIO≠

D e f i n i c i ó n

Características y objetivo de la encuesta

o Obtención de datos de una amplia variedad de temas.

o Permite normalizar los datos para realizar posteriormente un análisisestadístico y obtener resultados que sean comparables.

o Permite ser aplicado a un gran número de personas que pueden serrepresentativas para una gran población.





cuestionario

Obtener información relativa a las característicaspredominantes de una población mediante la aplicaciónde procesos de interrogación y registro de datos.

C a r a c t e r í s t i c a s

O b j e t i v o

Etapas de la encuesta





cuestionario

Planteamiento de objetivos

Estudio de condiciones

Diseño de la muestra

Elección sistema de

trabajo

Elaboración instrumento de medición

Validación del instrumento

Trabajo de campo

Organización y manejo de

datos

Control de calidad de

datos

Análisis estadístico

Interpretación de resultados

El cuestionario





cuestionario

Instrumento de medición fundamental para la obtención de datos,formado habitualmente por un sistema de preguntas planteadas yordenadas de forma coherente.

Se debe tener en cuenta que no existen unas pautas establecidas quegaranticen la elaboración perfecta de un cuestionario.

D e f i n i c i ó n

“La elaboración de un cuestionario es más un arte que una técnica”





cuestionario

» Obtener la información pertinente, de la cual no se dispone.

» Traducir el planteamiento del problema mediante preguntas precisas.

» Distorsionar lo menos posible las respuestas de los encuestados.

» Diseñar un cuestionario atractivo que favorezca y motive lacooperación del encuestado.

» Conseguir las respuestas de los encuestados con la mayor veracidad yconfiabilidad viable.

» Conseguir datos de forma normalizada para su posterior análisis ycomparación.

O b j e t i v o s

El cuestionario





cuestionario

V E N T A J A S

• Favorece el anonimato• El encuestado puede tomarse

el tiempo y el momento adecuado para cumplimentarlo

• El encuestado puede reconsiderar sus respuestas

• Permite abarcar un área geográfica muy extensa

• Facilita el alcance a un gran número de sujetos

L I M I T A C I O N E S

• Dificultades a la hora de su diseño y elaboración

• Difícilmente se logra un éxito del 100% de tasa de respuesta

• La falta de respuesta dificulta determinar con precisión el error estadístico

• La información no profundiza en exceso

• En ocasiones no es posible acceder por completo a la población

El cuestionario

Tipos de cuestionario





cuestionario

Diferentes clasificaciones según el grado de estructuración, el modo de recogida de los datos y la temporalidad

SEGÚN EL GRADO DE ESTRUCTURACIÓN

EstructuradosToda la información que se desea recabar se presenta deforma explícita y estandarizada para todos los sujetos porigual

Semiestructurados Supone una mezcla entre los cuestionarios estructurados yno estructurados

No estructurados

Se plantea un guión general que permite al encuestadororganizar la información que va obteniendo, asimismo,posee libertad de realizar otras preguntas que considereoportunas y realizar el cuestionario en el orden óptimo






cuestionario


SEGÚN EL MODO DE RECOGIDA DE DATOS

Auto-administrado Cumplimentado por el propio encuestado mediante email,correo postal, web o en persona

Administrado Aplicados directamente por un encuestador de formapresencial (PAPI, CAPI, CAWI) o de forma telefónica (CATI)

PAPI: Paper and Pencil InterviewingCAPI: Computer Assisted Personal InterviewingCAWI: Computer Assisted Web InterviewingCATI: Computer Assisted Telephone Interviewing






cuestionario


SEGÚN LA TEMPORALIDAD

DiacrónicoImplica el estudio de uno o varios fenómenos a lo largo de unperiodo, es decir, se cumplimenta el cuestionario en distintosmomentos en el tiempo

Sincrónico El cuestionario se realiza en un momento determinado en el tiempo yde una sola vez

Diseño del cuestionario





cuestionario

» Definir temas a tratar (seleccionar un tema principal evitando temassecundarios)

» Orden en el cuestionario y tipos de preguntas

» Fijar de ante mano una duración máxima de cumplimentación

» Adaptar el lenguaje a la población que va dirigido

» Instrucciones previas de cumplimentación

» Impresión y diseño final del cuestionario

C o n s i d e r a c i o n e s p r e v i a s






cuestionario

1. Cabecera: petición de colaboración, breve resumen de los objetivosque se persiguen mediante la encuesta, y tiempo necesario para sucumplimentación

2. Instrucciones: detallar una serie de directrices que ayuden alentrevistado a cómo cumplimentar correctamente el cuestionario

3. Preguntas introductorias: cortas, interesantes y fáciles de contestar

4. Preguntas clave o más importantes para la investigación

5. Preguntas difíciles o delicadas

6. Datos personales (en caso de ser necesarios)

7. Agradecimiento por la colaboración

O r d e n






cuestionario

D i s e ñ o e n c u e s t i ó n

» Elegir una buena calidad tipográfica

» Colocar preguntas y sus respuestas en la misma página

» No incluir preguntas breves al final de cada página

» Dejar espacio suficiente para preguntas abiertas

» Numerar las preguntas para seguir un orden lógico

» Dividir en bloques específicos las preguntas de un mismo tema

» Realizar un pre-test o prueba piloto para detectar posibles errores

Fácil lectura

Sencillo registro de las respuestas

Claro, conciso, limpio y ordenado






cuestionario

R e c o m e n d a c i o n e s p a r a l a s p r e g u n t a s

» Lo más cortas y concisas posible

» Lenguaje entendible y adaptado a la población

» Si se tratan temas delicados o personales, hacerlo de forma indirecta

» Evitar la ambigüedad

» Consultar estudios ya realizados de temas similares

» Crear un comité de expertos para marcar la importancia de los ítems






cuestionario

T i p o s d e p r e g u n t a :

s e g ú n l a r e s p u e s t a q u e a d m i t e d e l e n c u e s t a d o

» Preguntas abiertas: dejan que el encuestado responda libremente loque estime oportuno

» Preguntas cerradas: fuerzan al encuestado a elegir entre un conjuntode respuestas previamente diseñadas

Distinguimos dos tipos de preguntas: según la respuesta que admite del encuestado y según la función de la pregunta

Dos vías (ejemplo: Sí/No)

Elección simple

Elección múltiple






cuestionario

T i p o s d e p r e g u n t a :

s e g ú n l a f u n c i ó n d e l a p r e g u n t a

Distinguimos dos tipos de preguntas: según la respuesta que admite del encuestado y según la función de la pregunta

» Preguntas introductorias: al principio del cuestionario» Preguntas de consistencia: comprueban la congruencia de las

respuestas» Preguntas de control: determinan la veracidad de las respuestas» Preguntas filtro: seleccionan una parte de los encuestados para

realizarles preguntas específicas para ellos» Preguntas de cambio de tema: en el caso de darse dos temas distintos» Preguntas de recuerdo: cuando se va a hacer uso de la memoria» Preguntas de acceso o delicadas: por su redacción, hacen que el

encuestado no se sienta incómodo al tratar temas comprometidos






cuestionario

C o d i f i c a c i ó n d e l a s p r e g u n t a s y r e s p u e s t a s

Este proceso consiste en la asignación de códigos, números o claves acada uno de los ítems que posteriormente vayan a ser grabados en unabase de datos. De esta manera, se ha de crear en la base de datos almenos una variable para cada una de las preguntas del cuestionario.

Los datos codificados son comparables a datos de otras investigacionespreviamente codificados mediante el mismo sistema.

- Preguntas abiertas: codificar una vez se haya pasado el cuestionario

- Preguntas cerradas: codificar en la fase del diseño del cuestionario

Fiabilidad del cuestionario





cuestionario

La fiabilidad en un cuestionario está relacionada con la coherencia o consistenciainterna y la precisión de las medidas recopiladas.

- Análisis de consistencia interna: dotar de significación a las preguntas delcuestionario a través del coeficiente alfa de Cronbach.

“una medida puede ser fiable pero no válida para un cuestionario”

𝛼 =𝐾

𝐾 − 11 −

σ𝑖=1𝑘 𝜎𝑖

2

σ𝑖=1𝑘 𝜎𝑖

2 + 2σ𝑖,𝑗𝑘 𝜎𝑖𝑗

2

siendo, 𝐾 el número de preguntas o ítems,

la varianza de las puntuaciones totales

la suma de las varianzas de todos los ítems

𝑖=1

𝑘

𝜎𝑖2

𝑖=1

𝑘

𝜎𝑖2 + 2

𝑖,𝑗

𝑘

𝜎𝑖𝑗2

Los valores de este coeficiente oscilan entre 0 y 1, considerando losvalores próximos a 1 de alta fiabilidad y los cercanos a 0 defiabilidad baja.






cuestionario


E j e m p l o e n S P S S






cuestionario



El estudio de la fiabilidad arroja un valor alpha = 0.766, considerado como aceptable.

Validación del cuestionario





cuestionario

Mediante la validación del cuestionario, se pretende obtener interpretaciones sobre elsignificado de lo que se está midiendo y sobre la utilidad del instrumento de medida. Portanto, un instrumento de medida será válido si los datos que se obtienen a través de él sonlo más exactos y relevantes posible.

– De contenido: se estima de manera subjetiva el grado de comprensión de laspreguntas, normalmente mediante un juicio de expertos o un índice de validezde contenido

– De criterio: comparación mediante una escala entre el instrumento de medicióny un criterio externo, con el objetivo de determinar si se reflejan las relacionesentre ambas

– De constructo: averiguar si los ítems representan correctamente el objetivo delcuestionario






cuestionario

V a l i d a c i ó n d e c o n s t r u c t o

Primer paso: Medida de adecuación muestral (KMO > 0,5)

Segundo paso: Prueba de esfericidad de Bartlett (p-valor ≤ 0,05)

Tercer paso: Análisis Factorial (AF) del cuestionario

Análisis Factorial Exploratorio encontrar la mejor solución

Análisis Factorial Confirmatorio confirmar el modelo definido por el investigador

Nº factores = Nº dimensiones

Factores con autovalor > 1





cuestionario







cuestionario



El rango de comunalidades estimadasoscila entre 0.656 y 0.850, nosindica que todos los ítems encajanadecuadamente en la estructurafactorial estimada.

Permite suponer la adecuación muestral para la adecuación del análisis.





cuestionario

Validación y fiabilidad del cuestionario

Alta consistencia

de los resultados

Datos exactos y relevantes

Eliminar el error aleatorio CUESTIONARIO FIABLE Y VÁLIDO





cuestionario

Bibliografía❖ Abad, F. J., Olea, J., Ponsoda, V., García, C. (2011). Medición en ciencias sociales y de

la salud. Madrid: Síntesis.

❖ Esteban, S., Vázquez Peña, F., Terrasa, S. (2016). Translation and cross-culturaladaptation of a standardized international questionnaire on use of alternative andcomplementary medicine (I-CAM - Q) for Argentina, BMC Complementary andAlternative Medicine.

❖ García Córdoba, F. (2009). El cuestionario: recomendaciones metodológicas para eldiseño de cuestionarios. México: Editorial Limusa.

❖ Groves, R. M., Fowler, F. J., Couper, M. P., Lepkowski, J. M., Singer, E., Tourangeau, R.(2009). Survey Methodology, 2nd Edition, Wiley.

❖ Lacave, C., Molina, A. I., Fernández, M., Redondo, M. A. (2016). Análisis de la fiabilidady validez de un cuestionario docente. ReVisión 9(1), 23-36.

❖ Navas, M. J. (2001). Métodos y diseño en investigación psicológica, UNED.

❖ Peña, D. (2002). Análisis de datos multivariantes. Madrid: McGraw-Hill.

❖ Skjong, R., Wentworth, B. (2000). Expert judgement and risk perception.

L e t i c ia Sánchez Á lvare z

l e t i c i a s a n c h e z @ l e t s t a t . e s

6 4 4 1 8 1 1 6 6

Muchas gracias por su atenciónP regun ta s , dudas , comen ta r io s

mailto:[email protected]

diseÑo y validaciÓn de cuestionarios

Documents