validez y confiabilidad dr. voranuch wangsuphachart dept. de medicina social y ambiental facultad de...

42
Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi Road Bangkok 10400, Tailandia E- mail

Upload: sal-tio

Post on 16-Feb-2015

4 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Validez y Confiabilidad

Dr. Voranuch WangsuphachartDept. de Medicina Social y Ambiental

Facultad de Medicina TropicalUniversidad Mahodil

420/6 Rajvithi RoadBangkok 10400, Tailandia

E-mail

Page 2: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

1. Conocer los conceptos y definición de validez y confiabilidad

2.Listar la importancia e impacto de la validez y de la confiabilidad

3. Especificar estrategias para evaluar validez y confiabilidad

4.Listar estrategias para incrementar la validez y confiabilidad

5. Describir principales tipos de sesgos

Objetivo: al finalizar la conferencia, el estudiante será capaz de:

Page 3: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

1. Validez 2. Confiabilidad

• Definición y sinónimos• Puntos importantes• Acceso a validez y confiabilidad• Estrategias para incrementar la validez y

confiabilidad

3. Principales tipos de sesgos

Contenidos:

Page 4: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Estudio médico o epidemiológico, la principal consideración es obtener:

Medición válida Medición confiable

de los factores de exposición y resultados de interés en la población en estudio

“SIN SESGO y SIN ERRORES” o Minimizarlos lo más posible.

Page 5: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Para lograr un estudio de una calidad elevada:

Asegúrese de las respuestas adecuadas a las preguntas del estudio

Buen diseño de estudio

Validez y confiabilidad de las mediciones

Controle cualquier posible sesgo

Buena cooperación entre * grupo de investigación, y * población del estudio

Page 6: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Monitoreo para comida rápida y perfil de colesterol sérico entre personas

x1 x2 x3

x5x6

X11, x12, x13 X21, x22, x23X31, x32, x33

X41, x42, x43 X51, x52, x53X61, x62, x63

x4

Page 7: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Monitoreo para comida rápida y niveles de colesterol sérico entre personas

x1 x2 x3

x5 x6x4

X11 X21 X31

X41 X51 X61

Page 8: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Instrumento o herramienta de investigación

• “equipos”– Un contador de eritrocitos – Un medidor de pH

– Una báscula electrónica • “formas”

– Un cuestionario

– Un diario semanal de dieta

• “personas” – Observadores/investigadores

– técnicos

Page 9: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

¿Qué tan bueno es el instrumento o la herramienta?

• instrumento• herramienta

medición – Sin sesgo ni

error– minimize sesgo

• Valor verdad

verdadero • medición

– válida/segura– precisa/confiable

Page 10: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

¿Qué es seguridad y precisión?

• ¿En qué piensa primero, cuando hablamos de validez y confiabilidad?

• ¿Cuál es la diferencia entre validez y confiabilidad?

• ¿Por qué la validez y confiabilidad son importantes en la conducción de cualquier investigación médica

-en el laboratorio y en el campo?

Page 11: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Precisión

Definición:

Una medición precisa teniendo el mismo valor cada vez que es medida

Sinónimos

• Confiabilidad

• Repetibilidad

• Reproducibilidad

• Consistencia

• Aceptación

Page 12: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Puntos importantes

• Precisión depende de:

– Tamaño de muestra– Eficiencia del estudio

• VIP influencia el poder del estudio

• Precisión, confiabilidad y consistencia

son afectados por ERROR ALEATORIO

Page 13: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Evaluando precisión

• Usando D.S.Varianza (2)

• Usando Coeficiente de variación= D.S.

X

• Usando estadístico Kappa

• Usando alfa de Cronbach

Page 14: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Estrategias para aumentar la precisión

1. Estandarizando los métodos de medición

• Preparación del protocolo del estudio• Preparación del manual de operaciones • Escribiendo guías específicas o

instrucciones para cada medición • Sirviendo como base para descripción de

métodos cuando se reporten los resultados

Page 15: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Estrategias para aumentar la precisión

• Preparación del manual de operaciones

– Escriba con precisión:

- Como preparar al sujeto y el ambiente

- Como efectuar y registrar la entrevista

- Como calibrar los instrumentos

Page 16: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Estrategias para aumentar la precisión

• Escribir guías específicas o instrucciones para realizar las mediciones

realización uniforme durante la duración del estudio

Page 17: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Estrategias para aumentar la precisión

2. Entrenando y certificando a los observadores

• Mejorando la consistencia de las técnicas de medición (varios observadores)

• Realizando un estudio piloto

– Para probar el poder de las técnicas especificadas en el manual de operaciones

Page 18: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

3. Refinando los instrumentos

• Escribiendo los cuestionarios o entrevistas para incrementar la claridad

4. Automatizando los instrumentos

• Usando aparatos mecánicos automáticos

Estrategias para aumentar la precisión

Page 19: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

5. Repitiendo la medición

• El impacto del error aleatorio de cualquier origen, puede reducirse por

– Repitiendo la medición

– Usando el promedio de las dos mediciones

Estrategias para aumentar la precisión

Page 20: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Seguridad

Definición:

El grado en el cual los resultados de una medición corresponden al verdadero estado o verdad

Sinónimos:

• validez

• conformidad

Page 21: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Puntos importantes

• Seguridad es una función de

“ERROR SISTEMÁTICO”

• VIP influencia la validez interna y externa del estudio

• A mayor error sistemático, menos segura la variable

Page 22: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Puntos importantes

• Es atribuido a:– Aspectos metodológicos del diseño

del estudio o análisis– Selección de sujeto– Calidad de la información obtenida– Confusión – Modificación de efecto (interacción)– Misclasificación

Page 23: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Evaluando seguridad

Comparación con técnicas de referencia

Estándares dorados

Page 24: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Estrategias para aumentar seguridad

1. Estandarización de métodos de medición 2. Entrenamiento y certificación de los

observadores

3. Refinación de instrumentos

4. Automatizando los instrumentos

5. Haciendo mediciones informales

6. Cegando

7. Calibración de instrumentos

Page 25: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Principales tipos de sesgos

• Sesgo de observador

• Sesgo del sujeto

• Sesgo instrumental

• Sesgo de información

• Sesgo de selección

Page 26: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Principales tipos de sesgos

• Sesgo del observador distorsión consistente en el reporte de la

medición por el observador

- Mediciones más intensivas en ciertos sujetos

- Hace cuestiones acerca de exposiciones específicas algunas veces en casos, pero sólo una vez en controles

Page 27: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Principales tipos de sesgos

• Sesgo de observador

Ej. Una tendencia a subestimar la tensión arterial en casos que sabemos está siendo tratados

Ej. Una búsqueda persistente de registros médicos para una historia de tabaquismo en pacientes que se sabe tienen cáncer de pulmón

Page 28: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Principales tipos de sesgos

• Sesgo de sujetos distorsión consistente de la

medición al sujeto de estudio

- Recuerdo o reporte selectivo de un evento

sesgo del respondente

o sesgo de recuerdo

Page 29: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Principales tipos de sesgos

• Sesgo de instrumento

- Puede resultar de función defectuosa de un instrumento mecánico

- Puede resultar de uso inadecuado de herramientas o técnicas para una medición objetiva

dando lugar a preguntas sobre el cuestionario

Page 30: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Principales tipos de sesgos

• Sesgo de información una distorsión en el estimado

del efecto o variable, debido a:

* Error en la medición* Misclasificación de los sujetos en la

variable medible* Medición no válida

Page 31: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Principales tipos de sesgos

• Sesgo de información

* Criterios diagnósticos incorrectos

* Datos registrados previamente, inadecuados

* Vigilancia diagnóstica desigual entre los grupos de exposición en estudios con seguimiento

Page 32: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

• Sesgo de selección una distorsión del estimado del efecto

resultado de cómo los sujetos fueron seleccionados de la población en estudio

“sesgo de auto-selección”

Principales tipos de sesgos

Page 33: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Sesgo de selección puede resultar de:

- Elección de grupos a ser comparados (en

todos los tipos de estudios)

- Elección del esquema de muestreo

- Pérdida de seguimiento o NO RESPUESTA

durANTE LA COLECCIÓN DE DATOS ( en

estudios con seguimiento)

Principales tipos de sesgos

Page 34: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Sesgo de selección puede resultar de:- Vigilancia selectiva/vigilancia

diagnóstica varia con el status de exposición

- Mediciones más intensivas en ciertos sujetos

Principales tipos de sesgos

Page 35: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Resumen

1. Confiabilidad : Precisión, reproducibilidad

Error aleatorio

2. Validez : seguridad, conformidad

Error sistemático

Sesgo

Page 36: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Principales tipos de sesgos

• Sesgo de observador• Sesgo de sujeto Sesgo de recuerdo

Sesgo de respondente

• Sesgo de instrumento

• Sesgo de información

• Sesgo de selección

Page 37: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Confiabilidad y validez de la medición

Confiabilidad ValidezDefinición

Mejor forma de evaluar

El grado en el cual una variable tiene el mismo valor cuando se mide varias veces

El grado en el cual una variable actualmente represente lo que se supone que representa

Comparación entre diferentes mediciones

Comparación con un estándar de referencia

Page 38: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Aumento del poder para detectar efectos

Aumento de la validez de las conclusiones

Valor del estudio

Amenazados por

Error aleatorio (varianza) contribuye:

Error sistemático (sesgo) contribuye:

El observadorEl sujetoEl instrumento

El observadorEl sujetoEl instrumento

Confiabilidad Validez

Page 39: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

.

....... ..... ....

. ...

Ilustración de las diferencias entre precisión y seguridad

Page 40: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

....... ..... ....

. ...

Buena precisión

Pobre seguridad

Pobre precisión Buena precisión Pobre precisión

Buena seguridad Pobre seguridadBuena seguridad

Ilustración de las diferencias entre precisión y seguridad

Page 41: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Frecuencia

Valor verdaderoMedición

A C

No confiable

No válido

B D

Diferencias entre validez y confiabilidad

Page 42: Validez y Confiabilidad Dr. Voranuch Wangsuphachart Dept. de Medicina Social y Ambiental Facultad de Medicina Tropical Universidad Mahodil 420/6 Rajvithi

Frecuencia

Valor verdaderoMedición

A C

No confiable

No válido

B D

Diferencias entre validez y confiabilidad

A- Válido y confiableB- Válido y no confiableC- No válido, confiable D- No válido no confiable