lectura y valoración de la investigación científica ( 1 master internacional de...

Lectura y valoración de la investigación científica ( http://www.uv.es/friasnav)

1MASTER INTERNACIONAL DE ‘MIGRACIONES’Postgrado Oficial de la Universidad de Valencia

2014/15

María Dolores Frías NavarroDpto. Metodología de las Ciencias del Comportamiento

Facultad de Psicología

Una Pendiente Resbaladiza

Años desde la graduación

r = -0.54p<0.001

...

...

. ... . .... .

....

....

.....

...Conocimientos

actualizadossobre elmejor

tratamiento

Centre for Evidence-Based Medicine (Traducción: Centro Cochrane España)

-

-

+

+

Actualmente la acumulación de información es tan grande que es muy difícil filtrar de modo adecuado (con criterios de calidad o de exigencia científica) los contenidos de lo que se publica.

*Resulta prácticamente imposible recopilar toda la información que se publica*Raramente suele existir unanimidad en los resultados de la investigación

Cribar la información y hacerla accesible al profesional para que tome decisiones

ANTECEDENTES: MEDICINA BASADA EN LA EVIDENCIA (MBE), años 90

David Sackett:“… el uso consciente, explícito y juicioso de la mejor evidencia existente en la toma de decisiones sobre el cuidado de pacientes individuales. La práctica de la MBE supone integrar la experiencia clínica individual con la mejor evidencia externa existente derivada de la investigación sistemática”.

El objetivo de la PBE es determinar lo que realmente funciona y mejorar la capacitación de los profesionales en su toma de decisiones cotidianas. Y además, favorecer la formación continúa de los profesionales impidiendo el deterioro de los conocimientos


5

Psicología Basada en la Evidencia ( http://www.uv.es/friasnav)

6

http://www.scielosp.org/scielo.php?pid=S0213-91112004000400011&script=sci_arttext


7

Una vez definido el interrogante que el profesional debe solucionar se inicia el proceso de búsqueda de información orientado al hallazgo de las mejores pruebas relacionadas con la necesidad de conocimiento


8

Valoración crítica de la validez y utilidad de las pruebas (evidencia o información) encontradas

2

Localización de las pruebas disponibles en la literatura para poder dar respuesta a la pregunta formulada, maximizando la calidad del criterio de búsqueda

1


9

Valoración de la aplicación de los hallazgos encontrados a la propia investigación

3




10

Valoración de la aplicación de los hallazgos encontrados a la propia investigación



VALIDEZ INTERNAVALIDEZ DE CONSTRUCTOVALIDEZ DE CONCLUSIÓN ESTADÍSTICA

VALIDEZ EXTERNA


11


12

Validez de la investigación

VALIDEZ INTERNA: ¿el diseño de investigación es lo suficientementesensible para detectar relaciones causales entre las variables?

VALIDEZ de CONCLUSIÓN ESTADÍSTICA: ¿el diseño de investigación es lo suficientementesensible para captar el efecto experimental o la posiblecovariación entre las variables?

VALIDEZ de CONSTRUCTO: ¿qué variables teóricas o implícitas están siendo estudiadas?

VALIDEZ EXTERNA: ¿pueden generalizarse los efectos y causas de un estudio a otrasunidades experimentales (validez poblacional), situaciones o contextos (validez ecológica) y momentos temporales (validezhistórica)?


13

El creciente y acelerado desarrollo científico y tecnológico ha provocado una enorme producción de publicaciones científicas que cada vez hacen más difícil que el profesional pueda mantenerse actualizado


14

1º 1º Acceder a la

información científica


15

Ante la gran producción de información que actualmente se produce en el mundo científico, el profesional debe disponer de estrategias de búsqueda de información que le faciliten su trabajo y le permitan acceder a información válida y actual


16

BASES DE DATOS: PsycInfo PSICODOC ERIC MEDLINE, EMBASE,

COLABORACIÓN CAMPBELL, COCHRANE LIBRARY

REVISTAS:

Annual Review of Psychology

Psychological Bulletin

Contemporary Psychology

Best Evidence

BMJ

¿DÓNDE BUSCAR LA INFORMACIÓN CIENTÍFICA?

Mejor Evidencia


17

¿TODA LA INFORMACIÓN CIENTÍFICA “PESA” LO MISMO?

MÉTODO Y DISEÑO DE INVESTIGACIÓN


18


19

Acceder a información válida y actual

Y el profesional debe saber valorar de forma crítica la información que lee


20

La búsqueda sistemática de la información y la lectura crítica de los informes de investigación, valorando su calidad metodológica antes de aplicar sus conclusiones forman la columna que guía el proceso de la Práctica Basada en Pruebas (Medicina Basada en la Evidencia)


21

HABILIDADES DEL PROFESIONALComprender y emplear la metodología de investigaciónCapacidad de crítica para discriminar en la

información científica a la que tienen acceso

aquello que se ajusta a la verdad, que por

supuesto es cambianteCapacidad para sistematizar y organizar la

información que diariamente se produce en el

mundo


22

Medicina Basada en la Evidencia (MBE) (Sackett, Rosenberg, Gray y Richardson, 1996; Sackett, Richardson,

Rosenberg y Haynes, 1997) cuyos inicios se sitúan en la década de los ochenta en la Universidad de McMaster de Canadá

la búsqueda de la mejor evidencia científica y

la capacidad para evaluar y jerarquizar la evidencia disponible

integrándola con la propia experiencia o juicio profesional

para así poder disponer de la información más válida que le ayude a resolver su cuestión o necesidad de conocimiento

La combinación de las nuevas habilidades del profesional basadas en:


23

En definitiva, se trata de la utilización consciente, explícita y juiciosa de la mejor evidencia científica disponible

En algunas ocasiones se han comparado los principios de esta orientación con el instrumento que permite al profesional aprender a separar el grano de la paja dado el alud de información que actualmente se publica


24

En definitiva, se trata de la utilización consciente, explícita y juiciosa de la mejor evidencia científica disponible


25

¿Por qué leemos la literatura científica?

• Para responder a un pregunta específica relacionada con la actividad diaria

• Para esta al día en general o en algo que nos interesa

• Para revisar conocimientos adquiridos previamente

• Por diversión• Para no sentirnos culpables

Shaughnessy, J Fam Pract 1994; 39: 489-499


26

¿Por que necesitamoshacer lectura crítica?

• la lectura crítica es una técnica• la calidad científica de los artículos de

investigación es muy variada• aumenta la efectividad de nuestras

lecturas • dependiendo de la validez de un

artículo lo podemos clasificar dentro de una escala de niveles de evidencia


27

A pesar de que el volumen de literatura científica crece enormemente, la calidad científica de los artículos de investigación es muy variada

La lectura crítica es una técnica que ofrece la oportunidad de aumentar la efectividad de la lectura, adquiriendo las habilidades necesarias para excluir con la mayor prontitud los artículos científicos de mala calidad y aceptar aquellos con la suficiente calidad científica para ayudarnos en la toma de decisiones


28

•Anatomía de una investigación•qué se investiga•qué variables se han estudiado•cómo se ha investigado


29

Psicología Basada en la Evidencia ( http://www.uv.es/friasnav) 2008

30


31

RACISMO CONTEMPORÁNEO

PALABRAS CLAVE:

Español Inglés

RacismoRacismo modernoRacismo sutilRacismo manifiestoPrejuicioDiscriminación

RacismModern racismSubtle racismBlatant RacismPrejudiceDiscrimination


32

Institute for Scientific Information


33

http://www.accesowok.fecyt.es/


34

http://www.accesowok.fecyt.es/


35

Es conveniente darse de Alta en ISICon nuestra clave podremos acceder a diversas prestaciones como:Tutorial en españolOrganizador de referencias bibliográficas (EdNote, proporcionado por el ISI)Alertas bibliográficas…


36

BASES DE DATOS

Web of Science? (1900- )Current Contents Connect (1998- )ISI Proceedings (1990- ) Derwent Innovations Index (1980- ) MEDLINE (1950-2007)Web Citation Index (1936-2005)

Journal Citation Reports (1997-2006)


37

¿Qué es Web of Science? (1900- )

Es una web de acceso a los productos de ISI Citation que cubren más 8500 publicaciones internacionales del ámbito de las ciencias, las ciencias sociales, las artes y las humanidades

Consta de:Science Citation Index Expanded (1900- )Social Sciences Citation Index (1956- )Arts & Humanities Citation Index (1975- )


38


39

Búsqueda general

Búsqueda por referencia citada (Cited Reference Search)

Búsqueda por estructura (Structure Search)

Búsqueda avanzada (Advanced Searches)

BÚSQUEDAS


40

BÚSQUEDA GENERAL

: Busca en los campos título, abstract y palabra clave

Title: busca por título

Author: busca por autor

Group author: afiliación del autor

Publication name: nombre de la publicación

Years Published: años publicados

Address: dirección del autor

Language: idioma

Document type: tipo de documento

Se pueden añadir campos para combinar las entradas de búsqueda


41

BÚSQUEDA POR REFERENCIA CITADA(Cited Reference Search)

Autor citado (Cited author)Obra citada (Cited work)Año citado (Cited year)

Se pueden cambiar los límites:*Años*Base de datos…


42

BÚSQUEDA POR ESTRUCTURA(Structure Search)

Es para dibujar estructuras o componentes

químicos, de la reacción o mediante datos

asociados con ellos, con un software

específico que proporciona el ISI


43

BÚSQUEDA AVANZADA(Avanced Search)

Permite formular una cuestión de búsqueda

específica con restricciones y comandos


44

FUENTES ADICIONALES(Additional Resources)


45

RACISM 7.379 RESULTS


46

RACISM 7.379 RESULTS


47

RACISMSUBTLE

101 RESULTS


48

RACISMSUBTLEPETTIGREW

4 RESULTS


49

PREJUDICE 22.641 RESULTS


50

PREJUDICESUBTLE

183 RESULTS


51

PREJUDIESUBTLEPETTIGREW

6 RESULTS


52

Journal Citation Reports


53


Impacto de revistas a través de "Web of Knowledge"

ISI JOURNAL CITATION REPORTS (JCR)


54

Journal Citation Reports¿Qué es el factor de impacto?

El factor de impacto de una revista mide la frecuencia con la cual ha sido citado el “artículo promedio” de una revista en un año determinado.

Se calcula de la siguiente forma:Factor de impacto de la revista ‘X’=Número de veces que las revistas analizadas por el ISI han citado los artículos publicados por la revista ‘X’ durante los dos años anteriores dividido por el Número total de artículos publicados en la revista ‘X’ durante los dos años anteriores


55


Factor de inmediatez

Mide la rapidez con la cual es citado el "artículo promedio" de una revista.Se calcula de la siguiente forma:Factor de inmediatez de la revista ‘X’=

Número de citaciones a artículos publicados en la revista ‘X’ en un año dado dividido por el Número total de artículos publicados en la revista ‘X’ durante ese mismo año


56



57



58



59


PSICOTHEMA


60



61



62



63Key words: subtle prejudice and blatant prejudice

Lectura y valoración de la investigación científica ( http://www.uv.es/friasnav) 2008

64Como el número analizado de revistas de lengua no inglesa es escaso en JCR y además no incluye revistas del área de humanidades, han surgido en España otras herramientas similares:

Factor de Impacto Potencial de las Revistas Médicas EspañolasEstá elaborado por el Instituto de Historia de la ciencia y Documentación López Piñero

IN-RECS, Índice de impacto de las Revistas Españolas de Ciencias Sociales

Elaborado por el Departamento de Biblioteconomía y Documentación de la Universidad de Granada (http://ec3.ugr.es/in-recs/)

RESH, Revistas Españolas de Ciencias Sociales y HumanasElaborado por el CINDOC, Centro de Información y Documentación Científica (http://resh.cindoc.csic.es/indice_citas.php)

SciELO - Scientific Electronic Library Online (Biblioteca Científica Electrónica en Línea) modelo de publicación electrónica cooperativa de revistas científicas de paises de América Latina y el Caribe que también incluye datos de citaciones y factor de impacto. (http://www.scielo.org/php/index.php?lang=es)


65

Latindex:http://www.latindex.unam.mx/

UNIZARhttp://erce.unizar.es/


66

MÁS BASES DE DATOS DEL ISI

Derwent Innovations Index (1980- )

Es una base de patentes

ISI Proceedings (1990- )

Es un índice de la documentación publicada de los simposios, conferencias, seminarios, coloquios, talleres y convenciones más relevantes en una amplia gama de disciplinas


67

MÁS BASES DE DATOS DEL ISI

Proporciona acceso a información bibliográfica completa de revistas académicas y mundialmente prestigiosas y libros.También ofrece acceso al contenido eFirst, que le permite ver información bibliográfica de revistas electrónicas antes de la publicación de un número.Además, tiene una colección de sitios Web académicos evaluados.

Current Contents Connect (1998- )


68

• CONSORT Statement on Reporting of Randomized Trials (Ann Intern Med 2001;134:657)

• Standards for Reporting Diagnostic Accuracy (STARD) (Ann Intern Med 2003;138:40)

• Improving Quality of Reports of Meta-analyses (QUORUM) (Lancet 1999; 354:1896)

• Meta-analysis Of Observational Studies in Epidemiology (MOOSE) (JAMA 2000; 283:2008)

• Transparent Reporting of Evaluations with Non-randomized Designs (TREND) (Am J Pub Health 2004; 94:361)

Guidelines for Reporting Studies


69

Ni una cosa ni la otra!!!!!!!!


70


71

( http://www.uv.es/friasnav)

72

¿HAY ALGÚN “ATAJO” EN EL CAMINO?

Revisiones

sistemáticas y

meta-análisis


73

Un importante apoyo para la localización de las pruebas es buscar y aplicar la evidencia generada por otros investigadores mediante :***las revisiones sistemáticas y***los trabajos de meta-análisis


74

REVISIONES SOBRE UNA TEMÁTICA:

Revisiones narrativas

Revisiones sistemáticas:

Cualitativas

Cuantitativas o METANÁLISIS

¿QUÉ ES UN METANÁLISIS?


75

REVISIONES:

Revisiones narrativas

(“actualizaciones”)

Revisiones

sistemáticas

(“overviews”)

Cualitativas

Cuantitativas o

METANÁLISIS

¿QUÉ ES UN METANÁLISIS?

(+)(+)(+)(+) (-)(-)(-)(-)

““ESTUDIO DE ESTUDIOS”ESTUDIO DE ESTUDIOS”““ESTUDIO DE ESTUDIOS”ESTUDIO DE ESTUDIOS”


76 REVISIONES SISTEMÁTICAS

KITCHENHAM (2004)

Son un tipo de investigación científica que se realiza bajo los principios del método científico,cuya unidad de análisis está constituida por los resultados de las investigaciones científicas publicadas o no.Consiste en analizar, sintetizar e integrar dichos resultados


77 REVISIONES SISTEMÁTICAS

KITCHENHAM (2004)

- Resumir la evidencia existente sobre una cuestión determinada

- Identificar lagunas en la investigación actual para sugerir áreas de posterior investigación

- Proporcionar un marco para posicionar apropiadamente nuevas actividades de investigación


78

CARACTERÍSTICAS• Empiezan definiendo un protocolo de revisión que especifique la cuestión a investigar y los métodos a utilizar

• Se basan en una estrategia de investigación definida a priori que pretende detectar toda la literatura relevante posible

• Documentan su estrategia de búsqueda para que los lectores puedan conocer su rigor y proceso

• Requieren criterios explícitos de inclusión y exclusión de los estudios para evaluar cada estudio individual

• Especifica la información de cada estudio primario incluyendo criterios de calidad

• Es un prerrequisito para meta-análisis cuantitativos

REVISIONES SISTEMÁTICAS


79

El meta-análisis es una técnica cuantitativa que permite analizar la evidencia empírica de una determinada temática a través del análisis estadístico de los resultados de numerosos trabajos primarios de investigación sobre una determinada temática


80

El meta-análisis permite la integración de los datos de una muestra de estudios a través del cómputo estadístico de los efectos de la variable independiente sobre la variable dependiente medida


81

El meta-análisis es, por tanto, un procedimiento cuyo objetivo básico radica en combinar estadísticamente los datos de un amplio número de estudios relacionados con una misma temática y aportar resultados globales que los integren.


82

TAMAÑO DEL EFECTO

Es el estadístico que se utiliza en los trabajos de meta-análisis


83

Brevemente las fases de un estudio de meta-análisis incluyen:

1 la selección de la muestra de estudios relacionado con el fenómeno psicológico objeto de evaluación 2 la estimación de los valores de los tamaños del efecto de cada uno de los resultados de las investigaciones 3 se calcula el valor medio del tamaño del efecto de la muestra de estudios4 se analiza la homogeneidad cuyo objetivo es determinar si todos los valores de los tamaños del efecto calculado son homogéneos y representan el tamaño del efecto poblacional


84

Unidad de Meta-análisis de laUniversidad de Murcia

http://www.um.es/sip/UnidadMA1.html


85

El meta-análisis es, por tanto, un procedimiento cuyo objetivo básico radica en combinar estadísticamente los datos de un amplio número de estudios relacionados con una misma temática y aportar resultados globales que los integren


86

TAMAÑO DEL EFECTOEl tamaño del efecto es el nombre dado a una familia de índices que miden la magnitud del efecto del tratamiento.

A diferencia de las pruebas de significación, estos índices son independientes del tamaño de la muestra.

Los índices del tamaño del efecto se utilizan en los estudios de meta-análisis como medio de resumen cuantitativo de los resultados de diferentes investigaciones sobre un área de investigación específica.Por ejemplo, es muy conocido el trabajo de meta-análisis de Lipsey y Wilson (1993) sobre los tratamientos psicológicos, educativos y conductuales.


87

Tres aproximaciones destacan especialmente como técnicas de meta-análisis:*el análisis de las probabilidades exactas (valores p) de Rosenthal y Rubin (1978),*el análisis de los tamaños del efecto, g o d, siguiendo el método de Glass (1976) o el de Hedges y Olkin (1985) y*el análisis de los tamaños del efecto r tal y como indican Hunter, Schmidt y Jackson (1982)

( http://www.uv.es/friasn9v)

88Meta-análisis

Cálculo del tamaño del efecto para cada trabajo individual

Cálculo del tamaño del efecto medio

Significación del tamaño del efecto medio


89Tamaño Efecto

común

GG

s

XXES 21

2

11

21

2221

21

nn

nsnsscomún


90

Tamaño del efecto

Diferencia estandarizada de mediasd de Cohen:

d = M1 - M2 / scomún

*Cuando se conocen las desviaciones típicas o las varianzas, se puede estimar la desviación típica común a través de:scomún = Raíz[(s1² + s2²) / 2] o lo que es lo mismo,scomún = s1 + s2 / 2

*Cuando el número de observaciones por condición (n) no es igual (diseño no ortogonal) entonces es necesario ponderar la desviación típica por el tamaño de la muestra:scomún = Raíz[(n1 – 1)s1² + (n2-1)s2²) / (n1 + n2 -2)]


91

Utilidad sustantiva

Cohen (1988) sugirió que:*valores de d = 0.2 se consideran ‘pequeños’*valores de d = 0.5 son ‘medianos’ y*valores de d = 0.8 ó más son ‘grandes’

En términos de desviaciones típicas, un tamaño del efecto medio señala que el grupo de tratamiento se sitúa media desviación típica por encima del grupo de control.Un tamaño del efecto de d = 1.0 situaría las puntuaciones del grupo de tratamiento una desviación típica por encima del grupo de control.

La interpretación sustantiva de los hallazgos tiene que realizarse dentro del contexto de investigación. Un tamaño del efecto pequeño puede ser grande en otro contexto y del mismo modo un tamaño del efecto grande en un área de trabajo puede ser pequeño en otro ámbito de investigación


92

TAMAÑO DEL EFECTO:interpretación

Cohen (1988) definió el tamaño del efecto como:PEQUEÑO d = 0.2MEDIANO d = 0.5GRANDE d = 0.8


93

Tamaño Efecto

rES


94

d = (1 – r 2)

2 r Transformación de la escala de r a d

Transformación de la escala de d a r

r =(d 2 + 4)

d

lectura y valoración de la investigación científica ( 1 master internacional de...

Documents