Indicadores y posicionamiento Web para investigadores científicos

Isidro F. AguilloLaboratorio de Internet

CINDOC-CSIC

Instituto de Biotecnología. UNAMCuernavaca, México. 19 de Abril de 2004

Agenda

• Rol del científico en la era digital Evaluación de la actividad científica Internet y la producción y comunicación de

conocimiento científicoi. Ventajas y posibilidadesii. Recomendaciones individuales e institucionales

• Nuevos modelos de comunicación• Cibermetría

Métodos Algunos datos empíricos

Objetivos de la ciencia

• La ciencia al servicio del conocimiento; el conocimiento al servicio del progreso

• La ciencia al servicio de la paz• La ciencia al servicio del desarrollo• La ciencia en la sociedad y la

ciencia para la sociedad UNESCO,

1999

Evaluación de la ciencia

• Necesidad Control de los fondos públicos dedicados a

I+D Asignar gasto en áreas más importantes y

dar prioridad a grupos más productivos Conocer la actividad académica y la

producción ciencia

• Problemática Limitaciones en los métodos bibliométricos

i. Factor de impacto mal entendido y aplicadoii. Tratamiento disciplinar y geográfico sesgadosiii. Promoción de prácticas “fronterizas”

Internet y el Web• Tamaño

12.000 millones de páginas(crecimiento exponencial)

• Riqueza y diversidad Globalización y mundialización Ficheros ricos y media

• Audiencia 720 millones de internautas

• Accesibilidad Disponibilidad universal: Ubicuidad Navegación hipertextual Coste de conexión

Webespacio académico• Ofrece información más exhaustiva y diversa de

la actividad docente e investigadora La publicación científica es un subconjunto reducido Pero favorece la comunicación informal sobre la

informal

• Es un entorno fuertemente institucionalizado Páginas personales no estructuradas y poco útiles La hipertextualización es débil

• La generación de contenidos Web es exigente La actualización también

• Barreras psicológicas y económicas Propiedad intelectual no comprendida, Y en peligro (plagio)

¿Un logro lejano?

• Expectativas defraudadas Recursos aún insuficientes Nuevo colonialismo y brecha digital Calidad cuestionada en la

comunicación informal Desorganización y caos Elevada volatilidad de páginas y sedes

• Pero ... Iniciativas “Open Access” Desarrollo de indicadores

cibermétricos

¿Desventajas?

• Dudas sobre la calidad Ausencia de evaluación por pares (“peer review”)

• Evaluación difícil Métodos bibliométricos no homologables

• Métodos poco fiables Motores de búsqueda con comportamiento

irregular Alta volatilidad de la información Archivo histórico perdido

• Desorganización y caos Dificultad de localizar la información

Iniciativas Open Access Acceso libre a la producción científica formalDepósitos de documentos

Pre-prints vs separatasAspectos legalesCuestiones prácticas

IniciativasArXiv xxx.lanl.govOpen Archives www.openarchives.orgEprints www.eprints.org Open Citation opcit.eprints.org Citebase citebase.eprints.orgOpen Archives Forum www.oaforum.orgBudapest Initiative www.soros.org/openaccessE-BioSci www.e-biosci.orgBidMedCentral www.biomedcentral.com

Ciclo tradicional

Articulo evaluado,aceptado y Articulo evaluado,aceptado y publicado en una revista de publicado en una revista de prestigioprestigio

Investigadores escriben Investigadores escriben manuscrito manuscrito ““Pre-Print”Pre-Print”

Remisión a la RevistaRemisión a la Revista

Manuscrito evaluado Manuscrito evaluado por expertospor expertos““Peer-Review”Peer-Review” Autor revisa el Autor revisa el

manuscritomanuscrito

Otros investigadores leen el Otros investigadores leen el artículo artículo si la Universidad está si la Universidad está suscrita a la Revistasuscrita a la Revista

12-1

8 M

eses

Nuevo ciclo de impactoNuevo ciclo de impacto: La : La nueva investigación se apoya nueva investigación se apoya en resultados publicadosen resultados publicados

Se inicia el ciclo de impactoSe inicia el ciclo de impacto::Se realiza la investigaciónSe realiza la investigación

Propuesta de Harnad

Articulo evaluado,aceptado y Articulo evaluado,aceptado y publicado en una revista de publicado en una revista de prestgioprestgio

Investigadores escriben Investigadores escriben manuscrito manuscrito ““Pre-Print”Pre-Print”

Remisión a la RevistaRemisión a la Revista

Manuscrito evaluado Manuscrito evaluado por expertospor expertos““Peer-Review”Peer-Review” Autor revisa el Autor revisa el

manuscritomanuscrito

Otros investigadores leen el Otros investigadores leen el artículo artículo si la Universidad está si la Universidad está suscrita a la Revistasuscrita a la Revista

12-1

8 M

eses

Se inicia el ciclo de impactoSe inicia el ciclo de impacto::Se realiza la investigaciónSe realiza la investigación

Se archiva el “Pre-Print” en Se archiva el “Pre-Print” en depósito de Universidaddepósito de Universidad

Nuevo ciclo de impactoNuevo ciclo de impacto::El impacto de la El impacto de la

investigación es mayor y investigación es mayor y más rápido porque el más rápido porque el

acceso es universal y la acceso es universal y la publicación inmediatapublicación inmediata

Artículo publicado en Artículo publicado en revista revista “Open Access”“Open Access” oo revista de pago y revista de pago y

archivada en Depósito archivada en Depósito de Universidadde Universidad

Nuevo ciclo de impactoNuevo ciclo de impacto: La : La nueva investigación se apoya nueva investigación se apoya en resultados publicadosen resultados publicados

Propuesta de Harnad (II)

Gold GreenOpen-Access Publishing

(OApub) (BOAI-2)

Create or Convert 23,000 open-access journals (1000 exist currently)Find funding support for open-access publication costs ($500-$1500+)Persuade the authors of the annual 2,500,000 articles to publish in new open-access journals instead of the existing toll-access journals

Open-Access Self-Archiving(OAarch) (BOAI-1)

Persuade the authors of the annual 2,500,000 articles they publish in the existing toll-access journals to also self-archive them in their institutional open-access archives.

CiteSeer

Visibilidad académica

• Presencia multinivel de recursos documentales con texto completo o valor añadido Nivel Universidad

Biblioteca híbridaInterface único a bases de datos internas y externasRecursos propios: Tesis, Informes, Memorias, etc..

Nivel DepartamentoDepósitos de documentosDirectorios analíticos

Nivel individualPáginas personales

Científico como Webmaster

• Sedes personales Archivo de la producción científica

i. Ficheros en formato rico (pdf, ps, doc, …) Producción formal: Pre-prints y separatas Datos (Excel, Access, ...) Producción informal: Presentaciones en congresos,

notas para cursos Relaciones profesionales

i. Enlaces a sedes de colegas, sociedades científicas, organizaciones

ii.Enlaces a supersedes: directorios de recursos, buscadoresiii.Otros enlaces: proveedores, agencias financiadoras

Contenidos de valor añadidoi. Propios: Blogs, directorios, bases de datosii.Ajenos: “Mirrors”

Estadísticas de consumo y visibilidad

Los contenidos son la clave

1996

1998

2000

2002 2003

Indicadores

• Grandes volúmenes de información Tratamiento global con técnicas estadísticas Finura limitada en el análisis Perspectiva objetiva

• Opciones Batería de indicadores Seguimiento individualizado Medidas directas e indirectas Comparación con descriptores “offline”

• Agenda “oculta” Incremento de los contenidos Mayor visibilidad

Cibermetría• Estudio cuantitativo de los contenidos y

los procesos de comunicación en Internet Cibercienciometría ~ cibermetría Webometría: Centrada en el Web

• Subdisciplinasi. Topología e informetríaii. Dinámica y evolucióniii. Análisis hipertextualiv. Indicadores y la evaluación de la I+Dv. Bibliometría de las revistas electrónicas y

depósitos de documentosvi. Cibermetría aplicada: Estudios de consumo y

posicionamiento

Metodología

• Métodos directos Mapeado de sedes

i. Lento, muchos recursos, bucles y trampas para robots Análisis de visitas (log files)

i. No disponibles, ausencia de estándares, IP dinámicos• Métodos indirectos

Motores de búsqueda (Visibilidad, impacto)i. Algoritmos y funcionamiento secretos, comportamiento

irregular, opciones de recuperación limitadas Internet Invisible

i. Definición compleja, indización humana intensa Popularidad (número de visitas)

i. Ordenación relativa, fuertes sesgos

MétodosACCION ALTAVISTA ALLTHEWEB MSN SEARCH GOOGLE TEOMA YAHOO

url.tldsiteurl.hostsiteurl.hostsiteurl.hostsiteurl.hostsiteurl.allurl

*/bb/* url inurl inurl inurlaa/*/cc/* allinurllink:*.aaa.xx link NO linkdomain NO NO linkdomainlink:*.ccc.aaa.* NO link NOlink:aaa.xx/index.html link NO linkIDIOMA Adv. filter language Adv. filter Adv. filter lang Adv. filterTIPO DE FICHERO Adv. filter filetype Adv. filter filetype NO filetypeTAMAÑO NO filesize NO NO NO NOPROFUNDIDAD NO url.depth Adv. filter NO NO NO

*.aaa.xx NO NO

*.xx domain

ccc.aaa.xx NO

*.aaa.xx.* host

*.aaa.xx/bb url

*.aaa.* host

site site

Adv. filter

Adv. filter

NO NO

site site

site

hostname

url

DELIMITADORES EN MOTORES DE BUSQUEDA

inurlNO

NO NO

site site

Volumen estimado

TAMAÑO UNAM IBT CUIBYAHOO 840,000 6,120 279GOOGLE 518,000 2,200 169ALTAVISTA 301,888 288 87ALLTHEWEB 257,473 2,558 371TEOMA 212,000 938 27HOTBOT 80,820 1,367 137MSN SEARCH 73,440 1,400 122MAX 840,000 6,120 371MIN 73,440 288 27PROMEDIO 274,036 1,693 159

Visibilidad e Impacto

VISIBILIDADUNAM IBT CUIB

TOT INT TOT INTALTAVISTA 74,282 713 60 152 60Tamaño 301,888 288 87WebIF 0.25 2.48 1.75ALLTHEWEB 283,475 1,934 563 1,631 121Tamaño 257,473 2,558 371WebIF 1.10 0.76 4.40

Visibilidad (Page Rank)POS SEDE URL

1 UNIVERSIDAD NACIONAL AUTÓNOMA DE MÉXICO www.unam.mx2, 20 LA JORNADA www.jornada.unam.mx3, 8 CENTRO NACIONAL DE PREVENCIÓN DE DESASTRES www.cenapred.unam.mx

4 DIRECCIÓN GENERAL DE BIBLIOTECAS www.dgbiblio.unam.mx5 SERVICIO SISMOLÓGICO NACIONAL www.ssn.unam.mx6 LATINDEX www.latindex.unam.mx7 INSTITUTO DE INVESTIGACIONES JURÃDICAS www.juridicas.unam.mx9 MUSEO NACIONAL DE ANTROPOLOGÃA sunsite.unam.mx/antropol

10 INSTITUTO DE BIOTECNOLOGÃA www.ibt.unam.mx11 UNIVERSUM, MUSEO DE LAS CIENCIAS www.universum.unam.mx12 ACADEMIA MEXICANA DE CIENCIAS www.amc.unam.mx13 RADIO UNAM www.unam.mx/radiounam14 BIBLIOTECA NACIONAL biblional.bibliog.unam.mx/bib01.html15 DEPARTMENTO DE SISMOLOGÃA tlacaelel.igeofcu.unam.mx16 INSTITUTO DE INVESTIGACIONES SOCIALES www.unam.mx/iisunam17 CENTRO UNIVERSITARIO DE INVESTIGACIONES BIBLIOTECOLÓGICAScuib.unam.mx18 INSTITUTO DE BIOLOGÃA www.ibiologia.unam.mx19 FACULTAD DE MEDICINA www.facmed.unam.mx21 DEPARTAMENTO DE SEGURIDAD EN CÓMPUTO www.seguridad.unam.mx22 RED LATINOAMERICANA DE BOTANICA www.ecologia.unam.mx/rlb23 INSTITUTO DE INVESTIGACIONES BIBLIOGRÃFICAS biblional.bibliog.unam.mx

Popularidad (Alexa)UNIVERSIDAD DOMINIO POSICION

ENE'03 DIC'04 Universidad Nacional Autónoma de México unam.mx 1,458 1,556 Universidad Oberta de Catalunya uoc.es Tecnológico de Monterrey itesm.mx 3,003 2,856 Universidade de São Paulo usp.br 6,759 3,624 Universidad Nacional de Educación a Distancia uned.es Universidad Complutense de Madrid ucm.es Universidad de Guadalajara udg.mx 10,674 4,891 Universidade de Brasà lia unb.br 9,558 6,156 Universidad de Zaragoza unizar.es Universidad de Alicante ua.es Universidad de Barcelona ub.es Universidad de Oviedo uniovi.es Universidad de Sevilla us.es Universidad de Valencia uv.es Universidad Politécnica de Madrid upm.es Universidad de Buenos Aires uba.ar 15,120 8,607 Universidad Autónoma de Barcelona uab.es Pontificia Universidad Católica de Chile puc.cl 10,613 8,552 Universidad de Chile uchile.cl 10,018 9,197 Universidade Federal do Rio de Janeiro ufrj.br 13,061 13,752 Universidade de Campinas unicamp.br 11,442 15,106 Universidade Federal do Rio Grande do Sul ufrgs.br 14,914 15,145 Universidade Federal de Santa Catarina ufsc.br 18,205 16,415

PopularidadSEDE URL POPUL

La Jornada jornada.unam.mx 40%Servidor de correo correo.unam.mx 7%Instituto de Investigaciones Jurà dicas juridicas.unam.mx 7%Sede Central unam.mx 4%Cómputo Académico dgsca.unam.mx 4%Facultad de Medicina facmed.unam.mx 3%Administración Escolar dgae.unam.mx 3%Posgrado posgrado.unam.mx 1%Bibliotecas dgbiblio.unam.mx 1%Sistema Integral de Administración Escolar dgae-siae.unam.mx 1%Facultad de Ciencias Polà ticas y Sociales politicas.unam.mx 1%Personal personalds.unam.mx 1%Centro Nacional de Prevención de Desastres cenapred.unam.mx 1%Centro de Enseñanza de Lenguas Extranjeras cele.unam.mx 1%Facultad de Ciencias fciencias.unam.mx 1%Bolsa Universitaria de Trabajo trabajo.unam.mx 1%Facultad de Contadurà a y Admistración fca.unam.mx 1%Facultad de Quà mica pquim.unam.mx 1%Hemeroteca Digital hemerodigital.unam.mx 1%Academia Mexicana de Ciencias amc.unam.mx 1%Universidad Abierta y Educación a Distancia cuaed.unam.mx 1%Facultad de Contadurà a y Admistración contad.unam.mx 1%Búsqueda en la UNAM busqueda.unam.mx 1%Otras sedes 16%

Visibilidad• Relaciones hipertextuales: Vecindario

TouchGraph www.touchgraph.com/TGGoogleBrowser.html Pajek UCINET

• Relaciones semánticas Kartoo www.kartoo.com Proyecto EICSTES

i. MultiSOM (Redes neuronales) eicstes.inist.frii. BibTechMon www.eicstes.at

• Métodos multidimensionales Análisis de correspondencias Escalado multidimensional

TouchGraph

Vecindario hipertextual

Redes visibles

¡Gracias!

Mas información en el Web:internetlab.cindoc.csic.es

www.cindoc.csic.es/cybermetricswww.webindicators.orgwww.webometrics.info

www.eicstes.orgEmail: isidro@cindoc.csic.es

¿Preguntas?