"habilidades informacionales" 16 mayo 2013 valorar y evaluar la informaciÓn las citas,...

59
16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación Biblioteca de la Universidad de Zaragoza El significado del saber ha cambiado de ser capaz de recordar y repetir información a ser capaz de encontrarla y usarla Herbert Simon

Upload: isabell-nicodemus

Post on 11-Apr-2015

105 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

"HABILIDADES INFORMACIONALES"

16 mayo 2013

VALORAR Y EVALUAR LA INFORMACIÓN

Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Biblioteca de la Universidad de Zaragoza

El significado del saber ha cambiado de ser capaz de recordar y repetir información a ser capaz de encontrarla y usarla

Herbert Simon

Page 2: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

2

29 abril. Conocer y utilizar fuentes de información. Buscar y recuperar información

6 mayo. WOS. Prácticas

9 mayo. Science Direct-Compendex, Scopus. Prácticas

13 mayo. Gestionar la información. Refworks

16 mayo. Valorar y evaluar la información

20 mayo. Taller autores Springer – Nathalie Jacobs, Senior Editor Publisher (engineering) Biblioteca María Moliner (FyL). Salón de Actos. 12-14h.

23 mayo. Comunicar y difundir la información

PROGRAMACIÓN“Habilidades informacionales”

Page 3: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Valorar y evaluar la información

Importancia de las citas.

Evaluación de la actividad investigadora. Agencias y convocatorias de evaluación.

Indicadores bibliométricos derivados de las citas. Essential Science Indicators (ISI)

Índices de impacto de revistas (FI). Evaluación de la calidad de publicaciones sin indicadores de impacto.

Índicadores de productividad de autores: el índice H

Libros Altmetrics

3

Page 4: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

La importancia de las citas La Ciencia es un saber acumulativo y crítico, en continua

transformación, que se nutre de las aportaciones de generaciones y generaciones anteriores de investigadores.

Para que este proceso acumulativo y crítico sea posible es preciso que a la hora de hacer investigación se pueda: Acceder a todo lo publicado hasta la fecha Publicar la investigación una vez finalizada para conseguir

la mayor difusión posible

4

Page 5: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

La importancia de las citas / Publicar Difundir los resultados de una investigación, publicándola, es un deber

moral y profesional, porque cualquier investigación tiene como fin compartir con otros colegas los resultados del trabajo, contribuyendo así en el avance y crecimiento de ese corpus colaborativo de conocimiento que es la Ciencia. La Ciencia que no se publica no existe

Pero también publicar contribuye a conseguir reconocimiento profesional, al poder ser citados por otros colegas a su vez en sus publicaciones. El número de citas recibidas ayuda a evaluar y mejorar la carrera profesional del investigador permitiendo:

Posibles mejoras de contratos y/o condiciones laborables y poder optar a trabajos en instituciones de prestigio o calidad

Conseguir mayores y/o mejores fuentes de financiación para nuestras investigaciones

5

Page 6: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

La importancia de las citas En 1963 Derek J. de Solla Price afirmaba que “La Ciencia es aquello que

se edita en las publicaciones científicas”. O dicho de otra forma: Investigar es publicar

"Publish or Perish“ es otra frase muy popular, que expresa hasta que punto se ha pervertido el sistema científico. Incluso da nombre a un sofware que analiza las citas en Google Scholar

Dónde y cómo publicar es una decisión importante que depende del investigador y de la tradición del área de conocimiento en que trabaje: Áreas científico técnicas: se publica en artículos de revistas, ponencias de

congresos o patentes. Disciplinas de humanidades y ciencias sociales: monografías (individuales,

o contribuyendo con capítulos), ponencias de congresos y artículos de revistas.

6

Page 7: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

La importancia de las citas7

Page 8: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

La importancia de las citas No obstante las revistas científicas se han convertido en el principal

medio de difusión de las investigaciones desde su aparición en 1665, cumpliendo cinco funciones básicas:

Selección de los mejores originales que reciben Control de calidad de la investigación Mejora de la legibilidad de los textos Otorgamiento de crédito, por la reputación adquirida Archivo del conocimiento

Según Ullrichsweb hoy hay más de 350.000 revistas vivas: Más de 130.000 son de investigación Más de 65.000 tiene evaluación por pares

8

Page 9: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

La importancia de las citas El crecimiento exponencial de la información científica,

esencialmente a través de artículos de revistas, motivó la aparición de las primeras revistas de abstracts a finales del siglo XIX.

La mayoría de las revistas de abstracts se solían centrar en una especialidad, recogiendo los datos bibliográficos de los artículos que se publicaban en las revistas de esa temática, acompañados de un breve resumen del contenido del artículo.

Con el nacimiento y desarrollo de la informática en el último tercio del siglo XX las revistas de abstracts se transformaron en las actuales bases de datos bibliográficas.

9

Page 10: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

La importancia de las citas Las bases de datos bibliográficas son una herramienta fundamental

en la exploración y descubrimiento de las ideas y trabajos de otros investigadores

Cualquier investigación debe iniciarse desde el conocimiento de los principales y los más actuales avances en el tema elegido, lo que permite partir desde una base científica completa y al día.

Toda investigación crece y se apoya en ideas, datos o conclusiones precedentes: en los conocimientos y trabajos previos hechos por otras personas.

Pero cuando se toma un dato, una idea o cualquier otro tipo de información de un trabajo ajeno, debe citarse la fuente. Es lo que se conoce como cita o referencia bibliográfica.

10

Page 11: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

La importancia de las citas Una cita o referencia bibliográfica contiene los datos

mínimos que permiten localizar y consultar el documento al que hacen referencia. Estos datos básicos son: Autor o autores Título del trabajo Dónde se ha publicado:

Título de la revista (si es un artículo) con indicación de volumen y número, Título del libro (si es una parte de él), Nombre de la editorial si es una obra completa, etc.

Año de publicación Secuencia de páginas (para artículos y partes de libros)

11

Page 12: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

La importancia de las citas Como autores, citar otros trabajos demuestra:

La calidad del nuestra investigación al tener conocimiento de los avances principales y más actuales

Respeto y reconocimiento al trabajo de otros investigadores precedentes, sin apropiarnos indebidamente de su labor

Como lectores, la bibliografía citada en un trabajo permite: Conocer los documentos que ha utilizado un autor en su investigación y

darnos nuevas fuentes de conocimiento Seleccionar trabajos en función de si citan o no investigaciones que nos

hayan parecido especialmente importantes. Descubrir otras trabajos interesantes que comparten bibliografía común

con el que estamos leyendo

12

Page 13: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

La importancia de las citas El análisis bibliométrico de las citas facilita, además, otro tipo de información

que, junto a otros aspectos, permite evaluar la calidad de los trabajos: Las citas recibidas por un trabajo permiten evaluar la calidad:

De un trabajo individual: número de citas De la carrera de un investigador por el conjunto de sus trabajos: índice H Del lugar o medio en el que publica (revista): índices de impacto Del grupo, institución y país en el que se ha realizado la investigación: índice H

Pero también permiten conocer: Cuales son los trabajos o los autores más citados e importantes sobre un tema

específico Quién y dónde está investigando sobre un tema concreto y cuales son las últimas

tendencias Cuales son las revistas de mayor calidad o las que recogen los trabajos más

innovadores

13

Page 14: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

La importancia de las citasLas citas y su análisis como indicadores de la calidad ¿Calidad o cantidad?

La cantidad es indicativa de la calidad pero no el único factor a valorar

Distorsiones y perversiones Citas positivas… y negativas. Autocita excesiva. Citas a colegas. Ghostwritte, etc. Se prioriza la publicación en inglés en artículos de revistas internacionales frente a la

publicación en castellano de temas más locales en revistas nacionales, en congresos y en libros

Las áreas de conocimiento no científicas tienen diferentes formas de investigar y difundir la investigación

Se investiga para publicar, no para descubrir Aprovechando el deseo de los autores de publicar para acumular citas, aparecen las

editoriales OA de baja calidad o "predatory scholarly open-access publishers según la Lista de Jeffrey Beall

14

Page 15: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

La importancia de las citasLas citas y su análisis como indicadores de la calidadBeneficios y mejoras Cambio en la actitud de los investigadores: enfoque (estandar más internacional)

la estrategia (menos publicaciones y mejores, y más colaboración con otros investigadores y centros)

los temas a investigar (se focalizan las cuestiones y problemas relevantes del área)

Se publica en inglés, en artículos, en revistas internacionales: Más rapidez, especialización, revisión por pares, concisión y beneficios económicos y

profesionales Mayor competencia y calidad Más posibilidades de publicar en revistas internacionales de alto impacto, ser leído y conseguir

citas

Así se mejora la carrera científica, la visibilidad del centro y la captación de recursos Por su parte, las revistas nacionales buscan cumplir los criterios de calidad (periodicidad,

consejo editorial, revisión por pares, información a los autores, etc…)

15

Page 16: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

La importancia de las citasEvaluar la importancia de un trabajo en función de las citas que recibe y del

factor de impacto de la revista donde se publica se ha convertido en baremo de la excelencia en la investigación. En España las dos agencias de evaluación más importantes basan sus criterios principalmente en el registro de publicaciones de calidad de un investigador:

La evaluación de la actividad investigadora de profesores universitarios y escala científica del CSIC por parte de la CNEAI (Comisión Nacional Evaluadora de la Actividad Científica) para la obtención de los sexenios de investigación

La evaluación de la actividad investigadora, a través del programa ACADEMIA, para la contratación y acreditación del personal docente e investigador de las universidades por parte de la ANECA (Agencia Nacional de Evaluación de la Calidad y Acreditación)

La ACPUA se encarga también de evaluar la actividad investigadora en el ámbito de Aragón.

Y sirven además para elaborar rankings (Shangai…), calificar la excelencia (campus…), etc.

16

Page 17: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

17

Importancia de las citas. Indicadores bibliométricos derivados de las citasEssential Science Indicators (ISI)

Índices de impacto de revistas (FI). Evaluación de la calidad de publicaciones sin indicadores de impacto.Índicadores de productividad de autores: el índice H

Libros Altmetrics

Page 18: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Indicadores bibliométricos derivados de las citas Los indicadores bibliométricos se basan en el análisis estadístico de los

datos cuantitativos y cualitativos de la literatura científica y técnica. Evalúan el impacto, la calidad y la productividad de la actividad

científica, ya sea a nivel individual o colectivo (grupos y centros de investigación, por países, revistas, disciplinas, etc.) en base a la literatura científica ya publicada.

Existen múltiples indicadores bibliométricos, pero los más conocidos y utilizados se centran en:

Evaluar la calidad de las revistas en las que se publica a través de los índices de impacto

Evaluar la calidad y productividad de los autores a través de los índices de citas, que contabilizan las veces que son citadas sus publicaciones.

18

Page 19: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Indicadores bibliométricos derivados de las citas Evaluar la calidad de las revistas a través de los índices de impacto:

Los índices de impacto son un valor numérico que se asigna a una revista en función del número de citas que reciben los artículos que publica esa revista durante un periodo de tiempo determinado. El índice de impacto más conocido y utilizado es el Factor de impacto del ISI, pero hay otros como el Scimago Journal Ranking, el Eigenfactor, etc.

Evaluar la calidad y productividad de los autores a través de los índices de citas:

Los índices de citas contabilizan las veces que un documento ha sido citado por otras investigaciones posteriores, y aunque no es un indicador fiable de su calidad si que da indicios. El índice de citas más conocido y utilizado es el Citation Index del ISI, aunque han ido surgiendo productos alternativos como Scopus, Google Scholar, etc.

El índice H es un indicador que mide toda la producción científica de un investigador en un único valor numérico.

19

Page 20: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Indicadores bibliométricos derivados de las citas – Un poco de historia

En las décadas de los cincuenta y sesenta D.J.S. Price publica diferentes estudios sobre cienciometría, analizando el crecimiento y la naturaleza de la publicación científica. En las mismas fechas Eugene Garfield desarrolla el concepto de índice de citas:

Garfield, E.: Citation Indexes for Science: A New Dimension in Documentation through Association of Ideas.   Science, 122(3159), p.108-11, July 1955

Garfield elabora en 1961, por encargo del NIH National Institute of Health de Estados Unidos, el Genetics Citation Index, a partir del cual desarrolló en 1963 el Science Citation Index.

Science Citation Index fue el primero producto de toda una serie que han derivado en herramientas de análisis de citas y de evaluación de la investigación

20

Page 21: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Indicadores bibliométricos derivados de las citas – Un poco de historia

Garfield había fundado el Institute of Scientific Information (ISI) en 1960, Institución que publica los índices de citas (Citation Index) y que ha ido generando paulatinamente otros productos:

Science Citation Index (1963): Cubre el año 1961 en 6 volúmenes que vacían la información de 562 revistas

Social Science Citation Index (1965) Arts & Humanities Citation Index (1975) Journal Citation Reports (1975) Versión CD-ROM (1980) Versión web: Web of Science (1997) Book Citation Index (2011) Data Citation Index (2013)

21

Page 22: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Indicadores bibliométricos derivados de las citas – Un poco de historia

Durante décadas pues el ISI ha producido los únicos recursos del mercado que realizaban análisis de citas que han sido utilizadas por las agencias de evaluación para evaluar la calidad de la investigación, ya que recogen las mejores investigaciones del mundo.

Science Citation Index (SCI) frente al resto de revistas de abstracts-bases de datos:

1. Aplica criterios muy exigentes de selección de las revistas que se indexan, asegurando que la información contenida es de alta calidad

2. Fue el primero en incluir y vaciar también la bibliografía que acompaña a cada documento

22

Page 23: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Indicadores bibliométricos derivados de las citas

1. Criterios de selección ISI: Master Journal List: Science Citation Index empezó vaciando la

información de 562 revistas y hoy indexa 8.624 títulos. Actualmente publica 3 ediciones del Citation Index: Science, Social Sciences y Arth & Humanities Citation Index, que comprenden, entre las tres, 13.475 títulos.

Para seleccionar las revistas que van a indexar aplican la ley de Bradford, según la cual un número relativamente pequeño de revistas especializadas publican la mayoría de resultados científicos importantes. Es lo que se conoce como publicaciones núcleo:

Proceso de selección de revistas especializadas de Thomson Reuters

(Esquema en diapositiva siguiente)

23

Page 24: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Indicadores bibliométricos derivados de las citas

24

Page 25: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Indicadores bibliométricos derivados de las citas

2. La inclusión de la bibliografía de cada trabajo y su indización permite:

Visualizar relaciones entre documentos en base a la bibliografía común que emplean, abriendo nuevas vías de conocimiento y de relaciones entre trabajos

Establecer rangos de calidad de autores, documentos y revistas en base a las veces que son citados cada uno de los respectivos trabajos

25

Page 26: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

26

Importancia de las citas. Indicadores bibliométricos derivados de las citasEssential Science Indicators (ISI)

Índices de impacto de revistas (FI). Evaluación de la calidad de publicaciones sin indicadores de impacto.Índicadores de productividad de autores: el índice H

Libros Altmetrics

Page 27: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Indicadores bibliométricos derivados de las citas

Los productos ISI: Web of Science Licencia nacional a través de FECYT que da acceso a una parte de los

recursos del ISI: Web of Science Core Collection (desde 1900). Incluye las bases de datos

de CITAS "citation index" Journal Citation Reports (desde 1997). Essential Science Indicator (desde 1999) Herramientas: End Note Web y Research ID

27

Page 28: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Indicadores bibliométricos derivados de las citas -Essential Science Indicator

Essential Science Indicator (desde 1999)

28

Page 29: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Essential Science Indicator

• Es una compilación global de estadísticas sobre el desempeño científico, y de datos sobre las tendencias de la ciencia, derivados de las bases de datos de ISI.

• Permite identificar los países, instituciones, investigadores, revistas y artículos más citados en las distintas disciplinas y establecer ránkings en función de

las citas recibidas.

Indicadores bibliométricos derivados de las citas -Essential Science Indicator

29

Page 30: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Contenido: registros de documentos seleccionados según umbrales de citas, provenientes solamente de revistas indizadas por Thomson ISI.

Actualización: bimestral.

Cobertura temporal: datos de los 10 últimos años.

Temática: 22 disciplinas.

Indicadores bibliométricos derivados de las citas -Essential Science Indicator

30

Page 31: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Utiliza los datos de las citas de las publicaciones de ISI a fin de clasificar autores, instituciones, países y publicaciones para: Evaluar el rendimiento de la investigación de personas, instituciones,

países y publicaciones, para identificar a los investigadores o instituciones de primera línea en un campo o disciplina específicas; o determinar áreas importantes de investigación que se desarrollan en universidades o instituciones específicas.

Identificar tendencias significativas y áreas emergentes de investigación. Clasificar países, publicaciones, científicos, documentos e instituciones

de primera línea por campo de investigación. Determinar quién publica los documentos más relevantes en un campo

determinado.

Indicadores bibliométricos derivados de las citas -Essential Science Indicator

31

Page 32: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

32

Indicadores bibliométricos derivados de las citas -Essential Science Indicator

22 Disciplinas:

Page 33: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

33

Importancia de las citas. Indicadores bibliométricos derivados de las citasEssential Science Indicators (ISI)

Índices de impacto de revistas (FI). Evaluación de la calidad de publicaciones sin indicadores de impacto.Índicadores de productividad de autores: el índice H.

Libros Altmetrics

Page 34: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Índices de impacto de revistasSirven para evaluar la calidad de las mismas, estableciendo rankings de calidad en base a las citas que reciben los artículos publicados en ellas durante un periodo de tiempo determinado. Estos rankings permiten conocer:

El impacto de cada revista, en relación a las de su categoría o categorías (una revista puede estar en más de una), permitiendo identificar cuales son las revistas más importantes en cada área de conocimiento

La Posición de la revista dentro de las de su disciplina, y el cuartil o tercil en el que se encuentran (que es el resultado de dividir por cuatro o por tres el conjunto de títulos de esa categoría)

El índice de impacto por antonomasia es el Factor de Impacto (FI) del Journal Citation Reports (JCR). El FI del JCR se calcula a dos años por defecto pero como en muchas disciplinas dos años es poco tiempo para recibir citas también se calcula para cinco años

34

Page 35: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Índices de impacto de revistas: Journal Citation Reports Se puede acceder al Journal Citation Reports a través de la biblioteca, del catálogo y de Alcorze Para los años anteriores a 1997 consultar este enlace de la Biblioteca del Instituto Química-Física Rocasolano, que da acceso a los pdfs de los años 1979-2006

Aspectos a tener en cuenta a la hora de utilizar Journal Citation Reports: Una revista no es mala por no estar en JCR Hay más representación de unas áreas de conocimiento que de otras El periodo de cálculo por defecto de 2 años es corto para recibir citas:

En cada disciplina varía el nº de publicaciones, periodo de tiempo de citación, etc.

No todos los artículos de una misma revista reciben las mismas citas No distingue artículos, editoriales, noticias, comunicaciones… Recoge revistas Open Access Las revistas hay que compararlas siempre dentro de su disciplina porque cada

categoría tiene un Factor de Impacto diferente

Índices de impacto de revistas35

Page 36: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Indicadores bibliométricos derivados de las citas

La estricta selección de recursos de ISI presenta sesgos importantes al primar los artículos, las revistas fuente, las publicaciones de países anglosajones, el idioma inglés y las disciplinas de biomedicina y ciencia, frente a investigaciones y revistas no publicadas en inglés y de países en vías de desarrollo, de disciplinas sociales y humanísticas, de investigaciones de ámbito más local y de publicaciones que no sean artículos.

36

Page 37: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Indicadores bibliométricos derivados de las citasLa aparición de competencia obliga al ISI a mejorar el producto y a ampliar el abanico de revistas de países, lenguas y disciplinas que recogen en su base de datos, y a añadir nuevos tipos documentales (libros y datos)

37

Page 38: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Índices de impacto de revistas

Eigenfactor: reelabora el Factor de Impacto del Journal Citation Reports en función de los origen de las citas, aplicándoles mayor o menor valor en función de si las citas recibidas proceden de revistas más o menos influyentes.

38

Page 39: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Índices de impacto de revistas

Scimago Journal Rank: recurso gratuito que extrae sus datos de los índices de citación de Scopus.

39

Page 40: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Índices de impacto de revistas

Google Scholar Metrics: también gratuito, agrupa en listas por idiomas las 100 revistas con mayor índice H, tomando como referencia los últimos 5 años (H5).

40

Page 41: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Índices de impacto de revistas

Basado en los datos de Google Scholar Metrics "Publish or Perish“ es un sofware que analiza las citas en Google Scholar

41

Page 42: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Índices de impacto de revistas: nuevos recursosLa evaluación de todo el conocimiento científico con un único recurso no es posible y provoca que muchas publicaciones de calidad queden fuera. Además, determinadas disciplinas y áreas de conocimiento, por las propias características de su materia de estudio, realizan investigaciones de carácter local, regional o temporal cuyos resultados sólo interesan a un reducido grupo de especialistas y no encuentran acomodo en las revistas más internacionales de su ámbito, o por propia tradición trabajan con parámetros cuya idiosincracia no se puede cambiar de un día para otro.

Esto ha tenido un reconocimiento paulatino en las convocatorias de las agencias de evaluación, que para determinadas disciplinas recogen cada vez más recursos alternativos de evaluación que tratan de ofrecer información sobre el impacto y la calidad de las revistas científicas. Algunos de ellos son recursos de ámbito nacional que han ido surgiendo ante la evidencia de que las revistas científicas españolas no aparecían recogidas en recursos internacionales, bien por las razones anteriormente mencionadas, bien porque no cumplían con unos criterios mínimos de calidad: Aunque en algunos casos son productos desarrollados bajo el amparo de proyectos de investigación, con una limitación temporal que no ha tenido continuidad.

Índices de impacto de revistas42

Page 43: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Índices de impacto de revistas Revistas con índices de impacto: Recursos especializados alternativos Internacionales

CitEc (Citations in Economy) CUIDEN CITACION (Índice de revistas sobre cuidados de la salud con repercusión en Iberoamérica)

Nacionales IHCD (Factor de impacto potencial de las revistas médicas españolas). 2001-2005 In-RecH (Índice de impacto de revistas españolas de ciencias humanas). 2004-2008

In-RecJ (Índice de impacto de revistas españolas de ciencias jurídicas). 1999-2010 In-RecS (Índice de impacto de revistas españolas de ciencias sociales). 1996-2010 Índice H de revistas españolas en ciencias sociales y jurídicas en Google Scholar. 2001-2011

RESH (Revistas españolas de ciencias sociales y humanidades). 2000-2008

43

Page 44: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Índices de impacto de revistas Revistas sin índices de impactoPara aquellas revistas que no tienen índice de impacto, por no aparecer recogidos en los recursos anteriormente mencionados, hay que acudir a otros parámetros de evaluación:

Revistas que cumplen requisitos de calidad editorial:

Consultar recursos de revistas sin indicadores de impacto en el Portal del Investigador de la BUZ

Revistas indexadas en bases de datos internacionales de reconocido prestigio

Generalmente la propia revista suele indicar en qué bases de datos se indexan sus artículos, pero también podemos acudir a Ulrichsweb. Global Serials Directory, que proporciona información detallada de más de 300.000 publicaciones periódicas, y facilita detalles sobre la calidad editorial de cada revista y en qué bases de datos se indexan.

44

Page 45: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Información - el investigador y la biblioteca

45

Page 46: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

46

Importancia de las citas. Indicadores bibliométricos derivados de las citasEssential Science Indicators (ISI)

Índices de impacto de revistas (FI). Evaluación de la calidad de publicaciones sin indicadores de impacto.Indicadores de productividad de autores: el índice H

Libros Altmetrics

Page 47: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Al hablar de indicadores de productividad de autores hay que tener en cuenta varios factores:

1. El número de citas que reciben los documentos publicados por un autor son un indicio, no una evidencia de la calidad de sus trabajos

2. Un autor puede firmar sus trabajos de forma diferente a lo largo de su carrera profesional

3. La posición y número de autores firmantes de una investigación es un factor a evaluar

1. Número de citas recibidas

Como ya vimos en la sección dedicada a la importancia de las citas, a veces la causa por la que se citan otras obras tiene motivos espurios, por lo que el número de citas que recibe un trabajo no se puede considerar de forma absoluta una medida de su calidad científica, aunque si puede dar indicios de la misma.

Índices de impacto de autores47

Page 48: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Índices de impacto de autores

Las principales herramientas, de carácter interdisciplinar, para consultar las citas que recibe un documento, autor, etc. son:

Web of Science Core Collection Scopus Essential Science Indicators Google Scholar Google Scholar Citation Microsoft Academic Search

Se puede ampliar información sobre estos recursos y sobre otros de carácter especializado consultando el Portal del Investigador de la BUZ, en la sección “Citas a los trabajos de un autor” accesible bien a través de “Recursos para la evaluación de la actividad investigadora” o a través de “Autoría”.

48

Page 49: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

¿Qué es el Índice H? Es un indicador de análisis de la producción

científica. Resume en un único indicador numérico la relevancia de un investigador y también de un grupo, institución, revista, país…

Es una media entre el número de investigaciones o artículos y las citas que reciben

¿Cómo se calcula? Se ordenan los artículos en forma

descendente por el número de citas recibidas y se numeran, formando 2 rankings. Cuando el número de ámbos coincide tenemos el "índice H"

Si el índice H de un autor es 7, quiere decir que 7 de sus artículos han recibido al menos 7 citas. Si el índice H de Albert Einstein es 50, quiere decir que 50 de los documentos publicados por Einstein han recibido al menos 50 citas cada uno

Podemos consultar el índice H en los principales recursos de análisis de citas: Web of Science, Scopus y Google Scholar

Es una propuesta del físico Jorge Hirsch de La Universidad de California de finales de 2005 que ha obtenido un inmediato reconocimiento como herramienta de evaluación dentro de la comunidad investigadora.

Índices de impacto de autores – El índice H

Page 50: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Índices de impacto de autores – El índice H

Page 51: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Índices de impacto de autores2. Indicadores de productividad de autores: Firmar de diferentes manerasEs importante firmar siempre IGUAL y evitar cambios, homonimias, y tener en cuenta cómo

indizan las bases de datos anglosajonas. Hasta hace poco esto solía suponer un problema para identificar toda la producción científica de un autor y calcular sus índices de productividad e impacto. Por ello FECYT desarrolló un documento con recomendaciones para la Normalización de autores e instituciones. Y cada recurso trataba de solucionar este problema de forma independiente (Research ID para WoS , Scopus Author Identifier, Google Scholar Citations)

Recientemente se ha puesto en marcha una iniciativa denominada ORCID (Open Researcher and Contributor ID) que trata de normalizar esta situación aplicando un indicador único para cada investigador, independientemente de cómo firme. Participan en esta plataforma las principales organizaciones y editoriales científicas. La Universidad de Zaragoza es miembro de la misma y ha iniciado el proceso de atribuir un identificador ORCID a todos sus investigadores.

Se puede ampliar información en el Portal de Investigador de la BUZ

51

Page 52: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Índices de impacto de autores3. Indicadores de productividad de autores: Posición y número

de los autores firmantesEl número de autores es indicativo de la importancia del trabajo. El trabajo en equipo puede darle mayor validez al ser revisado por más investigadores. Los trabajos en colaboración internacional suelen tener más citas, publicarse en revistas con más FI y conseguir mayor financiación.

El orden de firma de los autores suele indicar la importancia o contribución de cada uno de ellos en el trabajo, aunque puede variar según la disciplina.

52

Page 53: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Índices de impacto de autores

Indicadores de productividad de autores: número de los autores firmantes

Número aproximado de autores en los trabajos de revistas indexadas en Web of Science, principalmente internacionales y anglosajonas

53

Page 54: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

54

Importancia de las citas. Indicadores bibliométricos derivados de las citasEssential Science Indicators (ISI)

Índices de impacto de revistas (FI). Evaluación de la calidad de publicaciones sin indicadores de impacto.Indicadores de productividad de autores: el índice H

Libros Altmetrics

Page 55: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Los libros: todo en unoEn función del área de conocimiento los libros tienen mayor o

menor importancia Indicios de calidad que es necesario considerar:

ISBN Base de datos del ISBN (España) WorldCat, etc.

Editoriales especializadas de prestigio y calidad científica Scholary Publishers Indicators (Humanidades y Ciencias Sociales) Master Book List de Thomson Reuters (ISI) y Book Title List de Scopus

Número y calidad de las citas Book Citation Index (ISI) Web of Science Scopus Google Académico

Reseñas en revistas científicas especializadas, etc. Google, Google Libros, etc.

55

Page 56: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Alternativas bibliométricas: los Altmetrics

Los Altmetrics (Article level metrics) son nuevos indicadores, basados en la web 2.0, para el análisis de la actividad científica y académica.

Las menciones en blogs, el número de tuits, de personas que guardan un artículo en su gestor de referencias sociales (Mendeley, Zotero, CiteUlike…), o que comparten un artículo con otros colegas en su red social académica, pueden ser un indicador valido del uso y la importancia de los documentos científicos antes de que estos sean citados en otros trabajos publicados.

Editoriales de prestigio, e incluso bases de datos de índices de citas del prestigio de Scopus están recogiendo este tipo de información e integrándola como herramientas informativas complementarias.

56

Page 57: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Nadie puede leer todoDeclaración de Altmetrics

Alternativas bibliométricas: los Altmetrics

Page 58: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

Alternativas bibliométricas: los Altmetrics

Ejemplo altmetris en Scopus:

Page 59: "HABILIDADES INFORMACIONALES" 16 mayo 2013 VALORAR Y EVALUAR LA INFORMACIÓN Las citas, los indicadores bibliométricos y la calidad y evaluación de la investigación

59 MUCHAS GRACIAS A TODOS