El impacto de las revistas españolas de Ciencias Sociales Un ansiado y turbio objeto del deseo

1. Jornada sobre Calidad de Revistas de Ciencias Sociales (CRECS 2011) Grupo ThinkEpi Barcelona, 3 de mayo de 2011 El impacto de las revistas españolas de Ciencias Sociales Un ansiado y turbio objeto del deseo Emilio Delgado López-Cózar Profesor de Metodología de la Investigación Facultad de Comunicación y Documentación Universidad de Granada

2. Prestigio Reputación

3. 1960 1965 1970 1975 1980 1985 1990 1995 2000 2005 2007 2008 2009 SciSearch Essential Science Indicators PC-based citation sets Custom citation projects and national indicators - mainframe PC-based Indicators La historia de los índices de citas y el factor de impacto Web of Science Evidence Social Sciences Citation Index Arts & HumanitiesCitation Index ISI Web of Knowledge Science Citation Index InCites

4. Producción española en Ciencias Sociales y HumanidadesISOC versus Thomson Reuters 1980-2004 38.164 560.596

5. ÍNDICES DE IMPACTO REVISTAS ESPAÑOLAS DE CIENCIAS SOCIALES Y JUÍRIDICAS

6. ÍNDICES DE IMPACTO REVISTAS ESPAÑOLAS DE CIENCIAS HUMANAS

7. Las cifras de IN-RECS/IN-RECJ/IN-RECH

8. Revistas españolas CCSS y Humanidades ± 2.000 WOS 94 IN-RECS IN-RECJ IN-RECH 417 Scopus 99

9. ¿Qué son?

10. Procedencia de las citas

11. Publica fuera para ser citado dentro

12. Publica fuera para ser citado dentro

13. ¿Qué son? Convenciones internacionales: fórmula ISI (Thomson Reuters) con ligeros retoques en la ventana de citación y en el empleo de indicadores bibliométricos adicionales Tiempo 2005 2006 2007 2003 2004 JCR 2006 Impact Factor 2005 2006 2007 2003 2004 2006 Índice de impacto

14. ¿Qué son? Índices de impacto Índices de citas

15. Calendario de implantación

16. ¿Cuánto ha costado? 250.000 euros 35.000 euros/año ¿Quién lo ha financiado hasta ahora?

17. Introducción de las citas nacionales de las revistas Selección de revistas fuente por especialidades Cálculo de impactos e indicadores Resultados en web http://ec3.ugr.es/in-recs/ http://ec3.ugr.es/in-recj/ Carga de citas Sistemático Servidor EC3 Linux Suse 9.2, base datos postgres, apache, php, ... Carga en BD Introducción de los artículos citables Título, Autor…. Cindoc, Dialnet, Compludoc Psicodoc, revista... Tablas BD Una vez al año Carga en BD Carga de citas Sistemático Obtención e introducción de las citas WOS de las revistas Introducción de la producción de la revista por años Cindoc, Dialnet, revista electrónica o en papel Una vez al año Una vez al año Funcionamiento general del sistema

18. Los usos

19. Los usos Conocer el índice de impacto de las revistas • Anual(desde 1996 ) • Acumulativo: 5, 10 años e histórico

20. Los usos Curva de envejecimiento Evolución de la revista Tasa de autoreferenciación Tasa de autocitación

21. Los usos Conocer qué cita la revista Revistas citadas Artículos citados

22. Los usos Conocer los artículos más citados de la revista

23. Los usos Conocer quiéncitaa la revista Revistas citantes Artículos citantes Autores citantes Instituciones citantes Disciplinas citantes

24. Los usos Conocer otros indicadores bibliométricos Citas nacionales e ISI, citas por artículo, artículos muy citados, % artículos citados, índice de coautoría Perfil bibliométrico: comparación revista / especialidad

25. Los usos Conocer Artículos, autores e instituciones más citados de la disciplina

26. Los abusos

27. Los abusos Editores en su afán de incrementar el impacto de su revista se aprestan a manipular las políticas editoriales

28. Los abusos Fomentan la autoreferenciación: recomiendan directamente a los autores que citen de manera indiscriminada artículos publicados en la propia revista

29. Los abusos La citación (en muchos casos autocitación) se concentra exclusivamente en los años en que computa el índice de impacto (2-3 últimos años)

30. Los abusos Editores que cambian la política editorial en función exclusivamente de las citas que puedan recibir los trabajos Favorecen la publicación de trabajos que no computan en el denominador pero sí en el numerador de la fórmula que calcula el factor de impacto

31. Los abusos Un solo autor o un conjunto de ellos, normalmente formando parte del equipo editorial de la revista, determina el impacto de una revista, bien sea la propia o ajena 5 15 Un artículo cita 74 veces a una revista Solo en 5 artículos se cita 356 veces a una revista

36. Ojo Todo esto se ve

37. Advertencias • El factor de impacto es un promedio • OJO: La distribución asimétrica de las citas de una revista hace que dicho promedio no sea representativo • El impacto de un artículonunca equivale al impacto de la revista Citas trabajos publicados en 2007 International Journal of Nursing Studies 8 (5%) trabajos concentran el 74% de las citas 150 (95%) trabajos concentran el 26% de las citas

38. Advertencias • Sesgos en la fórmula de cálculo: • Numerador: citas a todos los items publicados en la revista • (artículos, revisiones, casos clínicos, editoriales, cartas…) • Denominador: solo contabiliza los trabajos citables • (artículos originales y de revisión) M. Amin & M. Mabe. (2000). Impact factors: Use and abuse. Perspectives in publishing

39. Advertencias • El factor de impacto depende de múltiples factores: • Naturaleza y tipo de la disciplina científica: básica/aplicada • Hábitos de publicación y prácticas de citación de las comunidades científicas • Tamaño de las disciplinas y comunidades científicas

40. Advertencias • El factor de impacto es sensible a múltiples factores: • Tamaño de las revistas

41. Advertencias • El factor de impacto es sensible a múltiples factores: • Tipo de revista: general o especializada • Rapidez en la publicación (ventana de citación) • Tipo de trabajos publicados: revisiones, artículos metodológicos, cartas… • Publicación en open access

42. Recomendaciones • Miden la utilidad y la influencia intelectual, no la calidad • Cuando un científico cita un trabajo anterior lo que formalmente hace es reconocer la utilidad que ha tenido dicho trabajo en la confección del suyo propio y, por ende, es un indicador de influencia. Si se acepta esta premisa los trabajos más citados tienen una influencia mayor en las actividades investigadoras que los que tienen menos citas • Son un magnífico indicador de competitividad • Úsese el impacto observado (citas reales) y no el esperado (factor de impacto) • Los datos de citación deben ser cuidadosamente usados e interpretados y no deben reemplazar el juicio humano (expertos). • Deben ayudar en la toma de decisiones y no ser aplicados mecánicamente

43. Muchas gracias por su atenciónEmilio Delgado López-Cózar edelgado@ugr.es / http://ec3.ugr.es/emilio www.ec3.ugr.es

44. Procedencia de las citas