Altmetria y nuevas tendencias en medición de la ciencia

1. Altmetría Vicerrectoría de Investigación

2. Contenido • Altmetría • Declaraciones de la comunidad científica • Estado de la cuestión en la UdeA

3. ¿Qué es la altmetría? Objetivo • Medición alternativa del impacto académico • Parte del desarrollo del internet • Busca analizar como la sociedad interactúa con la producción académica. Redes Sociales Académicas Twitter

4. ¿Porqué la Altmetría?

5. Formas de clasificar los indicadores altmetricos Comportamiento Generado Tipo de uso

6. Fuentes de información

7. Altmetric.com • Genera un indicador, score, para sintetizar la información • Mide • Atención • Diseminación • Influencia • Impacto • Procesos automáticos

8. https://www.altmetric.com/demos/plos.html Ejemplo de altmetrics

9. Altmetrics.org

10. ImpactStory • Proveen indicadores sin fines de lucro. • Tienen tres productos: • Unpaywall • ImpactStoryProfiles • Depsy • Cada investigador puede acceder a estas herramientas La posibilidad de ser utilizado en las métricas de evaluación depende del uso que le den las instituciones.

11. ReaderMeter • Generación de indicadores a nivel de autor y nivel de artículo • Mide el consumo de lectura en una amplia dimensión de actores • Calcula el número de lecturas que tiene un autor o un artículo en Mendeley • Genera un sitio de perfil para los autores donde compila sus estadísticas

12. PlumX • Indicadores de cómo la sociedad interactúa con el conocimiento científico. • Incluye amplia cantidad de documentos • Genera perfiles individuales • Servicio que las Universidades contratan • Genera tableros de control

13. Indicadores de PlumX

14. Pro y contra de las altmetrics

15. Contenido • Altmetría • Declaraciones de la comunidad científica • Estado de la cuestión en la UdeA

16. Declaraciones • La comunidad científica no ha estado estática frente a la incidencia de las evaluaciones • Se han realizado varias declaraciones criticando el uso de indicadores • Se propende por otras formas de medición de las actividades científicas y tecnológicas

17. Declaración de San Franscisco (DORA) • Declaration of ResearchAssessment • Fue impulsada por la Sociedad americana de biología celular en 2012 • Se critica el fuerte énfasis que se le concede al Factor de Impacto • Se realizan recomendaciones • Se concentra en el artículo revisado por pares

18. Recomendaciones

19. Declaración de Leiden • Crítica la excesiva dependencia de la evaluación en datos • Los indicadores pueden estar dañando a la comunidad científica • Se proponen 10 principios orientadores • La iniciativa surgió en Leiden, en 2015

20. Principios de Leiden

21. Principios de Leiden

22. Contenido • Altmetría • Declaraciones de la comunidad científica • Estado de la cuestión en la UdeA

23. La evaluación en la Universidad de Antioquia

24. Fases de la evaluación científica

25. Modificaciones objetivo del PAI • Dos proyectos tienen relación con los productos de Apropiación Social CTI • El proyecto Consolidación SUCTI actualiza el reglamento de investigación. • El proyecto Visibilidad incluye iniciativas de Apropiación Social CTI

26. Dos formas de clasificación de producción académica La categoría de los productos se refiere a su clasificación de acuerdo a la naturaleza La clase de los productos se refiere a su clasificación de acuerdo a la calidad Se requieren parámetros de calidad Acordes al objetivo del producto

27. Dos formas de reconocer producción • Funciona desde 2018 • Otorga distintos pesos a las clases • Referente para proyectos de investigación • Funciona desde 2013 • Otorga distintos pesos a las clases • Clasifica grupos • Referente para proyectos de investigación

28. Compartido No Compartido Cuatro categorías de productos (base Colciencias)

29. La Tabla de Aceptación de Productos Dimensión Clasificación A la clase (calidad) del producto se le denomina clasificación. Top Clasificación I Clasificación II Clasificación III • A la naturaleza (categoría) del producto se le denomina dimensión • Generación de Nuevo Conocimiento • Productos Técnicos y Tecnológicos • Formación de Recursos Humanos • Apropiación Social del Conocimiento

30. Generación de Conocimiento Cuatro niveles de clasificación Cinco tipos de producto

31. Generación de Nuevo Conocimiento

32. Producción técnica y tecnológica Tres niveles de clasificación dos tipos de producto

33. Producción técnica y tecnológica

34. Formación de recursos humanos Tres niveles de clasificación Cuatro tipos de producto El criterio es la participación en proyectos de investigación

35. Apropiación Social del Conocimiento Tres niveles de clasificación Tres tipos de producto

36. Generación de contenidos

37. Espacios de Formación

38. Participación Ciudadana

39. Retos del reconocimiento de la ASCTI

40. Posibles desarrollos futuros • Trabajo articulado con las dependencias académicas para fortalecer los criterios de reconocimiento de productos. • Incorporación de las recomendaciones de la Unidad de Innovación Social. • Consolidación de los procedimientos administrativos al interior de la Universidad para aumentar eficiencia y reproducibilidad de la aceptación.

41. Contenido • Altmetría • Declaraciones de la comunidad científica • Estado de la cuestión en la UdeA • Métricas responsables

43. ¿Métricas responsables? • De acuerdo a las declaraciones, los indicadores deben propender por generar los incentivos menos perversos posibles. • En este sentido, se ha desarrollado el concepto de métricas responsables • Las métricas buscan hacer evaluación y medición de la ciencia, tecnología e innovación, en la que se generen incentivos coherentes a los investigadores y fomentando buenas prácticas

44. Principios de las métricas responsables

45. Rankings: ¿ejemplo de práctica no responsables? • Son estrategias de posicionamiento de universidades a partir de una serie de indicadores

46. ¿Modelos de métricas responsables? • Ver presentación anexa

47. Retos a futuro • Diseñar una forma generalizada de evaluar a los investigadores sin causar traumatismos a los entes administrativos

48. ¡Gracias!