Uso y métricas

Uso y métricas

/ Mié, 31/07/2024 - 14:13

Introduccion

Estas pautas ayudarán a las editoriales y revistas de Diamond OA a implementar los requisitos del Estándar en Acceso Abierto Diamante (DOAS) con respecto al uso y las métricas.
La implementación de indicadores métricos y de uso exhaustivos, precisos y confiables, junto con una comunicación clara sobre las herramientas y metodologías analíticas, permite a los editores y revistas de Diamond OA garantizar que todas sus revistas mantengan altos estándares de transparencia y responsabilidad. El cumplimiento de las normas de protección de datos protege aún más la privacidad de los usuarios y mejora la credibilidad de los datos recopilados y las métricas resultantes.

Cuerpo

Evaluar la calidad de una revista y el impacto del contenido publicado, particularmente en el contexto del acceso abierto (OA) y la ciencia abierta, requiere un enfoque variado. Las métricas tradicionales siguen siendo relevantes, pero han surgido métricas responsables para captar la influencia y el alcance más amplios de las publicaciones de acceso abierto.

Las métricas responsables destacan la importancia de un enfoque equilibrado, transparente e inclusivo para evaluar la investigación. Al emplear una amplia gama de métricas, integrar las evaluaciones cualitativas y priorizar la transparencia y la equidad, las métricas responsables pretenden reflejar con mayor precisión el impacto multifacético del trabajo académico. Al adoptar este enfoque, las revistas y editores de Diamond OA apoyan los objetivos más amplios de la ciencia abierta, promoviendo un entorno en el que la investigación pueda compartirse, accederse a ella y valorarse libremente en función de una evaluación de su impacto real.

Para apoyar la diversidad y la inclusión en la medición del impacto, se recomienda evitar el factor de impacto de las revistas (JIF) como una medida única de la calidad de la revista y el impacto del contenido publicado. En cambio, las editoriales y revistas de Diamond OA deberían utilizar una variedad de indicadores cuantitativos y cualitativos para captar un espectro más amplio del impacto de la investigación, incluidos los indicadores de citación, las métricas alternativas, las revisiones por pares y las medidas de impacto social. También es necesario reconocer que las diferentes disciplinas tienen diferentes normas y medidas de impacto.

Se recomienda que las metodologías detrás de las métricas sean transparentes y comprensibles para que los investigadores sepan cómo se evalúa su trabajo. Las métricas seleccionadas deben utilizar conjuntos de datos abiertos siempre que sea posible para permitir la verificación y el análisis posterior por parte de la comunidad académica.

Complementar las métricas cuantitativas con evidencia cualitativa, como comentarios de revisión por pares, estudios de casos y opiniones de expertos, para proporcionar un contexto para las cifras puede garantizar el contexto narrativo. En este sentido, la revisión abierta por pares, que brinda acceso gratuito a los informes de los revisores, debe prestarse más atención y adoptarse siempre que sea posible.

Las métricas utilizadas deben revisarse y actualizarse periódicamente para reflejar los cambios en el entorno de investigación y los avances tecnológicos. Estas métricas pueden indicar el impacto (que puede basarse en citas o métricas alternativas), el uso o la eficiencia del flujo de trabajo editorial y las decisiones (como las fechas de envío, aceptación y publicación o las tasas de rechazo). La granularidad de estas métricas también puede variar, ya que pueden estar relacionadas con elementos de contenido específicos, como artículos, o con la publicación completa.

Métricas de citas

Contar el número total de veces que se cita un artículo en otros trabajos académicos.

Altmetrics

Realizar un seguimiento de la frecuencia con la que se menciona o comparte la investigación en plataformas de redes sociales como X, LinkedIn y Facebook. Monitorear las apariciones en blogs, artículos de noticias y otras fuentes de medios. Medir la frecuencia con la que los artículos se guardan o se marcan como favoritos en gestores de referencias como Mendeley. Realizar un seguimiento de la participación a través de los comentarios en los sitios web de los editores, los foros de debate y las redes académicas.

Los PID son cruciales para calcular métricas alternativas (altmetrics), que rastrean la atención y el compromiso en línea.

Métricas de uso

Para medir exhaustivamente el impacto de una revista y su contenido publicado, especialmente en el contexto del acceso abierto y la ciencia abierta, es esencial utilizar una combinación de métricas tradicionales y alternativas (altmetrics). Estas medidas deberían reflejar la influencia académica a través de las citas y el impacto social más amplio a través de las descargas, las menciones y la participación en varias plataformas. La implementación de estas diversas métricas permite una visión holística del alcance, la influencia y la contribución de la revista a la comunidad científica y a la sociedad.

Las IP deben proporcionar indicadores métricos a nivel de artículo y revista, incluidas las visitas, las vistas, las descargas y las citas, los datos altmétricos y la distribución geográfica de los visitantes. Estas métricas pueden requerir diferentes niveles de esfuerzo, experiencia técnica y soporte, o pueden implicar recursos financieros. Algunas métricas son relativamente poco exigentes desde un punto de vista técnico, como el registro de las fechas de envío, aceptación y publicación, mientras que otras pueden requerir software o complementos especiales, como widgets que muestren la distribución geográfica de los visitantes. Por último, algunas métricas representan soluciones propias que podrían requerir financiación, como las insignias de citación de Altmetric, PlumX Metrics o Dimensions.

Flujo de trabajo editorial

El flujo de trabajo editorial es fundamental para mantener la calidad, la puntualidad y la integridad de la publicación académica. Beneficia a todas las partes interesadas involucradas (autores, revisores, editores y lectores) al garantizar que los informes de investigación se difundan sin problemas, de manera efectiva y ética, manteniendo altos estándares de rigor académico.

Hay varios componentes del flujo de trabajo editorial que se pueden monitorear y medir, como la puntualidad de la revisión inicial del envío del manuscrito (comprueba la integridad y el cumplimiento de las pautas de envío, garantizando que el manuscrito se ajusta al alcance de la revista y cumple con los estándares básicos de calidad), la asignación a un editor o editor asociado con la experiencia pertinente, la selección de los revisores adecuados y la gestión del proceso de revisión por pares, la supervisión de las revisiones y el nuevo envío del manuscrito revisado, la decisión sobre la aceptación final, corrección, formateo y corrección, composición tipográfica y diseño, asignación de identificadores persistentes (DOI etc.),  publicación de artículos, distribución e indexación en bases de datos relevantes, promoción y difusión del contenido publicado y monitoreo de las métricas de impacto.

La eficiencia del flujo de trabajo editorial se puede medir por el tiempo de entrega de las decisiones, el tiempo de respuesta de los revisores y la calidad de las reseñas, la coherencia y equidad de las decisiones editoriales, el número de apelaciones y sus resultados, la velocidad de producción y la satisfacción del autor y el revisor. Para mejorar el flujo de trabajo editorial, se debe evaluar, rastrear y medir continuamente el tiempo entre las diferentes etapas del proceso editorial, se debe evaluar la calidad de la revisión por pares y las revisiones de los autores, así como la satisfacción del autor y el revisor. Es importante identificar las etapas del flujo de trabajo editorial en las que se producen retrasos con frecuencia e implementar estrategias de mejora. Debe realizarse una evaluación continua del sistema de gestión editorial y otras tecnologías (comprobaciones de plagio, recordatorios automáticos, etc.).

Herramientas analíticas

Una herramienta analítica se refiere a una combinación de medición, adquisición de datos, análisis e informes sobre los datos para estimar el uso, el impacto y las métricas de las revistas. Mediante el uso de herramientas analíticas, las revistas pueden obtener una comprensión integral de su uso, impacto e influencia dentro de la comunidad académica y fuera de ella. Además de la calidad del contenido publicado y del flujo de trabajo editorial, la información que proporcionan las herramientas analíticas es crucial para mejorar las políticas de las revistas, aumentar la visibilidad y demostrar su valor para los autores, los lectores y los financiadores.

Las herramientas analíticas más utilizadas se basan en bases de datos de citas populares, como Web of Science Core Collection (WoSCC) y Scopus, que proporcionan varios indicadores métricos. SciVal la herramienta analítica de Elsevier, permite visualizar el rendimiento de la investigación, realizar una evaluación comparativa en relación con los pares y permite analizar las tendencias. La visibilidad y el impacto de las revistas de diferentes disciplinas también se pueden evaluar mediante las métricas de citación de Google Scholar (GS) de Google Scholar (GS) de acceso gratuito, pero no siempre fiables.

Las diferentes herramientas analíticas van más allá de las citas y rastrean la atención y los debates en línea en torno a artículos académicos, incluidas las menciones en las redes sociales, los medios de comunicación, los documentos de políticas y los blogs, como Altmetric. Además de las citas y las menciones o reacciones en las redes sociales, Plum Analytics ofrece una serie de métricas sobre el uso y las capturas (exportaciones y archivos guardados, lectores, marcadores, favoritos). Recientemente, Dimensions ha ofrecido una plataforma de información sobre la investigación que integra diferentes fuentes de datos para proporcionar métricas sobre publicaciones, citas, subvenciones, patentes, ensayos clínicos y documentos políticos.

Si bien muchas herramientas analíticas populares solo están disponibles a precios de suscripción elevados, también hay herramientas analíticas gratuitas, como CORE, que agrega los resultados de la investigación de acceso abierto y proporciona métricas sobre su uso e impacto, VOSviewer y CiteSpace para el análisis bibliométrico, Open Access Button (que también ofrece herramientas para bibliotecas) y varias herramientas para el uso de datos en repositorios institucionales. Además, las herramientas analíticas comerciales a veces ofrecen una versión gratuita limitada, ofrecen extensiones de navegador de acceso gratuito (Altmetric, Unpaywall) o acceso gratuito a un subconjunto de funciones y datos  (Dimensions). También hay disponibles herramientas específicas para editores, como la búsqueda de metadatos de CrossRef Metadata Search, que proporciona enlaces a citas y algunas métricas básicas.

Los editores de Diamond OA garantizan la transparencia sobre las herramientas y metodologías analíticas utilizadas para recopilar, generar y analizar datos, proporcionando la descripción de las herramientas, los algoritmos y las metodologías utilizadas. Con respecto al cumplimiento del RGPD, deben asegurarse de que todas las actividades de recopilación y procesamiento de datos cumplan con las normas de protección de datos pertinentes, como el General Data Protection Regulation  (RGPD) en Europa. Es necesario implementar medidas para proteger la privacidad de los usuarios cuyos datos se recopilan. Esto incluye anonimizar los datos cuando proceda y garantizar el almacenamiento seguro de los datos.

Artículos de la suite de herramientas relacionados


Directrices relacionadas


Referencias 


Licencias

Este documento está bajo una licencia Creative Commons Attribution 4.0 International License

 

Menú principal de directrices

Last Updated

Etiquetas
Accesibilidad
Reglamento General de Protección de Datos (RGPD)
Indexación
Metadatos
Transparencia
Visibilidad