Utilização e métricas

/ Qua, 2024-07-31 14:13

Introdução

Estas diretrizes ajudarão os editores e revistas de Acesso Aberto Diamante a implementar os requisitos do Padrão de Acesso Aberto Diamante (DOAS) no que diz respeito à utilização e métricas. A implementação de indicadores de utilização e métricas abrangentes, precisos e fiáveis, juntamente com uma comunicação clara sobre ferramentas e metodologias analíticas, permite que os editores e revistas de Acesso Aberto Diamante assegurem que todas as suas revistas mantenham elevados padrões de transparência e responsabilidade. O cumprimento das regulamentações de proteção de dados salvaguarda ainda mais a privacidade dos utilizadores e aumenta a credibilidade dos dados recolhidos e das métricas resultantes.

Desenvolvimento

Avaliar a qualidade e o impacto do conteúdo publicado de uma revista, particularmente no contexto do acesso aberto (OA) e da ciência aberta, requer uma abordagem variada. As métricas tradicionais continuam a ser relevantes, mas métricas responsáveis surgiram para capturar a influência e o alcance mais amplo das publicações de acesso aberto.

As métricas responsáveis destacam a importância de uma abordagem equilibrada, transparente e inclusiva na avaliação da investigação. Ao empregar uma variedade de métricas, integrar avaliações qualitativas e priorizar a transparência e a equidade, as métricas responsáveis visam refletir de forma mais precisa o impacto multifacetado do trabalho académico. Ao adotar esta abordagem, as revistas e editores de OA Diamante apoiam os objetivos mais amplos da ciência aberta, promovendo um ambiente onde a investigação possa ser livremente partilhada, acedida e valorizada com base na avaliação do seu impacto real.

Para apoiar a diversidade e inclusão na medição do impacto, é recomendado evitar o Journal Impact Factor (JIF) como uma medida única da qualidade da revista e do impacto do conteúdo publicado. Em vez disso, os editores e revistas de OA Diamante devem utilizar uma variedade de indicadores quantitativos e qualitativos para capturar um espectro mais amplo do impacto da investigação, incluindo métricas de citações, altimétricas, revisões por pares e medidas de impacto social. Também é necessário reconhecer que diferentes disciplinas têm normas e medidas de impacto distintas.

É recomendado que as metodologias por trás das métricas sejam transparentes e compreensíveis para que os investigadores saibam como o seu trabalho está a ser avaliado. As métricas selecionadas devem usar conjuntos de dados abertos sempre que possível para permitir a verificação e análise adicional pela comunidade académica.

Complementar as métricas quantitativas com evidências qualitativas, como comentários de revisores por pares, estudos de caso e opiniões de especialistas, para fornecer contexto para os números pode garantir o contexto narrativo. Neste sentido, a revisão por pares aberta, proporcionando acesso gratuito aos relatórios dos revisores, deve ser considerada com mais atenção e adotada sempre que possível.

As métricas utilizadas devem ser revistas e atualizadas regularmente para refletir as mudanças no ambiente de pesquisa e os avanços tecnológicos. Essas métricas podem indicar impacto (que pode ser baseado em citações ou métricas alternativas), utilização ou eficiência do fluxo de trabalho e decisões editoriais (como datas de submissão, aceitação e publicação ou taxas de rejeição). A granularidade dessas métricas também pode variar, uma vez que podem relacionar-se a itens específicos de conteúdo, como artigos, ou à publicação como um todo.

Métricas de citação

Contagem do número total de vezes que um artigo é citado em outros trabalhos académicos

Altmetricas

Rastrear a frequência com que a pesquisa é mencionada ou partilhada em plataformas de redes sociais como X, LinkedIn e Facebook. Monitorizar as aparições em blogs, artigos de notícias e outras fontes de media. Medir com que frequência os artigos são guardados ou marcados em gestores de referências como o Mendeley. Rastrear o envolvimento através de comentários em websites de editores, fóruns de discussão e redes académicas.

Os Identificadores Persistentes (PIDs) são cruciais para calcular métricas alternativas (altmétricas), que monitorizam a atenção e o envolvimento online.

Métricas de utilização

Para medir de forma abrangente o impacto de uma revista e o seu conteúdo publicado, especialmente no contexto de acesso aberto e ciência aberta, é essencial utilizar uma combinação de métricas tradicionais e alternativas (altmétricas). Estas medidas devem captar a influência académica através de citações e o impacto societal mais amplo através de downloads, menções e envolvimento em várias plataformas. Implementar estas métricas diversificadas permite uma visão holística do alcance, influência e contribuição da revista para a comunidade científica e para a sociedade.

Os Identificadores Persistentes (IPs) devem fornecer indicadores métricos a nível de artigo e de revista, incluindo visitas, visualizações, downloads e citações, dados altmétricos e distribuição geográfica dos visitantes. Estas métricas podem exigir diferentes níveis de esforço, especialização técnica e apoio, ou podem envolver recursos financeiros. Algumas métricas são relativamente pouco exigentes do ponto de vista técnico, como o registo das datas de submissão, aceitação e publicação, enquanto outras podem necessitar de software ou plugins especializados, como widgets que mostram a distribuição geográfica dos visitantes. Finalmente, algumas métricas representam soluções proprietárias que podem requerer financiamento, como Altmetric, PlumX Metrics ou Distintivos de Citação Dimensions.

Fluxo Editorial

O fluxo editorial é fundamental para manter a qualidade, pontualidade e integridade da publicação científica. Beneficia todas as partes interessadas (autores, revisores, editores e leitores) ao garantir que os relatórios de pesquisa sejam disseminados de forma suave, eficaz e ética, mantendo elevados padrões de rigor académico.

Existem vários componentes do fluxo editorial que podem ser monitorizados e medidos, como a pontualidade da revisão inicial da submissão do manuscrito (verificações de completude e adesão às diretrizes de submissão, garantindo que o manuscrito se encaixe no âmbito da revista e cumpra os padrões básicos de qualidade), a atribuição a um editor associado com a experiência relevante, a seleção de revisores adequados e a gestão do processo de revisão por pares, a supervisão das revisões e reenvios do manuscrito revisto, a decisão sobre a aceitação final, a revisão de estilo, formatação e correção, a composição e layout, a atribuição de identificadores persistentes (DOI etc.), publicação dos artigos, distribuição e indexação em bases de dados relevantes, promoção e disseminação do conteúdo publicado e monitorização das métricas de impacto.

A eficiência do fluxo editorial pode ser medida pelo tempo de resposta desde a submissão até a decisão, o tempo de resposta dos revisores e a qualidade das revisões, a consistência e imparcialidade das decisões editoriais, o número de recursos e os seus resultados, a velocidade de produção e a satisfação dos autores e revisores. Para melhorar o fluxo editorial, o tempo entre as diferentes fases do processo editorial deve ser continuamente avaliado, acompanhado e medido, assim como a qualidade da revisão por pares e das revisões dos autores, bem como a satisfação dos autores e revisores. É importante identificar as fases do fluxo editorial onde ocorrem frequentemente atrasos e implementar estratégias para a sua melhoria. A avaliação contínua do sistema de gestão editorial e de outras tecnologias (verificações de plágio, lembretes automáticos, etc.) deve estar em vigor.

Ferramentas Analíticas

Uma ferramenta analítica refere-se a uma combinação de medição, aquisição de dados, análise e relatórios sobre dados para estimar o uso, impacto e métricas de uma revista. Ao usar ferramentas analíticas, as revistas podem obter uma compreensão abrangente do seu uso, impacto e influência dentro da comunidade académica e além. Além da qualidade do conteúdo publicado e do fluxo editorial, as informações fornecidas pelas ferramentas analíticas são cruciais para melhorar as políticas da revista, aumentar a visibilidade e demonstrar o valor para autores, leitores e financiadores.

As ferramentas analíticas mais utilizadas baseiam-se em bases de dados de citações populares, como Web of Science Core Collection (WoSCC) e a Scopus, fornecendo vários indicadores métricos. A ferramenta analítica da Elsevier, a SciVal ferece visualização do desempenho da pesquisa, comparação em relação a pares e permite a análise de tendências. A visibilidade e o impacto das revistas em diferentes disciplinas também podem ser avaliados pelas métricas de citações do, Google Scholar (GS) que é acessível gratuitamente, mas nem sempre é confiável.

Diferentes ferramentas analíticas vão além das citações e rastreiam a atenção e discussões online em torno dos artigos acadêmicos, incluindo menções nas redes sociais, meios de comunicação, documentos políticos e blogs, como o Altmetric. Além das citações e menções/reacções nas redes sociais, o Plum Analytics oferece uma gama de métricas sobre o uso e captura (exportações/salvamentos, leitores, favoritos). Recentemente, o Dimensions ofereceu uma plataforma de insights de pesquisa que integra diferentes fontes de dados para fornecer métricas sobre publicações, citações, subsídios, patentes, ensaios clínicos e documentos políticos.

Embora muitas ferramentas analíticas populares estejam disponíveis apenas por preços elevados de subscrição, também existem ferramentas analíticas gratuitas, como a CORE, que agrega resultados de pesquisa de acesso aberto e fornece métricas sobre seu uso e impacto, VOSviewer e CiteSpace para análise bibliométrica, Open Access Button (também oferece ferramentas para bibliotecas) e várias ferramentas para dados de uso em repositórios institucionais. Além disso, ferramentas analíticas comerciais às vezes oferecem uma versão gratuita limitada, extensões de navegador acessíveis gratuitamente (Altmetric, Unpaywall) ou acesso gratuito a um subconjunto de funcionalidades e dados (Dimensions). Existem também ferramentas específicas de editores, como o CrossRef Metadata Search, que fornece links de citações e algumas métricas básicas.

Os editores Diamond OA garantem a transparência sobre as ferramentas analíticas e metodologias usadas para coletar, gerar e analisar dados, fornecendo a descrição das ferramentas, algoritmos e metodologias utilizados. Com respeito à conformidade com o GDPR, devem garantir que todas as atividades de coleta e processamento de dados estejam em conformidade com os regulamentos de proteção de dados relevantes, como o General Data Protection Regulation (GDPR) na Europa. É necessário implementar medidas para proteger a privacidade dos usuários cujos dados vão sendo coletados, incluindo a anonimização dos dados quando aplicável e garantir o armazenamento seguro dos dados.

Last Updated

2025-10-14

Search CAP