Indicadores Bibliométricos -Webinar-

Indicadores Bibliométricos

Os investigadores e a publicação científica

A contagem de citações

Na avaliação de investigadores Ferramentas para a contagem de citações

A importância da identificação de autoria

Índices de revistas Factor de Impacto

Scimago Journal Rank Indicator

Métricas alternativas

Conceito, indicadores

Os investigadores e a publicação científica

Novas formas de publicação dos resultados científicos, crescente diversidade de fontes, redundância

Acesso aberto e repositórios institucionais: maior visibilidade e impacto

Os investigadores e as instituições necessitam cada vez mais de filtros e métricas que permitam aferir o impacto do seu trabalho

As métricas baseadas na contagem de citações têm sido o meio mais usado pela comunidade científica

Contagem de citações

• Número de vezes que um artigo é citado por outros artigos científicos.

• Métrica fundamental para a avaliação da publicação científica e

para a aferição do prestígio dos investigadores. • Considera-se que se um artigo foi citado muitas vezes será um

artigo de qualidade científica e de referência

Contagem de citações

Baseia-se na natureza cumulativa da ciência, conceito sedimentado na década de 70 do século 20 : ‘‘If I have seen a little further it is by standing on ye shoulders of Giants’’

Newton

Contagem de citações

Meio mais usado para a avaliação de publicações científicas e de investigadores, sendo a base de

cálculo para a maioria dos indicadores bibliométricos.

Contagem de citações

Aspetos a ter em conta: • a abrangência das diferentes bases de dados varia, o que resulta em

diferentes valores para o mesmo artigo, em bases de dados distintas (por exemplo na SCOPUS são contadas as citações a partir de 1996.)

• é fundamental que a indicação da referência bibliográfica na lista de fontes

dos artigos esteja correta: é frequente surgirem gralhas nas listas de bibliografia, o que faz com que essas referências não sejam contabilizadas.

Contagem de citações

Para avaliação de investigadores

Ferramentas para a contagem de

citações

Ferramentas para a contagem de citações

As principais bases de dados disponíveis para a contagem de citações são: 1. Web of Science - http://isiknowledge.com/WOS 2. SCOPUS - http://www.scopus.com/ 3. Google Scholar - http://scholar.google.com

Ferramentas para a contagem de citações

Web of Science

http://isiknowledge.com/WOS Coleção Principal da Web of Science: Science Citation Index Expanded (SCI-EXPANDED) --1900-presente Social Sciences Citation Index (SSCI) --1956-presente Arts & Humanities Citation Index (A&HCI) --1975-presente Conference Proceedings Citation Index - Science (CPCI-S) --1990-presente Conference Proceedings Citation Index - Social Science & Humanities (CPCI-SSH) --1990-presente Índices químicos Current Chemical Reactions (CCR-EXPANDED) --1986-presente Index Chemicus (IC) --1993-presente

Web of Science

Ferramenta que inclui um conjunto de funcionalidades ligadas à análise, relatórios e contagem de citações: • Dados de citações por artigo, através da opção “Times

Cited” • Relatórios de citação “Create citation report” • Citation Maps, disponível após a realização de uma pesquisa

e seleção de um registo da lista de resultados http://wokinfo.com/products_tools/multidisciplinary/webofscience/citmap/

Web of Science

Opção “author search”: • Ajuda na identificação correta da autoria de forma a obter dados de

contagem de citações ajustados. • Permite a localização de artigos de um determinado autor mediante

uma pesquisa guiada, que passa pela seleção de possíveis variantes do nome e pela escolha das áreas temáticas a que o autor está ligado. Integração com o Researcher ID – opção “I wrote these publications” da lista de resultados.

Web of Science

Web of Science

SCOPUS

SCOPUS

http://www.scopus.com/ Trata-se de uma das bases de dados de artigos científicos internacionais mais abrangentes, disponibilizada a partir de 2004.

SCOPUS

Opção Author ID • Ajuda na identificação correta da autoria de forma a obter

dados de contagem de citações ajustados.

• Permite a pesquisa por autor de uma forma inequívoca já

que determina quais as formas de nome que devem ser agrupadas sob uma identificação de autor única. Esta funcionalidade baseia-se num algoritmo que liga formas de nomes baseados em dados como a afiliação, endereço, área de investigação, datas de publicação.

SCOPUS

Opções: “Citation Overview”, onde é possível ver o número de citações por artigo e consultar indicadores como o h-index. Mais informação: http://www.elsevier.com/online-tools/scopus/videos

Google Scholar

http://scholar.google.com - Funcionalidade“Cited By” - permite a consulta das citações

que determinado documento recebeu.

- A metodologia de contagem de citações do Google Scholar

inclui documentos publicados na Web de uma diversidade de fontes, podendo estar incluídas bases de dados ou plataformas com publicações não científicas.

Mais informação: http://scholar.google.com/intl/en/scholar/citations.html

Identificação de autoria

Identificação de autoria

Ambiguidade na identificação de autoria

Problema comum na pesquisa em bases de dados e ao nível dos resultados da contagem de citações

Identificação de autoria

Só através da associação de dados de citação com a identificação inequívoca dos autores dos artigos se torna possível a criação de perfis e cálculos bibliométricos como o h-index e outros.

Identificação de autoria

Ferramentas/serviços para a identificação de autoria:

•Nas bases de dados SCOPUS e Web of Science: mecanismos de controlo próprios;

•Globais:

•ORCID - http://orcid.org/ •Google Scholar Citations - http://scholar.google.com/intl/en/scholar/citations.html

Índices de revistas

Criado por Eugene Garfield, fundador do ISI – Institute of Scientific Information, num artigo de 1955 publicado na revista Science. Inicialmente usado apenas para determinar que publicações incluir no Science Citation Index (Web of Science). Tornou-se o indicador bibliométrico mais usado internacionalmente.

Fator de impacto

Fator de impacto medida de frequência com que o “artigo médio”

de uma revista foi citado.

divisão do número de citações correntes a artigos publicados nos últimos dois anos pelo

número total de artigos publicados nesse mesmo período.

Fator de impacto

Consulta no Journal of Citation Reports (THOMSON REUTERS)

http://webofknowledge.com/JCR

Atualizado todos os anos, em meados do ano civil.

Baseia-se nos dados de citação da Web of Science – THOMSON REUTERS

Fator de impacto

Consulta no Journal of Citation Reports (THOMSON REUTERS) http://webofknowledge.com/JCR

Baseia-se número de vezes que os artigos publicados numa revista nos cinco anos anteriores foram citados no ano mais recente, levando também em consideração o prestígio da revista.

Não contabiliza as auto-citações (mesma revista)

EigenFactor Score

Consulta no SCImago Journal Rank http://www.scimagojr.com/ e SCOPUS http://www.scopus.com

Grupo de investigação de topo na área da bibliometria

do CSIC – “Consejo Superior de Investigaciones Científicas (CSIC)” das Universidades de Granada, Estremadura, Carlos III (Madrid) e Alcalá de Henares - http://www.scimago.es/

Inclui indicadores científicos relativos a revistas e países, com dados retirados da base de dados de artigos científicos Scopus

SCImago Journal Rank Indicator

SCImago Journal Rank (SJR) indicator - desenvolvido pelo grupo SCImago, baseado no algoritmo Google PageRank

Este indicador consiste numa medida de visibilidade das revistas científicas (dados a partir de 1996) - "journal prestige“

Mede a “influência científica” média dos artigos de uma revista

SCImago Journal Rank Indicator

Baseia-se na ideia de que ‘all citations are not create equal’ - a área temática, qualidade e reputação científica de uma revista têm um efeito direto nas citações que são feitas

“A major difference is that instead of each citation being counted as one, as with the Impact Factor, the SCImago Journal Rank assigns each citation a value greater or less than one based on the rank of the citing journal”

SCImago Journal Rank Indicator

Expressa o número médio de citações “positivas” recebidas no ano selecionado pelos artigos de uma dada revista.

“The Scimago Journal Rank (SJR) is based on the transfer of prestige from a journal to another one; such prestige is tranfered through the references that a journal do to the rest of the journals and to itself.”

SCImago Journal Rank Indicator

Limita o efeito das auto-citações a 33%:

“It restricts a journal's self-citation to a maximum of 33% of its

issued references, so that excessive self-citation will not involve artificially inflating a journal's value, but without

touching the normal process of self-citation”.

SCImago Journal Rank Indicator

Métricas alternativas

Novas formas de publicação dos resultados científicos, crescente diversidade de fontes, redundância.

Ampliação do ciclo de difusão do conhecimento científico

Acesso aberto e repositórios institucionais: maior visibilidade e impacto.

Métricas alternativas

as métricas baseadas em contagem de citações são insuficientes para avaliar o

impacto de uma publicação no meio académico.

Métricas alternativas

… a 1ª citação a um artigo pode levar anos…

… artigos de relevância para o avanço do conhecimento podem nunca vir a ser citados…

… a contagem de citações não tem em conta o impacto fora do circuito científico e académico…

Métricas alternativas

A web social e colaborativa permite aos investigadores a disseminação e gestão de informação em novas ferramentas. Esta atividade pode e deve ser medida e fornecer informação adicional.

…as métricas tradicionais, baseadas em citações, não contemplam a outra audiência: os que lêem mas não citam; são úteis mas insuficientes para avaliar o impacto de um artigo.

Métricas alternativas

Discussão, necessidade de mudança?

Novos meios de aferir o impacto de artigos – as métricas alternativas…

Métricas alternativas

Publicações (artigo)

≠ Resultados científicos

Métricas alternativas

Para além da publicação científica “tradicional”, centrada no artigo científico, são hoje consideradas tipologias de

resultados científicos: •Datasets •Software científico •Livros e capítulos de livro •Posters e apresentações em conferências •Teses de mestrado e doutoramento •Performances (teatro, música e cinema) •Blog posts •Aulas e outras atividades docentes

http://altmetrics.org/manifesto/

“is the creation and study of new metrics based on the Social Web for analyzing, and informing scholarship.”

J. Priem, D. Taraborelli, P. Groth, C. Neylon (2010), Altmetrics: A manifesto, (v.1.0), 26 October 2010. http://altmetrics.org/manifesto

Métricas alternativas

Porquê um manifesto? “the reason it's a manifesto, rather than a mission or vision statement, is

arguably because changing the way scholarly impact is measured is going to need something of a revolution – and no revolution is

complete without a manifesto.” Twitter, peer review and altmetrics: the future of research impact assessment Posted by Eliza Anyangwe http://www.theguardian.com/higher-education-network/blog/2012/sep/19/peer-review-research-impact-altmetrics

Métricas alternativas

IMPACTO

CIENTÍFICO ACADÉMICO

Journal Impact Factor Contagem de citações

IMPACTO SOCIAL

Contagem de downloads e

visualizações, menções e referências nas redes

sociais, blogues, gestores de bibliografia

Métricas tradicionais Altmetrics

Métricas alternativas

Retirado da apresentação de Stephan Buettgen da Ebsco Diagram from Ian Mulvany, eLIfe: https://twitter.com/IanMulvany/status/425006889949495296

Métricas alternativas

…não existe uma solução perfeita.

Os vários indicadores podem e devem ser usados de forma complementar…

...é importante a informação generalizada sobre o assunto,

bem como uma atualização constante por parte dos investigadores, instituições de I&D e entidades financiadoras

da investigação.

Métricas alternativas

redundância nos pontos de acesso

Obrigada Diana Silva

- Bibliotecas da Universidade de Aveiro - - Grupo de Trabalho Bibliotecas

de Ensino Superior (GT-BES) BAD-

dianasilva@ua.pt

Imagens: MorgueFile (http://www.morguefile.com/) e Universidade de Aveiro