Altmetria: questionamentos ao paradigma vigente para avaliação da produção científica

Paulo Roberto Cintra; Janaina Oliveira Pamplona da Costa

doi:10.5433/1981-8920.2018v23n3p160

Authors

Paulo Roberto Cintra Universidade Estadual de Campinas - UNICAMP http://orcid.org/0000-0002-4447-3681
Janaina Oliveira Pamplona da Costa Universidade Estadual de Campinas - UNICAMP https://orcid.org/0000-0002-7429-3438

DOI:

https://doi.org/10.5433/1981-8920.2018v23n3p160

Keywords:

Altmetrics, Paradigm, Evaluation, Scientific production

Abstract

Introduction: Altmetrics is a subarea of Information Science, in which alternative metrics are used to complement the evaluation of scientific production. It is currently based almost exclusively on indicators created from the number of citations received by an article.
Objective: To examine the changes that altmetrics can bring to the current paradigm of the metric studies.
Methodology: Bibliographical review focused on the concepts of scientific paradigm proposed by Thomas Kuhn.
Results: Citation analysis is considered as the predominant procedure for the current evaluation of scientific production. Therefore, it is interpreted as part of the current paradigm. The main criticism to this methodology are summarised. The paper discusses whether the emergence of altmetrics can be a response to these anomalies and could represent the emergence of a new paradigm.
Conclusions: Altmetrics is going through a pre-paradigmatic period and, therefore, it is still not possible to state whether the alternative metrics will be incorporated into the current paradigm or a new paradigm will be formed.

Author Biographies

Paulo Roberto Cintra, Universidade Estadual de Campinas - UNICAMP

Doctor in Scientific and Technological Policy from the Universidade Estadual de Campinas - UNICAMP. Professor at the State University of São Paulo Júlio de Mesquita Filho - UNESP.

Janaina Oliveira Pamplona da Costa, Universidade Estadual de Campinas - UNICAMP

Doctor in Science and Technology Policy Studies from the University of Sussex - SPRU. Professor at the Universidade Estadual de Campinas - UNICAMP.

References

AGUILLO, I. F. Análise comparativa dos principais portais Ibero-americanos de periódicos científicos: construção de indicadores webométricos para o SciELO. In: PACKER, A. L. et al. –(org.), SciELO – 15 anos de acesso aberto: um estudo analítico sobre acesso aberto e comunicação científica. Paris: UNESCO, 2014, 188 p.

ARAÚJO, C. A. A. Bibliometria: evolução histórica e questões atuais. Em Questão, v. 12, n. 1, p. 11-32, 2006.

ARÉVALO, J. A.; CÓRDON-GARCIA, J. A.; BARBA, B. M. Altmetrics: medición de la influencia de los medios en el impacto social de la investigación. Cuadernos de Documentación Multimedia, v. 27, n. 1, p. 75-101, 2016.

BORDONS, M.; ZULUETA, M. A. Evaluación de la actividad científica a través de indicadores bibliométricos. Revista Española de Cardiología, v. 52, n. 10, p. 790-800, 1999.

BORNMANN, L.; HAUNSCHILD, R. Does evaluative scientometrics lose its main focus on scientific quality by the new orientation towards societal impact? Scientometrics, v. 111, p. 937-943, 2017.

CLARIVATE. Acquisition of the Thomson Reuters Intellectual Property and Science Business by Onex and Baring Asia Completed. 03 out. 2016. Disponível em: http://news.clarivate.com/2016-10-03-Acquisition-of-theThomson-Reuters-Intellectual-Property-and-Science-Business-by-Onex-andBaring-Asia-Completed. Acesso em: 13 jul. 2017.

FARIA, L. I. L. Prospecção tecnológica em materiais: aumento da eficiência do tratamento bibliométrico. Aplicação na análise de tratamentos de superfície resistentes ao desgaste. 2001. 187 f. Tese (Doutorado em Ciência e Engenharia de Materiais) – Universidade Federal de São Carlos, São Carlos, 2001.

FREITAS, M. H. de A. Oito anos de Transinformação. Transinformação, v. 9, n. 3, p. 120-134, set./dez. 1997.

GLÄSER, J.; LAUDEL, G. The social construction of bibliometric evaluation. In: WHITLEY, R.; GLÄSER, J. The changing governance of the sciences: the advent of research evaluation systems. Dordrecht, Springer, 2007.

GREGOLIN, J. A. R. et al. Análise da produção científica a partir de indicadores bibliométricos. In: FAPESP. Indicadores de ciência, tecnologia e inovação em São Paulo - 2004. São Paulo: FAPESP, 2005.

GUMPENBERGER, C.; GLÄNZEL, W.; GORRAIZ. The ecstasy and the agony of the altmetric score. Scientometrics, v. 108, n. 2, p. 977-982, ago. 2016.

HAUNSCHILD, R.; BORNMANN, L. How many scientific papers are mentioned in policy-related documents? An empirical investigation using Web of Science and Altmetric data. Scientometrics, v. 110, n. 3, p. 1209-1216, mar. 2017.

HAUSTEIN, S. Grand challenges in altmetrics: heterogeneity, data quality and dependencies. Scientometrics, v. 108, p. 413-423, 2016.

HAUSTEIN, S.; BOWMAN, T. D.; COSTAS, R. Interpreting "altmetrics": viewing acts on social media through the lens of citation and social theories. 2015. Disponível em: https://arxiv.org/abs/1502.05701. Acesso em: 17 abr. 2017.

HICKS, D. et al. Bibliometrics: The Leiden Manifesto for research metrics. Nature, v. 520, n. 7548, abr. 2015. Disponível em: http://www.nature.com/news/bibliometrics-the-leiden-manifesto-for-researchmetrics-1.17351. Acesso em: 17 abr. 2017.

HOFFMANN, C. P.; LUTZ, C.; MECKEL, M. A relational altmetric? network centrality on ResearchGate as an indicator of scientific impact. Journal of the Association

KOUSHA, K.; THELWALL, M. The web impact of open access social science research. Library & Information Science Research, v. 29, p. 495-507, 2007.

KUHN, T. S. A estrutura das revoluções científicas. 5. ed. São Paulo: Perspectiva, 1998.

LIMA, R. A. de; VELHO, L. M. L. S.; FARIA, L. I. L. de. Bibliometria e "avaliação" da atividade científica: um estudo sobre o índice h. Perspectivas em Ciência da Informação, v. 17, n. 3, p. 3-17, jul./set. 2012.

MERTON, R. K. La estructura normativa de la ciencia. In: MERTON, R. K. La Sociología de la ciencia. Madrid: Alianza Editorial, 1997.

MOHAMMADI, E.; THELWALL, M. Mendeley readership altmetrics for the Social Sciences and Humanities: research evaluation and knowledge flows. Journal of the Association for Information Science and Technology, v. 65, n. 8, p. 1627-1638, 2014.

PRIEM, J. Altmetrics. In: CRONIN, B.; SUGIMOTO, C. R. (ed.) Beyond bibliometrics: harnessing multidimensional indicators of performance. Cambridge: MIT Press, 2014. p. 263-287.

PRIEM, J. et al. Altmetrics: a manifesto. 2010. Disponível em: http://altmetrics.org/manifesto. Acesso em: 17 jun. 2017.

PRIEM, J.; GROTH, P.; TARABORELLI, D. The altmetrics collection. PLOS ONE, v. 7, n. 11, nov. 2012. Disponível em: https://doi.org/10.1371/journal.pone.0048753. Acesso em: 23 mar. 2017.

ROMANCINI, R. O que é uma citação? A análise de citações na ciência. Intexto, Porto Alegre, v. 2, n. 23, p. 20-35, jul./dez. 2010.

SCIELO BRASIL. Critérios SCIELO Brasil: critérios, política e procedimentos para a admissão e a permanência de periódicos científicos na coleção SCIELO Brasil. 2017. Disponível em: http://www.scielo.br/criteria/scielo_brasil_pt.html. Acesso em: 08 jul. 2018.

SUD, P.; THELWALL, M. Evaluating altmetrics. Scientometrics, v. 98, p. 1131-1143, 2014.

VANTI, N. A. P. Da bibliometria à webometria: uma exploração conceitual dos mecanismos utilizados para medir o registro da informação e a difusão do conhecimento. Ciência da Informação, Brasília, v. 31, n. 2, p. 152-162, maio/ago. 2002.

VANTI, N.; SANZ-CASADO, E. Altmetria: a métrica social a serviço de uma ciência mais democrática. Transinformação, Campinas, v. 28, n. 3, p. 349-358, set./dez. 2016.