QUALIS: The journal ranking system undermining the impact of Brazilian science

Abstract

A journal ranking system called QUALIS was implemented in Brazil in 2009, intended to rank graduate programs from different subject areas and promote selected national journals. Since this system uses a complicated suit of criteria (differing among subject areas) to group journals into discrete categories, it could potentially create incentives to publish in low-impact journals ranked highly by QUALIS. Here I assess the influence of the QUALIS journal ranking system on the global impact of Brazilian science. Results reveal a steeper decrease in the number of citations per document since the implementation of this QUALIS system, compared to the top Latin American countries publishing more scientific articles. All the subject areas making up the QUALIS system showed some degree of bias, with social sciences being usually more biased than natural sciences. Lastly, the decrease in the number of citations over time proved steeper in a more biased area, suggesting a faster shift towards low-impact journals ranked highly by QUALIS. Overall, the findings documented here suggest that the QUALIS system has undermined the global impact of Brazilian science, and reinforce a recent recommendation from an official committee evaluating graduate programs to eliminate QUALIS. A journal ranking system based on internationally recognized impact metrics could avoid introducing distorted incentives, and thereby boost the global impact of Brazilian science.

Đồng tiền biết nói? Khi các nhà nghiên cứu chê bai hệ thống “trả tiền để xuất bản” nhưng không muốn dừng lại

“…Tuy vậy, đầu tư như thế nào để vẫn đảm bảo lợi ích của nhà khoa học mà nhưng không phung phí ngân sách nước nhà là bài toán không hề dễ dàng với các nước đang phát triển [4]. Một trong những lời giải cho bài toán này nằm ở chính đạo đức khoa học của các cơ sở, tổ chức nghiên cứu và cá nhân người làm khoa học [5].…”

“…Tuy vậy, đầu tư như thế nào để vẫn đảm bảo lợi ích của nhà khoa học mà nhưng không phung phí ngân sách nước nhà là bài toán không hề dễ dàng với các nước đang phát triển [4]. Một trong những lời giải cho bài toán này nằm ở chính đạo đức khoa học của các cơ sở, tổ chức nghiên cứu và cá nhân người làm khoa học [5].Nhiều trường đại học trên thế giới đã và đang trả tiền cho các nhà khoa học khi công bố bài báo. Tuy nhiên, khảo sát gần đây về chính sách mới của Nam Phi cho thấy một thực tiễn đáng báo động về cơ chế này.…”

How to write and publish articles in plant breeding: What do we need to know?

“…It should be noted that WebQualis was implemented in Brazil in 2009, but underwent critical analysis only recently. Jaffé (2020) argued that WebQualis led to a sharp reduction in the number of citations received by Brazilian articles in comparison with Latin American countries. In other words, Jaffé (2020), based on data from Scopus, concluded that WebQualis hurt Brazilian science.…”