Os estudos cientométricos e bibliométricos permitem aferir as diversas avaliações da produção científica, tais como o sistema Qualis da CAPES. O problema desta pesquisa é revisar e caracterizar como a Revista Brasileira de Pós-Graduação (RBPG) analisou e discutiu o sistema Qualis entre 2004 e 2020. Assim, foi realizada uma revisão narrativa na RBPG tendo como descritor a palavra Qualis. Dentre os resultados se destacam as críticas, como: o uso exclusivo do Fator de Impacto (FI) para definir o Qualis e a avaliação de docentes e discentes. Dentre as sugestões, a identificação da necessidade de induzir periódicos nacionais para estratos mais altos no sistema; e a implementação de uma política de avaliação de livros. Conclui-se que, apesar dos avanços, da contribuição e da dinamicidade, são necessários ajustes para a melhoria da avaliação da pós-graduação brasileira, uma vez que ainda existem disputas internas e entre os diferentes campos acadêmicos.