Polaridade dos comentários e consistência interna nos informes de arbitragem de artigos de pesquisa

Autores

  • César Astudillo Universidad de La Serena
  • Karem Squadrito Pontificia Universidad Católica de Chile
  • Germán Varas Universidad de La Serena
  • Carlos González Pontificia Universidad Católica de Chile
  • Omar Sabaj Universidad de La Serena

Resumo

O informe de arbitragem nos processos de revisão por pares de artigos de pesquisa é um gênero chave para explicar como se constrói coletivamente o conhecimento científico. Nestes informes os avaliadores emitem, junto com uma série de comentários, uma recomendação de publicação. A análise da qualidade do processo de avaliação por pares foi realizada a partir de indicadores, como as taxas de recusa ou o grau de acordo entre os avaliadores. No entanto, ainda resta pendente uma avaliação qualitativa do processo. O objetivo deste trabalho foi descrever a proporção, segundo a sua polaridade (positiva, negativa e neutra), dos comentários de 56 informes de avaliação da Revista Onomázein e determinar se essa proporção era consistente com a recomendação dos avaliadores (Aceito, Aceito com emendas maiores ou menores, e Recusado). Da análise de 1.472 comentários se determinou que, independentemente da decisão, a maior proporção corresponde a comentários negativos. Assim mesmo, podemos afirmar que os processos analisados apresentam um alto grau de consistência. Quanto mais favorável for a recomendação dos árbitros maior será a proporção de comentários positivos emitidos e, correspondentemente, menor é a proporção de comentários negativos.

Palavras-chave:

processo de avaliação por pares, consistência, informe de avaliação, polaridade avaliativa