Indicadores de gestão na revisão por pares: confiabilidade da revisão recíproca anônima de propostas de mestrado │ Peer review indicators: reliability of a reciprocal anonymous review of masters proposals
[Liinc em Revista; v. 9, n. 1 (2013): Estudos Métricos da Informação em Ciência e Tecnologia]
Mal Artigo | More Article
Indicadores de gestão na revisão por pares: confiabilidade da revisão recíproca anônima de propostas de mestrado │ Peer review indicators: reliability of a reciprocal anonymous review of masters proposals

Resumo: Resumo A revisão por pares é pobre em indicadores, apesar de sua importância. Este artigo apresenta indicadores de confiabilidade da revisão recíproca anônima de propostas de mestrado. Doze alunos de mestrado em Ciência da Informação deram pareceres anônimos sobre propostas de colegas em 7 itens avaliativos, usando escala Likert-6, sendo a confiabilidade calculada através de índices utilizados na literatura. A confiabilidade não é uma medida absoluta de qualidade, mas o cálculo desses indicadores permite estudar sistematicamente a qualidade da revisão por pares.Palavras-chave Revisão por pares, Confiabilidade, Concordância entre revisores, Coeficiente de correlação intraclasse, Revisão por pares na aprendizagem. Abstract Peer review lacks indicators, which is incongruent with its importance. This article reports the reliability of mutual, anonymous review of masters research proposals. Twelve masters students in Information Science refereed anonymously their peers´ research proposals according to 7 evaluation items, using a Likert-6 scale. Reliability was expressed as intraclass correlation indices between 0.500 and 0.202, with 9 positive and 3 negative values - ​​lower than usual in professional processes. Reliability is not an absolute measure of quality, but calculating reliability allows for a systematic study of the quality of peer review.Keywords Peer review; Reliability; Agreement among referees; Intraclass correlation coefficient; Peer review in learning.

Palavras-chave: Revisão por Par. Confiabilidade. Concordância Entre Revisore. Coeficiente de Correlação Intraclasse. Revisão por Par na Aprendizagem.



Como citar
DENISCZWICZ, M.; KERN, V. M. Indicadores de gestão na revisão por pares: confiabilidade da revisão recíproca anônima de propostas de mestrado │ peer review indicators: reliability of a reciprocal anonymous review of masters proposals. Liinc em revista, v. 9, n. 1, 2013. DOI: 10.18617/liinc.v9i1.531 Acesso em: 03 out. 2022.

Compartilhe
Plum X Metrics
NLP
proprietyvalue
DescriptorIndicadores de gestão na revisão por pares: confiabilidade da revisão recíproca anônima de propostas de mestrado │ Peer review indicators: reliability of a reciprocal anonymous review of masters proposals
DENISCZWICZ, Marta; KERN, Vinícius Medina
Liinc em revista, n. 1, v. 9, 2013. (Mal Artigo | More Article) (pt-BR) 3
Identificadorhttp://revista.ibict.br/liinc/article/view/3407 (pt-BR) 3
IdentificadorDOI: 10.18617/liinc.v9i1.531 (pt-BR) 3
TitleIndicadores de gestão na revisão por pares: confiabilidade da revisão recíproca anônima de propostas de mestrado │ Peer review indicators: reliability of a reciprocal anonymous review of masters proposals (pt-BR) 3
AuthorDENISCZWICZ, Marta (pt-BR) 1
AuthorKERN, Vinícius Medina (pt-BR) 1
Access Linkhttp://revista.ibict.br/liinc/article/view/3407/2991 (pt-BR) 3
Access Linkhttp://revista.ibict.br/liinc/article/downloadSuppFile/3407/887 (pt-BR) 3
Access Linkhttp://revista.ibict.br/liinc/article/downloadSuppFile/3407/888 (pt-BR) 3
Access Linkhttp://revista.ibict.br/liinc/article/downloadSuppFile/3407/889 (pt-BR) 3
IssueLiinc em revista, n. 1, v. 9, 2013. (pt-BR) 2
Nome da PulicaçãoLiinc em revista (pt-BR) 1
SessãoMal Artigo | More Article (pt-BR) 1
Disponibilizado2013-05-27 (pt-BR) 1
hasAbstractResumo A revisão por pares é pobre em indicadores, apesar de sua importância. Este artigo apresenta indicadores de confiabilidade da revisão recíproca anônima de propostas de mestrado. Doze alunos de mestrado em Ciência da Informação deram pareceres anônimos sobre propostas de colegas em 7 itens avaliativos, usando escala Likert-6, sendo a confiabilidade calculada através de índices utilizados na literatura. A confiabilidade não é uma medida absoluta de qualidade, mas o cálculo desses indicadores permite estudar sistematicamente a qualidade da revisão por pares.Palavras-chave Revisão por pares, Confiabilidade, Concordância entre revisores, Coeficiente de correlação intraclasse, Revisão por pares na aprendizagem. Abstract Peer review lacks indicators, which is incongruent with its importance. This article reports the reliability of mutual, anonymous review of masters research proposals. Twelve masters students in Information Science refereed anonymously their peers´ research proposals according to 7 evaluation items, using a Likert-6 scale. Reliability was expressed as intraclass correlation indices between 0.500 and 0.202, with 9 positive and 3 negative values - ​​lower than usual in professional processes. Reliability is not an absolute measure of quality, but calculating reliability allows for a systematic study of the quality of peer review.Keywords Peer review; Reliability; Agreement among referees; Intraclass correlation coefficient; Peer review in learning. (pt-BR) 3
hasFileStorage_repository/708/2018/09/oai_ojs_revista_ibict_br_article_3407#00051.pdf () 1
hasFileStorage_repository/708/2018/09/oai_ojs_revista_ibict_br_article_3407#00051.txt () 1
hasIdIndicadores de gestão na revisão por pares: confiabilidade da revisão recíproca anônima de propostas de mestrado │ Peer review indicators: reliability of a reciprocal anonymous review of masters proposals
DENISCZWICZ, Marta; KERN, Vinícius Medina
Liinc em revista, n. 1, v. 9, 2013. (Mal Artigo | More Article) () 3
SourceLiinc em Revista; v. 9, n. 1 (2013): Estudos Métricos da Informação em Ciência e Tecnologia (pt-BR) 3
Source1808-3536 () 3
ThemaRevisão por Par (pt-BR) 1
ThemaConfiabilidade (pt-BR) 1
ThemaConcordância Entre Revisore (pt-BR) 1
ThemaCoeficiente de Correlação Intraclasse (pt-BR) 1
ThemaRevisão por Par na Aprendizagem (pt-BR) 1