바로가기메뉴

본문 바로가기 주메뉴 바로가기

logo

오픈 피어 리뷰 환경에서 학술 논문 심사 결과와 영향력 지표 간의 관련성에 관한 연구

A Study on the Relationship between the Review Results of Articles and Impact Metrics in an Open Peer Review Platform

한국문헌정보학회지 / Journal of the Korean Society for Library and Information Science, (P)1225-598X; (E)2982-6292
2023, v.57 no.2, pp.79-96
https://doi.org/10.4275/KSLIS.2023.57.2.079
조재인(Jane Cho) (인천대학교)
박종도(Jong-Do Park) (인천대학교)
  • 다운로드 수
  • 조회수

초록

본 연구는 대표적인 OPR(Open Peer Review) 플랫폼인 F1000Research에서 사회과학분야의 논문 585건을 대상으로 개방형 동료 심사 결과를 분석하고 피인용, 알트메트릭스와 어떠한 관련성을 보이는지 확인하였다. 더불어 논문의 활용이 피인용에 미치는 영향 관계 내에서 심사 점수가 조절효과(Moderating effect)를 나타내는지 검증함으로써, OPR 환경에서 고품질로 평가된 논문이 피인용을 촉진할 수 있는지 확인하였다. 분석 결과 첫 번째, 승인과 조건부 승인된 논문 그룹 간에 피인용 횟수에 유의미한 차이가 나타나지 않았지만, 환산된 심사 점수와 피인용 횟수는 유의한 정(+)의 상관성(r= 0.40 ~ 0.60)을 나타냈다. 두 번째, 심사 점수는 알트메트릭스와도 약한 상관성을 나타내 심사자의 품질 평가 결과는 피인용과 사회적 영향을 약하게 예측할 수 있는 것으로 분석되었다. 마지막으로 심사 점수는 논문의 활용을 피인용으로 이어지게 하는데 유의한 양의 방향의 조절효과(B=1.69, P < 0.01)를 수행하며, 조건부 효과 검사 결과 가장 고품질로 평가된 논문 집단에서 가장 큰 효과(B=11.32, 95% CI [10.57, 12.08])를 나타내는 것으로 검증되었다. 따라서 공개된 심사 결과는 연구자들의 우수 논문 선별을 도와 인용을 유도하는데 도움을 줄 수 있는 것으로 파악되었다.

keywords
오픈 피어 리뷰, 개방형 동료 심사, F1000Research, 학술논문, 피인용

Abstract

This study analyzed the open peer review results for 585 papers in the field of social sciences in F1000Research, a representative OPR(Open Peer Review) platform, and checked the relationship between the number of cited-by, altmetrics and review score. In addition, by verifying whether the review score shows a moderating effect between the relationship between the utilization of the paper and the cited-by, it was confirmed whether the paper evaluated as high quality in the open review platform can promote the number of cited-by. As a result of the analysis, first, there was no significant difference in the number of cited-by between the approved and conditionally approved paper groups, but the converted review score and the number of cited-by showed a weak positive correlation (r = 0.40 - 0.60). Second, the review score showed a weak correlation with the altmetrics, and it was analyzed that review result could weakly predict the number of cited-by and social impact. Finally, it was verified that the review score performed a significant positive moderating effect (B=1.69, P < 0.01) in making the use of the paper lead to citation. As a result of the conditional effect test, it was verified that it showed the greatest effect(B=11.32, 95% CI [10.57, 12.08]) in the group of papers rated as the highest quality. Therefore, it was analyzed that the open review scores can help researchers select high quality papers and induce citations.

keywords
Open peer review, OPR, Altmetrics, Citation, Article

한국문헌정보학회지