이로 손님 게시물입니다 루페시 파우디알, 자금 정책 책임자, UKRI (영국 연구 및 혁신)
동료 검토에 대한 약속 증명
영국 연구 및 혁신 (UKRI)는 최근에 ORCID 펀딩 시스템 Je-S의 Reviewer Recognition 기능. UKRI 리뷰어에게 리뷰 기여도에 대한 공식적인 인정을받을 수있는 옵션을 제공합니다. ORCID 프로필.
UKRI는 세계 최초의 펀더 중 하나였습니다. ORCID 자금 제공자를위한 공개 서한, 구현 한 최초의 펀더입니다. ORCID 자금 시스템에서 검토 자 인정. 이 이니셔티브는 동료 검토 및 ORCID 에 따라 우리의 자금 시스템에서 ORCID 자금 제공자를위한 모범 사례 지침.
여기에서는 구현 과정을 안내해 드리겠습니다. ORCID 검토 자 인정 및 배운 교훈 공유. 요약하면이 기능을 구현하는 데있어 주요 과제는 시스템 개발이 아니라 데이터 보호, 정책, 사용자 및 시스템 요구 사항, 프로세스 맵에 대한 세심한 고려 사항이었습니다.
평가 원칙을 훼손하지 않고 UKRI 검토 자의 기여도 인정
UKRI는 검토자가 우리를 위해 지원서를 평가하는 데 기여하는 노력을 중요하게 생각합니다. 이는 자금 조달 과정의 필수적인 부분입니다. 우리는 검토 과정을 지원하고 최상의 자금 결정을 내리는 데 도움을주기 위해 검토 자의 시간과 전문 지식에 크게 의존합니다. 매년 전문가들은 UKRI에 대한 수만 건의 검토를 수행합니다.
그러나 익명 성과 기밀성으로 인해 UKRI 평가 및 의사 결정 원칙, 전문가 리뷰어의 기여는 공식적으로 인정되지 않습니다. 따라서 우리는 현재 UKRI 평가자의 기여를 더 잘 인식하고 보상하고 인센티브를 부여하기 위해 몇 가지 이니셔티브를 모색하고 있습니다.
ORCID Reviewer Recognition은 UKRI 검토 프로세스의 기밀성과 익명 성을 손상시키지 않으면 서 검토 자의 작업에 대해 공개적으로 평가할 수있는 가시적이고 검증 가능한 방법을 제공합니다.
ORCID Reviewer Recognition은 또한 검토자가 UKRI에 대해 시간이 지남에 따라 수행 한 리뷰 수를 추적 할 수있는 효과적인 참조 점 역할을 할 수 있으며, 이는 승진 및 자금 지원을 신청할 때 유용 할 것입니다.
정책 고려 사항
우리는 누가받을 자격이되는지 결정하는 정책 질문으로 시작했습니다. ORCID 크레딧을 검토하십시오. UKRI의 관련 이해 관계자들과 여러 차례 참여한 후 우리는 ORCID 검토 크레딧은 다음 경우에만 사용할 수 있습니다.
- 검토자는 Je-S를 통해 "사용 가능한 검토"를 제출합니다.
- 검토는 23 년 2020 월 XNUMX 일 (실시 일) 이후 제출됩니다.
- 검토 된 신청서에 대한 자금 지원 결정이 내려졌습니다.
이것은 간단하게 들리지만 복잡성을 더하는 몇 가지 세부 사항이 있습니다.
이 기능은 23 년 2020 월 XNUMX 일부터 Je-S 시스템에서만 사용할 수 있습니다. 따라서 해당 날짜 이후에 Je-S를 통해 리뷰를 제출 한 리뷰어 만받을 수 있습니다. ORCID 크레딧을 검토하십시오. UKRI는 2018 년에 통합 될 때까지 독립적으로 진화 한 XNUMX 개의 서로 다른위원회가있는 비교적 새로운 조직입니다.이 때문에 우리위원회는 현재 별도의 자금 시스템을 가지고 있습니다. XNUMX 개의 연구위원회와 기타 교차 절단 프로그램은 Je-S를 사용합니다. Innovate UK는 IFS를 사용합니다.
As ORCID 리뷰어 인정은 Je-S에서만 구현되며 Innovate UK의 IFS를 통해 제출 된 리뷰, 과거 리뷰 및 시스템 외부 리뷰는 현재받을 수 없습니다. ORCID UKRI의 학점을 검토하십시오. 그러나 향후 Innovate UK에 제출 된 신청서에이 기능을 확대함으로써 얻을 수있는 잠재적 이점을 검토 할 것입니다.
97 년부터 2014 년까지 Je-S를 통해받은 리뷰의 2018 % 이상이 '사용 가능'으로 분류되었습니다. 평가 및 의사 결정 과정에서 사용되는 검토입니다. 그러나 검토자는 UKRI 시스템에서 검토의 분류 상태를 알지 못합니다. 개별 리뷰어에게 리뷰 상태를 알릴 수있는 능력은 아직 없지만 직원이 리뷰를 분류하는 데 사용하는 지표 목록을 게시했습니다. 이것이 고품질 리뷰를 제출할 때 리뷰어에게 유용한 가이드가되기를 바랍니다. 또한 리뷰가 '사용할 수 없음'으로 분류 될 가능성이 높은 이유도 게시하고 있습니다.
주요 정책 고려 사항 중 하나는 검토 프로세스의 기밀성과 익명 성이 손상되지 않도록하는 것이 었습니다. 따라서 Je-S에서 데이터를 ORCID 개별 신청서의 세부 사항, 전체 검토 날짜 또는 검토를 발행 한 UKRI위원회의 이름은 포함되지 않습니다. 또한, 우리는 발행하지 않을 것입니다 ORCID 신청서에 대한 자금 지원 결정이 내려 질 때까지 크레딧을 검토하십시오. 아래 정보 만 표시됩니다. ORCID 기록 :
- 역할 : 검토 자
- 활동 유형 : 검토
- 검토 날짜 : 연도 (예 : 2020)
- 소집 조직 : 영국 연구 및 혁신 (영국 스 윈던)
- 출처 : UKRI Systems
데이터 보호 요구 사항
UKRI는 UKRI 시스템이 전송하는 모든 정보에 대한 데이터 컨트롤러입니다. ORCID Je-S 사용자의 프로필. 따라서 리뷰 정보를 ORCID 검토 자의 동의에 따라 검토자를 대신합니다. 이는 검토자가 UKRI에 검토 정보를 보낼 수있는 권한을 부여할지 거부할지 여부를 결정 함을 의미합니다. ORCID 계정. 검토자는 Je-S 계정에서 언제든지 권한을 켜거나 끌 수 있어야합니다. 이를 통해 리뷰어는 자신이받은 리뷰를 선택할 수 있습니다. ORCID 신용 검토. 우리 시스템은 ORCID Je-S 프로필에서 명시 적으로 권한을 부여한 검토 자에 대한 크레딧을 검토합니다.
ORCID 사용자는 자신의 ORCID 프로필. 따라서 ORCID 사용자는 정보의 가시성을 즉시 삭제하거나 변경할 수 있습니다. ORCID 프로필. 데이터 컨트롤러로서 UKRI는 또한이 요청을 수락 할 수 있어야합니다. ORCID 사용자는 UKRI 생성 정보를 자신의 ORCID 프로필. 따라서 우리는 이러한 요청을 관리하기위한 내부 프로세스를 개발했으며, 검토 자들에게 Je-S 지원 팀에 이메일을 보내 UKRI 데이터를 삭제하도록 요청했습니다. ORCID 계정입니다.
프로세스 맵 및 시스템 개발
Je-S (사용자가 UKRI와 상호 작용하는 프런트 엔드 시스템)를 통해 제출 된 모든 정보는 사용자가 액세스 할 수없는 백 오피스 내부 시스템에 저장됩니다. 내부 시스템에는 Je-S를 통해 제출 된 리뷰 정보가 포함됩니다. 검토 크레딧을 다음으로 보내려면 ORCID, 프로세스는 내부 시스템에서 시작해야합니다.
우리는 기준 (“정책 고려 사항”에 나열된)이 충족되면 검토 크레딧이 내부 시스템에서 Je-S로 전송되도록 프로세스 맵을 설계했습니다. 리뷰 크레딧이 Je-S에 있으면 리뷰 크레딧은 ORCID, 검토자가 UKRI가이 검토 정보를 자신의 ORCID 프로필. 검토자는 자신의 ORCID iD 받을 Je-S 계정으로 ORCID 크레딧을 검토하십시오.
프로젝트를 시작할 때 고려하지 않은 한 가지는 ORCID UKRI가 소유 한 외부 웹 페이지에 리뷰 정보를 표시합니다. 아이디어는 검토 활동이 ORCID, UKRI 소유 웹 페이지의 검토 활동 기록과 연결됩니다. 우리는이 요구 사항이 시스템 개발, 데이터 보호 및 정책 요구 사항을 상당히 복잡하게한다는 것을 깨달았습니다. 우리의 목표는 ORCID UKRI 웹 페이지에는 없습니다. 따라서 우리는 ORCID 이 요구 사항에서 UKRI 면제를 고려하고 ORCID 동의했다!
이 모든 세부 사항을 매핑 한 후 시스템 구축이 시작되었습니다. 아래에서 검토 정보가 UKRI 시스템에서 ORCID.
실시
마지막으로이 기능을 구현하려면 검토자를 포함하여 연구 및 혁신 커뮤니티 구성원을위한 지침과 정보를 개발해야했습니다. 구현의 일환으로 우리는 ORCID 리뷰어 인정, 리뷰어를 대상으로하는 FAQ 포함. 또한 UKRI 내에서 내부 커뮤니케이션 캠페인을 수행하여 직원을위한 내부 FAQ 및 슬라이드 데크를 작성했습니다.
고려해야 할 가장 중요한 사항 중 하나는 이러한 변경 사항을 검토 자에게 전달하는 방법입니다. 이를 위해 검토 초대 이메일을 수정하여 다음을 통해 검토 크레딧을받는 옵션을 언급했습니다. ORCID 추가 정보를 위해 UKRI 웹 페이지에 연결하십시오. 또한 연결 한 모든 사용자에게 통신문을 발행했습니다. ORCID Je-S에게 알리는 iD ORCID 이 기능이 구현되기 전의 검토 자 인식.
개발이 진행되는 동안 우리는 ORCID API (링크를 연결하는 코드 ORCID Je-S와 함께) 2017 년 XNUMX 월부터 이전 API에는 리뷰 크레딧을 보낼 수있는 기능이 없었습니다. ORCID. 즉, 링크 한 사용자가 ORCID iD 2017년 XNUMX월 이전 Je-S 계정으로 ORCID 크레딧을 검토하십시오. 이러한 사용자가 수신하려면 ORCID 크레딧을 검토하려면 현재 ORCID Je-S와 연결하고이 연결을 다시 설정하십시오. 따라서 우리는 ORCID Je-S 사용자는 이메일로 언제든지 할 수있는 JeSHelp@je-s.ukri.org. 또한 기능이 구현되기 몇 주 전에 영향을받는 사용자에게이 요구 사항을 알 렸습니다.
사용자는 또한 이메일을 통해 알림을 받았습니다. ORCID 리뷰어 인식 기능이 시스템에 적용되었습니다.
결론
이 블로그 게시물에서 저는 UKRI의 구현 방식에 대한 개요를 제공하려고 노력했습니다. ORCID 검토 자 인정. UKRI는 ORCID 펀더를위한 모범 사례에 따라이 기능의 구현을 고려중인 다른 펀더와 배운 교훈을 공유하게되어 기쁩니다. 앞서 언급했듯이이 기능을 채택 할 때 고려해야 할 가장 중요한 사항은 정책 결정, 데이터 보호 요구 사항, 시스템 요구 사항, 프로세스 매핑, 마지막으로 시스템 구축 및 구현입니다.
