这是一个客户后,由 鲁佩什·波迪亚尔, 英国研究与创新 (UKRI) 资助政策主管
展示对同行评审的承诺
英国研究与创新 (UKRI) 最近实施了 ORCID 其资助系统 Je-S 中的审稿人认可功能。 它为 UKRI 审稿人提供了一个选项,以使其对他们的审稿贡献获得正式认可。 ORCID 配置文件。
UKRI 是世界上最早签署该协议的资助者之一 ORCID 给资助者的公开信,并且是第一个实施 ORCID 审稿人在其资助系统中的认可。 这一举措表明了我们对同行评审和实施的承诺 ORCID 在我们的资金系统中,根据 ORCID 资助者最佳实践指南.
在这里,我将带您了解我们实施 ORCID 审稿人认可并分享经验教训。 总之,实现此功能的主要挑战不在于系统开发,而在于对数据保护、策略、用户和系统要求以及流程图的仔细考虑。
在不影响我们的评估原则的情况下认可 UKRI 审稿人的贡献
UKRI 重视评审员为我们评估申请所做的努力,这是资助过程的重要组成部分。 我们严重依赖审阅者的时间和专业知识来支持我们的审阅过程并帮助我们做出最佳的资助决策。 每年,专家都会为 UKRI 进行数以万计的审查。
但是,由于匿名性和保密性是 UKRI 评估和决策原则,我们的专家审稿人的贡献并未得到正式认可。 因此,我们目前正在探索多项举措,以更好地认可、奖励和激励 UKRI 评估员的贡献。
ORCID 审稿人认可为我们提供了一种可见且可验证的方式来公开赞扬审稿人的工作,而不会影响 UKRI 审查过程的保密性和匿名性。
ORCID 审稿人认可还可以作为审稿人的有效参考点,以跟踪他们在一段时间内为 UKRI 进行的审阅数量,这在申请晋升和资助时非常有用。
政策考虑
我们从政策问题开始,决定谁应该有资格获得 ORCID 审查学分。 在与 UKRI 的相关利益相关者进行了几轮接触后,我们决定 ORCID 评论积分仅在以下情况下可用:
- 评论者通过 Je-S 提交“可用评论”
- 23年2020月XNUMX日(实施之日)后提交审核
- 已对审查的申请作出资助决定
这听起来很简单,但有几个细节增加了复杂性。
该功能仅在 23 年 2020 月 XNUMX 日起在 Je-S 系统中可用。因此,只有在该日期之后通过 Je-S 提交评论的评论者才有资格获得 ORCID 审查学分。 UKRI 是一个相对较新的组织,有九个不同的委员会,这些委员会独立发展,直到 2018 年合并。因此,我们的委员会目前拥有独立的资助系统:七个研究委员会和其他跨领域项目使用 Je-S; 而 Innovate UK 使用 IFS。
As ORCID Reviewer Recognition 仅在 Je-S 中实施,通过 Innovate UK 的 IFS 提交的评论、历史评论和系统外评论目前没有资格接收 ORCID 审查来自 UKRI 的学分。 但是,我们将在未来审查将此功能扩展到提交给 Innovate UK 的应用程序的潜在好处。
97 年至 2014 年期间通过 Je-S 收到的评论中有超过 2018% 被归类为“可用”。 这些是用于评估和决策过程的审查。 然而,审稿人并不知道他们的审稿在 UKRI 系统中的分类状态。 虽然我们仍然没有能力通知个别评论者他们的评论状态,但我们已经发布了我们的员工用来对评论进行分类的指标列表。 我们希望这将成为我们的评论者提交高质量评论的有用指南。 我们还发布了评论可能被归类为“无法使用”的原因。
关键的政策考虑之一是确保我们审查过程的机密性和匿名性不会受到损害。 因此,将数据从 Je-S 传输到 ORCID 不包括个人申请的详细信息、审查的完整日期或发布审查的 UKRI 委员会的名称。 此外,我们不会发出 ORCID 审查学分,直到对申请做出资助决定。 只有以下信息会显示在 ORCID 记录:
- 角色:审稿人
- 活动类型:回顾
- 审核日期:年份(例如,2020 年)
- 召集机构:英国研究与创新(Swindon,GB)
- 资料来源:UKRI 系统
数据保护要求
UKRI 是 UKRI 系统向其发送的任何信息的数据控制者 ORCID Je-S 用户的个人资料。 因此,我们将评论信息发送至 ORCID 代表我们的审稿人,基于他们的同意。 这意味着我们的审阅者决定是授予还是拒绝 UKRI 向其发送审阅信息的权限。 ORCID 帐户。 我们的审阅者应该可以随时从他们的 Je-S 帐户打开或关闭权限。 这使我们的评论者可以控制选择他们收到的评论 ORCID 审查信用。 我们的系统只会发送 ORCID 对在其 Je-S 个人资料中明确授予权限的评论者进行评论。
ORCID 用户可以完全控制管理显示在其 ORCID 轮廓。 因此, ORCID 用户可以立即删除或更改其信息的可见性 ORCID 轮廓。 作为数据控制者,UKRI 还需要能够接受来自 ORCID 用户删除 UKRI 生成的信息 ORCID 轮廓。 因此,我们开发了一个内部流程来管理这些请求,并且我们已经建议我们的审阅者通过电子邮件向我们的 Je-S 帮助团队发送电子邮件,要求从他们的 ORCID 帐户。
流程图和系统开发
通过 Je-S(用户与 UKRI 交互的前端系统)提交的任何信息都存储在用户无法访问的后台内部系统中。 内部系统包括有关通过 Je-S 提交的评论的信息。 将评论积分发送至 ORCID,流程必须从内部系统开始。
我们设计了流程图,以便一旦满足标准(列在“政策注意事项”下),审核信用就会从我们的内部系统发送到 Je-S。 一旦评论信用在 Je-S 中,评论信用只会发给 ORCID, 如果评论者明确允许 UKRI 将此评论信息发送给他们 ORCID 轮廓。 审稿人必须链接他们的 ORCID iD 用他们的 Je-S 帐户接收 ORCID 审查学分。
我们在项目开始时没有考虑的一件事是来自 ORCID 将评论信息显示到 UKRI 拥有的面向外部的网页。 这个想法是审查活动,如显示 ORCID,将链接到 UKRI 拥有的网页上的审查活动记录。 我们意识到这一要求会使系统开发、数据保护和政策要求变得非常复杂。 我们的目标是通过显示评论认可 ORCID 而不是在 UKRI 网页上。 因此,我们要求 ORCID 考虑免除 UKRI 的这一要求——并且 ORCID 同意!
在绘制出所有这些细节之后,系统的构建就开始了。 下面,您可以看到评论信息如何从 UKRI 系统流向 ORCID.
SAP系统集成计划实施
最后,该功能的实施需要为研究和创新社区的成员(包括审阅者)制定指南和信息。 作为实施的一部分,我们开发了网页内容 ORCID 审稿人认可,包括针对审阅者的常见问题解答。 此外,我们还在 UKRI 内部开展了一项内部沟通活动,为我们的员工创建了内部常见问题解答和幻灯片。
要考虑的最重要的事情之一是我们如何将这些更改传达给我们的审阅者。 为此,我们修改了我们的评论邀请电子邮件,以提及通过以下方式获得评论积分的选项 ORCID 并链接到 UKRI 网页以获取更多信息。 我们还向所有已连接他们的用户发出了信息 ORCID 给 Je-S 的 ID 通知他们 ORCID 实施此功能之前的审阅者识别。
在开发过程中,我们注意到 ORCID 已经更新了他们的 API(链接的代码 ORCID 与 Je-S)自 2017 年 XNUMX 月以来,并且之前的 API 没有将评论积分发送到的功能 ORCID. 这意味着我们的用户链接了他们的 ORCID iD 在 2017 年 XNUMX 月之前使用他们的 Je-S 帐户,将无法收到 ORCID 审查学分。 为了让这些用户收到 ORCID 审查学分,他们将不得不删除他们当前的 ORCID 与 Je-S 链接并重新建立此连接。 因此,我们设计了一个过程来去除 ORCID 从我们的系统连接,Je-S 用户可以随时通过电子邮件进行连接 JeSHelp@je-s.ukri.org. 此外,我们在该功能实施前几周将这一要求通知了受影响的用户。
用户也会收到电子邮件通知 ORCID 审稿人识别功能在我们的系统中上线。
结论
在这篇博文中,我试图概述 UKRI 实施 ORCID 审稿人认可。 UKRI 致力于实施 ORCID 根据资助者的最佳实践,我们很高兴与正在考虑实施此功能的其他资助者分享经验教训。 正如我之前提到的,在采用此功能时,我们必须考虑的最重要的事情是策略决策、数据保护要求、系统要求、流程映射,最后是系统构建和实施。