科学出版站在一个基座上——社会将科学报告视为最接近我们所拥有的真理。 科学家们自己知道,数十年来,科学是一种尝试,趋向于一种经过衡量并被证明是错误最少的解释。 真相就在那里,但我们只能希望看到它的影子。
尽管如此,我非常希望科学出版继续站在它的高台上。 没有这个,整个社会就是互联网的“公平和平衡”的喧嚣,每个人都会选择最适合他们特定观点的庸俗和伪科学。
然而,虽然科学可能站在公众面前,但实际上它是一辆由编辑驾驶并由同行评审推动的神奇汽车——Chitty Chitty Bang Bang!
编辑和同行评审人员必须尽其所能确定被报道为科学的内容遵循合理的方法,以便可以独立验证,并且提出的结论合理地来自所使用的数据和分析。 编辑和同行评审员还应该确定被报道为科学的内容很重要——作为读者,值得你花时间和注意力。
学术界存在明显的分歧:一方面,调查表明,科学家们普遍认为同行评审是学术出版的基石; 另一方面,也有一种普遍的看法,即同行评审没有达到预期的效果,实际上有时会导致问题。 传统同行评审系统在今天实现预期的能力正日益受到挑战。
本着 2015 年同行评审周的精神,除了庆祝同行评审并认识到研究人员在此上花费的大量时间之外,这也是社区讨论什么有效什么无效的机会,我想强调一些挑战——标题的麻烦噪音——以及一些潜在的解决方案。
同行评审,以及一次一次拒绝期刊声望阶梯的逐渐下滑,产生了重大的影响 延迟发布. 除了审查被接受的提交所花费的时间外,科学家们可能还花费 15万小时 每年审查被拒绝的提交——这不会浪费时间,因为这意味着过滤器工作(如果同行审查总是导致接受,这对系统来说将是一个悲惨的失败),但在许多情况下,报告可用于支持另一个期刊的积极决定。 同行评审开放给 偏见的风险 – 国籍、机构声望、性别、个人关系或其他问题是否真的影响给定的同行评审和出版决策无关紧要。 真正的问题是:作者能否完全相信他们不会影响它? 征求同行评议和追赶错过的最后期限已成为编辑部愚蠢的负担,从真正的科学管理期刊的目标和范围中浪费了时间。 同行评审面临以下风险 彻头彻尾的欺诈:在过去的一年中,由于欺诈性同行评审,数十篇论文被撤回。
但是,对我来说,这些挑战中最重要的是可信度的削弱。 同行评审的质量变化太大,没有对质量和程序进行任何有效的评估,使这些评估对出版决策产生影响。
在目前的制度下,研究人员几乎没有动力投入大量时间和他或她的全部注意力和专业知识来承担同行评审任务。 我相信同行评审缺乏认可——以及它所花费的时间——意味着许多科学家满足于快速而不是小心地进行。 然而,同行评议的好坏可能真的会决定一些年轻研究人员整个职业生涯的命运。 有多少聪明的年轻人失去了科学,仅仅因为匆忙和粗心的同行评审阻止了重要的手稿在关键的资助截止日期前发表,促使他们放弃?
它有点失去了我。 但我仍然喜欢 Chitty Chitty Bang Bang。
因此,我的新工作是:建造炼油厂以开发高辛烷值燃料。
At 科学同行 我们正在采取双管齐下的方法来改进同行评审(这两种方法都不是专有的,因此没有什么可以阻止不使用 Peerage of Science 的期刊自行实施这些方法。
首先,开放参与——只要您的身份和资格已经过可信赖的外部来源的验证,并且您不通过机构或最近的合着与作者有关联,您就可以参与同行评审任何手稿。 欢迎编辑推荐审稿人,但不拥有这样做的专属权利——任何同行,包括作者,都可以推荐其他任何人。 其次,评论本身经过同行评审(“peer-review-of-peer-review”)。 这给研究人员带来了非常有效的社会压力,要求他们投入更多的时间和精力来仔细进行同行评审工作。 此外,Peerage of Science 中默认的匿名方法是三盲的,这意味着每个人的论点——作者、审稿人、编辑——都必须站在他们自己的科学价值上,尽可能少地受到针对个人因素或个人因素的偏见的影响。 然而,虽然这是默认设置,而不是强制执行特定视图,但 Peerage of Science 让作者选择。
作为会员组织 ORCID, Peerage of Science 也期待支持新的标准化、可引用和可解析的记录,用于同行评审工作 ORCID 个人资料。 重要的是,同行评审工作以一种考虑工作质量的方式得到认可,拥有与交叉评估结果和反馈相关联的权威记录是实现这一目标的有希望的方式。
许多其他组织和我们一样,正在努力改进同行评审系统,无论是通过促进对同行评审工作的认可,通过试验新形式的同行评审,通过寻找重复使用被拒绝论文的评审的方法等等。 因此,在庆祝同行评审周时——现在和将来——让我们都努力使同行评审成为证明基座合理的东西,并让 Chitty Chitty Bang Bang 飞起来,每年 52 周。
[图片说明:Chitty Chitty Bang Bang。 1 年在 Brooklands 与 Chitty Bang Bang 1921 的 Louis Zborowski 伯爵。 来自维基百科的公共领域图像。]