科學出版屹立不倒——社會將科學報告視為最接近事實的報告。 科學家們自己知道,科學是幾十年來試圖趨同於一種經過衡量並被證明是錯誤最小的解釋。 真相就在那裡,但我們只能希望看到它的影子。
儘管如此,我迫切希望科學出版繼續站在其高高的平台上。 如果沒有這一點,社會所擁有的就是互聯網上的“公平和平衡”的喧囂,每個人都會挑選最適合他們特定觀點的江湖騙術和偽科學。
然而,雖然科學可能站在公眾的基座上,但實際上它是一輛由編輯駕駛並由同行評審推動的神奇汽車——Chitty Chitty Bang Bang!
編輯和同行評審員必須盡其所能,確保所報導的科學內容遵循合理的方法論,以便能夠得到獨立驗證,並且所提出的結論合理地來自所使用的數據和分析。 編輯和同行評審員還應該確定,被報導為科學的內容很重要——值得你作為讀者花時間和注意力。
學術界存在明顯的分歧:一方面,調查顯示,科學家之間存在廣泛共識,認為同行評審是學術出版的基石;另一方面,科學家們普遍認為,同行評審是學術出版的基石。 另一方面,人們普遍認為同行評審沒有達到人們的預期,有時甚至會引起問題。 如今,傳統同行評審系統實現預期目標的能力正日益受到挑戰。
本著 2015 年同行評審週的精神,除了慶祝同行評審並認識到研究人員在同行評審上花費的大量時間之外,這也是社區討論什麼有效、什麼無效的機會,我想強調一些挑戰——標題中令人煩惱的噪音——以及一些潛在的解決方案。
同行評審,以及期刊聲望階梯的逐漸滑落,一次一個拒絕,創造了重大的成果。 延遲發布。 除了花在審查被接受的提交上的時間之外,科學家們還可能花費 15萬小時 每年都會審查被拒絕的投稿——這並沒有浪費時間,因為這意味著過濾器起作用了(如果同行評審總是導致接受,這對系統來說將是一個悲慘的失敗),但在許多情況下,這些報告可以用來支持另一家期刊的積極決定。 同行評審開放給 偏見的風險 – 國籍、機構威望、性別、個人關係或其他問題是否真正影響特定的同行評審和出版決定是無關緊要的。 真正的問題是:作者能否完全相信他們不會影響它? 徵求同行評審和追趕錯過的截止日期已經成為編輯部的一種愚蠢的負擔,佔用了期刊目標和範圍的真正科學管理的時間。 同行評審存在以下風險: 徹頭徹尾的欺詐:去年有數十篇論文因同行評審欺詐而被撤回。
但對我來說,這些挑戰中最重要的是可信度的削弱。 同行評審的質量差異太大,沒有對其質量進行有效的評估,也沒有對這些評估對出版決策產生影響的程序。
在目前的製度下,研究人員可能沒有什麼動力投入大量的時間以及他或她的全部注意力和專業知識來承擔同行評審任務。 我認為,缺乏對同行評審及其所需時間的認可,意味著許多科學家滿足於快速而不是仔細地進行評審。 然而,一次好的或壞的同行評審實際上可能決定一些年輕研究人員整個職業生涯的命運。 科學界失去了多少聰明的年輕人,僅僅是因為倉促而粗心的同行評審阻止了在關鍵的資助截止日期之前發表重要手稿,促使他們放棄?
這讓我有點迷失了。 但我還是很喜歡Chitty Chitty Bang Bang。
因此,我的新工作是:建造一家煉油廠來開發更高辛烷值的燃料。
At 科學貴族 我們正在採取雙管齊下的方法來改進同行評審(這兩種方法都不是專有的,因此沒有什麼可以阻止不使用科學貴族的期刊自行實施這些方法。
首先,開放參與——只要您的身份和資格已得到值得信賴的外部來源的驗證,並且您不通過機構或最近的共同作者與作者有聯繫,您就可以參與同行評審任何稿件。 歡迎編輯推薦審稿人,但不擁有這樣做的專有權利——任何同行,包括作者,都可以推薦其他人。 其次,評審本身是同行評審(“同行評審的同行評審”)。 這對研究人員產生了非常有效的社會壓力,要求他們投入更多的時間和精力來仔細地進行同行評審工作。 此外,《科學貴族》中默認的匿名方法是三盲的,這意味著每個人的論點——作者、審稿人、編輯——都必須立足於自己的科學價值,盡可能少地受到針對個人因素或個人因素的偏見的影響。 然而,雖然這是默認的,但科學貴族讓作者選擇,而不是強制要求特定的觀點。
作為會員組織 ORCID,科學貴族也期待支持新的標準化、可引用和可解析的同行評審工作記錄 ORCID 配置文件。 重要的是,同行評審工作要以考慮到工作質量的方式得到認可,而擁有與交叉評估結果和反饋相關的權威記錄是實現這一目標的一個有前途的方法。
許多其他組織和我們一樣,正在致力於改進同行評審系統,無論是通過促進對同行評審員工作的認可,通過嘗試新形式的同行評審,通過尋找重新使用被拒絕論文評審的方法等等。 因此,在慶祝同行評審週時(無論是現在還是將來),讓我們都努力讓同行評審成為值得尊敬的事情,並讓 Chitty Chitty Bang Bang 每年 52 週飛翔。
[圖片說明:Chitty Chitty Bang Bang。 Louis Zborowski 伯爵與 Chitty Bang Bang 1 在布魯克蘭,c1921。 來自維基百科的公共領域圖像。]