學術審稿潛規則被Science曝光:作者名氣越大,審稿人打分越高

語言: CN / TW / HK

來自同類研究中的最大試驗

羿閣 發自 凹非寺

量子位 | 公眾號 QbitAI

Science最新發文: 當論文的作者名氣大時,審稿人會給予更高的分數

而且這一分數差距還不小。

這一結論來自一個號稱“ 同類研究中最大規模 ”的隨機對照試驗,整個過程邀請了 3300名 研究人員參加。

試驗結果可以說揭露了學術界的“潛規則”:

當一篇論文的唯一作者不為人知時,只有 10% 的審稿人建議接收這篇論文,但當同一篇論文的署名者是諾貝爾獎得主時, 59% 的審稿人表示贊同。

對於這一差距懸殊的資料,斯坦福大學博士後研究員、《研究誠信與同行評議》主編Mario Malicki直呼“ 令人難以置信 ”。

話不多說,讓我們趕緊來看看研究人員是怎麼得出這一結論的。

學術界的馬太效應

其實多年來,學術界對於“ 馬太效應 ”的抱怨一直存在。

馬太效應,是指一種強者愈強、弱者愈弱的現象,引申到學術界來,就是地位高的研究人員往往能不成比例地獲得更多研究成果。

相較於以前都是“口說無憑”,這次研究人員用一個精心設計的試驗給出了確鑿的證據。

來自奧地利因斯布魯克大學Jürgen Huber領導的研究團隊,向大約 3300名研究人員 發了一封電子郵件,詢問他們是否願意審查一份為期刊準備的經濟學研究成果。

這項研究有兩位作者,都來自美國查普曼大學:

一位是 2002年諾貝爾經濟學獎得主 Vernon Smith,去年他在Google Scholar上被引用超過5.4萬次;另一位則是Smith以前的 博士生 Sabiou Inoua,去年被引用次數只有42。

為了實驗效果,3000多位潛在的同行審稿人被分成3批,分別被告知了不同的作者資訊:

第一,只點名Smith,把他列為通訊作者;第二,只有Inoua;第三,沒有作者。

該團隊近日在芝加哥舉行的國際同行評議和科學出版物大會上報告說,最終有821名研究人員同意進行評審。

從結果上看,Smith的“ 諾獎得主光環 ”似乎影響了人們的反應。

在只得到他名字的研究人員中,38.5%的人接受了評審邀請;在沒有收到作者名字的人員中,這一比例為30.7%;而只有Inoua的版本接受比例最低,僅為28.5%。

不僅如此,為了避免出現偏見,研究小組還進行了下一步研究。

他們將重點放在313名最初沒有收到作者姓名的自願審稿人身上,並隨機分配給他們3份手稿中的一份進行審稿:

其中一份只列出Smith,另一份僅列出Inoua,第三份沒有作者。

該團隊還告知評審者,他們的評估將是一項試驗的一部分,該試驗涉及多個受邀同行評審,而不是通常的兩到三個(但是沒有透露研究設計)。

與上一輪結果相同, Smith的手稿贏得了審稿人的最高評價 ,他們稱讚其包含了新的資訊和有資料支援的結論。

與此對應的是,在沒有作者的版本中,只有24%的人建議接收該版本(有直接或輕微修改),而這一比例在Inoua一個人版本的中還要再少一倍。

網友評論

面對這一差距懸殊的資料,有網友卻表示並不意外:

我一直是這麼認為的,但有確鑿的證據還是發人深省的。

有人還把這一現象形象的比喻為“大明星也可能演爛片、不知名演員也可能有突破性表演”,並呼籲改變這種看法:

因斯布魯克大學的行為經濟學家Christian Konig Kersting也表達了對這一結果的擔憂:

同樣的工作不應該因作者不同而受到不同的評價,因為這會讓年輕和不知名的研究人員很難在學術過程中邁出第一步。

為了解決這一問題,有網友提議是時候開始實行雙盲審機制了。

雙盲審,即作者和評審者互相都不知道身份,一般被認為比普通的盲審更加客觀公正。

但對於這個提議,Konig Kersting卻表示,這種策略可能不起作用,因為審稿人通常可以從預印本或會議報告中識別作者。

話說回來,對於這種學術界“ 潛規則 ”,你怎麼看?

參考連結:

[1]https://www.science.org/content/article/reviewers-award-higher-marks-when-paper-s-author-famous

[2]https://www.science.org/doi/10.1126/science.159.3810.56

— 完 —

版權所有,未經授權不得以任何形式轉載及使用,違者必究。

「其他文章」