學術審稿潛規則被Science曝光:作者名氣越大,審稿人打分越高
來自同類研究中的最大試驗
羿閣 發自 凹非寺
量子位 | 公眾號 QbitAI
Science最新發文: 當論文的作者名氣大時,審稿人會給予更高的分數 。
而且這一分數差距還不小。
這一結論來自一個號稱“ 同類研究中最大規模 ”的隨機對照試驗,整個過程邀請了 3300名 研究人員參加。
試驗結果可以説揭露了學術界的“潛規則”:
當一篇論文的唯一作者不為人知時,只有 10% 的審稿人建議接收這篇論文,但當同一篇論文的署名者是諾貝爾獎得主時, 59% 的審稿人表示贊同。
對於這一差距懸殊的數據,斯坦福大學博士後研究員、《研究誠信與同行評議》主編Mario Malicki直呼“ 令人難以置信 ”。
話不多説,讓我們趕緊來看看研究人員是怎麼得出這一結論的。
學術界的馬太效應
其實多年來,學術界對於“ 馬太效應 ”的抱怨一直存在。
馬太效應,是指一種強者愈強、弱者愈弱的現象,引申到學術界來,就是地位高的研究人員往往能不成比例地獲得更多研究成果。
相較於以前都是“口説無憑”,這次研究人員用一個精心設計的試驗給出了確鑿的證據。
來自奧地利因斯布魯克大學Jürgen Huber領導的研究團隊,向大約 3300名研究人員 發了一封電子郵件,詢問他們是否願意審查一份為期刊準備的經濟學研究成果。
這項研究有兩位作者,都來自美國查普曼大學:
一位是 2002年諾貝爾經濟學獎得主 Vernon Smith,去年他在Google Scholar上被引用超過5.4萬次;另一位則是Smith以前的 博士生 Sabiou Inoua,去年被引用次數只有42。
為了實驗效果,3000多位潛在的同行審稿人被分成3批,分別被告知了不同的作者信息:
第一,只點名Smith,把他列為通訊作者;第二,只有Inoua;第三,沒有作者。
該團隊近日在芝加哥舉行的國際同行評議和科學出版物大會上報告説,最終有821名研究人員同意進行評審。
從結果上看,Smith的“ 諾獎得主光環 ”似乎影響了人們的反應。
在只得到他名字的研究人員中,38.5%的人接受了評審邀請;在沒有收到作者名字的人員中,這一比例為30.7%;而只有Inoua的版本接受比例最低,僅為28.5%。
不僅如此,為了避免出現偏見,研究小組還進行了下一步研究。
他們將重點放在313名最初沒有收到作者姓名的自願審稿人身上,並隨機分配給他們3份手稿中的一份進行審稿:
其中一份只列出Smith,另一份僅列出Inoua,第三份沒有作者。
該團隊還告知評審者,他們的評估將是一項試驗的一部分,該試驗涉及多個受邀同行評審,而不是通常的兩到三個(但是沒有透露研究設計)。
與上一輪結果相同, Smith的手稿贏得了審稿人的最高評價 ,他們稱讚其包含了新的信息和有數據支持的結論。
與此對應的是,在沒有作者的版本中,只有24%的人建議接收該版本(有直接或輕微修改),而這一比例在Inoua一個人版本的中還要再少一倍。
網友評論
面對這一差距懸殊的數據,有網友卻表示並不意外:
我一直是這麼認為的,但有確鑿的證據還是發人深省的。
有人還把這一現象形象的比喻為“大明星也可能演爛片、不知名演員也可能有突破性表演”,並呼籲改變這種看法:
因斯布魯克大學的行為經濟學家Christian Konig Kersting也表達了對這一結果的擔憂:
同樣的工作不應該因作者不同而受到不同的評價,因為這會讓年輕和不知名的研究人員很難在學術過程中邁出第一步。
為了解決這一問題,有網友提議是時候開始實行雙盲審機制了。
雙盲審,即作者和評審者互相都不知道身份,一般被認為比普通的盲審更加客觀公正。
但對於這個提議,Konig Kersting卻表示,這種策略可能不起作用,因為審稿人通常可以從預印本或會議報告中識別作者。
話説回來,對於這種學術界“ 潛規則 ”,你怎麼看?
參考鏈接:
[1]https://www.science.org/content/article/reviewers-award-higher-marks-when-paper-s-author-famous
[2]https://www.science.org/doi/10.1126/science.159.3810.56
— 完 —
版權所有,未經授權不得以任何形式轉載及使用,違者必究。
- LeCun:概率論無法實現真正AI,我們要退回原點重新開始
- Text-to-3D!建築學小哥自稱編程菜鳥,攢了個AI作畫三維版,還是彩色的
- 連你家電器的算力都不放過,新發現Linux惡意軟件用IoT設備挖礦,大小僅376字節
- Linux之父是個果粉:給自用M2 Mac裝上Fedora Linux,除了圖形加速和Chrome都搞定了
- 在百度搞發明的人
- 40系顯卡首批7199元起!賽博朋克2077幀數x4,老黃:大部分像素都是AI預測而非計算
- DeepMind用新AI超越自己:提速200倍,在所有雅達利遊戲上勝過人類
- 比標準Attention快197倍!Meta推出多頭注意力機制“九頭蛇”
- 可生成高清視頻的Stable Diffusion來了!分辨率提升4倍,超分算法來自騰訊,支持Colab在線試玩
- 大規模顯卡挖礦徹底涼涼,網友開香檳坐等價格崩盤,老黃連夜發40系預熱
- 小鵬打響特斯拉FSD對壘第一槍,城市路況AI開,目前僅限廣州
- 學術審稿潛規則被Science曝光:作者名氣越大,審稿人打分越高
- 7cm半機械蟑螂火了!極端環境也能做搜救工作,網友:我得嚇死
- 2022字節跳動Byte Camp夏令營:53所高校學員雲端完成24個項目
- 理想總裁2天套現近1億上熱搜,網友:要跑?
- 抖音智創語音團隊三維菁彩聲助力總枱中秋晚會沉浸式直播
- iOS 16升級引熱議,網友吐槽鎖屏太花哨,潘粵明更新後一度登不上微信
- 扎克伯格把PyTorch捐了!已歸入Linux基金會
- 晚上多吃不一定會胖,Cell子刊最新研究顛覆減肥認知
- 誰是下一個丘成桐?產業界也開始關心這事兒了