首頁 > 科技

CVPR新規嚴禁審稿期間公開宣傳論文,可發arXiv,LeCun:瘋了吧!

2021-06-29 22:50:43

機器之心報道

編輯:蛋醬、澤南

打擊投機取巧行為。

除了標題各種 all you need 之外,投稿之後在推特知乎上宣傳一波,油管上發個介紹視訊現在幾乎是 AI 頂會熱門研究的「標配」。在社交網路如此發達的今天,「酒香不怕巷子深」的美好世界看起來越來越難以實現了。在論文水平差距不大的情況下,PR 能力成為了不少人比拼的方向。

但眾所周知,自我宣傳有可能影響到審稿人的判斷,進而讓身處大型實驗室的研究者們更容易獲益。最近幾天,人工智慧領域最熱門的會議 CVPR 決定拿社交媒體開刀了。

在近日召開的 CVPR 2021 PAMI TC 會議上,馬普智慧系統研究所所長 Michael Black 提出了一項動議:審稿期間禁止在社交媒體上宣傳論文。在 arXiv 上自動釋出的預印本論文除外。

這項動議得到了一部分研究者認同,但同時也引來許多爭議。有研究者表示,這項動議的宗旨是解決同行評審中的偏見問題,但打擊社群內交流的消極後果是,同行評審中的偏見問題並不會改善。

在最終通過的投票版本中,內容如下:

PAMITC 當前的政策是禁止作者釋出新聞稿或談論正處於 IEEE/CVF 審查階段的論文。這有利於雙盲審查,並有助於保持公眾對科研同行審查過程的信任。隨著研究者們越來越多地使用社交媒體來傳播科研成果,這項政策需要更新。特別是社交媒體動態已經在很大程度上取代了傳統的新聞釋出。按照目前的政策,此類內容處理起來會有些模稜兩可,但只要作者沒有在社交媒體上說這篇論文正在接受 IEEE/CVF 會議的審查,就可能會被解釋為允許這樣做。這個漏洞違反了最初媒體禁令的原則。

問題在於,擁有大量關注者的一部分以及在社交媒體上發起的宣傳活動,讓審稿人接觸到這篇論文,而它所受到的關注可能會影響他們的判斷。這讓關注者較少或不參加這類活動的那部分人處於不利地位,並會使同行評審過程出現偏差。同行評審是科學的支柱。這個過程能夠讓研究公佈之前被發現錯誤或虛假的內容,減少了研究被撤回的風險,並增加公眾對科學進步的信任。本質上,科研在資金和獨立性方面都有賴於這種信任的建立,任何破壞這種信任的行為都會對基礎研究產生長期的負面影響。

對於人們最為關心的一些問題,CVPR 組織方也進行了解答:

Q:新規定生效之後我把投 CVPR 的論文放在 arXiv 上,這能行嗎?

A:將論文放在 arXiv 上顯然有助於計算機視覺研究資訊的快速傳播。arXiv 論文並不是「已發表」,而應該被理解為「預發表」的狀態。這種開放的預先發表模式為研究社群提供了一種有效的查錯模式,與同行評審效果類似。arXiv 論文經常會被更正和修改,這一網站的建立就是為了這樣的科學修訂過程。

將論文放在 arXiv 上供專家進行早期分析,與在社交媒體上向廣大受眾進行宣傳有本質不同。

Q:那我在推特上轉發 arXiv 上轉發的 CVPR 論文投稿,這樣可以嗎?

A:沒問題。這是一個自然而然的過程,並不構成作者宣傳他們的工作。arXiv 推文主要是由該領域的專家而非普通公眾關注,其討論的工作可被認為是具有完整性的,且處於預發表狀態的,因此判斷為可行。但這與在社交媒體上流傳的論文宣傳視訊不同。

Q:這種規定難道不會讓科學研究的傳播速度變慢?

A:並不。實際上是該領域專家實現科學進步,而不是普通大眾。對 arXiv 的豁免意味著研究社群仍然可以提前獲得研究進展,並可以將其效果評估為「非同行評審」。

「允許,但又不允許宣傳論文」的設定看起來很合理,也為研究人員們討論業內最新研究留下了空間。

目前,這項動議已經以 370:83 的票數在 CVPR 2021 投票通過。

反對者:這規定漏洞太多

雖然動議都在 PAMI-TC 的會議上以很大優勢通過了,但仍有一些人對於新規表達了不滿。人們表示:

首先就會有一種情況,如果有一部分研究達成了「共識」,代表對方在社交媒體釋出內容,宣傳對方的研究。原本在審查過程中就存在的一些「利益團體」,在這裡依舊會出現。

以及,關於研究審查過程中的禁令,很大的一個影響是阻止了眾多科研進展在 arXiv 上釋出。除非是像 ACL 會議一樣對預印本論文釋出和雙盲審稿之間權衡出合理的提交方案。

還有一種可能存在的情況。那些不遵守規則並找到漏洞的人,之後從宣傳研究上獲得收益要比現在還要大,比如採用匿名的社交媒體賬戶宣傳就可逃避該政策。Reddit 上的機器學習版塊最受非議的一點就是非實名制發帖,我們是否希望推特也變成這樣?

這項動議針對的是那些來自大型實驗室或擁有大量粉絲的研究者,但同時也極大地阻礙到了小型實驗室的人。

圖靈獎得主、深度學習先驅 Yann LeCun 則直接在推特上表示:這種行為會限制科學資訊的交流,損害技術進步且違反道德規範。簡而言之就是瘋了。

在今年的大會結束後,CVPR 2022 計劃將於明年 6 月 21-24 日在美國的新奧爾良舉行。論文提交的 Deadline 則是今年 11 月 16 日。

對於這項新規,你怎麼看呢?


IT145.com E-mail:sddin#qq.com