機器之心報道編輯:蛋醬、澤南打擊投機取巧行為。除了標題各種 all you need 之外,投稿之後在推特知乎上宣傳一波,油管上發個介紹視訊現在幾乎是 AI 頂會熱門研究的「標配」。在
2021-06-29 22:50:43
機器之心報道
編輯:蛋醬、澤南
打擊投機取巧行為。
除了標題各種 all you need 之外,投稿之後在推特知乎上宣傳一波,油管上發個介紹視訊現在幾乎是 AI 頂會熱門研究的「標配」。在社交網路如此發達的今天,「酒香不怕巷子深」的美好世界看起來越來越難以實現了。在論文水平差距不大的情況下,PR 能力成為了不少人比拼的方向。
但眾所周知,自我宣傳有可能影響到審稿人的判斷,進而讓身處大型實驗室的研究者們更容易獲益。最近幾天,人工智慧領域最熱門的會議 CVPR 決定拿社交媒體開刀了。
在近日召開的 CVPR 2021 PAMI TC 會議上,馬普智慧系統研究所所長 Michael Black 提出了一項動議:審稿期間禁止在社交媒體上宣傳論文。在 arXiv 上自動釋出的預印本論文除外。
這項動議得到了一部分研究者認同,但同時也引來許多爭議。有研究者表示,這項動議的宗旨是解決同行評審中的偏見問題,但打擊社群內交流的消極後果是,同行評審中的偏見問題並不會改善。
在最終通過的投票版本中,內容如下:
PAMITC 當前的政策是禁止作者釋出新聞稿或談論正處於 IEEE/CVF 審查階段的論文。這有利於雙盲審查,並有助於保持公眾對科研同行審查過程的信任。隨著研究者們越來越多地使用社交媒體來傳播科研成果,這項政策需要更新。特別是社交媒體動態已經在很大程度上取代了傳統的新聞釋出。按照目前的政策,此類內容處理起來會有些模稜兩可,但只要作者沒有在社交媒體上說這篇論文正在接受 IEEE/CVF 會議的審查,就可能會被解釋為允許這樣做。這個漏洞違反了最初媒體禁令的原則。
問題在於,擁有大量關注者的一部分以及在社交媒體上發起的宣傳活動,讓審稿人接觸到這篇論文,而它所受到的關注可能會影響他們的判斷。這讓關注者較少或不參加這類活動的那部分人處於不利地位,並會使同行評審過程出現偏差。同行評審是科學的支柱。這個過程能夠讓研究公佈之前被發現錯誤或虛假的內容,減少了研究被撤回的風險,並增加公眾對科學進步的信任。本質上,科研在資金和獨立性方面都有賴於這種信任的建立,任何破壞這種信任的行為都會對基礎研究產生長期的負面影響。
對於人們最為關心的一些問題,CVPR 組織方也進行了解答:
Q:新規定生效之後我把投 CVPR 的論文放在 arXiv 上,這能行嗎?
A:將論文放在 arXiv 上顯然有助於計算機視覺研究資訊的快速傳播。arXiv 論文並不是「已發表」,而應該被理解為「預發表」的狀態。這種開放的預先發表模式為研究社群提供了一種有效的查錯模式,與同行評審效果類似。arXiv 論文經常會被更正和修改,這一網站的建立就是為了這樣的科學修訂過程。
將論文放在 arXiv 上供專家進行早期分析,與在社交媒體上向廣大受眾進行宣傳有本質不同。
Q:那我在推特上轉發 arXiv 上轉發的 CVPR 論文投稿,這樣可以嗎?
A:沒問題。這是一個自然而然的過程,並不構成作者宣傳他們的工作。arXiv 推文主要是由該領域的專家而非普通公眾關注,其討論的工作可被認為是具有完整性的,且處於預發表狀態的,因此判斷為可行。但這與在社交媒體上流傳的論文宣傳視訊不同。
Q:這種規定難道不會讓科學研究的傳播速度變慢?
A:並不。實際上是該領域專家實現科學進步,而不是普通大眾。對 arXiv 的豁免意味著研究社群仍然可以提前獲得研究進展,並可以將其效果評估為「非同行評審」。
「允許,但又不允許宣傳論文」的設定看起來很合理,也為研究人員們討論業內最新研究留下了空間。
目前,這項動議已經以 370:83 的票數在 CVPR 2021 投票通過。
反對者:這規定漏洞太多
雖然動議都在 PAMI-TC 的會議上以很大優勢通過了,但仍有一些人對於新規表達了不滿。人們表示:
首先就會有一種情況,如果有一部分研究達成了「共識」,代表對方在社交媒體釋出內容,宣傳對方的研究。原本在審查過程中就存在的一些「利益團體」,在這裡依舊會出現。
以及,關於研究審查過程中的禁令,很大的一個影響是阻止了眾多科研進展在 arXiv 上釋出。除非是像 ACL 會議一樣對預印本論文釋出和雙盲審稿之間權衡出合理的提交方案。
還有一種可能存在的情況。那些不遵守規則並找到漏洞的人,之後從宣傳研究上獲得收益要比現在還要大,比如採用匿名的社交媒體賬戶宣傳就可逃避該政策。Reddit 上的機器學習版塊最受非議的一點就是非實名制發帖,我們是否希望推特也變成這樣?
這項動議針對的是那些來自大型實驗室或擁有大量粉絲的研究者,但同時也極大地阻礙到了小型實驗室的人。
圖靈獎得主、深度學習先驅 Yann LeCun 則直接在推特上表示:這種行為會限制科學資訊的交流,損害技術進步且違反道德規範。簡而言之就是瘋了。
在今年的大會結束後,CVPR 2022 計劃將於明年 6 月 21-24 日在美國的新奧爾良舉行。論文提交的 Deadline 則是今年 11 月 16 日。
對於這項新規,你怎麼看呢?
相關文章
機器之心報道編輯:蛋醬、澤南打擊投機取巧行為。除了標題各種 all you need 之外,投稿之後在推特知乎上宣傳一波,油管上發個介紹視訊現在幾乎是 AI 頂會熱門研究的「標配」。在
2021-06-29 22:50:43
如大家所見,現在使用者需求已經發生了改變,以前大家買手機都很注重手機效能跑分資料等,當年的小米手機就是靠著「跑分王」的雅號火起來的,雷軍那句「不服跑個分」一度成為友商的
2021-06-29 22:29:49
想買一款遊戲本?聽起來很簡單,選好機型,然後掏錢就是了。但有時候簡單的事情往往會變得不簡單,比如聯想拯救者R7000系列就有兩款機型,都是2021年的新品,但實在是讓人抓狂。因為這
2021-06-29 22:29:11
公司前段時間做了組織與職責調整,我所在的部門在保留原有工作內容基礎上,又增加一些職責,負責公司員工形象展示的材料整理、製作、宣傳工作。「加量不加價」也是一種職場普遍行
2021-06-29 22:28:16
自梁孟鬆博士入職中芯國際後,中芯國際技術推進速度不斷加快,併成功實現14nm晶片量產。而且按照梁孟鬆博士的說法,中芯國際已經完成7nm晶片技術準備,目前只待裝置到位,便可進行生
2021-06-29 22:27:33
近幾年科技巨頭們跨行做生意似乎已經成為一種行業共識,頗有一種不跨行做點事就要被淘汰的架勢。不過,即便同為「跨行」,不同的科技巨頭卻選擇了不同的方向。阿里200億押注社群
2021-06-29 22:26:17