<kbd id="afajh"><form id="afajh"></form></kbd>
<strong id="afajh"><dl id="afajh"></dl></strong>
    <del id="afajh"><form id="afajh"></form></del>
        1. <th id="afajh"><progress id="afajh"></progress></th>
          <b id="afajh"><abbr id="afajh"></abbr></b>
          <th id="afajh"><progress id="afajh"></progress></th>

          ICLR 2023忽悠人來審稿?論文審稿人說了不算,還得和AC開會評定

          共 2083字,需瀏覽 5分鐘

           ·

          2022-08-04 01:41



            新智元報道  

          編輯:好困 Joey
          【新智元導(dǎo)讀】近日,ICLR 2023在給審稿人的一封郵件中透露將在今年加入AC與審稿人直接討論的模式來決定borderline論文的取舍,引發(fā)熱烈的討論。

          2023年的ICLR大會將引入了一種全新的審稿機(jī)制。

          據(jù)郵件顯示,對于那些處在「被拒邊緣」的論文,將由審稿人和領(lǐng)域主席直接開會決定是否接收。

          今年,我們將引入AC與審稿人線上會面和討論的新模式來決定borderline論文的接受與否。這項(xiàng)舉措是為了確保我們接收的論文是經(jīng)過審稿人積極的討論和深思熟慮后得出的結(jié)果。

          對此,畢業(yè)于清華的華為高級研究員@謝凌曦表示,ICLR的審稿新規(guī)可以說是為了挽回大家對學(xué)術(shù)會議在審稿質(zhì)量方面的信心的一次非常好的嘗試。

          畢竟審稿的質(zhì)量如何,基本上取決于審稿人的態(tài)度,要是碰到個「佛系」的主,可能嘔心瀝血的學(xué)術(shù)成果就這樣被草草地埋沒了。

          有了審稿人與AC「在線battle」的加入,多少能為學(xué)術(shù)論文審稿質(zhì)量把把關(guān),不至于讓審稿人一句話就打發(fā)了。

          回答鏈接:https://www.zhihu.com/question/546262797/answer/2603848885

          然而,本來需要審的論文數(shù)量就多,還要花費(fèi)大量時間在討論上,這樣相當(dāng)于是給審稿人和AC都增加了不小的工作量。


          不過,類似的制度(TPC meeting)倒也不是什么新鮮事,只是參與的成員基本都是AC這個級別的,讓審稿人也加入討論應(yīng)該還是第一次。

          邀請也「黑箱」?


          除了不知效果如何的全新機(jī)制,本次ICLR在招募審稿人的時候也堪稱「黑箱」。

          有網(wǎng)友發(fā)現(xiàn),審稿人無法提前得知自己將面臨多大的工作量,只有當(dāng)你選擇拒絕邀請時,才能看到減少審查負(fù)擔(dān)的選項(xiàng)。

          然而,具體減少多少也還是沒說?;蛟S只能在點(diǎn)擊接受之后,答案就才會揭曉。(上了賊船就跑不了了)

          此外,不要忘了,審稿工作還包括了討論borderline論文的虛擬會議。

          因此,這位網(wǎng)友認(rèn)為,ICLR如此回復(fù)不僅語氣「霸道」(你愛接受就接受),還誤導(dǎo)了那些愿意接受邀請并設(shè)定個人審稿量的作者。


          也有網(wǎng)友認(rèn)為,如果放開了讓每個選擇「是」的人都能選擇自己想要的論文數(shù)量,那么有關(guān)審稿人的危機(jī)將會發(fā)展到何種地步。


          不過,也正如大會郵件所說,審稿人的工作量在很大程度上取決于投稿的數(shù)量,而且ICLR也表示將會盡可能把分配的論文數(shù)量保持在最小的程度。

          另一方面,現(xiàn)在少得可憐的審稿人數(shù)量,一定程度上也會由于約等于「白嫖」的待遇。

          首先,大部分機(jī)器學(xué)習(xí)頂會的審稿費(fèi)用都是Zero Profit,就是義務(wù)無償勞動。

          另外,審稿人負(fù)責(zé)稿件的數(shù)量、審稿的質(zhì)量自己并沒有自主權(quán),全憑組委會和其他AC說了算。


          要說審稿的好處,大都是一些隱形利益。

          比如可以在學(xué)術(shù)簡歷中加入某某期刊regular reviewer,至少在青教階段給簡歷撐撐門面。

          另外可以和編輯混個臉熟,以后在圈內(nèi)混,這些掌握頂層資源的編輯或許能記著你的苦勞。

          怪不得網(wǎng)友吐槽:


          高潔一點(diǎn)的說法是,為了學(xué)術(shù)奉獻(xiàn)。

          現(xiàn)實(shí)一點(diǎn)的說法是,為了教職/簡歷加分/美國EB1綠卡/跟編輯混個臉熟。

          沒有最難,只有更難


          在2010年之后,隨著神經(jīng)網(wǎng)絡(luò)的崛起,帶動了一大票學(xué)者進(jìn)入到AI的學(xué)習(xí)及應(yīng)用領(lǐng)域。

          同時,越來越多的投稿作者也都抱著免費(fèi)拿一次評審意見也是不錯的態(tài)度。

          于是,投稿數(shù)量也隨之暴增,有水平的評審人員數(shù)量就顯得嚴(yán)重不足,最終結(jié)果就會導(dǎo)致論文質(zhì)量、評審質(zhì)量都嚴(yán)重下滑,從而顯得會議變水了。

          比如AAAI 2021就收到了9251篇投稿,創(chuàng)下了歷史記錄,其中9020篇投稿進(jìn)入了評審環(huán)節(jié)。

          來自微軟亞洲研究院的知乎答主@你猜就對ICLR 2022的審稿人數(shù)量進(jìn)行了統(tǒng)計。

          其中,審稿人最多的文章有2篇,高達(dá)7位。


          而審稿人最少的文章有29篇,只有2位。

          不過大部分還是能分到3-4位審稿人的。


          在剛剛結(jié)束的CVPR 2022大會上,組委會就著重地講解了自己的審稿機(jī)制和成果。


          在審稿人的經(jīng)驗(yàn)分布上,學(xué)生審稿人占比31%,教職/研究人員審稿人占比為69%。

          其中,23%的審稿人參加審稿經(jīng)歷少于兩次。參與審稿大于10次的資深審稿人占比為19%。


          在審稿人的任務(wù)分配上,基本上年資越深的審稿人,審稿數(shù)量越多,任務(wù)越重,審稿經(jīng)驗(yàn)大于10次的資深研究人員平均要審5.7篇,審稿經(jīng)驗(yàn)不足兩次的學(xué)生審稿人,平均只要審2篇。

          此外,為了感謝他們的無私奉獻(xiàn),CVPR 2022海評出了100多位杰出審稿人,并為他們頒發(fā)了價值100美元的禮券。


          正如ICML審稿指導(dǎo)意見中所說地那樣,「審稿永遠(yuǎn)也不會是完美無缺的,總有一些作者最后不高興?!?/span>


          總而言之,中了自然皆大歡喜,reject了也要繼續(xù)努力!

          參考資料:
          https://www.zhihu.com/question/546262797
          https://www.reddit.com/r/MachineLearning/comments/wdfgfe/d_iclr_misleading_reviewer_invitations_must_stop/



          瀏覽 27
          點(diǎn)贊
          評論
          收藏
          分享

          手機(jī)掃一掃分享

          分享
          舉報
          評論
          圖片
          表情
          推薦
          點(diǎn)贊
          評論
          收藏
          分享

          手機(jī)掃一掃分享

          分享
          舉報
          <kbd id="afajh"><form id="afajh"></form></kbd>
          <strong id="afajh"><dl id="afajh"></dl></strong>
            <del id="afajh"><form id="afajh"></form></del>
                1. <th id="afajh"><progress id="afajh"></progress></th>
                  <b id="afajh"><abbr id="afajh"></abbr></b>
                  <th id="afajh"><progress id="afajh"></progress></th>
                  欧美激情一区二区A片成人牛牛 | 在线播放a| 青青草在线撸 | 粉嫩小泬BBBB免费看 | 日本黄色视频免费 |