CV內(nèi)卷與怪狀?學(xué)者發(fā)文:《談CV領(lǐng)域?qū)徃濉?/h1>
點(diǎn)擊上方“機(jī)器學(xué)習(xí)與生成對(duì)抗網(wǎng)絡(luò)”,關(guān)注星標(biāo)
獲取有趣、好玩的前沿干貨!
作者:歐陽(yáng)萬(wàn)里??知乎
https://zhuanlan.zhihu.com/p/429188796
先寫個(gè)CVPR2022 due之前的善意提醒:注冊(cè)日期 11月9日,過(guò)了時(shí)間沒(méi)注冊(cè)就沒(méi)法投稿了。多了個(gè)ethics guidline,請(qǐng)仔細(xì)閱讀,提前準(zhǔn)備。
======================
本人曾服務(wù)于CV會(huì)議領(lǐng)域主席和期刊副編,有義務(wù)為這個(gè)社區(qū)貢獻(xiàn)一些力量,所以寫下這個(gè)比較長(zhǎng)的文章。
寫本文的原因,近年來(lái)CV領(lǐng)域“內(nèi)卷”(競(jìng)爭(zhēng)激烈)這個(gè)詞開(kāi)始受到關(guān)注。有感于不少人抱怨審稿人質(zhì)量下降,說(shuō)一些自己的看法。
0、整個(gè)community的氛圍是由每一個(gè)審稿人(每一個(gè)你)組成,審稿之前,可以考慮一下自己作為author的時(shí)候希望什么樣的審稿人,然后努力做這樣的審稿人。
1、近年來(lái)CV會(huì)議越來(lái)越難中是眾所周知的。CVPR2021感覺(jué)比以往更難中文章(據(jù)我個(gè)人有限經(jīng)驗(yàn),也可以說(shuō)是目前為止最難的一次)。
這其中可能有兩個(gè)原因(不止這兩個(gè),也有其他的,無(wú)法說(shuō)全,見(jiàn)諒):
(a)16/17年開(kāi)始不少人覺(jué)得看到部分中了的文章質(zhì)量不高(覺(jué)得這種文章居然可以中),所以想提高質(zhì)量,于是要求自然升高。
(b) 隨著這些年進(jìn)入CV的研究者變多,總體而言能帶學(xué)生發(fā)表好論文的老師越來(lái)越多,使得文章質(zhì)量相對(duì)好的總量在上升。這導(dǎo)致以前能中的idea現(xiàn)在被reject。而被reject的文章再次投稿的數(shù)目也很多,這里面不乏質(zhì)量好的文章,進(jìn)一步提高了本身文章的質(zhì)量。所以現(xiàn)在對(duì)于文章寫作和實(shí)驗(yàn)的要求比以前確實(shí)高了不少。
(c) 之前有人說(shuō)最近幾年沒(méi)有突破性的工作,創(chuàng)新越來(lái)越少。其實(shí)如果留心看一下2012年以前的文章,那個(gè)時(shí)候的novelty也沒(méi)有咱們想象的那么多。我們?cè)谧龅亩际欠e跬步以至千里。
2、誤區(qū):非常少數(shù)reviewer以為給別人低分,自己的相對(duì)低分的文章就能中,其實(shí)不是這樣。
根據(jù)我自己這幾年投稿和審稿經(jīng)驗(yàn),歷年來(lái)文章接收的分?jǐn)?shù)基本沒(méi)有太大變化。所以低分的文章還是很不容易被接收。作為AC和reviewer我從來(lái)沒(méi)有收到要控制今年文章要大概多少篇accepted的信息。
相反,如果各位reviewer對(duì)你手里的文章好一點(diǎn)(當(dāng)然quality還是要夠),在不遠(yuǎn)的明天你的文章在別人手里的時(shí)候你才能期待別人對(duì)你好一點(diǎn)。我有個(gè)以前的學(xué)生這次拿到比較差的分,然后報(bào)復(fù)性的給了別人一個(gè)strong accept給別人,這種以德報(bào)怨珍視好文章的行為還是深以為然的(當(dāng)然,前提是文章要真正有可取之處)。
所以不建議刻意給文章低分,否則CV/AI方向的熱度下降拐點(diǎn)可能就在不遠(yuǎn)。作為CV研究者,我們希望的應(yīng)該是這個(gè)領(lǐng)域的繁榮而不是凋零。
3、作為author,謹(jǐn)慎的預(yù)測(cè)則是后面投CV會(huì)議會(huì)變得非常不容易,在此情況下,可以選擇
(a)棄坑,換一些更有意思的方向;
(b)繼續(xù)在坑里待著(目前多數(shù)人的選擇),那么既然目前還在這個(gè)領(lǐng)域做,就嘗試把自己的下一個(gè)submission做得更好。包括實(shí)驗(yàn)、文章寫作、idea方面。不管本次文章分?jǐn)?shù)是高還是低,下一次一定要有這個(gè)心理準(zhǔn)備,那么文章命中率還是會(huì)提高的。據(jù)我跟一些研究者的討論,他們還是認(rèn)為多數(shù)自己認(rèn)為不錯(cuò)的文章還是中了,而質(zhì)量不那么好的文章明顯命中率低很多。當(dāng)然,也不乏很多老師自己認(rèn)為最好的工作沒(méi)中(太新,不容易讓人接受,出現(xiàn)八只爪的貓的現(xiàn)象,即有明顯可以看到的缺點(diǎn)),不那么好的工作卻中了的(完美無(wú)缺的bug,實(shí)驗(yàn)結(jié)果、文章寫作、idea沒(méi)有大的問(wèn)題,但明顯是delta improvement)。
4、當(dāng)你的文章遇到多個(gè)reivewer。
多數(shù)人是3個(gè)reviewer。但有可能有4個(gè)甚至更多的情況。我解釋一下我這邊一個(gè)case,有篇文章已經(jīng)有了2個(gè)reviewer comments,但是有一個(gè)reviewer在due date前沒(méi)有給comments,我發(fā)幾次郵件也沒(méi)回復(fù)(因?yàn)榈谝淮巫鯝C沒(méi)經(jīng)驗(yàn),期間沒(méi)能刪掉這個(gè)reviewer)。所以就聯(lián)系了兩個(gè)不太熟悉的緊急reviewer,意料之外的是:沒(méi)有回復(fù)我email的reviewer最終給了comments,另外兩個(gè)緊急聯(lián)系的也給了(也不好讓人家不要給comments了)。于是這個(gè)文章就出現(xiàn)了5個(gè)reviewer(對(duì)這個(gè)文章作者非常抱歉)。相信其他AC也是類似的著急了多找了幾個(gè)緊急reviewer的情況。
5、請(qǐng)不要:
5.1) 將公司、個(gè)人的利益關(guān)系扯到審稿中。公司競(jìng)爭(zhēng)如何殘酷、如何創(chuàng)造了仇恨都是另外的事情。但是千萬(wàn)不要將這種心情帶到審稿。讓咱們共同為學(xué)術(shù)留一份凈土。
5.2) 只考慮自己做研究的方式。你可能喜歡推公式,但也請(qǐng)理解一個(gè)簡(jiǎn)單有效的idea的重要性(特別是對(duì)于工業(yè)界的重要性)。Mask R-CNN可能沒(méi)有幾個(gè)公式。SINGAN的公式真的沒(méi)什么理論創(chuàng)新。其他類似的還包括簡(jiǎn)單的網(wǎng)絡(luò)結(jié)構(gòu)設(shè)計(jì)(比如GoogleNet, VGG)。你可能喜歡簡(jiǎn)單有效的idea,也請(qǐng)理解這個(gè)community真的很需要理論方面的進(jìn)展。如果你做的是X(如深度學(xué)習(xí)),也不要一味認(rèn)為非X方法(如非深度學(xué)習(xí)方法)就因?yàn)椴皇荴主流而輕易的reject。多年前這個(gè)X方法也不是主流。關(guān)鍵還是看這個(gè)community(不完全是你個(gè)人)的人是否能從這個(gè)文章進(jìn)一步作出最終有實(shí)用價(jià)值的工作。
6、寫給期刊審稿人。
6.1) 如果你沒(méi)有時(shí)間,非常理解,請(qǐng)盡早decline。否則這會(huì)使得AE需要等你的回復(fù)才能去找另外的審稿人。如果能推薦其他合適的reiviewer,AE會(huì)感謝你。
6.2) 如果接受審稿邀請(qǐng),請(qǐng)盡早提交,如果不能在due之前提交,請(qǐng)盡早告訴AE大概什么時(shí)候能提交。很多時(shí)候咱們自己的文章審稿時(shí)間長(zhǎng)是因?yàn)橛袑徃迦送鈱徃?,但是沒(méi)有按時(shí)提交審稿。作為投稿人,我們?nèi)绻M约旱奈恼卤M早出結(jié)果,那么我們作為審稿人的時(shí)候按時(shí)提交就是在有利于將來(lái)自己投稿結(jié)果盡快得到這個(gè)趨勢(shì)。我了解的很多AE確實(shí)很忙,但是他們也在盡力找時(shí)間盡早邀請(qǐng)審稿人文章,只是往往不容易找到審稿人(有的文章找了十幾個(gè)審稿人,只有2-3位接受邀請(qǐng))。
6.3) 期刊審稿意見(jiàn)通常會(huì)期待比會(huì)議多不少,如果是第一次審這個(gè)期刊,自己沒(méi)有投過(guò),則推薦問(wèn)問(wèn)身邊的人,了解一下對(duì)于文章的要求和對(duì)審稿意見(jiàn)的一些期望。
7、寫給會(huì)議審稿人。
7.1) 分配了文章盡早看一下是否能審,不能審的話盡早告訴審稿人。如果不能審卻沒(méi)有說(shuō),后面AC就比較難辦。
7.2) 如果審稿了,盡量參與borderline文章的討論(這個(gè)時(shí)候AC通常會(huì)提醒審稿人),盡早給出審稿意見(jiàn)。AC知道你是誰(shuí),沒(méi)有按時(shí)給審稿意見(jiàn),給AC留下了不好的印象不說(shuō),也直接導(dǎo)致AC另外找emergency reviewer的時(shí)候的困難。通常emergency reviewer人數(shù)少,時(shí)間短,審稿質(zhì)量相對(duì)不容易保證。
7.3) 為了community考慮,盡量同意做emergency reviewer。
7、一些關(guān)于reivewer training的信息:CVPR21 Training page for ACs and referees。摘抄一些這里面寫的一些comment reviewing errors和自己的評(píng)論:
The novelty fallacy
? :
------? Referee: this shouldn’t be accepted because it isn’t novel
---------? no because?
------? Referee: this should be accepted because it is novel
---------? hard to take seriously
------? Errors:
---------? many important things aren’t all that novel
---------? small but clever adjustments to SOTA
------? many novel things aren’t all that important
----------? AND most really silly things are novel
評(píng):說(shuō)實(shí)話,每一個(gè)文章(包括oral和best paper)都有reject的理由,而建議reviewer在review的時(shí)候想想的是這篇文章的Novelty是否值得CV community閱讀和進(jìn)一步在此基礎(chǔ)上作出更多有價(jià)值的工作。
如果非常好的idea,只是一點(diǎn)瑕疵(比如某個(gè)圖沒(méi)畫好,文章某個(gè)章節(jié)沒(méi)寫好,實(shí)驗(yàn)有部分瑕疵),而reviewer可以通過(guò)comments幫助作者改過(guò)來(lái)的,則接收該文章也是一個(gè)不錯(cuò)的選擇。
Intellectual laziness
-----? :
---------? Referee: Doesn’t beat SOTA so it must be rejected
---------===? No: you have to judge whether it is worth reading
---------===? and this isn’t the same thing
---------? Referee: Beats SOTA so it must be accepted
---------===? No: you have to judge whether it is worth reading
---------===? and this isn’t the same thing
---------? Referee: Thm V looks wrong
---------===? No: it’s either right or wrong, and you should know which
---------? Referee: (finds tiny error and rejects)
---------===? No: is this error important?
---------===? Safe behaviour: Use your skill and judgement
評(píng):在公司的工程項(xiàng)目和各種會(huì)議組織的競(jìng)賽中對(duì)于performance要求高無(wú)可厚非。但是不見(jiàn)得要把這件事情泛化到所有文章。
如果一個(gè)idea夠新,則應(yīng)該允許這個(gè)方法剛開(kāi)始的時(shí)候結(jié)果不用比SOTA好。
比如剛開(kāi)始的CNN不見(jiàn)得比非CNN的pedestrian detector/face classifier/image classifier/person re-id方法好,但是現(xiàn)在是什么情況大家都知道。再比如剛開(kāi)始的Tranformer for detection (DETR)不見(jiàn)得比最好的 non-transformer detector好,但這并不意味著這些文章就該rejected。關(guān)鍵還是這個(gè)novelty是否通過(guò)ablation study justify和novelty是否夠。
最近CVPR due快來(lái)了,感興趣的同學(xué)也可以看一下關(guān)于寫/審論文的視頻(其中包含了很多這個(gè)領(lǐng)域的資深學(xué)者的真知灼見(jiàn))。
https://www.bilibili.com/video/BV1yt4y1Q73k
猜您喜歡:
等你著陸!【GAN生成對(duì)抗網(wǎng)絡(luò)】知識(shí)星球!
CVPR 2021 | GAN的說(shuō)話人驅(qū)動(dòng)、3D人臉論文匯總
CVPR 2021 | 圖像轉(zhuǎn)換 今如何?幾篇GAN論文
【CVPR 2021】通過(guò)GAN提升人臉識(shí)別的遺留難題
CVPR 2021生成對(duì)抗網(wǎng)絡(luò)GAN部分論文匯總
最新最全20篇!基于 StyleGAN 改進(jìn)或應(yīng)用相關(guān)論文
附下載 | 經(jīng)典《Think Python》中文版
附下載 | 《Pytorch模型訓(xùn)練實(shí)用教程》
附下載 | 最新2020李沐《動(dòng)手學(xué)深度學(xué)習(xí)》
附下載 |?《可解釋的機(jī)器學(xué)習(xí)》中文版
附下載 |《TensorFlow 2.0 深度學(xué)習(xí)算法實(shí)戰(zhàn)》
瀏覽
53
點(diǎn)擊上方“機(jī)器學(xué)習(xí)與生成對(duì)抗網(wǎng)絡(luò)”,關(guān)注星標(biāo)
獲取有趣、好玩的前沿干貨!
作者:歐陽(yáng)萬(wàn)里??知乎
https://zhuanlan.zhihu.com/p/429188796
先寫個(gè)CVPR2022 due之前的善意提醒:注冊(cè)日期 11月9日,過(guò)了時(shí)間沒(méi)注冊(cè)就沒(méi)法投稿了。多了個(gè)ethics guidline,請(qǐng)仔細(xì)閱讀,提前準(zhǔn)備。
======================
本人曾服務(wù)于CV會(huì)議領(lǐng)域主席和期刊副編,有義務(wù)為這個(gè)社區(qū)貢獻(xiàn)一些力量,所以寫下這個(gè)比較長(zhǎng)的文章。
寫本文的原因,近年來(lái)CV領(lǐng)域“內(nèi)卷”(競(jìng)爭(zhēng)激烈)這個(gè)詞開(kāi)始受到關(guān)注。有感于不少人抱怨審稿人質(zhì)量下降,說(shuō)一些自己的看法。
0、整個(gè)community的氛圍是由每一個(gè)審稿人(每一個(gè)你)組成,審稿之前,可以考慮一下自己作為author的時(shí)候希望什么樣的審稿人,然后努力做這樣的審稿人。
1、近年來(lái)CV會(huì)議越來(lái)越難中是眾所周知的。CVPR2021感覺(jué)比以往更難中文章(據(jù)我個(gè)人有限經(jīng)驗(yàn),也可以說(shuō)是目前為止最難的一次)。
這其中可能有兩個(gè)原因(不止這兩個(gè),也有其他的,無(wú)法說(shuō)全,見(jiàn)諒):
(a)16/17年開(kāi)始不少人覺(jué)得看到部分中了的文章質(zhì)量不高(覺(jué)得這種文章居然可以中),所以想提高質(zhì)量,于是要求自然升高。
(b) 隨著這些年進(jìn)入CV的研究者變多,總體而言能帶學(xué)生發(fā)表好論文的老師越來(lái)越多,使得文章質(zhì)量相對(duì)好的總量在上升。這導(dǎo)致以前能中的idea現(xiàn)在被reject。而被reject的文章再次投稿的數(shù)目也很多,這里面不乏質(zhì)量好的文章,進(jìn)一步提高了本身文章的質(zhì)量。所以現(xiàn)在對(duì)于文章寫作和實(shí)驗(yàn)的要求比以前確實(shí)高了不少。
(c) 之前有人說(shuō)最近幾年沒(méi)有突破性的工作,創(chuàng)新越來(lái)越少。其實(shí)如果留心看一下2012年以前的文章,那個(gè)時(shí)候的novelty也沒(méi)有咱們想象的那么多。我們?cè)谧龅亩际欠e跬步以至千里。
2、誤區(qū):非常少數(shù)reviewer以為給別人低分,自己的相對(duì)低分的文章就能中,其實(shí)不是這樣。
根據(jù)我自己這幾年投稿和審稿經(jīng)驗(yàn),歷年來(lái)文章接收的分?jǐn)?shù)基本沒(méi)有太大變化。所以低分的文章還是很不容易被接收。作為AC和reviewer我從來(lái)沒(méi)有收到要控制今年文章要大概多少篇accepted的信息。
相反,如果各位reviewer對(duì)你手里的文章好一點(diǎn)(當(dāng)然quality還是要夠),在不遠(yuǎn)的明天你的文章在別人手里的時(shí)候你才能期待別人對(duì)你好一點(diǎn)。我有個(gè)以前的學(xué)生這次拿到比較差的分,然后報(bào)復(fù)性的給了別人一個(gè)strong accept給別人,這種以德報(bào)怨珍視好文章的行為還是深以為然的(當(dāng)然,前提是文章要真正有可取之處)。
所以不建議刻意給文章低分,否則CV/AI方向的熱度下降拐點(diǎn)可能就在不遠(yuǎn)。作為CV研究者,我們希望的應(yīng)該是這個(gè)領(lǐng)域的繁榮而不是凋零。
3、作為author,謹(jǐn)慎的預(yù)測(cè)則是后面投CV會(huì)議會(huì)變得非常不容易,在此情況下,可以選擇
(a)棄坑,換一些更有意思的方向;
(b)繼續(xù)在坑里待著(目前多數(shù)人的選擇),那么既然目前還在這個(gè)領(lǐng)域做,就嘗試把自己的下一個(gè)submission做得更好。包括實(shí)驗(yàn)、文章寫作、idea方面。不管本次文章分?jǐn)?shù)是高還是低,下一次一定要有這個(gè)心理準(zhǔn)備,那么文章命中率還是會(huì)提高的。據(jù)我跟一些研究者的討論,他們還是認(rèn)為多數(shù)自己認(rèn)為不錯(cuò)的文章還是中了,而質(zhì)量不那么好的文章明顯命中率低很多。當(dāng)然,也不乏很多老師自己認(rèn)為最好的工作沒(méi)中(太新,不容易讓人接受,出現(xiàn)八只爪的貓的現(xiàn)象,即有明顯可以看到的缺點(diǎn)),不那么好的工作卻中了的(完美無(wú)缺的bug,實(shí)驗(yàn)結(jié)果、文章寫作、idea沒(méi)有大的問(wèn)題,但明顯是delta improvement)。
4、當(dāng)你的文章遇到多個(gè)reivewer。
多數(shù)人是3個(gè)reviewer。但有可能有4個(gè)甚至更多的情況。我解釋一下我這邊一個(gè)case,有篇文章已經(jīng)有了2個(gè)reviewer comments,但是有一個(gè)reviewer在due date前沒(méi)有給comments,我發(fā)幾次郵件也沒(méi)回復(fù)(因?yàn)榈谝淮巫鯝C沒(méi)經(jīng)驗(yàn),期間沒(méi)能刪掉這個(gè)reviewer)。所以就聯(lián)系了兩個(gè)不太熟悉的緊急reviewer,意料之外的是:沒(méi)有回復(fù)我email的reviewer最終給了comments,另外兩個(gè)緊急聯(lián)系的也給了(也不好讓人家不要給comments了)。于是這個(gè)文章就出現(xiàn)了5個(gè)reviewer(對(duì)這個(gè)文章作者非常抱歉)。相信其他AC也是類似的著急了多找了幾個(gè)緊急reviewer的情況。
5、請(qǐng)不要:
5.1) 將公司、個(gè)人的利益關(guān)系扯到審稿中。公司競(jìng)爭(zhēng)如何殘酷、如何創(chuàng)造了仇恨都是另外的事情。但是千萬(wàn)不要將這種心情帶到審稿。讓咱們共同為學(xué)術(shù)留一份凈土。
5.2) 只考慮自己做研究的方式。你可能喜歡推公式,但也請(qǐng)理解一個(gè)簡(jiǎn)單有效的idea的重要性(特別是對(duì)于工業(yè)界的重要性)。Mask R-CNN可能沒(méi)有幾個(gè)公式。SINGAN的公式真的沒(méi)什么理論創(chuàng)新。其他類似的還包括簡(jiǎn)單的網(wǎng)絡(luò)結(jié)構(gòu)設(shè)計(jì)(比如GoogleNet, VGG)。你可能喜歡簡(jiǎn)單有效的idea,也請(qǐng)理解這個(gè)community真的很需要理論方面的進(jìn)展。如果你做的是X(如深度學(xué)習(xí)),也不要一味認(rèn)為非X方法(如非深度學(xué)習(xí)方法)就因?yàn)椴皇荴主流而輕易的reject。多年前這個(gè)X方法也不是主流。關(guān)鍵還是看這個(gè)community(不完全是你個(gè)人)的人是否能從這個(gè)文章進(jìn)一步作出最終有實(shí)用價(jià)值的工作。
6、寫給期刊審稿人。
6.1) 如果你沒(méi)有時(shí)間,非常理解,請(qǐng)盡早decline。否則這會(huì)使得AE需要等你的回復(fù)才能去找另外的審稿人。如果能推薦其他合適的reiviewer,AE會(huì)感謝你。
6.2) 如果接受審稿邀請(qǐng),請(qǐng)盡早提交,如果不能在due之前提交,請(qǐng)盡早告訴AE大概什么時(shí)候能提交。很多時(shí)候咱們自己的文章審稿時(shí)間長(zhǎng)是因?yàn)橛袑徃迦送鈱徃?,但是沒(méi)有按時(shí)提交審稿。作為投稿人,我們?nèi)绻M约旱奈恼卤M早出結(jié)果,那么我們作為審稿人的時(shí)候按時(shí)提交就是在有利于將來(lái)自己投稿結(jié)果盡快得到這個(gè)趨勢(shì)。我了解的很多AE確實(shí)很忙,但是他們也在盡力找時(shí)間盡早邀請(qǐng)審稿人文章,只是往往不容易找到審稿人(有的文章找了十幾個(gè)審稿人,只有2-3位接受邀請(qǐng))。
6.3) 期刊審稿意見(jiàn)通常會(huì)期待比會(huì)議多不少,如果是第一次審這個(gè)期刊,自己沒(méi)有投過(guò),則推薦問(wèn)問(wèn)身邊的人,了解一下對(duì)于文章的要求和對(duì)審稿意見(jiàn)的一些期望。
7、寫給會(huì)議審稿人。
7.1) 分配了文章盡早看一下是否能審,不能審的話盡早告訴審稿人。如果不能審卻沒(méi)有說(shuō),后面AC就比較難辦。
7.2) 如果審稿了,盡量參與borderline文章的討論(這個(gè)時(shí)候AC通常會(huì)提醒審稿人),盡早給出審稿意見(jiàn)。AC知道你是誰(shuí),沒(méi)有按時(shí)給審稿意見(jiàn),給AC留下了不好的印象不說(shuō),也直接導(dǎo)致AC另外找emergency reviewer的時(shí)候的困難。通常emergency reviewer人數(shù)少,時(shí)間短,審稿質(zhì)量相對(duì)不容易保證。
7.3) 為了community考慮,盡量同意做emergency reviewer。
7、一些關(guān)于reivewer training的信息:CVPR21 Training page for ACs and referees。摘抄一些這里面寫的一些comment reviewing errors和自己的評(píng)論:
The novelty fallacy
? :
------? Referee: this shouldn’t be accepted because it isn’t novel
---------? no because?
------? Referee: this should be accepted because it is novel
---------? hard to take seriously
------? Errors:
---------? many important things aren’t all that novel
---------? small but clever adjustments to SOTA
------? many novel things aren’t all that important
----------? AND most really silly things are novel
評(píng):說(shuō)實(shí)話,每一個(gè)文章(包括oral和best paper)都有reject的理由,而建議reviewer在review的時(shí)候想想的是這篇文章的Novelty是否值得CV community閱讀和進(jìn)一步在此基礎(chǔ)上作出更多有價(jià)值的工作。
如果非常好的idea,只是一點(diǎn)瑕疵(比如某個(gè)圖沒(méi)畫好,文章某個(gè)章節(jié)沒(méi)寫好,實(shí)驗(yàn)有部分瑕疵),而reviewer可以通過(guò)comments幫助作者改過(guò)來(lái)的,則接收該文章也是一個(gè)不錯(cuò)的選擇。
Intellectual laziness
-----? :
---------? Referee: Doesn’t beat SOTA so it must be rejected
---------===? No: you have to judge whether it is worth reading
---------===? and this isn’t the same thing
---------? Referee: Beats SOTA so it must be accepted
---------===? No: you have to judge whether it is worth reading
---------===? and this isn’t the same thing
---------? Referee: Thm V looks wrong
---------===? No: it’s either right or wrong, and you should know which
---------? Referee: (finds tiny error and rejects)
---------===? No: is this error important?
---------===? Safe behaviour: Use your skill and judgement
評(píng):在公司的工程項(xiàng)目和各種會(huì)議組織的競(jìng)賽中對(duì)于performance要求高無(wú)可厚非。但是不見(jiàn)得要把這件事情泛化到所有文章。
如果一個(gè)idea夠新,則應(yīng)該允許這個(gè)方法剛開(kāi)始的時(shí)候結(jié)果不用比SOTA好。
比如剛開(kāi)始的CNN不見(jiàn)得比非CNN的pedestrian detector/face classifier/image classifier/person re-id方法好,但是現(xiàn)在是什么情況大家都知道。再比如剛開(kāi)始的Tranformer for detection (DETR)不見(jiàn)得比最好的 non-transformer detector好,但這并不意味著這些文章就該rejected。關(guān)鍵還是這個(gè)novelty是否通過(guò)ablation study justify和novelty是否夠。
最近CVPR due快來(lái)了,感興趣的同學(xué)也可以看一下關(guān)于寫/審論文的視頻(其中包含了很多這個(gè)領(lǐng)域的資深學(xué)者的真知灼見(jiàn))。
https://www.bilibili.com/video/BV1yt4y1Q73k
猜您喜歡:
等你著陸!【GAN生成對(duì)抗網(wǎng)絡(luò)】知識(shí)星球!
CVPR 2021 | GAN的說(shuō)話人驅(qū)動(dòng)、3D人臉論文匯總
CVPR 2021 | 圖像轉(zhuǎn)換 今如何?幾篇GAN論文
【CVPR 2021】通過(guò)GAN提升人臉識(shí)別的遺留難題
CVPR 2021生成對(duì)抗網(wǎng)絡(luò)GAN部分論文匯總
最新最全20篇!基于 StyleGAN 改進(jìn)或應(yīng)用相關(guān)論文
附下載 | 經(jīng)典《Think Python》中文版
附下載 | 《Pytorch模型訓(xùn)練實(shí)用教程》
附下載 | 最新2020李沐《動(dòng)手學(xué)深度學(xué)習(xí)》
附下載 |?《可解釋的機(jī)器學(xué)習(xí)》中文版
附下載 |《TensorFlow 2.0 深度學(xué)習(xí)算法實(shí)戰(zhàn)》
