這不是我要的評審結果！NIPS 2018論文評審出爐：哀聲一片

機器之心報道

作者：路、李亞洲

昨日，據網友在 Reddit 發帖稱，國際人工智慧頂會 NIPS 2018 論文評審結果出來了，這引起了眾多網友的跟帖討論。從評論來看，5 月份本科生成為評審的爭議依然存在，且對評審結果不服者眾，哀聲一片。

昨日，網友「u/easy_cantaloupe」在Reddit上發貼稱NIPS 2018 的論文評審結果出來了，他收到了來自評審和作者雙方的郵件。帖子下面就有論文提交者們討論評審得分，有高分也有低分。

該帖子內容還算正常，只是交流了各自論文的評審得分。而其他討論 NIPS 2018 評審結果的帖子可謂哀聲一片。

上面帖子是 Reddit 上對 NIPS 2018 評審結果討論最激烈的帖子。雖然發帖人在介紹中表示，該帖是為了分享評審結果，並鼓勵大家不要難過，採納有建設性的建議改進論文。但最後，跟帖者們還是吐槽評審給出的結果，如「評審者要求做論文中已經完成並討論了的實驗」、「你的方法不是首個無監督 X，因為我在 2017 年提出了無監督 Y。另外，和我的對比一下。」

無力辯駁……論文作者表示在反辯中可能也無法改變評審的看法。

評審機制帶來的爭議

其實對 NIPS 2018 論文的評審不是第一次引發大家的熱議。前不久，一名本科剛剛畢業的學生成為 NIPS 大會論文同行評審的消息就在 Reddit 上引起了包括大牛在內的眾多從業者的討論。

reddit 上的一篇帖子，標題為：NIPS 2018：如何寫好同行評議？

這篇帖子的題主稱自己即將在今年秋天讀碩士，且從未提交或評審過 NIPS 大會的論文。此帖一發就引起了熱烈討論。

「你沒有向重要會議提交過論文，那你怎麼可以評審別人的論文？」

有人認為，一方面，學生的導師可能要求高年級學生參與論文評審，作為鍛煉；另一方面，各大重要會議論文投稿數量激增，也導致評審壓力很大，因此會議組織者會降低審稿人的標準。據悉，NIPS 2018 的論文投稿數量高達 4900 篇。

這篇帖子也引起了很多大牛的討論，以色列 Bar Ilan 大學的計算機科學高級講師 Yoav Goldberg（他曾在去年 6 月撰文批評過 arXiv 的不良風氣，並與 LeCun 論戰）對此評論道：「請搞清楚，這是『同行評議』，而不是找『做過五個 TensorFlow 教程的人』來評議。」

機器之心對此事報道之後，讀者也在評論區發表了自己的看法：

老實說，學生的見解一般都難有力度，幫助老師看看可以，但是親力親為者還得是老師，學生比較注重的是實驗結果吧……

無獨有偶，6 月初，一張 Twitter 截圖引起了周志華、劉群等著名學者的討論。

我讀博時，一位導師曾這麼說過：「給你任意一篇論文，漏洞大得你都可以開著卡車從中穿過。所以你需要尋找『能夠』從中學到什麼。」我們曾經覺得「開卡車」很有趣，但這麼多年過去，我終於能夠理解她的智慧了。如今比那時候更甚，「開卡車」、「開飛機」都有可能。但是即使每篇論文都有缺陷，我們仍然要批判性地研究其可取之處。

著名自然語言處理專家劉群教授對此評論道：「審稿的時候也有類似的現象，通常比較 junior 的審稿人會更嚴厲一些，發現一些小問題就會傾向於給低分，而 senior 的審稿人反倒寬鬆一些，如果覺得論文確有可取之處，通常不會太計較一些小問題。」

南京大學周志華教授：「senior 知道論文價值就是那點新火花，有毛病沒關係。前沿研究要有長處，系統開發要無短處。」

今天 NIPS 2018 評審結果一出，又引發大家討論與質疑，是否和評審機制有關？評審人員的水平對論文評審結果有何影響尚待探究。

機器之心的讀者藏龍卧虎，不知道各位有沒有投今年的 NIPS 大會，評審結果怎樣呢？期待大家的留言。

參考鏈接：https://www.reddit.com/r/MachineLearning/comments/924lkp/r_nips_2018_for_those_of_you_that_got_some_harsh/?utm_source=dlvr.it&utm_medium=twitter

喜歡這篇文章嗎？立刻分享出去讓更多人知道吧！