「cvpr」CVPR和ICLR双榜公布，最离谱审稿人竟然没读论文！

新智元真实性核验

认证：数码产品优质原创作者

发布时间：2022-01-28 22:03 来源：什么值得买

浏览量：1575 1299次收藏

分类：数码产品

本文有1775个文字，大小约为8KB，预计阅读时间5分钟

原文标题：CVPR和ICLR双榜公布，最离谱审稿人竟然没读论文！

新智元报道

编辑：好困 LRS

1 月 25 日，CVPR 2022 的审稿结果已经开始陆续放出。

截至北京时间 1 月 25 日早上 5 点，共有 6427 位审稿人给出了 25801 个评审意见，包括 2104 位紧急审稿人的 3066 个紧急评审意见。

官方表示，rebuttal 已经可以在 CMT 上提交，截止日期为北京时间 2 月 1 日下午 3:59。

而 ICLR 这边则已经放出最终的结果，其中，有 54 篇论文中了 Oral，176 篇 Spotlight，865 篇 Poster。

「吐槽大会」又来了！

作为知乎上的一项全面运动，机器学习顶会评审一出，必然会引发热烈的讨论。

对此，网友 @Lunarnai 表示可以简单概括为 5 种类型：

不过，这其实还不够全面，回复里还有各种来「吸欧气」的。（手动狗头）

说到审稿，这届顶会从 AAAI 2022 开始就可谓是一言难尽。

第一个审稿人说论文中实验不全，缺少标准 baseline，但实际上这是个外行审稿人，并不了解该领域的具体研究方法。并且论文中已经提交了开源代码，审稿人却仍然要求上传代码和数据。

第二个审稿人更离谱，一路 good 和 excellent 下来，最后还是给拒绝掉了。写的很好，下次不要再写了？

拒绝的理由也很奇葩，实验很充足，结果也很好，但是实验结果的解释不够。审稿人提出的唯一问题竟然是问论文中提到的模型结构是什么。

经历分享出去也是引起广泛的共鸣，「熟悉的盲人审稿」，「不该投 AAAI」等等。

虽然被拒稿并不是一件丢人的事，但审稿人的意见毫无价值，根本没有帮助作者改进论文质量。

而 CVPR 2022 差不多可以理解为经典的「活动复刻」。

网友表示，有些审稿人在写意见之前都不读论文的吗？

不仅评审意见讲不通，写的英文还有好几处错误，最后非常自信地打了个 5。

另一位审稿人也表示，自己收到的意见只有一个是心服口服的，其他的也是难以言喻：

明明放了匿名代码链接说没代码的

说没比较的关键实验就是我用的 baseline

有一个审稿人问的问题全在补充文件而且多次在正文里强调了

说加的一个新的 backbone 实验和之前的一个方法对比不公平，事实上之所以加这个 backbone 就是因为他提到的方法加了这个 backbone，看来平时看文献也不仔细

有部分审稿意见，就是审稿人懒得审稿，写一句话所有文章都能用

是不是感觉这段很眼熟？

国外的网友也深表同感：「这届审稿人是我遇到过最差的。显然，他们对评审的主题一无所知，而且还在评论中出现了非常尴尬的混淆。」

不过，分低至少还能用 rebuttal 救一救，就怕这位评审大人大手一挥 strong reject，但又没告诉你为啥。

网友 @磊哥玩枪吐槽说，我这个评审，评论就一句话，然后给了个 5，你告诉我怎么 rebuttal？

但到底还是有心态好的。

一位网友表示：「3444，赢 ! 但又没完全赢，但是赢了。其他人认为我没赢，但也没输。但是我觉得我赢了，不过也没有完全赢。」

ICLR，尘埃落定

另一边 ICLR 2022 的录用结果也是「几家欢喜几家愁」。

本届 ICLR 2022 会议共收到了 3325 篇有效投稿，投稿的平均分为 4.93（+- 1.15），作为对比，ICLR 2021 rebuttal 后的平均分为 5.37（ +- 0.96）。

数据显示，31 篇投稿的平均分为 8 分，39 篇投稿得到最高分 10 分，没有 1 篇投稿得到两个以上的 10 分。

对于中稿的人来说，论文的价值得到了同行的认可，绝对是一件值得庆祝的事。

加州大学伯克利分校 EECS 博士生 Dhruv Shah 的论文被接收后表示，「ICLR 的 rebuttal 过程依然是最有成效和高效的审阅周期，并且作为论文作者和审稿人共同提升投稿论文质量非常令人满意」。

MIT CSAIL 的博士后研究员和 ETH 博士 Octavian Ganea、DeepMind 的研究科学家 Petar Velickovic 各自都有两篇论文被 ICLR 2022 接收，主题涉及蛋白质对接、材料和图表示学习的进展。

他们都表示，「ICLR 不愧是我最喜欢的会议，继续看好 ICLR」！

但对于没中稿的人来说，也不要灰心，当下审稿机制也要背一部分锅。

网友 @Domates93 表示，「我们的论文被拒，给出的理由没有讨论一篇相关论文，但我们确实讨论了。可笑的是，这篇相关论文是我们论文的主要 baseline。」

有人建议写信给 PC，但曾有过相同经历的「不幸者」认为这样做没用，PC 只会对审稿人的决定表示遗憾。

网友 @pastimenang 的被拒理由是「过于高估了 ICLR 参与者对偏微分方程（PDE）解的数值方法的理解」。

最离谱的是网友 @Stochastic_Machine，他表示，「审稿人甚至没有读我的论文。他的评审意见是基于我提交至另一会议的旧版本论文，给出了非常低的分。」

CVPR，从交稿就开始「渡劫」

2021 年 11 月 16 号，CVPR 官方推特提醒：「CVPR 2022 论文提交截止日期为 2021 年 11 月 16 日，就是今天（太平洋时间晚上 11:59，北京时间 11 月 17 号下午 15:59）」。

祝大家好运！

然而没想到的是，CVPR 官方论文的提交网站的运气可不怎么好。

在即将截止前的 1 个小时，突然 404 了。

11 月 17 号下午六点，CVPR 官方消息终于放出。

「由于 CMT 的问题，CVPR 2022 论文提交截止日期已延长至 2021 年 11 月 18 日太平洋标准时间上午 11:59（原始消息称太平洋夏令时，实际上应为太平洋标准时间 ) 。这一消息也将通过 CMT 与作者交流」。

11 月 18 号凌晨，CVPR 官方确认论文已经可以开始提交：「由于 MicrosoftCMT 网站在 CVPR 2022 截止日期前的最后一个小时关闭，我们的项目主席决定将论文提交截止日期延长至太平洋标准时间 2021 年 11 月 18 日上午 11:59（北京时间 11 月 19 号凌晨 3:59）。CMT 提交网站正在备份和接受提交」。