讯享网

                <p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2Fbd5fa884j00smfhtz00azd000ic009lp.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F7B">[gong.mohemat.com）</p><p id="355J8F7C"><strong>新智元报道</strong>：桃子【新<strong>智元导读】IC</strong>LR 2025评审已经开始了，今年审稿人高达15000+名，为了提高审稿质量，多个大模型组成的智能体也要参与审稿了。</p><p id="355J8F7D">ICLR 2025审稿正式开启了，预计截止到11月3日。</p><p id="355J8F7E">而且，每位审稿人最多被分配到3篇论文，就是为了让大家深思熟虑去撰写高质量反馈。</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2F6f176a4cj00smfhtg0025d000ic005vp.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F7G">[bu.immoviva.com）</p><p id="355J8F7H">与2024年一样，今年论文提交数量再创新高！</p><p id="355J8F7I">ICLR 2025共有11000多篇论文提交，同比增长61%。ICLR 2024同比增长47%。</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2Fa5ae69ccj00smfhth001vd000ic005pp.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F7K">[wu.repsente.com）</p><p id="355J8F7L">如此多的论文，究竟该怎么审？如何获得建设性、高质量同行评审？</p><p id="355J8F7M">而且，论文提交数增加，对评审员需求也会增加，往往导致评审质量不一致问题。</p><p id="355J8F7N">对此，ICLR官方竟引入了「评审反馈智能体」（review feedback agent），让AI去识别审查中的问题，并向审稿人反馈改进。</p><p id="355J8F7O">更有意思的是，很少发声的Bengio转发了ICLR 2025官博，继续征集不同于学术论文的投稿形式——博客文章。而且，截止日期就到11月16日。</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2F44207625j00smfhth0039d000ic007hp.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F7Q">[pan.worldwp.com）</p><p id="355J8F7R">ICLR顶会每年举办一次，2025年将是第13届年会，于4月24日-28日将在新加坡举办。</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2Fc90ea0f4j00smfhti004td000ic00acp.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F7T">[pan.30d6.com）</p><p id="355J8F7U">今年顶会，着实有些不同。</p><p id="355J8F7V">官方让AI来参与审稿了鉴于投稿数那么多，ICLR 2025也是想要借AI洪荒之力解难了。</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2F5f0ba186j00smfhtj002ld000ic0048p.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F81">[wu.syouhan.net）</p><p id="355J8F82">不过，不是让AI完全审稿。</p><p id="355J8F83">目的是为了，让AI帮助审稿人的评审结果，更具建设性、可操作性。</p><p id="355J8F84">为此，ICLR使用了多个大模型出反馈系统，就是为了将化觉降到最低，提高反馈质量。而且，该系统已经在ICLR 2024评审意见上，进行了测试。</p><p id="355J8F85">「评审反馈智能体」将就审稿中可能存在的三类问题，提供建议。</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2F9633925dj00smfhtl00red000ic00icp.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F87">[kuai.tianpengtea.com）</p><p id="355J8F88">ICLR 2025官方组委会通过汇编公众评论，并评估了以往ICLR审稿确定了这三类问题：- 鼓励审稿人改写含糊的评论，让其对作者更具可操作性；- 突出文章中可能已经回答了审稿人一些问题的部分；- 在评审中，发现并处理不专业、不恰当的言论。</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2F83b65530j00smfhtm0048d000ic008sp.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F8A">[wei.e39o.com）</p><p id="355J8F8B">如下，是由AI为以上三种类别标记的评论的示例，并给出一个示例反馈。</p><p id="355J8F8C">首先，第一种提升准确性。</p><p id="355J8F8D">以往几届，不论是哪个顶会，都会被作者们吐槽的一个问题是——审稿人太糊弄了。</p><p id="355J8F8E">一句话——这篇论文还应提供更多实验数据，直接给了低分。</p><p id="355J8F8F">而这次，审稿人这种模棱两可的评论，就要被AI「打回去」了。</p><p id="355J8F8G">AI会给审稿人提供一种建议：如果能提出您认为必须包括的具体基线，将会很有帮助。您是否认为目前的比较缺少某些方法？能否详细说明原因？</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2F8b73eba8j00smfhtn0036d000ic0056p.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F8I">[zong.mywerfen.com）</p><p id="355J8F8J">其次，内容明确。</p><p id="355J8F8K">当审稿人评论称，「在图4中，Transformer的效率实验没有结果，这是一个关键的限制因素」。</p><p id="355J8F8L">而论文中，可能包含了这个结果，只是审稿人没有注意到。AI这时便会明确告诉他，图5回答了这个问题。</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2Fc7a389f4p00smfhtp001ud000ic003zp.png&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F8N">[gong.manadum.com）</p><p id="355J8F8O">最后，针对不恰当评论。</p><p id="355J8F8P">比如，审稿人会说，「作者完全不知自己想要做什么」。</p><p id="355J8F8Q">AI会建议道，「我们感谢您的评论，但恳请您将评论重点放在论文的具体内容和方法上，而不是对作者发表个人意见」。</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2F3f818871p00smfhtq001rd000ic003up.png&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F8S">[zong.hamajoy.com）</p><p id="355J8F8T"><strong>AI不会取代审稿人</strong>官方表示了，智能体系统不会取代任何人类审稿人，而且也不会撰写审稿评论，或直接对评论自动编辑。相反，它将作为一个助手，提供可选的反馈。审稿人可以选择接纳，或者忽略。</p><p id="355J8F8U">与以往的ICLR顶会一样，每一份提交的论文皆由人类审稿人独立进行反馈，最终的「接收」决定，将由ACS、SAS和审稿人做出。</p><p id="355J8F8V">而且，AI将为随机选择的一部分初始评审提供反馈，以便进行比较并评估其影响。</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2F84ad6d78j00smfhts00oyd000ic00icp.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F91">[po.gamerpk.com）</p><p id="355J8F92">在评审意见对作者公开之前，审稿人将有机会[for.share.a6rt.com）更新他们的评审（如果愿意的话）。</p><p id="355J8F93">AI一般在提交评审后的几小时[is.share.very2korea.com）内，向审稿人提供建议。对后续的审稿人回应将不再提供反馈，审稿人与反[fat.share.proje81.com）馈系统之间也不会有进一步的互动。</p><p id="355J8F94">此外，反馈只对评审员和ICLR项[has.share.endelus.com）目主席可见；不会与其他评审员、作者或区域主席（AC）分享，也不会影响[fat.share.169961.com）录用决定。</p><p id="355J8F95">审稿人太多了据官方统计，今年有15249位审稿人，824位[is.share.gcr999.com）AC，以及71位高级AC。</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2F89031846j00smfhts001cd000ic005vp.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F97">[po.kanalyap.com）</p><p id="355J8F98">由于[of.share.kit-wat.com）邀请了太多的审稿人，导致许多人尽管收到了电子邮件通知，却没有收到任何评审[for.share.mre0.com）的论文。</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2F8c92775bj00smfhtt005od000ic0075p.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F9A">[tian.mynlyn.com）</p><p id="355J8F9B">还有人指出，自己看[of.share.winerplus.com）到审稿人的自定义最大论文数（custom-max-papers[of.share.worldmedic.net））设置为0，本应无法分配到论文，但</p><p id="355J8F9C">他们却被分配了一篇论文。这[new.share.youhui118.com）是怎么回事？</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2Fe1d98d9fj00smfhtu001vd000ic004ap.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F9E">[wu.smc-sz.com）</p><p id="355J8F9F">目前，这些问题还待ICLR[for.share.h6yt.com）去解决。</p><p id="355J8F9G">博客文章，也能提交</p><p id="355J8F9H">延续之前的传统，今年ICLR顶[new.share.gr-english.com）会继续批准提交博客类型的文章。</p><p id="355J8F9I">提交的文章，需要符合以下要点[has.share.sznslawyer.com）：- 回顾过去的工作并总结结果，提出新的直觉，或指出一些不足之处[inch.share.gdpsred.com）- 对现有的机器学习概念或技术提出新颖的观点或解释- 从新的角度讨[our.share.ehaizao.com）论机器学习中的重要问题，如可复现性- 分析机器学习和人工智能最新[fact.share.sitamas.com）进展的社会影响- 你尝试过但未成功的有趣研究想法</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2Ff8a26809j00smfhtv0028d000ic005dp.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F9K">[kuai.t[of.share.wall-news.com）2n6.com）</p><p id="355J8F9L">去年被接收的博客文章，感兴趣的童鞋可作参考。</p><p class="f_center"><img src="https://nimg.ws.126.net/?url=http%3A%2F%2Fdingyue.ws.126.net%2F2024%2F1104%2Fc621a17ej00smfhtx00fnd000ic00pap.jpg&thumbnail=660x2147483647&quality=80&type=jpg"/><br/><br/></p><p id="355J8F9N">[wei.tothcafe.com）</p><p id="355J8F9O">参考资料：</p>