你的位置:云yun开·体育全站app(kaiyun)(中国)官方网站 登录入口 > 新闻 > 开yun体育网(这亦然一齐最低分的最进攻极少)-云yun开·体育全站app(kaiyun)(中国)官方网站 登录入口

开yun体育网(这亦然一齐最低分的最进攻极少)-云yun开·体育全站app(kaiyun)(中国)官方网站 登录入口

时间:2024-12-17 05:36 点击:161 次

开yun体育网(这亦然一齐最低分的最进攻极少)-云yun开·体育全站app(kaiyun)(中国)官方网站 登录入口

今天开yun体育网,ICLR 2025 的 discussion phase 的 ddl 也曾截止。回看夙昔 14 天的征询经由,可太精彩了!

各大平台上顺手一翻即是作家们的吐槽大会,齐在尴尬这届 ICLR 评审的各式仙葩乱象。

比方 UCSB 博士生 @JiachenLi11 就在推特上绝顶之无奈:

我收到的评审履行,低到令东说念主担忧——其中一条评审甚而话齐没说完。难说念审稿东说念主的 tokens 用完毕吗???

图源推友 @JiachenLi11

你还真别说,他这个" tokens 用完"的吐槽并不是胡作胡为——

ICLR 2025 的论文提交数前所未有地高,约有 11000 篇。

为了升迁审稿速率和质料,ICLR 本年引入了 AI 参与审稿责任。

固然了,倒也不是单一 AI,是多个 AI 大模子组成的 Agent。

关联词,你以为审稿东说念主话不写完评审履行就点发送,即是 ICLR 2025 的一齐槽点了吗?

ICLR 吐槽大赏

要细数本年 ICLR 2025 的神奇事件,我们先从最广为东说念主知的一件提及:

[ 10,10,10,10 ] 和 3 个 poor 得分并存

本年的 ICLR 出现了一篇4 个审稿东说念主同期打出了 10 分的论文。

假如这个分数能保抓到中稿示知,这将是近 5 年来,ICLR 的独逐个篇满分作文。

论文题目如下图,是一个叫IC-Light(全称 Imposing Consistent Light)形式,是对于为止图像照明的。

作家张吕敏,亦然大名鼎鼎的 ControlNet 的作家。

他在苏州大学拿到学士学位后,去往斯坦福读博。

IC-Light 不错减轻为止像片主体的光源和布景,将主体、光源、布景三者赶紧地交融在一张图片里。

半年前,IC-Light 就在 GitHub 上开源,现时共 6.5k 星。

与此同期,ICLR 2025 还出现了几篇,某一审稿东说念主给某篇论文全打 1 分的论文。

这里我们打断一下,了解一下 ICLR 的评分体系:

1 分:太差了

3 分:圮绝

5 分:婉拒了哈

6 分:接……吧

8 分:招揽

10 分:强招揽

就拿其中一篇来说吧,看到这个后果给作家气的,写了一篇十几页的 strong rebuttal。

那审稿东说念主为什么给东说念主家 Soundness、Presentation、Contributions 齐给了 1 分?

审稿东说念主言辞绝顶蛮横,直呼Paper Writing is quite bad,然后还绝不客气地发问:" Is there a human author on this paper?"

审稿东说念主还暗示,(这亦然一齐最低分的最进攻极少),我们是不错判断一篇论文是东说念主写的照旧 AI 写的,"也许您在生成文本时莫得进行基本的连贯性检查"。

作家不竭输出离题万里 rebuttal,并反抗"我可真钦佩你识别 AI 的智商"。

作家 5 页酬谢,审稿东说念主在 ddl 顷刻间接头规模

一位在北大 CS 读博的小某书网友 @Kevin 对审稿东说念主的神操作大吐苦水。

事情是这么的,ICLR 不是共 14 天用来 discussion phase 嘛。

这 14 天里,有一位审稿东说念主 5,一共对他场所团队提交的 paper 建议了 10 个问题。

团队寂静回复了整整五页,审稿东说念主 5 已读不回。

团队屡次但愿与其征询,审稿东说念主 5 已读不回。

总之即是一通盘这个词石千里大海。

到了昨天,也即是 discussion phase 的临了一天,"审稿东说念主 5 顷刻间接头这个规模,并将 5 分改为 3 分"。

@Kevin 绝顶不睬解为什么审稿东说念主这么作念的意图。

的确就,令东说念主心碎的 discussion phase。

"你需要援用另一篇 ICLR 2025 投稿"

推友 @PandaAshwinee(普林斯顿博士毕业,现时在 Trails.ai 从事博后责任)给看侵略的网友们画了个我方招揽到的评审履行的亮点:

你需要援用另一篇 ICLR 2025 的投稿。

伸开说说,即是审稿东说念主衔接了 ICLR 2025 openreview 的另外一篇论文,暗示两个形式高度联系,是以小哥应该援用。

但是哭啊,小哥查过了,条件被引的论文根柢不在 arXiv 上。

何况这不是他第一次嗅觉"天塌了"——他在驳倒区补充,之前他的形式在 ICML 2024 被拒,主要原因亦然"与另一篇 ICML 2024 投稿高度相通"。

不外 ICLR 很快在小哥推文底下回复了,抒发纪律主席运行访问这个事儿。

"乞讨式" ICLR

前边提到的齐是审稿东说念主和作家有来有回(哪怕回得慢)的心扉 battle,更有真谛的事是,岂论国内照旧海外,好多东说念主齐把这届称为"乞讨式" ICLR。

简而言之,即是审稿东说念主一直不给评审不给分。

有东说念主上个月下旬的技术,就运行给通盘 AC(区域主席)发了邮件,条件他们辅导审稿东说念主回复作家。

或者至少阐发审稿东说念主们知说念我方还得干这活。

那时就有网友辅导"最坏的筹算",有的审稿东说念主会拖到临了一刻,因为他们也在为我方措辞……

不出所料,单看国内,昨天运行 24h 内倒计时了,好多作家还在恳求审稿东说念主快快评审,快快给分。

哎。

对作家的奇怪央求

在 Google DeepMind 责任的 Ahmad Beirami(@abeirami)共享了一则音尘:

发到推特上后,有 ICLR 作家暗示出了猜忌:

如若作家们写了这玩意儿,是否的确对审稿有匡助?

他认为这"可能是在销耗时辰",因为审稿东说念主透彻可能看齐不看,径直去看 paper 原文。一切齐是忽地的。

不外 Ahmad 很快回复了这位作家:

Yes!

当作又名 AC,我想确保我莫得从作家的角度遗漏任何履行。可能会有好多变化、新后果等。我想确保我知说念在那儿找到它们,以便简略酿成不雅点,判断一些原始驳倒 / 温顺是否适用。

获取这个酬谢后,作家小哥很欣忭地去添加宝贵去了。

ICLR 2025 为何这么

以上各样,仅仅群众或身在其中 / 或围不雅看侵略的 ICLR 2025 的极少点故事远程。

但,身为巨擘顶会,为什么会这么?

有的东说念主认为和本年的稿件数目关系。

官方数据走漏,ICLR 2025 的论文提交数目达到了 11,000 多篇,同比增长 61%。

而昨年 ICLR 2024 组委会收到的投稿总和为 7,262 篇——固然了,对那技术的 ICLR 来说亦然不小的责任量,同比增长了 47%。

本年,面临如斯雄伟的论文数目,审稿东说念主数目高达 15,000 多名。

这还不够,官方还引入了多个 AI 大模子组成的 Agent 来参与审稿。但它的功用不是透彻替代审稿东说念主,它不会撰写审稿驳倒或径直裁剪驳倒,而是提供拓荒性和可操作性的反映,匡助审稿东说念主提高审稿质料。

这个 Agent 针对审稿中可能存在的三类问题提供建议:

饱读舞审稿东说念主改写隐约的驳倒,使其对作家更具可操作性;

凸起著作中可能也曾回答了审稿东说念主问题的部分;

发现并处理不专科、不适应的言论。

但好多作家认为,稿件数目激增确乎加大了责任量,Agent 的支持无可厚非,但绝不是 ICLR 变成被看侵略的"科研春晚"的原因。

一方面,Agent 建议的建议,审稿东说念主是不错聘用摄取或者忽略不管的。

另一方面,极速膨大的审稿东说念主中,是否有东说念主并不是符合评审责任?

再一方面,为了确保审稿质料,每位审稿东说念主对等分拨 3 篇论文,顶天了看 4 篇,责任量并不是超负荷气象。

除了有点参差之外,另一个被网友们热烈征询的点,相聚在这届 ICLR 的分数上。

一般来说,ICLR 的传统招揽率在 30% 傍边,然后本年 ICLR 的排行前 30% 的论文,平均评分约为 5.6。

前边我们先容了,6 分算是一个勉对付强的分数,属于论文被招揽的边际门槛。

这就意味着"低于‘边际摄取’门槛的论文将被招揽"。

网友谈说念,"当会议摄取变得如斯减轻时,我们正在松懈通盘这个词科学评估系统——这影响到 AI 商量合座的无缺性。"

在此基础上,他建议了三点我方的念念考,但愿 ICLR 应有更严格和刚正的纪律。

固然,也有另一种声息:

期待一些超等刚毅到趁人之危的大模子出现,让它们充任审稿东说念主,措置上述通盘问题,以此匡助减轻审稿的职守。

仅仅不知说念这一天什么技术会到来了。

参考衔接:

[ 1 ] https://x.com/mo_danesh/status/1863964693687107823

[ 2 ] https://x.com/JiachenLi11/status/1856472250636964350

[ 3 ] https://x.com/Yuchenj_UW/status/1862541099136651536

[ 4 ] https://x.com/abeirami/status/1863629237741064608

[ 5 ] https://x.com/PandaAshwinee/status/1856384624873570749

[ 6 ] https://x.com/ysu_nlp/status/1860504185583648863

[ 7 ] https://openreview.net/group?id=ICLR.cc/2025/Workshop_Proposals#tab-accept开yun体育网

新闻

XINWEN

云开体育全站app魏延提倡了被后东谈主称为“子午谷奇谋”的政策-云yun开·体育全站app(kaiyun)(中国)官方网站 登录入口

在阅读此文之前,最初请点击下方的“护理”按钮,这么不错让您随时第一时期获取最新的著作云开体育全站app,同期也便捷您参与参谋和共享。您的支柱是我相持创作的能源源流~ 著作|妍妍 裁剪|妍妍 疏浚的谈路,却有不同的运谈,这背后究竟是什么因素决定了输赢的分水岭呢? 张开剩余87% 记忆至一千多年前的三国时期,魏延提倡了被后东谈主称为“子午谷奇谋”的政策,却被蜀汉丞相诸葛亮否决;而时隔一千多年后的明末,农民举义军的魁首高迎祥选择了相同的途径,但最终却以杜渐防微告终。 那么,高迎祥的失败,是否能阐明注

云开体育未能准确判断方式的变化-云yun开·体育全站app(kaiyun)(中国)官方网站 登录入口

《——·媒介·——》云开体育 合肥,位于三国时期的策略要塞,是东吴与曹魏之间的要害防地。在这片地盘上,孙权——东吴的掌舵者,面最后一个前所未有的失败。这场地肥之战的背后究竟遮掩着哪些深端倪的问题?它又为三国历史增添了怎么的暗影与缺憾?让咱们一探究竟。 合肥之战的布景 公元234年,曹魏的曹操一声令下,决意对吴国发动病笃。合肥,这个位于吴魏接壤的重镇,成为了干戈的要害场所。对于东吴而言,这不单是是一场粗野的战役,而关乎着国度的生死。此时的孙权,刚刚在与刘备麇集的起义中获得突脱手,威望如虹,志得志

开云体育使得蜀汉的政权走上了相对安定的轨谈-云yun开·体育全站app(kaiyun)(中国)官方网站 登录入口

《——·引子·——》开云体育 刘禅,这位被历史定型为“昏聩窝囊”的蜀汉天子,经常和蜀汉的陷落推断在一皆。关联词,刘禅的一世确凿就只消这些吗?在蜀汉的运谈如故注定的情况下,他的选拔到底是屈服于运谈,如故展现了一种深藏的聪惠与哑忍呢? 公元181年,刘禅降生在一个风雨飘舞的期间。当时,刘备还仅仅一个处所性的豪强,试图通过设立和扩展来为当年铺路。这个家庭并莫得给刘禅带来什么缓慢的日子,反而充满了战火和沉沦风尘的生活。年幼的刘禅,险些没能享受过一段信得过的安靖时光。 伸开剩余82% 在刘禅三岁傍边的工

开云体育(中国)官方网站融券余量累计减少300股-云yun开·体育全站app(kaiyun)(中国)官方网站 登录入口

本站7月31日盘中音书,煌上煌(002695)9点33分股价创60日新高。面前股价为14.28元,涨1.49%。前10个交以前资金流向情况:主力资金累计净流入6268.45万元,股价累计飞腾19.47%;融资余额累计加多1995.37万元开云体育(中国)官方网站开云体育(中国)官方网站,融券余量累计减少300股。

开yun体育网股价累计下落4.19% -云yun开·体育全站app(kaiyun)(中国)官方网站 登录入口

本站7月31日盘中音讯开yun体育网,毅昌科技(002420)9点33分股价创60日新高。现时股价为6.92元,涨10.02%。前10个交游日资金流向情况:主力资金累计净流出1854.89万元开yun体育网,股价累计下落4.19%

服务热线
官方网站:www.bxgtaobao.com
工作时间:周一至周六(09:00-18:00)
联系我们
QQ:18382909857
邮箱:88b70b15@outlook.com
地址:新闻科技园5034号
关注公众号

Powered by 云yun开·体育全站app(kaiyun)(中国)官方网站 登录入口 RSS地图 HTML地图

Powered by站群
云yun开·体育全站app(kaiyun)(中国)官方网站 登录入口-开yun体育网(这亦然一齐最低分的最进攻极少)-云yun开·体育全站app(kaiyun)(中国)官方网站 登录入口

回到顶部