首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >这个机器学习论文大众评审网站,要让每篇arXiv论文都得到讨论

这个机器学习论文大众评审网站,要让每篇arXiv论文都得到讨论

作者头像
昱良
发布于 2018-12-07 10:04:14
发布于 2018-12-07 10:04:14
5320
举报
圆栗子 发自 凹非寺 量子位 出品 | 公众号 QbitAI

研究机器学习的人类们,通常喜欢把研究成果发上ArXiv。

不过,ArXiv上面没有讨论板,公开讨论场所多集中在Reddit和推特上。而社交平台又无法提供纯粹的学术环境,讨论过程中很容易歪楼。

现在,纽约大学的小伙伴们,建起了一个公开的ArXiv论文同行评审网站,叫GroundAI

他们希望,给机器学习领域的研究,带来一些更有价值的学术探讨。从事AI研究的人类,可以分享对某篇论文的看法和建议,促进研究;

还希望,GroundAI未来能够为各种会议的论文评审提供一些依据。

标语是:每一篇ArXiv论文,都需要被讨论

这个平台什么样?

GroundAI平台会比较及时地更新ArXiv论文,以列表形式呈现,可以直接按时间顺序观察。当然,也可以选择具体的研究领域来浏览,比如视觉、语言、机器人……

点进一篇论文,就可以发表自己的意见,探讨论文的研究方法、实验和数据等等。

遇到有意义的讨论,还可以追踪一波,关注后续进展。

现在的人类,讨论研究成果的场所,通常是Reddit和推特这样的社交平台。

不过,纽约大学数据科学中心 (CDS) 的小伙伴们觉得,这些现有的社区都不是很纯粹,讨论容易歪楼。

比如,说着说着重点就转移到“美女科学家”之类的奇怪话题上面。

团队认为,机器学习的研究人员需要一个更专注的环境,支持各种学术观点的表达。目的是促进学术讨论

除了让更多的人,深入了解某项研究的细节之外,团队也希望志同道合 (比如研究方向相似) 的人类,可以在讨论中互相提供灵感,推动研究的进展。

当然,这里也不是只能讨论AI研究,像统计、医疗健康、物理等等研究领域,只要是能和AI发展产生关联的研究,都是欢迎的。

GroundAI的利弊在哪里?

不过,人们选择在Reddit、推特这样的社交网络上讨论研究成果,自然也有他们的道理:

在用户众多的成熟平台上,更加容易吸引其他人来发表看法,或者答疑解惑。

如果改用GroundAI,存在感可能就没有那么强,说了话也不一定有人听得到。

清冷的世界,有乌鸦飞过

毕竟,这是一个很年幼的讨论平台,不会在短时间内就变得很热闹,还需要时间成长。

不过,GroundAI团队说,牺牲一些存在感,或许可以换来高质量的学术讨论。原因有二:

一是,这个平台只面向学术圈,并且实行严格的内容政策:规定怎样才算是有价值的贡献 (Valuable Contributions) 。

二是,讨论内容与预印本一同存储,并且所有人都可以访问,保障了透明度。至于透明度是针对哪个层面讲的,请往下看。

能改善同行评审的现状?

目前,机器学习领域的许多会议,都使用同行评审。但高质量的同行评审比较稀缺,会议论文的评审也时常引起争议。

上周,人工智能顶会AAAI 2019放榜,国内某知名高校的博导论文被拒,实名投诉至组委会,质疑同行评审不专业。

Ian GoodFellow也曾经嘲讽同行评审机制不靠谱:

对于难以区分客观阐述和猜想、难以判断论文效果好的原因、数学语言混淆等等现状,同行评审会让这些缺陷变本加厉。

而如果GroundAI里面的互动,可以成为学术记录的一部分,这样就可能为论文评审提供一些依据。

上文所说的“透明度”,针对的就是这一潜在功能。

听上去路还很长,不知道能不能走通。

不过,想让同行评审更科学,这样的愿望倒是近在眼前。

GroundAI传送门: https://www.groundai.com/project/temporal-regularization-in-markov-decision-process/

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2018-11-06,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 机器学习算法与Python学习 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
社交媒体和arXiv存在,让双盲评审形同虚设 | Reddit热议
最近,Reddit上有这样一个讨论:社交媒体与arXiv是否损坏了顶会双盲的机制?
量子位
2020/06/24
1.2K0
Reddit高赞:机器学习领域「八宗罪」!同行评审变味,盲目崇拜盛行
科研人员进入领域时的初衷是「伟大」的:他们相信,机器学习能够真正的改善人们的生活。所以每年机器学习有关的顶会投稿数目几乎是成倍的增长,这些新的科研成果似乎真的能带来一个更好的未来。
新智元
2020/07/06
4570
Reddit高赞:机器学习领域「八宗罪」!同行评审变味,盲目崇拜盛行
Goodfellow 炮轰同行评议!双盲评审导致AI顶会论文变水
【新智元导读】Ian Goodfellow 今天发推表示,他怀疑正是同行评议机制导致了如今AI会议论文下降,评审人质量参差不齐是主要原因,浮夸的论文被选中,真正的好论文反而被埋没。作为科学界一贯以来的双盲同行评议机制,正在遭遇一场前所未有的灾难。
新智元
2018/08/01
1K0
Goodfellow 炮轰同行评议!双盲评审导致AI顶会论文变水
CVPR新规严禁审稿期间公开宣传论文,可发arXiv,LeCun:疯了吧!
机器之心报道 编辑:蛋酱、泽南 打击投机取巧行为。 除了标题各种 all you need 之外,投稿之后在推特知乎上宣传一波,油管上发个介绍视频现在几乎是 AI 顶会热门研究的「标配」。在社交网络如此发达的今天,「酒香不怕巷子深」的美好世界看起来越来越难以实现了。在论文水平差距不大的情况下,PR 能力成为了不少人比拼的方向。 但众所周知,自我宣传有可能影响到审稿人的判断,进而让身处大型实验室的研究者们更容易获益。最近几天,人工智能领域最热门的会议 CVPR 决定拿社交媒体开刀了。 在近日召开的 CVPR
机器之心
2023/03/29
8470
CVPR新规严禁审稿期间公开宣传论文,可发arXiv,LeCun:疯了吧!
CVPR盲审期间禁止媒体宣传论文!Reddit网友:arXiv怎么算?
在论文评审中,通常采用双盲同行评审,即作者和审稿人双方都保持匿名,只有编辑才知道各方的身份。
新智元
2021/07/06
7630
Lecun被骂退,黑人女研究者要求必须被引用!Reddit热议ML社区八大毒瘤
因为一篇被指“种族歧视”的PULSE算法论文,图灵奖得主、Facebook 首席 AI 科学家 Yann Lecun 在推特上遭遇了飓风般的“网暴”。
大数据文摘
2020/07/07
8190
ML社区八大「毒瘤」:盲目崇拜、相互攻讦、重SOTA轻实效……
俗话说,有人的地方就有江湖,就会充斥着各种立场和利益纠纷。科研领域亦如此,机器学习社区近来掀起来的一系列关于种族偏见的热议就是鲜活的例证。我们先回顾一下这件事情的来龙去脉:
机器之心
2020/07/06
5880
ML社区八大「毒瘤」:盲目崇拜、相互攻讦、重SOTA轻实效……
CVPR发布禁令:盲评的论文不能在社交平台上讨论!LeCun:这政策简直疯了
除此之外,禁止在社交媒体上讨论,会对论文的传播造成非常大的影响,这对于学术研究可不是件好事。
量子位
2021/07/19
5820
AIGC学习步骤
生成式人工智能——AIGC(Artificial Intelligence Generated Content),是指基于生成对抗网络、大型预训练模型等人工智能的技术方法,通过已有数据的学习和识别,以适当的泛化能力生成相关内容的技术。
正在走向自律
2024/12/18
2450
AIGC学习步骤
深度学习先驱Bengio:AI顶会论文的Deadline是时候取消了
Yoshua Bengio:深度学习先驱,蒙特利尔大学计算机系教授,2019 年图灵奖获得者。
机器之心
2020/03/11
6880
深度学习先驱Bengio:AI顶会论文的Deadline是时候取消了
揭秘同行评审「十宗罪」,这样做才能改进论文评审机制
选自arXiv 作者:Anna Rogers、Isabelle Augenstein 机器之心编译 编辑:魔王 顶会公布论文评审结果和论文接收结果时,就是大家放肆吐槽评审制度时。然而,年年吐槽,周而复始。为什么评审制度还没有得到改进?问题出在哪里?来自哥本哈根大学的研究者从多个角度分析评审制度的优缺点,并提出改进建议。 一般来说,同行评审应该是高质量、高影响力研究的过滤器,但事实并非如此: 同行评审无法保证质量控制,不管是小的错误还是严重的方法缺陷,即使在发表错误结果会导致实质损害的生物医学领域也是如此。
机器之心
2023/03/29
3750
揭秘同行评审「十宗罪」,这样做才能改进论文评审机制
论文作者串通抱团、威胁审稿人,ACM Fellow炮轰「同行评审」作弊
布朗大学计算机科学系教授、机器学习研究者、2018 年 ACM Fellow 迈克尔 · 利特曼(Michael L. Littman)在 ACM 通讯上发文斥责「部分学者正在威胁计算机科学研究的诚实性」。他在文章中指出了同行评审中可能普遍存在却无人注意到的学术道德乱象:论文作者串通一气,不择手段使自己的论文被接收。
机器之心
2021/06/08
5450
ICLR被曝巨大黑幕,评审和作者竟私下勾结?49.9%论文疑有AI审稿
由于规格高、论文多,顶会论文审稿过程的公平性和透明度,向来是业界关注和争议的焦点。
新智元
2024/05/14
2350
ICLR被曝巨大黑幕,评审和作者竟私下勾结?49.9%论文疑有AI审稿
同行评审是这样略读论文的!Ian Goodfellow实力「嘲讽」了一波
今日,谷歌大脑研究科学家 Ian Goofellow 发了一条 Twitter,引起了大家激烈的讨论:
机器之心
2018/08/07
3130
同行评审是这样略读论文的!Ian Goodfellow实力「嘲讽」了一波
学界 | 交互式线上科学期刊Distill上线,Ian Goodfellow表示“学ML就找它”
如今,机器学习的发展正如火如荼,每天都有众多最新研究论文在线上发表。论文不仅承担了分享研究成果的责任,同时,也表达了科学家们对事物的不同理解。 AI科技评论了解到,为了更好地让机器学习领域的科学家们分享研究成果,探讨最新进展, OpenAI,、DeepMind和 YC Research等多个机构机构于昨日联合发布了一个交互式科学期刊网站Distill,该网站主要有发表期刊学报、为优秀著作发放 Distill prize奖金以及提供交互性论文写作工具这三个功能。 Distill有何特色? 采用先进的网络技
AI科技评论
2018/03/12
8790
学界 | 交互式线上科学期刊Distill上线,Ian Goodfellow表示“学ML就找它”
评审拒绝,主席接收:这篇不到4分的论文中了ICLR 2019
上个月,ICLR 2019 公开论文接收列表。据统计,ICLR 2019 共收到 1591 篇论文投稿,相比去年的 996 篇增长了 60%,接收论文 502 篇,其中 oral 论文 24 篇,poster 论文 478 篇。而在这 500 篇接收论文中,有一篇整出了幺蛾子。
机器之心
2019/04/29
1.1K0
评审拒绝,主席接收:这篇不到4分的论文中了ICLR 2019
惹争议!本科毕业生成为NIPS 2018论文同行评审
机器之心报道 参与:李泽南、李亚洲 在 NIPS 2018 大会论文接收即将结束之时,一名本科刚刚毕业的学生成为大会论文同行评审的消息引起了人们的热烈讨论。以色列 Bar Ilan 大学的计算机科学高级讲师 Yoav Goldberg(他曾在去年 6 月撰文批评过 arXiv 的不良风气,并与 LeCun 论战)对此评论道:「请搞清楚,这是『同行评议』,而不是找『评论过五个 TensorFlow 教程的人』。」 神经信息处理系统大会(Neural Information Processing Systems
机器之心
2018/06/08
4980
终于,NLP顶会ACL投稿不用匿名了
近日,计算语言学协会年会(ACL)正式宣布,该系列会议论文投稿已取消匿名期,同时允许作者在投稿期间宣传自身工作。新规定直接适用于下一个审稿周期。
机器之心
2024/01/17
7400
终于,NLP顶会ACL投稿不用匿名了
刚刚 !ICLR2023 官方评审结果正式发布!另附:2017年--2023年 ICLR 论文下载
ICLR2023的评审结果已经正式发布!所以本文首先必须要给大家同步一下ICLR2023最新官方评审结果;然后作者整理ICLR会议介绍,让你一文了解ICLR国际顶会;接着整理历年ICLR会议情况;最后,附上历年ICLR会议论文下载(自2017年到2023年)。
ShuYini
2022/12/06
1.1K0
刚刚 !ICLR2023 官方评审结果正式发布!另附:2017年--2023年 ICLR 论文下载
论文党狂喜!alphaXiv推出Deep Research一秒搜遍arXiv,研究效率直接爆表
刚刚,alphaXiv 推出了新功能「Deep Research for arXiv」,该功能可协助研究人员更高效地在 arXiv 平台上进行学术论文的检索与阅读,显著提升文献检索及研究效率。
机器之心
2025/04/10
2090
论文党狂喜!alphaXiv推出Deep Research一秒搜遍arXiv,研究效率直接爆表
推荐阅读
社交媒体和arXiv存在,让双盲评审形同虚设 | Reddit热议
1.2K0
Reddit高赞:机器学习领域「八宗罪」!同行评审变味,盲目崇拜盛行
4570
Goodfellow 炮轰同行评议!双盲评审导致AI顶会论文变水
1K0
CVPR新规严禁审稿期间公开宣传论文,可发arXiv,LeCun:疯了吧!
8470
CVPR盲审期间禁止媒体宣传论文!Reddit网友:arXiv怎么算?
7630
Lecun被骂退,黑人女研究者要求必须被引用!Reddit热议ML社区八大毒瘤
8190
ML社区八大「毒瘤」:盲目崇拜、相互攻讦、重SOTA轻实效……
5880
CVPR发布禁令:盲评的论文不能在社交平台上讨论!LeCun:这政策简直疯了
5820
AIGC学习步骤
2450
深度学习先驱Bengio:AI顶会论文的Deadline是时候取消了
6880
揭秘同行评审「十宗罪」,这样做才能改进论文评审机制
3750
论文作者串通抱团、威胁审稿人,ACM Fellow炮轰「同行评审」作弊
5450
ICLR被曝巨大黑幕,评审和作者竟私下勾结?49.9%论文疑有AI审稿
2350
同行评审是这样略读论文的!Ian Goodfellow实力「嘲讽」了一波
3130
学界 | 交互式线上科学期刊Distill上线,Ian Goodfellow表示“学ML就找它”
8790
评审拒绝,主席接收:这篇不到4分的论文中了ICLR 2019
1.1K0
惹争议!本科毕业生成为NIPS 2018论文同行评审
4980
终于,NLP顶会ACL投稿不用匿名了
7400
刚刚 !ICLR2023 官方评审结果正式发布!另附:2017年--2023年 ICLR 论文下载
1.1K0
论文党狂喜!alphaXiv推出Deep Research一秒搜遍arXiv,研究效率直接爆表
2090
相关推荐
社交媒体和arXiv存在,让双盲评审形同虚设 | Reddit热议
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档