精华内容
下载资源
问答
  • 近日,ACL 2020 论文初始评审结果放出,一些读者们是不是开始为 rebuttal 做准备了?在此文章中,旷视南京研究院负责人魏秀参博士介绍了论文 rebuttal 那些事,相信能为读者们提供全新的洞见。
  • OpenReview(Meta-Review,Review,Rebuttal)蜘蛛 这是一个玩具示例,旨在提取ICLR 评论以及相关的作者回复(反驳)和元评论。 最近,许多研究人员将注意力集中在学术文档处理上。 我已经阅读了一些与论文。 我发现...
  • Rebuttal

    千次阅读 2017-02-05 21:55:37
    1. Rebuttal是给编辑看的 2. 每个审稿人给出一个分数,加得总分 3. 定位。一般而言,对于area chair,那个给分比较低的会自然吸引他的眼球,相对占得的权重也就大(这些是area chair的自己之谈),所以rebuttal...

    http://blog.csdn.net/lqhbupt/article/details/25207463

    1. Rebuttal是给编辑看的

    2. 每个审稿人给出一个分数,加得总分

    3. 定位。一般而言,对于area chair,那个给分比较低的会自然吸引他的眼球,相对占得的权重也就大(这些是area chair的自己之谈),所以rebuttal就是要在有限的言辞里重点反驳这些reviewer

    4.切记一点。既然是rebuttal,那就要rebuttal。不要在rebuttal中随意答应reviewer提出的或是challenge的东西,比如加实验证实之类,那样就是变相承认reviewer的challenge,这就不是反驳。

    5.反驳内容。反驳一定要抓住对你的论文有要害危险的地方反驳。如果一个reviewer想拒你的论文,夸张的可能会指出十来处你论文的不当之处。但是这些指责中很多是无关紧要的,那就不要把rebuttal的内容放在这上面。抓住要害点,猛驳。

    6.注意一点。不要在rebuttal中使用太强烈的主观情感用语。可能一些reviewer不负责,睁着眼睛说瞎话,或是指鹿为马,使你非常气愤。但是不要把这些情感带入rebuttal中。『客观、简洁清晰的指出来就行了,不要用过于激烈的词语』

    7.rebuttal 的格式。最好采用清晰一点的格式,这样你表达的也有条理,chair看得也轻松。比如
    Reviewer #1 mainly posed one question that ....
    Reply: We actually...

    8.对于一些 reviewer 没有看懂论文提出一堆傻问题的。如果你确实在论文里已经写清楚了,就明确指出来在lines xx 。大多情况总结成一二个问题来回答。但是并不需要每个问题都要回答,如果trivial的问题回答的太多了,反而会让chair觉得你论文的表达有问题。

    9.rebuttal 并不是越长越好。找准要点,言简意赅最好。要清晰明了

    10.一定要好好修改英文表达,每改动一遍,都要用 拼写检查 检查一遍。不要出现naive 的漏洞。不论对于reviewer看你的论文还是chair看你的rebuttal,印象分都特别重要!

    11.对于新人来说,rebuttal写好之后,最好找有经验的人看看







    展开全文
  • rebuttal

    2021-08-11 15:42:47
    一些常用句式: https://zhuanlan.zhihu.com/p/104298923 https://www.cxyzjd.com/article/amusi1994/112792937 https://www.zhihu.com/question/32055996 AC信: https://zhuanlan.zhihu.com/p/353761920 ...

    一些常用句式:
    https://zhuanlan.zhihu.com/p/104298923
    https://www.cxyzjd.com/article/amusi1994/112792937
    https://www.zhihu.com/question/32055996
    AC信:
    https://zhuanlan.zhihu.com/p/353761920
    https://proceedings.neurips.cc/paper/2020/hash/217eedd1ba8c592db97d0dbe54c7adfc-Abstract.html

    展开全文
  • 点上方人工智能算法与Python大数据获取更多干货在右上方···设为星标★,第一时间获取资源仅做学术分享,如有侵权,联系删除转载于 :机器之心优秀的 rebuttal 能绝地逢生,糟...

    点上方人工智能算法与Python大数据获取更多干货

    在右上方 ··· 设为星标 ★,第一时间获取资源

    仅做学术分享,如有侵权,联系删除

    转载于 :机器之心

    优秀的 rebuttal 能绝地逢生,糟糕的 rebuttal 会过犹不及!

    我们都知道,对于顶会投稿来说,rebuttal 是必不可少的一个阶段。通过 rebuttal,投稿人可以根据意见内容来更正审稿人理解上的错误、解释/澄清审稿人的疑惑,并提供更多方法和实验细节等内容。所以,如果论文本身足够硬核的话,审稿人在 rebuttal 之后会提高论文得分,则文章大概率会被接收。所以 rebuttal 对于论文是否接收来说有着举足轻重的作用。

    之前,旷视南京研究院负责人魏秀参博士曾介绍了论文 rebuttal 那些事,为读者们提供全新的洞见。在本文中,佐治亚理工副教授兼 FAIR 研究科学家 Devi Parikh 和 Dhruv Batra,以及俄勒冈州立大学助理教授、担任 ICML 和 NeurIPS 2020 领域主席的 Stefan Lee 更详细地阐释了为何进行 rebuttal 以及审稿人和领域主席各自扮演什么角色,并根据自身经历为读者提供了 18 条实用的 rebuttal 小建议。

    从左到右依次为 Devi Parikh、Dhruv Batra 和 Stefan Lee。

    接下来先了解一下审稿人和领域主席(AC)在 rebuttal 中各自扮演的角色。

    有的放矢,尽可能全面地准备 rebuttal 内容

    一言以蔽之—「澄清」和「说服」是 rebuttal 的两大核心点。「科学」是一个十分严谨的过程,而「rebuttal」只是该过程中的一个环节。

    MIT 电气工程与计算机科学系(EECS)教授、历任 ICCV 2005 和 CVPR 2013 程序委员会共同主席的 Bill Freeman 曾在 CVPR 2018 大会的一次演讲中谈到:通常情况下社区新成员会过于理想化同行的评审过程,他们普遍认为评审者们有很多时间,会被安排在一个安静的空间中,进而仔细审阅各类论文以及研究报告。

    但现实情况远比想象的混乱,在评审过程中,不同的参与者都有不同的目标。同时,每个参与者都必须在有限的时间和注意力范围内评审论文,并且还需要承担多种责任。

    因此,从这个角度出发,一方面要弄清楚 rebuttal 的目标对象是谁

    rebuttal 的目标对象有两个:

    1. 审稿人,他们会不同程度地阅读论文,但可能记不起一些细节,或者打从一开始就不理解论文的核心主题;

    2.AC 可能对研究工作并不太熟悉,在这种情况下,最优的「指导原则」是假设他们所读的只是评论和 rebuttal 论点。

    另一方面我们要「看人下菜碟」,针对审稿人和 AC 准备相应的 rebuttal 内容

    1. 对于审稿人而言:尽最大可能澄清疑惑,回答问题,纠正可能产生的误解,避免过于明显的错误,并尽最大努力整合反馈意见改善现有的工作;

    2. 对于 AC:提供有代表性的评论摘要,帮助他们了解审稿人提出的问题是否获得了解决,并呼吁进行 bad-faith 审核,帮助他们做出有效的决定。

    根据以往的经验,学术界大多数的新成员都专注于(1),而忽略(2)。

    最后,我们可以将「rebuttal」看作「辩论赛」。辩论赛中参赛者竭尽全力力图说服对手,在参加各类顶会时也是如此。虽然这个比喻并不完美,因为审稿人并不是我们的对手。但相同的是,我们都在尝试说服「辩论对手」或者「审稿人」以改变其想法。

    四步走战略:稳扎稳打,轻松应对 rebuttal

    1. 逐句逐条地列出审稿人的评论以及意见,使用电子表格来整合每个审稿人提出的个人评论/问题/疑虑。将所有内容放在同一位置防止有任何遗漏的内容。尽快执行此操作,以便于意识到需要补充任何有必要的新实验(如果场所允许),也便于尽早进行分析;

    2. 头脑风暴:在总表上设一个专栏,供回复每个审稿人的评论。在此专栏里可以将自己的想法粗略地表达出来;

    3. 撰写「rebuttal」草案。将你在上述专栏中粗略的表达转化为 rebuttal 草案中的具体回应。注意简明扼要,同时覆盖每个要点,并在后续调整中进行删减/优先排序处理;

    4. 审查和修订。重读原始评论和你创建的反馈表,以确保所有对应的问题均已解决。当然,优先考虑主要问题,然后在合理空间内进行调整。

    下图展示了一个原始回复示例:

    18 条 rebuttal 小提示助你成功翻盘

    关于 rebuttal,作者提供了以下 18 个他们认为有效的建议,大家可以参考借鉴。

    提示 1:保持积极态度:进行审稿意见的总结,突出审稿人对论文的正面评价。rebuttal 内容则主要针对负面的评审反馈。

    提示 2:确定优先级顺序,先解决评审中存在的最大问题,然后处理细枝末节的小问题。

    提示 3:直接明了地回答审稿人提出的问题,紧扣问题的核心。回答的同时注意结合上下文,例如以下两则示例对话:

    1. 问:「这些是多次运行后反馈的平均值吗?」答:「没错,我们对 5 个随机原始值进行了平均。」

    2. 问:「训练期间是否使用了分割蒙版?」答:「没有,仅用于评估研究结果。」

    提示 4:保持沟通状态,比如提示 3 的示例都是对话形式的。这可能会让 RAC 更容易接受,并且也不会显得那么「好斗」。

    提示 5:回答问题的意图。不要纠结于问题本身,更要明白评论背后的意图。

    例如,评审的问题是「为什么不在 GLORP3 上进行评估?」通常情况下可能会使您的研究实验受到部分质疑。你在回答时应指出自己已经对 X,Y 和 Z 进行了评估,这些就足够了。需要注意一点的是,提醒其他评审和 AC 进行广泛的实验评估是非常必要的。

    提示 6:不要害怕去做一些强调。回答不仅要直截了当,还要有的放矢,突出重点。

    提示 7:如果所有审稿人都忽略了你想表达的核心观点,那么你应该点拨一下帮助他们回顾一下。

    提示 8:如果审稿人和 AC 不太记得你的论文,或者有可能他他们没有仔细阅读。你可以重新介绍一些关键词,并提醒他们有关实验的细节情况。

    提示 9:如果审稿人问的内容在论文中已经呈现,那么以行/表格/图片的编号的形式反馈给他们,并在 rebuttal 中强调这一点。引用的主要目的是提醒审稿人和 AC 你的论文并不缺少重要细节。

    提示 10:整合审稿人共同关注的问题。如果多个审稿人有共同关注的问题,可以一次性回复多个审稿人。

    提示 11:让审稿人尽可能容易地发现与他们有关的回复。

    提示 12:统计数据的说服力更强。相比于与审稿人和 AC 争论,提供给他们具体数据/统计资料更能支撑你的观点。

    提示 13:说不如做。直接在 rebuttal 中解释一些词汇具体代表什么,然后再向论文中添加内容,这会让审稿人和 AC 相信你可以完善论文的细节。

    提示 14:要善于接受意见同时保持理性。大多数审稿人和 AC 都欣赏这一点。同时,也要尝试他们建议的方法,看其是否有效,而不要争论其建议也可能无效。

    提示 15:坦诚回应。审稿人可能提醒你再做一次实验,但如果真的无法完成,你可以直接回答「条件不允许」。总之,实话实说就行了。

    提示 16:要特别关注不良审稿人。在一些情况下,审稿人可能没有坚持审阅的最佳实践或者没有认真对待自己审阅者的身份。这时确保其他审稿人意识到这点并适当地降低不良审稿人的审查比重是很重要的。指出不合理或缺乏根据的评论,并引用其他审稿人的反对意见都会有用。这也可以包括对领域主席提出保密请求(在适用情况下)。

    提示 17:认可审稿人的努力。另一方面,如果审稿人有优化论文的想法或者其他建设性想法,要对此表示感谢。

    提示 18:不要忘记对方的感受。请记住这不仅是科学活动,也是和其他人的社会交流。所以要找到自己与审稿人之间的共识,进而达成提高得分的最终目标。

    原文链接:https://medium.com/@deviparikh/how-we-write-rebuttals-dc84742fece1

    ---------♥---------

    声明:本内容来源网络,版权属于原作者

    图片来源网络,不代表本公众号立场。如有侵权,联系删除

    AI博士私人微信,还有少量空位

    如何画出漂亮的深度学习模型图?

    如何画出漂亮的神经网络图?

    一文读懂深度学习中的各种卷积

    点个在看支持一下吧

    展开全文
  • 可打印版本附pdf下载链接 CVPR 2021 投稿中的一篇 Rebuttal 经历十分神奇,特此记录下来。 文章是关于可解释性的,一个方法上并不算十分重要,但是看问题的视角非常新奇的论文。业内的几个老师提前看过,都觉得我们...

    点上方计算机视觉联盟获取更多干货

    仅作学术分享,不代表本公众号立场,侵权联系删除

    转载于:作者丨信息门下遛狗@知乎(已授权)

    来源丨https://zhuanlan.zhihu.com/p/353761920

    编辑丨极市平台

    AI博士笔记系列推荐

    周志华《机器学习》手推笔记正式开源!可打印版本附pdf下载链接

    CVPR 2021 投稿中的一篇 Rebuttal 经历十分神奇,特此记录下来。

    文章是关于可解释性的,一个方法上并不算十分重要,但是看问题的视角非常新奇的论文。业内的几个老师提前看过,都觉得我们挖了新坑,是个很好的工作。

    初审得分125:

    一个 1 分给了 Strong Accept,review 写的特别漂亮。对我们工作的总结精准且到位。评论里对文章很多的用词和细节的表达都提出了建议。

    然后就是匪夷所思的两个意见。一个给了2分 Weak Accept,对文章基本上没提技术性的意见,只是说我们语言需要 improve。那当然我觉得语言在任何情况下都是可以 improve 的了,只不过这位审稿人的语气让人很不舒服,说 the english skill is very poor。这就很让人费解,如果 very poor 了你还能准确的看完全文,还说 idea 很有趣,有贡献,这不是自相矛盾?审稿人友善地指出了两个 typo,其中一个属于英式美式写法的区别,另一个是 TensorFlow 写成了Tensorflow,这我就 emmmm……并且最后这位审稿人评价我们的写作是“unacceptable”的,看得我是蒙的。

    最后一个给了5分 Strong Reject,评论更神奇。这位审稿人忽略了文章的任何 contribution,反而认为我们的文章是在干另外的某一件完全不相关的事情。提了四个问题(实际上是三个),有两个问题我花了好久才勉强搞明白这位审稿人的理解思路。并且从审稿意见中可以感觉到,这位审稿人缺乏相关的基础知识。最后他在没有讨论文章贡献的基础上直接给了SR。刚看到都蒙了。

    Rebuttal 的时候和合作者仔细考量了一下,首先,我们罗列了以下的事实:

    1. 初审中负面评论要改成正面其实很困难,根据以往的经验,只有10%的论文从SR改为正面评论。

    2. 如果最终评分中有负面评论还没完全改正,文章是很难中的。甚至都是正面评论都有可能被拒绝。

    3. 给 5 分的审稿人一看就是新手。找出文章的漏洞简单,但是发现文章的价值难。这位审稿人仅凭借一个(自认为是漏洞的)漏洞就直接反手一个 5,切实地说明是个初哥。

    4. 给 2 分的审稿人也很让人恼火,而且要小心他看了别人的意见改分数。

    所以 rebuttal 的任务主要就是稳住 1、2,然后把 5 扳回来。

    我写过很多rebuttal,也读过很多rebuttal。有的rebuttal语气极为谦逊,就生怕惹得审稿人不高兴;有的rebuttal平铺直叙,就好像在讨论一件无所谓的普通的事情;有的 rebuttal 上来就怼“你们这帮审稿人是不是不识抬举!”。最后一种很少看到,但是我们决定使用最后一种,因为如果 5 真是初哥的话,直接怼到他服软才有保险,好言好语讲话他可能听不进去的。于是 rebuttal 我们非常直接地指出 “the reviewer misunderstands the main purpose of this paper and completely ignores our contributions”。在回答具体问题时,我们加了大量的参考文献砸给他看。意思就是,如果不懂可以先学,并且我说的是对的。对其他两位审稿人就是正常的回应每一个点。

    此外我们还给AC发了信:

    Dear AC,

    We want to raise attention to AC that reviewer #1 has made some statements against the common-sense in both xxxx and xxxx fields. With his/her efforts, he/she squarely misunderstood the main purpose of this paper and successfully ignored all of our contributions recognized by other reviewers. We question the authority of reviewer #1 and believe that the comments of reviewer #1 are unfair and worthless.

    We also want to bring to AC's attention to reviewer #3, whose criticism of our personal language skills is unfair and irresponsible. Reviewer #3 can read and understand our paper without technical questions raised. This proves that our writing at least accurately conveys our ideas. Actually, we have published many papers, but not received similar judgment. The ``unacceptable'' comment made by this reviewer is unacceptable.

    At last, we thank all reviewers and ACs for their time and efforts, regardless of the result of this paper.

    Best,

    最后 3 月的第一天,结果已经得知了,文章被接收。

    希望能帮助到大家~

    3 月 4 号更新,已经看到 meta review。那个给 5 分的审稿人并没有给出正值的最终评分,并且在审稿意见中坚持自己的看法。万幸 AC 们认为这篇文章值得被接收。

    end

    我是王博Kings,一名985AI博士,华为云专家/CSDN博客专家,单个AI项目在Github上获得了2000标星,为了方便大家交流,附上了联系方式。

    这是我的私人微信,还有少量坑位,可与相关学者研究人员交流学习 

    目前开设有人工智能、机器学习、计算机视觉、自动驾驶(含SLAM)、Python、求职面经、综合交流群扫描添加CV联盟微信拉你进群,备注:CV联盟

    王博Kings 的公众号,欢迎关注,干货多多

    王博Kings的系列手推笔记(附高清PDF下载):

    博士笔记 | 周志华《机器学习》手推笔记第一章思维导图

    博士笔记 | 周志华《机器学习》手推笔记第二章“模型评估与选择”

    博士笔记 | 周志华《机器学习》手推笔记第三章“线性模型”

    博士笔记 | 周志华《机器学习》手推笔记第四章“决策树”

    博士笔记 | 周志华《机器学习》手推笔记第五章“神经网络”

    博士笔记 | 周志华《机器学习》手推笔记第六章支持向量机(上)

    博士笔记 | 周志华《机器学习》手推笔记第六章支持向量机(下)

    博士笔记 | 周志华《机器学习》手推笔记第七章贝叶斯分类(上)

    博士笔记 | 周志华《机器学习》手推笔记第七章贝叶斯分类(下)

    博士笔记 | 周志华《机器学习》手推笔记第八章集成学习(上)

    博士笔记 | 周志华《机器学习》手推笔记第八章集成学习(下)

    博士笔记 | 周志华《机器学习》手推笔记第九章聚类

    博士笔记 | 周志华《机器学习》手推笔记第十章降维与度量学习

    博士笔记 | 周志华《机器学习》手推笔记第十一章特征选择与稀疏学习

    博士笔记 | 周志华《机器学习》手推笔记第十二章计算学习理论(上)

    博士笔记 | 周志华《机器学习》手推笔记第十二章计算学习理论(下)

    博士笔记 | 周志华《机器学习》手推笔记第十三章半监督学习

    博士笔记 | 周志华《机器学习》手推笔记第十四章概率图模型

    点个在看支持一下吧

    展开全文
  • 浅谈学术论文rebuttal

    2020-02-01 23:44:25
    审稿意见趣图(来自Ming-Hsuan Yang‘s slides) 【Rebuttal形式】 如今众多会议提供了非常多样的rebuttal形式,会议rebuttal形式主要分为以下三种: 提交PDF文档作为rebuttal(有页数和模版限制,方便提交新表格和...
  • 作者丨蛋酱、泽南来源丨机器之心编辑丨极市平台导读又一个计算机视觉顶会通过了审稿阶段。论文评分是这样,想好怎么 rebuttal 了吗?作为计算机视觉领域三大会议之一的 ICCV(IEEE...
  • 以笔者近期的几篇论文投稿为例,分享论文学术论文投稿与返修(Rebuttal)的经验。 讲座目的: 希望能够给大家论文投稿和Rebuttal带来一些帮助。主要目的: 1)了解期刊、会议投稿和审稿流程 ;2)了解论文Rebuttal...
  • 这里有一份关于 rebuttal 写作方法的攻略,有需要的同学可以自取,但请记住一个总的原则:rebuttal 的内容要让审稿人或 RAC 直接、透彻、轻松地理解你所提供的答案。 写好 Rebuttal 的 18 条建议 首先我们明确 ...
  • CVPR 2021 投稿中的一篇 Rebuttal 经历十分神奇,特此记录下来。 文章是关于可解释性的,一个方法上并不算十分重要,但是看问题的视角非常新奇的论文。业内的几个老师提前看过,都觉得我们挖了新坑,是个很好的工作...
  • 如何写会议 Rebuttal

    2020-09-06 13:40:58
    (1)喷「novelty」:这类最为麻烦但也是作者们遇到可能最多的意见,作此类rebuttal时不妨重新梳理和强调文章的重要贡献,然后澄清并不是trivial的简单combine,再强调一下motivation和intuition,用另一种方式将...
  • 我写过很多rebuttal,也读过很多rebuttal。有的rebuttal语气极为谦逊,就生怕惹得审稿人不高兴;有的rebuttal平铺直叙,就好像在讨论一件无所谓的普通的事情;有的 rebuttal 上来就怼“你们这帮审稿人是不是...
  • ECCV 会议评审意见已经放出,已经确定可以收录的作者,自然歌颂审稿人慧眼识才,但更多的作者在知乎上强怼review的同时,也在精心准备Rebuttal。 什么样的Rebuttal回复会让评审心服口服,针对不同的意见和不同的...
  • 如何写学术论文的rebuttal

    千次阅读 2018-03-17 12:58:02
    而且reviewer对我们的rebuttal给了好评: “The authors provided a sufficient rebuttal to solve most of my concerns.” “Two of the three reviewers recommend accept as a poster and agree that the rebuttal...
  • 审稿意见趣图(来自Ming-Hsuan Yang‘s slides) 2.2 【Rebuttal形式】 如今众多会议提供了非常多样的rebuttal形式,会议rebuttal形式主要分为以下三种: 提交PDF文档作为rebuttal(有页数和模版限制,方便提交新...
  • 以笔者近期的几篇论文投稿为例,分享论文学术论文投稿与返修(Rebuttal)的经验。 讲座目的:希望能够给大家论文投稿和Rebuttal带来一些帮助。主要目的: 1)了解期刊、会议投稿和审稿流程 ;2)了解论文Rebuttal常见...
  • 学术会议 Rebuttal 模板

    千次阅读 2017-02-11 16:19:46
    学术会议 Rebuttal 模板 Note that the author rebuttal is optional, and serves to provide you with an opportunity to rebut factual errors in the reviews, or to supply additional information requested...
  • Note that the author rebuttal is optional and, following similar guidelines to previous CVPR conferences, it is meant to provide you with an opportunity to rebut factual errors or to supply ...
  • Rebuttal技巧和一些原则】 仔细揣摩审稿人的意见: 不论会议还是期刊,——“首先去了解对方,然后再争取让对方了解自己” ,是整个rebuttal过程中最为重要的一条原则。领会审稿人某句话背后的意图,体会其心意...
  • 本次报告将就如何写出一篇优秀的rebuttal,主要分为一下几个方面阐述:(一)rebuttal的作用:试图扭转乾坤?却弄巧成拙?rebuttal案例分析;(二)rebuttal的步骤:从理解分析审稿意见开始,如何对问题进行总结分类...
  • 点击上方蓝字关注我们正值ICCV 2021 Rebuttal期间,这里分享一个CVPR 2021的Rebuttal经验分享,希望对大家有所帮助~结束了忙碌的一天,窗外夜深人静。今天来记录C...
  • Folks, 1) So you have your CVPR reviews... This note to answer some ...2) We've had several questions about rebuttal length. For example, I got long reviews (five reviews; weird reviews; etc.), can I.
  • Rebuttal技巧和一些原则】 仔细揣摩审稿人的意见:不论会议还是期刊,——“首先去了解对方,然后再争取让对方了解自己”,是整个rebuttal过程中最为重要的一条原则。领会审稿人某句话背后的意图,体会其心意,应...
  • How to write rebuttal ?

    千次阅读 2017-11-30 18:35:54
    How to write rebuttal

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 600
精华内容 240
关键字:

rebuttal