| |
首页 淘股吧 股票涨跌实时统计 涨停板选股 股票入门 股票书籍 股票问答 分时图选股 跌停板选股 K线图选股 成交量选股 [平安银行] |
股市论谈 均线选股 趋势线选股 筹码理论 波浪理论 缠论 MACD指标 KDJ指标 BOLL指标 RSI指标 炒股基础知识 炒股故事 |
商业财经 科技知识 汽车百科 工程技术 自然科学 家居生活 设计艺术 财经视频 游戏-- |
天天财汇 -> 科技知识 -> 如何评价 ACL 2024 / February ARR cycle 结果? -> 正文阅读 |
|
[科技知识]如何评价 ACL 2024 / February ARR cycle 结果? |
[收藏本文] 【下载本文】 |
本提问用于汇总关于 ACL 2024 的各类信息 征稿通知: Main Conference - ACL 2024 (aclweb.org) 依据会议… |
Overall: 我狠狠锐评 Confidence: 看我干啥,我不懂啊 |
|
|
AC Batch 里的 8 篇,都有 3 个及以上的审稿意见,总体感觉审稿质量都还行,没有特别不负责任(无故打低分)的现象。 Overall Rating 均分分布:3.5 x 1, 3 x 1, 2.83 x 3, 2.67 x 3 总体感觉分数偏低,估计 3.3+ 可能正会,3 分附近就是看运气 Findings 了 |
3.30 更新 0分哥又有新笑话:你们用了统计的方法来评测,在我看来应该投稿到应用数学或者统计期刊,不应该投到NLP的会。 哈哈哈哈哈哈哈哈哈哈哈哈哈哈 家人们,跟统计稍微沾边的,被NLP除名啦 -------- 3.29 更新 0分哥最新笑话:你没法证明你的prompt是best的,所以你对NLP社区没贡献。(怎么设计最好的prompt)才是ACL 社区中的大部分同事期望你做到的。 哈哈哈哈哈你谁啊,谁允许你代表大部分人了 以及,不做prompt engineering就对NLP社区没贡献?那99%的文章是不是都可以用这个理由拒了 -------- 被气哭了 自己审的4篇论文,每篇都花了至少一整个下午去好好看好好提建议,即使是课程pj都不如的质量,都至少给了2 2 结果自己的论文,做llm agent 的,有个审稿人居然给1 0,原因是觉得和NLP无关…… 凭什么要这样被对待啊? |
谢谢你,ACL提分侠! 一篇从去年就一直命运多舛工作,屡投屡不中,ARR突然半夜提分(2.5->3.5),均分也过了3。真希望其他审稿人也都来提吧,中了我直接自费去参会! ---------------刚发布又一篇提分--------------- 加油兄弟们,快来接! |
|
|
|
|
ICLR 6555,转投到 ACL 变 1 分了,好好好 补充下:ChatGPT 写的意见,soundness overall 都 1 分,confidence 4 分 --- 前排接好运 |
3.31 update: 最后一个reviewer也回复了,os不变,提了sound,但sound没用吧。本来以为这个reviewer是最有可能提分的,他提了5个问题都回答了,让补的几个实验都做了,而且结果都符合预期,有点可惜.. 最终sound 3 3.5 3.5,os 3.5 3.5 3,就这样吧,尽力了 --- 最后一天了还是没回复,难顶 --- 目前os是3.5 3.5 3 打3分的reviewer rebuttal现在还没回复可以催吗?貌似31号截止 |
update:3 4.5 4 ?? 4 4.5 4 —————— 截止今天上午只有一个审稿人回复了,3 3.5 4 ?? 3 4.5 4 该审稿人提出了10个具体的问题,虽然数量可怕但这些问题都可以加实验逐一解决。补了一堆实验解答ta的问题后ta也及时将3.5改为了4.5,希望这种负责任的审稿人越多越好! |
自己的不多评价,同组一个师兄,收获一个2分,weakness上面写的是 lack of no novelty。给师兄整不会了。 |
新手保护期 |
|
|
刚刚审了一篇(ARR February cycle),研究方向和我不是特别契合,但好在并不复杂 总体而言,方法叙述得很清晰,实验看起来也比较充足,不过 idea 不太新鲜,有点类似于将 A + B 应用到 C 领域,而且没有对 A 和 B 做什么修改,可能会给 borderline 吧 另外,我个人的建议是:如果在你的方案中,ChatGPT 的调用不是必须环节,尽量考虑将其去掉,或者替换为其他相对轻量级的开源模型。这在于,如果你用了 ChatGPT,无论是数据增强,还是辅助推理,性能的提升都是审稿人可预期的,很难有 surprise 的感觉 |
3.30 update 昨天提交rebuttal后,审稿人改分啦~ soundness: 4/4/4.5/4 overall: 4/4/4/3.5 -------------------- soundness: 2.5/4/4.5/4 overall: 2/4/4/3.5 好好rebuttal 争取一下,中了就去雍和宫还愿… |
4,3,2.5,不知道有没有希望,主会不奢望了。。。 rebuttal撞上预答辩了,裂了已经 |
evaluation track 3 3 3.5不知道还有没有机会中主会,求保佑吧! 有没有同是这个track的小伙伴啊 |
3月28日凌晨更新: 1点15分左右收到了第三条review (评分4, 4),所以现在的情况是: Soundness: 4/4/4 Overall: 2.5/4/4 希望好运。 ——————— 头一回投ACL,Efficient/Low-Resource Methods for NLP track,只拿到两个review。 Soundness:4/4 Overall:2.5/4 2.5那个审稿人觉得我的工作更适合系统会议…我不知道该怎么说…post-training llm efficiency optimization不在ACL的兴趣范围内吗? |
emmm现在投稿量都这么大了吗,我没投稿,而且发的论文也一般,结果给我分六篇 |
审稿人很负责,都写了很多中肯的意见,甚至还有新idea 感觉应该是大牛 狠狠补实验!希望中main |
有个悖论,如果reviewer在正经审稿的时候都不好好审,为什么会在rebuttal的时候跟你正经交流? |
问一下4.15那个时间节点是啥意思,4.15之后还会有一轮审稿吗? |
3月27日凌晨 第一次单独一作投这个,说实话对自己的工作自我评价很低,因为太匆忙了老板也没怎么改。。。 半夜打开openreview看了眼没消息,然后读着ICLR24的论文呢,随便刷新一下,竟然出分了! Overall:2.5、3、4、2.5 好好rebuttal碰碰运气吧。。。 ———————————————— 3月27日晚 补一下自己审的两篇 一篇EE+情感分析,一篇情感分析(可能是IE track?还是情感类track?反正是自己之前的方向,所以就被拉来审了) 这两篇作为会议论文写的都很好,motivation到实验都还说得过去,工作量都很大。 但是其中一篇对比模型的细节和设置没有说清楚;另一篇用的是2022年比较流行的prompt方法,现在看有点过时。综上Overall给了3和2.5,confidence都给了2,看看他们rebuttal能不能说服我,可以给提分的空间。 第一次做ARR审稿人,感觉虽然论文没有每个字都通读一遍,但是打分应该是尽力,且对得起自己的良心了吧。。。 |
oa 3.5/3/2.5 conf 4/4/4 |
4.5 3.5 3,有一个审稿人best paper选的yes,想请问一下有机会拿奖么 |
希望能中! |
update3:快结束了,毫无动静的另一篇终于加分了,现在344,3分reviewer怎么不出现啊啊啊 update2:一篇444了,一篇没有动静,差距太大了 update:有个reviewer 2个小时就加分了,还有一个早上加分(加到3.5,说回到一个问题还能加到4),3.5/4/4了,感人。给另一篇接好心审稿人 两篇oa都是3/3.5/4 希望能中 中了我去上次那个庙还愿 |
Track: Dialogue System 占个坑 中了来还愿 |
|
我有理由非常怀疑,这些人当了n作之后然后开始审稿了。 |
第一次投稿,如果能中findings就非常高兴啦,求好运 |
从8月开始投ARR一直改到现在,三次都选的不换审稿人,但是三次都重新分了审稿人, 每次都在补实验,但是每次审稿人都说少baseline, 审稿意见和给分也突出一个随机, 累了, 以及,想问问友友们,有多个月的ARR审稿结果可以自己选提交到会议的结果吗? |
3.31update:交了re一天,暂时没有回复 3.29update:为啥还有这么多人收藏?等着看我被拒 3.28update:baselines跑不通,摆烂了∩_∩ OA:2.5 / 3 / 3.5,IR Track,看起来要补的实验比较多 |
|
|
Rebuttal更新:心软审稿人提了半分给了3,谢谢您!! S 3/2.5/3 O 3/2.5/2.5 Confidence 4/4/3 感觉审稿人claim的点挺一致的,确实是工作中的缺陷(实验做的不够深) 想想怎么写rebuttal吧ε=(′ο`*)))唉,提点分捞个findings就阿弥陀佛了 求心软审稿人! |
3/28 update:交上了rebuttal response了。对那个1/1的reviewer越看越气,TA有一句话说 This work may not align well with the expectations of a high-impact venue。 不提别的reviewers对我们工作的价值的肯定,就是这个reviewer自己,TA说 This work could open new avenues for research in multimodal data interpretation. LOL,可能high-impact venue expecation是要实现可控核聚变吧(手动狗头) 3/27 update:离谱,才发现28号就要交一版rebuttal。。。 出分了: 一篇自己共一的:soundness 4/1/3 Overall scores: 4/1/3一篇自己参与的:soundness 2.5/3/3/2.5. Overall scores: 2/2.5/2.5/2 吐槽一下,大家戾气这么重么,1/1 我看到的时候是震惊的。。。这种风气长此以往,你给我打低一点,我给你打低一点,以后不用审稿了,全部都打1/1,要挑刺谁不会呢? 再展开一点,arr初衷是好的,但我的角度看来,并不能保证review的公平,甚至因为有之前cycle的存在,导致reviewer故意打低分;两个月一轮cycle,review时间非常短,又只给几天rebuttal,既折磨作者,又折磨审稿人。 每次等review结果都像守岁的 |
有一点疑惑,reviewer说解决了concern,但是没提分,下个revision include rebuttal内容之后提分,这给我整不会了,next revision,那不是就是4.15的arr了吗...... Discussion/Rebuttal阶段能改原来的pdf吗? 是不是改了就到下一轮的arr周期去了? |
一篇共一的3/2.5/2.5,一篇一作的3.5/3/2/2,感觉都要凉,希望能rebuttal之后整个findings啊 |
别吧,我这审稿人这么狠的吗? 真就一个都不打算出现啊… 写了30页,然后又缩到了每个reviewer一个框正好的字数限制,你们就看一眼呗,不然显得我好zz… ————————————————- 审稿人哥哥,就看我一眼好不好 审稿人哥哥,不要不理我好不好 嘤嘤嘤 |
|
—————————————————— 累了,已经不想吐槽审稿人了.. 只想说一点,为啥colm还要先交abstract啊,这波想转投都投不了了…哭哭 |
3.29回复的rebuttal 审稿人还在装死 ┭┮﹏┭┮ 审稿的截止日期(4.1 20:00)是包括审稿人回复和作者再回复在内的截止日期吗?还是说这个之后还有一个审稿人和作者交流的截止日期? Soundness 2.5/3.5/3 Overall 2.5/3.5/2.5 Confidence 3/3/4 问问有戏嘛 |
半夜看分数都能看错,有点抽象了 是2.5 3 3.5 评论区说同分的扎我心了 圣虹夏再保佑信徒一次吧,希望最后能中 现在是2.5 3 4 |
|
顺便问问有没有人统计过分数分布 |
|
[收藏本文] 【下载本文】 |
上一篇文章 下一篇文章 查看所有文章 |
|
|
股票涨跌实时统计 涨停板选股 分时图选股 跌停板选股 K线图选股 成交量选股 均线选股 趋势线选股 筹码理论 波浪理论 缠论 MACD指标 KDJ指标 BOLL指标 RSI指标 炒股基础知识 炒股故事 |
网站联系: qq:121756557 email:121756557@qq.com 天天财汇 |