0
| 本文作者： 蔣寶尚 | 2020-04-05 15:41 | 專題：ACL 2019 |
作者 | 蔣寶尚
編輯 | 賈偉
ACL作為國際計算語言學(xué)協(xié)會是是自然語言處理領(lǐng)域影響力最大、最具活力的國際學(xué)術(shù)組織之一。
昨日ACL2020 錄用結(jié)果落幕，超過3000篇的投稿數(shù)量，可以說是歷史以來最盛大的一屆ACL。
據(jù)ACL官推介紹，關(guān)于ACL2020論文是否錄用的通知已經(jīng)給作者發(fā)了郵件，沒有收到消息的作者可以給會務(wù)組發(fā)郵件詢問情況。
關(guān)于整體的錄用率，錄用論文領(lǐng)域的分布，官網(wǎng)尚未有更多信息放出。不過，對比ACL 2019的25.8%的錄用率，ACL 2020 想必也不會相差太多。
據(jù)知乎話題《如何看待ACL 2020錄用結(jié)果？》中答者披露，很多作者的論文，原本是拒絕的狀態(tài)，但是經(jīng)過精心準(zhǔn)備的rebuttal，評分在邊緣的論文得分也有小小的提高。
每個回答問題的網(wǎng)友也都對這次ACL的評審工作稱贊不絕，即使文章未被錄用的作者也評論：審稿人很負責(zé)，意見很中肯。
例如，網(wǎng)友廷羽經(jīng)過rebuttal，最終將3.5,3.5,2.5的得分爭取到能夠錄取的4,3.5,3.5。
當(dāng)然，也有些作者，經(jīng)過rebuttal之后得分下降的~
有網(wǎng)友建議，遇到?jīng)]看懂或者找茬的評審意見，要以耐心解釋為主~
還有，因為中了ACL，男女朋友感情出現(xiàn)危機的~
此次ACL2020的審稿周期從19年的12月9日一直到20年的4月3日接近4個月時間，比往年的2個月宙稿時間幾乎加倍。ACL在審稿規(guī)范、質(zhì)量方面都算如今AI會議的翹楚之一。能通過ACL的評審的工作，在實驗嚴謹性、思路創(chuàng)新性上是有很不錯的保證的，這無疑是對科研人員工作的一個肯定。
據(jù)ACL官網(wǎng)介紹，在評審員在評審過程中會主要回答四個問題：1、這篇論文的主要內(nèi)容是什么，有什么樣的貢獻，優(yōu)缺點是什么？2、接收理由3、 拒絕理由4、整體評價
其中整體評價分為多個檔次：5=開創(chuàng)性、4.5=令人興奮、4=強烈、3.5=傾向于錄用、2.5=傾向于拒絕、2=平庸、1.5=弱、1=糟糕。
沒有3分這個檔次，也就是說評審人員必須對論文采取傾向性的評價。 打分之后，評審員要再次確定自己的評審意見，這一步也稱為評審人的置信度，置信度分為5個檔次：
5=我確信我的評價是正確的。我仔細閱讀了論文并且對相關(guān)工作非常了解。
4=非常確定。我試著去仔細檢查重要點。我不太可能會漏掉一些影響評價的要點。
3=比較確定。不過我有可能會漏掉一些內(nèi)容。雖然我整體上對該領(lǐng)域有所了解，我沒有仔細檢查論文細節(jié)。
2=愿意為我的評價辯護，但很可能我漏掉了一些細節(jié)，沒能理解論文中心點，或者不太確定本文的創(chuàng)新性。
1=不是我所熟知的領(lǐng)域，或者論文對我來說難以讀懂。我的評價基于經(jīng)驗性猜測。
同樣，據(jù)4月4日官網(wǎng)新聞介紹，計劃2020年7月5日在美國西雅圖舉辦的線下會議，全部搬到網(wǎng)上來舉行。
原因是為了應(yīng)對COVID-19，更多細節(jié)并未公布，不過會在接下來的幾周內(nèi)公布注冊事項以及在線會議的情況。
親愛的ACL2020社區(qū)：
希望您和您的家人都能平安無事。
我們現(xiàn)在可以確認，為了應(yīng)對COVID-19，我們計劃7月5日-10日的ACL 2020會議，將在線上舉行。
我們知道，社區(qū)里有很多人正在因這場大流行病而遭受巨大的困難。我們希望在這個困難的時刻，我們可以一起努力，建立一個新型的ACL會議。今年的ACL會議將聚焦更多的可持續(xù)性，擴大知識交流的機會，并更多地納入來自全球各地的不同貢獻。
我們將有預(yù)先錄制的講座和全套的tutorials和研討會，并策劃各種現(xiàn)場活動，如答疑會、輔導(dǎo)、招聘會和走廊對話空間等。這將是一次挑戰(zhàn)，但也是一次無形中走到一起的機會，我期待著與ACL2020組委會的全體成員一起努力，舉辦一次富有啟發(fā)性和意義的會議。
我們會從其他在線會議主席那里獲取建議（他們已經(jīng)提供了巨大的幫助），并從現(xiàn)在和過去的在線會議中吸取所有的經(jīng)驗教訓(xùn)。在即將舉辦的線上會議中，我們會看到每個人的堅韌、熱情和積極向上的精神，以及整個ACL社區(qū)的配合精神。
我很感謝能夠和大家一起努力，讓ACL2020成為我們所有人的夢想！我們將在接下來的時間里發(fā)布更多的細節(jié)。
我們將在未來幾周內(nèi)公布更多的注冊細節(jié)，并在不久后公布更多關(guān)于虛擬會議的細節(jié)。
祝愿大家身體健康。
Dan Jurafsky，總主席，代表ACL2020組織委員會全體成員。
ACL是語言學(xué)協(xié)會，這個會議的爆火本身就代表了自然語言處理的研究熱度，那么歷屆 ACL 都接收了多少文章呢？當(dāng)前做NLP的研究人員數(shù)量在什么量級呢？目前最熱的研究領(lǐng)域是什么呢？ 雷鋒網(wǎng)曾經(jīng)報道了《ACL 2020投稿破 3 千，到底有多少人在做 NLP 研究？》回答了這個問題。 1、歷屆 ACL接收情況 下圖是近 20 年來 ACL 大會論文投遞數(shù)量、評審人員數(shù)量和（高級）領(lǐng)域主席數(shù)量變化趨勢圖，可以清楚的看到，就投稿量，在近幾年呈現(xiàn)的變化是指數(shù)級別的。評審人員也是與論文投稿數(shù)量呈現(xiàn)正相關(guān)關(guān)系。
截至2019年6月，AA擁有約50,000個條目，但其中包括一些并非真正的研究出版物的條目（例如，前言、序言、目錄等），將這些舍棄后，還剩44,896篇文章。
上圖中顯示了從1965年到2018年期間，每年發(fā)表的論文數(shù)量。從圖中可以看出：
1、1990年之后，NLP的研究開始突飛猛進，特別是在2000年之后，AA文章數(shù)量開始破千；
2、隔年出版的影響在圖中可以清晰看到，特別是1998年以來，類似LREC、COLING這樣的會議。 2、哪個會議/期刊的論文最多？
當(dāng)然是各種 workshop 了！這張圖展示的是不同會議或期刊的收錄論文情況。
從中可以看出，除了各種workshop論文外，LREC已經(jīng)成為NLP會議論文的最大單一來源（盡管LREC是一個相對較新的會議，每兩年召開一次，但它的接受率往往很高，約60％）。其次則是主會ACL/4839，COLING/3142，NAACL/1479……
1980年到2019年的論文，如下圖
從術(shù)語分布來看，NLP論文標(biāo)題中最常用的術(shù)語是language，其次是translation。如果考慮bigram的話，如下圖：
最常出現(xiàn)的術(shù)語是machine translation，毫無疑問，機器翻譯是NLP領(lǐng)域最受關(guān)注的研究領(lǐng)域之一。
我們再來看不同的研究領(lǐng)域隨著時間線的變化：
（雷鋒網(wǎng)）（注：圖中有個小錯誤，parsing對應(yīng)于淺綠線）
從這張圖中可以看到一個非常有意思的現(xiàn)象，即，在1980年-2008年之間近三十年的時間里，language、translation、parsing在80年代炙手可熱，而現(xiàn)在已經(jīng)遠不如當(dāng)年受歡迎了；而另一方面，neural在80年代經(jīng)歷了一段高潮之后，迅速下降，但近年來卻又突破重圍，再次超越而出。
我們可以把parsing的時間線單拎出來：
（雷鋒網(wǎng)）
真的是不復(fù)當(dāng)年！
另一個有意思的是，可以對比statistical machine, neural machine 和 machine translation在近40年里的變化趨勢：
統(tǒng)計機器經(jīng)歷過一段高潮之后，現(xiàn)在已經(jīng)基本銷聲匿跡了；而神經(jīng)機器則隨之崛起。正所謂“沉舟側(cè)畔千帆過，病樹前頭萬木春”！
（雷鋒網(wǎng)）參考文獻：
http://www.ozgbdpf.cn/news/201912/geduMitD8YzkIEch.htmlhttps://acl2020.org/reviewers/
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。
專題
