IJCAI2019 PC 回應審稿質疑：幾十年都是這樣，而且我們需要創新

本文作者：楊曉凡

2019-05-12 21:11

導語：要反思也要進步

雷鋒網 AI 科技評論按：人工智能領域頂級學術會議之一的 IJCAI 2019 近日發布了論文錄用名單并通知了作者們。IJCAI 2019 今年一共收到 4752 篇有效提交論文，最終的論文收錄數量為 850 篇，接收率為 17.9%。

今年 IJCAI 的投稿總數比去年增加了約 37%，所以錄用率隨著降低到了不足 20% 也算情有可原。不過意外的是，收到錄用或者拒稿通知后，許多作者都通過種種途徑表達了自己的不滿，包括對于打分、審稿人意見、Rebuttal 環節等等，似乎都有大量問題。一時間對于論文審稿過程的批評和討論沸沸揚揚，其它媒體也進行了報道。

對于這樣的輿情，IJCAI 2019 的 PC （program chair，程序主席）Sarit Kraus 給作者們發送了一封郵件，做了一些解釋，也給出了一些他的個人觀點，希望可以平息作者們的憤懣。雷鋒網 AI 科技評論摘錄并翻譯如下。

When I sent the notification messages on Friday, I was happy to end more than overwhelming six months of working on the reviewing process of IJCAI 2019. On the other hand I was very sad since while I made the authors of 850 papers very happy, I made the authors of 3902 papers very upset and annoyed. Even though I have many papers accepted to highly refereed conferences, I believe I received many more rejection messages than most of you. As a result, any complaint you have about the reviewing process, its unfairness, its randomness, I am sure I thought the same over the years. I am grateful to all the authors that haven’t sent me a message to complain, and I will try answering the messages of the few that did. From first glance, it will probably not change the decisions.
當我周五把所有的審稿結果都發送出去以后，IJCAI 2019 的長達六個月的繁忙的審稿過程終于開心地結束了。另一方面，雖然我讓 850 篇論文的作者們很開心，但另外 3902 篇論文的作者們就一點也不開心，甚至有點煩躁；這也讓我不怎么好受。雖然我自己也曾經有多篇論文被聲名顯赫的會議錄用，但我相信我曾經收到過的拒稿通知也要比你們中大多數人更多。所以，大家對于審稿過程、其中的不公平、隨機性等等的各種報怨，我相信我在過去的這么多年中也有和你們一樣的感受。我很感謝所有沒發出報怨之聲的作者們，我也會盡量回復那些提出了質疑的聲音。不過目前看來，這可能并不會改變審稿結果。
I tried hard to reduce the randomness of the process by decreasing the number of papers each PC and SPC received, by increasing the reviewing time period, and by trying to recruit good ACs/SPCs/PCs and reviewers. Almost all of them did a great job and I am very grateful. However, with 4752 submitted papers, it is extremely difficult. I believe we need to think and being innovative about the concept of highly refereed conferences.
為了減少審稿過程的隨機性我做了很多努力，減少了每位 PC 和 SPC（Senior PC）審的論文數量，增加了審稿時間，盡量找了好的 AC（Area Chair，領域主席）/SPC/PC 以及審稿人。幾乎所有人都做得很棒，我也非常欣慰。不過，我們畢竟收到了 4752 篇論文投稿，不管怎么樣這都是很難的一件事。我覺得我們需要重新思考“高被引頂會”這件事并有所創新。
I strongly believe that conferences are events for hearing new ideas and meeting other researchers and discussing research. My best projects started at conferences. I don’t think they are currently good for evaluations for getting promotion and funding. We can think about making our journals better. Currently we have a journal track—each paper accepted to AIJ or JAIR with no prior publication in a conference is invited to be presented in IJCAI. We can further limit the number of papers each person can submit to IJCAI or any other innovative ways you all can come up with. We all need to think about it.
我堅定認為會議是聆聽新的想法、會見其它的研究者、討論學術科研的場所，我自己的最好的項目就是從一次會議開始的。但是頂會目前對于獲得升職、獲得經費并不能起到什么幫助。我們可以考慮把期刊做得更好。目前我們有一個期刊 track，每篇 AIJ 或者 JAIR 期刊接收的論文，如果此前沒有在會議中出現的，都會受邀在 IJCAI 展示。我們甚至可以考慮限制每位作者投稿到 IJCAI 的論文的數量，大家也可以一起想想其他的更創新的方式。我們需要共同思考。
In summary, I hope that all of you will come to IJCAI regardless of whether you have papers accepted or not. You can still submit papers to the IJCAI workshops or just come to meet friends and hear interesting and exciting talks.
總的來說，不管你的論文有沒有被接收，我都希望大家全都可以來到 IJCAI 會議現場。你仍然可以把論文投稿到 IJCAI 的各個 workshop，或者就是來見一見朋友、聽一聽有意思的演講。
Best regards,
Sarit Kraus
IJCAI 2019 Program Chair

對于這封郵件，有學者認為觀點比較中肯，可以接受。雷鋒網 AI 科技評論也認為，雖然會議在計算機科學領域是非常重要的學術成果評議平臺，但是大批量往頂會投論文“灌水”的做法也已經帶來了碩士生博士生申請門檻越來越高、參會門票難以購買、審稿人年輕化等問題，這都是需要領域內的學者們反思并設計改進方案的。

另外，AI 研習社近期有「頂會贊助計劃」。參與 IJCAI 2019 頂會討論小組活動，積累研值排行TOP 3，將獲得 AI 研習社贊助的「直達頂會」的機票+酒店等參會費用，讓你親臨大會現場，和大咖面對面~ 更多詳情請查看小組頁面。

雷峰網原創文章，未經授權禁止轉載。詳情見轉載須知。