ついに、トップNLPカンファレンスACLへの投稿は匿名である必要がなくなりました

自然言語処理分野の研究者にとって朗報があります。

最近、計算言語学会（ACL）の年次総会は、この一連の会議への投稿の匿名期間が取り消され、投稿期間中に著者が自分の研究を発表できることを正式に発表しました。新しい規制は次のレビューサイクルに直接適用されます。

今年のACLは第62回となり、2024年8月11日から16日までタイのバンコクで開催されます。 2022 年以降、ACL は月単位の期限を設けたローリング レビュー メカニズム (ACL ローリング レビュー、ARR) を有効にしました。前回の締め切り前に審査プロセスに提出された論文は、依然として古い匿名ポリシーの対象となることに注意することが重要です。

会議声明リンク: https://www.aclweb.org/portal/

ACLは最新のワーキンググループ報告書の勧告に基づいて新しい規則を実施したと理解されており、新しいポリシーは賞にも影響を与えるだろう。この変更は研究コミュニティによってすぐに歓迎されました。

ワーキンググループは報告書「匿名ポリシーに関するACL委員会の報告書」の中で、2017年以降ACLが実施した二重盲検レビュー規則により、匿名レビュー期間中にプレプリントとして入手可能な論文の数を減らすことに成功したと指摘した。 ACL 2023 でのプレプリント付きの投稿の割合は 13.8% ですが、ICML や ICLR などの機械学習カンファレンス (どちらもプレプリントに制限はありません) での同様の割合は通常 30% を超えています。

arXiv にプレプリントを匿名で提出しても二重盲検レビューが損なわれることはありませんが、ACL 2023 の審査プロセス中に収集された情報によると、提出された論文の 91% は完全に匿名のままであり、審査員は著者の身元を推測できません。著者の身元が推測できる提出論文 (プレプ​​リントを含む) の割合は約 4% で、これはプレプリントを含む提出論文全体の約 30% に相当します。

ワーキンググループは、当初の二重盲検レビュー方針が明らかにいくつかの悪影響を生み出したと考えています。著者は匿名期限前に急いでプレプリントを公開する可能性があり、これによりプレプリントの品質が損なわれる可能性があります。さらに、著者は論文が受理されるまでプレプリントを更新できないため、匿名期間中は誤りを訂正したり、研究の結論を変える結果など新しい結果を追加したりすることはできません。

著者が公的記録を訂正することを禁止することは、科学研究の価値と相容れない。一方、arXiv プレプリントを提出しないことを選択した著者は、論文が公開されるまでに長い時間待たなければならない可能性があります。場合によっては、その結果、その間に出版またはプレプリントされた他の論文（通常は ACL 以外の論文）によって研究が先取りされることになります。

AI分野、特にNLP分野における研究の加速により、現在のレビュー方法を維持することがますます困難になってきています。 ACL の著者の多くは、現在の二重盲検レビューでは、ACL のアプローチを共有していない多くの機械学習カンファレンス (ICML、ICLR、NeurIPS、AAAI など) や、独自に出版している影響力のある業界の研究所と比べて不利になることが多いと指摘しています。これにより、NLP コミュニティは分裂し、ACL カンファレンスは優秀な著者や査読者を失い、評判を失う大きなリスクにさらされています。

新しいポリシーは科学的コミュニケーションを促進することを目的としていますが、論文が受理される前に著者は自分の研究を過度に宣伝しないように奨励されています（これは査読者の偏見につながり、論文の採点に影響を与える可能性があるため）。さらに、プレプリントを提出しなかったり、事前にソーシャルメディアで論文を宣伝したりしないことでも、論文が賞を受賞する可能性が高まります。

以前、CVPRの「ソーシャルメディア禁止」も緩和の兆しを見せていた。

2023年11月25日、CVPR 2024広報共同議長のコスタ・デルパニス教授は、自身のTwitterで、応募作品のソーシャルメディアプロモーションに関するCVPR 2024の立場にいくつか変更があったことを明らかにしました。

CVPR 2023 カンファレンスの投票結果によると、著者は CVPR に言及しない限り、CVPR に提出した研究結果についてソーシャルメディアで話すことができます。したがって、CVPR に提出するかどうかに関係なく、ソーシャル ネットワークで研究について話すことができます。 arXiv 論文を宣伝したり、オンライン プレゼンテーションを行ったりすることができます。ただし、著者は CVPR で現在審査中の研究について話すことはできません。これは、ソーシャル メディアへの投稿とメディアとの公開討論の両方に当てはまります。

その後、CVPR 2024の公式Twitterアカウントがこのニュースをリツイートしたことから、新しいルール変更の信頼性は大幅に高まりました。

CVPR のソーシャル メディア禁止は 2021 年に開始されます。この禁止令は、マックス・プランク知能システム研究所所長マイケル・ブラック氏の動議を背景に発令された。動議は、arXivに自動的に公開されるプレプリント論文を除き、査読期間中にソーシャルメディア上で論文を宣伝することを禁止するというものだ。

当時、この提案は多くの研究者の間で不満を引き起こした。チューリング賞受賞者のヤン・ルカン氏も公にこう述べた。「こうした行為は科学情報の交換を制限し、技術の進歩を損ない、倫理規範に違反する。一言で言えば、狂気の沙汰だ。」

しかし、この動議は最終的に賛成多数で可決された。カンファレンスでは、CVPR 2022 のすべての貢献者を対象に、2021 年 10 月 19 日から 2022 年 3 月 2 日までソーシャル メディアの沈黙期間を設けることが正式に発表されました。この期間中、著者による論文の一方的なソーシャル メディア プロモーションはポリシー違反とみなされます。

論文を専門家による早期分析のために arXiv に掲載することは、ソーシャル メディアで多数の聴衆に宣伝することとは根本的に異なることに留意してください。CVPR に投稿された論文は、引き続き arXiv に掲載できます。その理由は、arXiv の論文は「公開済み」ではなく、「事前公開済み」として理解される必要があるためです。

この操作の目的はピアレビューにおける偏りの問題に対処することですが、コミュニティ内のコミュニケーションを取り締まることは多くの悪影響を及ぼし、ピアレビューにおける偏りの問題が真に改善されない可能性があります。

反対意見が多かったためか、機械学習分野におけるソーシャルメディア広告の禁止規制は緩和された。