🤖較早收集於 21h

作者身份是否影響機器學習論文評分?

PostLinkedIn
🤖閱讀原文: Reddit r/MachineLearning

💡揭露 arXiv 可見性對機器學習同儕審稿的偏見—投稿者必知。(28字)

⚡ 30-Second TL;DR

有什麼變化

審稿人常 Google 論文並發現 arXiv 預印本包含作者姓名。

為什麼重要

揭示機器學習會議雙盲審稿的漏洞,可能偏袒知名研究者。鼓勵提交後再上傳 arXiv 以確保公平。

下一步行動

延後機器學習會議投稿截止後再上傳 arXiv。

誰應關注:Researchers & Academics

關鍵要點

  • 審稿人常 Google 論文並發現 arXiv 預印本包含作者姓名。
  • 審稿批次中前兩名論文是唯一上傳至 arXiv 的。
  • 初次審稿人懷疑作者身份揭露導致較高分數。
  • r/MachineLearning 討論凸顯雙盲審稿潛在缺陷。

🧠 深度解析

AI-generated analysis for this event.

🔑 增強重點摘要

  • 學術界針對「名校/名師效應」的研究顯示,知名機構或作者的論文在單盲審稿中確實存在顯著的評分優勢,這被稱為「馬太效應」在學術出版中的體現。
  • 為了緩解此問題,頂級機器學習會議(如 NeurIPS、ICLR)已全面推行「雙盲審稿」(Double-blind review),要求作者在提交版本中隱去姓名與機構,並禁止在審稿期間將論文上傳至 arXiv 等公開平台。
  • 審稿人透過 Google 搜尋 arXiv 預印本的行為,被視為對雙盲審稿機制的「去匿名化」攻擊,這導致會議組織者開始考慮採用更嚴格的提交規範,例如強制要求在審稿結束前不得公開預印本。

🔮 前景展望AI analysis grounded in cited sources

頂級機器學習會議將強制執行更嚴格的預印本禁令。
為了維護雙盲審稿的公平性,會議組織者將被迫在審稿期間禁止作者公開任何形式的預印本,以防止審稿人透過搜尋引擎識別作者身份。
自動化審稿輔助系統將整合匿名化檢測功能。
未來審稿平台可能會引入自動化工具,偵測並警告審稿人不要搜尋特定論文的預印本,或在審稿系統中直接遮蔽外部連結。

時間線

2014-12
NeurIPS(當時稱 NIPS)開始討論並逐步推動雙盲審稿制度以減少偏見。
2017-04
ICLR 正式全面實施雙盲審稿,並成為機器學習領域推動匿名化審稿的先驅。
2019-05
NeurIPS 宣佈全面實施雙盲審稿,並要求作者在審稿期間不得公開預印本。
📰

AI 週報

閱讀本週精選 AI 大事摘要 →

👉相關動態

AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: Reddit r/MachineLearning