🕷️
SetupAI
🖥️較早收集於 9m

Arxiv 將對提交 AI 生成垃圾內容的研究人員實施禁令

Arxiv 將對提交 AI 生成垃圾內容的研究人員實施禁令
PostLinkedIn
🖥️閱讀原文： Computerworld
#academic-integrity#llm-hallucination#research-ethicsarxivarxiv

💡Arxiv 嚴打 AI 生成論文；了解可能導致帳號被禁的警訊，避免學術聲譽受損。

⚡ 30-Second TL;DR

有什麼變化

提交包含虛假引用或 AI 殘留痕跡內容的研究人員將面臨一年禁令。

為什麼重要

此政策為學術儲存庫執行品質控管樹立了先例，可能減緩低品質 AI 論文在科學論述中的湧入。

下一步行動

在提交至公開儲存庫之前，務必針對任何由 LLM 起草的論文進行人工驗證與引用檢查。

誰應關注：Researchers & Academics

關鍵要點

  • •提交包含虛假引用或 AI 殘留痕跡內容的研究人員將面臨一年禁令。
  • •被停權用戶未來若要投稿至 Arxiv，必須先經由同儕審查期刊接受。
  • •此政策旨在打擊偽裝成嚴謹科學研究的「AI 垃圾內容」。

🧠 深度解析

Web-grounded analysis with 24 cited sources.

🔑 增強重點摘要

  • •Arxiv的政策於2026年5月14日由其電腦科學部門主席Thomas Dietterich宣布，這是主要預印本平台首次對AI生成內容實施正式懲罰，旨在打擊「AI垃圾內容」的氾濫。
  • •此禁令並非全面禁止使用AI工具；研究人員仍可將大型語言模型（LLM）用於起草、編輯或分析，但必須對其輸出內容進行驗證。
  • •「無可辯駁的證據」包括幻覺式引用、聊天機器人留下的佔位符指令（例如「用實驗的真實數字填寫」），或AI生成的元評論（例如「這是一個200字的摘要；您想讓我做任何更改嗎？」）。
  • •偽造引用的問題顯著增加，2026年5月《柳葉刀》雜誌的一項研究發現，自2023年以來，偽造引用增加了12倍，到2026年初，每277篇論文中就有一篇包含偽造引用。
  • •Arxiv現有的行為準則已規定作者對其內容負有「全部責任」，無論內容如何生成；新政策旨在澄清並執行對嚴重違規行為的懲罰。
📊 競品分析▸ Show
平台/出版商AI內容政策重點
Arxiv- 提交未經檢查的AI生成內容（如虛假引用、AI殘留痕跡）將處以一年停權。
  • 停權後，未來投稿需先經由同行評審期刊接受。
  • 不禁止負責任地使用AI工具進行起草、編輯或分析，但作者需對所有內容負責。 | | 其他學術出版商 (一般趨勢) | - 許多出版商（例如Taylor & Francis, The Lancet）正在制定AI政策。
  • 普遍禁止將AI工具列為作者。
  • 大多數要求披露AI工具的使用，通常在方法或致謝部分。
  • 政策範圍和清晰度差異很大：有些完全禁止AI用於手稿準備，有些允許用於特定任務（如起草非方法學部分）。
  • 部分出版商（如Taylor & Francis）允許AI用於潤飾語言，但禁止將未發表手稿上傳至生成式AI工具，以防洩密和侵犯知識產權。
  • 《柳葉刀》等期刊對AI使用有更嚴格的規定，僅限於提高「可讀性和語言」。 |

🛠️ 技術深入

  • Arxiv的政策主要依賴於論文中「無可辯駁的證據」來識別未經檢查的AI生成內容，例如幻覺式引用、聊天機器人留下的元評論或佔位符文本。
  • 這種方法部分原因是目前的AI檢測工具並不可靠，且可能產生誤報，特別是對非英語母語的作者。
  • AI文本檢測方法通常利用機器學習（ML）和自然語言處理（NLP）來識別語言模式、句子結構、困惑度（詞語選擇的隨機性）和突發性（句子長度的變化）。
  • 常見的檢測方法包括傳統分類器、微調的Transformer編碼器（如BERT、RoBERTa、DistilBERT）、卷積神經網絡（CNN）、XGBoost風格模型、基於困惑度的方法以及將LLM作為檢測器。
  • 水印技術被認為是一種有前景的AI生成內容檢測方法，它涉及在LLM輸出中嵌入獨特的標記。
  • 然而，Transformer模型在域內性能接近完美，但在域轉移下性能會下降；基於LLM的檢測器表現不佳，並受生成器-檢測器身份偏差的影響。

🔮 前景展望AI analysis grounded in cited sources

學術界對AI生成內容的問責制將會加強。
Arxiv的明確禁令設定了一個先例，促使其他平台和期刊採取更嚴格的措施來維護學術誠信。
研究人員將更謹慎地使用AI工具，並加強人工審查。
由於提交未經檢查的AI內容會導致嚴重後果，作者將被迫對其論文中的所有內容承擔全部責任，無論其生成方式如何。
AI內容檢測工具的發展將加速，但其可靠性仍是挑戰。
儘管目前檢測工具存在局限性，但學術界對打擊AI垃圾內容的需求將推動更精確、更不易產生誤報的檢測技術的創新。

⏳ 時間線

2023-01
Arxiv發布關於作者使用生成式AI語言工具的初步政策，要求報告重要使用情況，並強調作者對內容負全責，AI工具不能列為作者。
2023-09
一項針對163家學術出版商的審計發現，僅有56家（34.4%）有關於作者使用生成式AI的公開政策，且政策範圍和清晰度差異很大。
2025-02
Arxiv發布一篇關於AI生成圖像檢測方法的綜合評論，強調了對合成數據檢測方法的需求。
2026-05-14
Arxiv電腦科學部主席Thomas Dietterich宣布澄清並加強執行政策，針對提交未經檢查的AI生成內容的研究人員實施一年停權。
2026-05-17
Arxiv正式宣布對提交包含未經檢查的AI生成內容（如虛假引用或聊天機器人指令殘留）的作者實施一年禁令，這是主要預印本平台首次實施此類正式懲罰。
🖥️閱讀原文： Computerworld
📰

AI 週報

閱讀本週精選 AI 大事摘要 →

👉相關動態

同主題

探索 #academic-integrity

同產品

更多關於 arxiv

同來源

最新來自 Computerworld

AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源： Computerworld ↗