Search

直接匹配不多,已補上最新動態。

Tag: #auroc2 results

🤖

Transformer 內部訊號預測生成正確性

跨 4 模型(Llama-3.1-8B、Qwen-2.5-7B 等)的 14,540 追蹤研究顯示,內部訊號如早期視窗驚奇度以 AUROC 高達 0.90 預測正確性。早期 10 權標記平均驚奇度將 HumanEval Pass@k 從 15-31% 提升至 48-56%。訊號與輸出信心正交;MoE 與密集模型差異明顯。

Reddit r/MachineLearningCommunityMar 17#auroc#moe-signals
VaryBalance:頂尖LLM文本檢測框架

VaryBalance:頂尖LLM文本檢測框架

VaryBalance 透過利用人類文本與其 LLM 重寫版本之間的更大變異(相較於 LLM 文本)來檢測 LLM 生成文本。它使用平均標準差來量化此差異,從而穩健區分人類與 AI 文本。實驗顯示,它在多模型與語言上超越 Binoculars 等最先進檢測器,高達 34.3% AUROC

ArXiv AIResearchFeb 17#text-detection#std-dev#auroc