Search

直接匹配不多,已補上最新動態。

Tag: #energy-based-models2 results

溢出能量偵測大型語言模型幻覺

溢出能量偵測大型語言模型幻覺

研究人員將大型語言模型(LLM)的 softmax 分類器重新解釋為能量基礎模型(EBM),追蹤解碼過程中的「能量溢出」,這些與事實錯誤、偏見及幻覺相關。他們從輸出 logits 引入兩個無訓練指標:溢出能量(跨步驟差異)和邊際能量(單步驟)。在 LLaMA、Mistral、Gemma 和 Qwen3 的九個基準測試中,實現穩健偵測,無需探針或訓練。

ArXiv AIResearchFeb 24#energy-based-models#training-free