Search

直接匹配不多,已補上最新動態。

Tag: #peft2 results

PERSA:RLHF實現教授風格LLM回饋

PERSA:RLHF實現教授風格LLM回饋

PERSA 提出 RLHF 管道,將 LLM 與教授在程式教育中的個人化回饋風格對齊,同時不損及準確性。它結合監督微調、成對偏好獎勵建模及 PPO,使用頂層 Transformer 區塊的參數高效更新。在 APPS、PyFiXV 及 CodeReviewQA 評估中,Llama-3 及 Gemma-2 展現 96.2% 風格對齊率及高達 100% 正確性。

ArXiv AIResearchMay 6#education#peft#style-alignment
Ox Alpha:神秘模型公開亮相

Ox Alpha:神秘模型公開亮相

Ox Alpha 是一款透過 OpenRouter 與 OpenCode 提供的匿名模型,具備 100 萬 token 上下文、圖片與影片輸入、工具呼叫及免費使用等能力。早期測試顯示其推理與程式設計表現強勁,但開發者、參數量、訓練資料與正式基準排名仍未獲確認。