Search

直接匹配不多，已補上最新動態。

Tag: #dpo4 results

LLM 工具過度使用幻覺揭露

研究人員揭露 LLM 中普遍存在的工具過度使用現象，原因為誤判內部知識邊界及獎勵結構缺陷。提出知識感知式邊界對齊策略，減少工具使用 82.8% 並提升準確度；平衡獎勵則降低不必要呼叫 66.7% (7B) 及 60.7% (32B)。提供理論依據解釋機制。

研究人員提出 Debiasing-DPO 以對抗 LLM 對無關社會脈絡（如教師人口統計）的偏見。使用 NCTE 課堂記錄，它將偏見降低84%，並在 Llama 和 Qwen 模型上提升準確度52%。標準 DPO 失效，但此自監督方法有效配對中立與偏見推理。

Hugging Face 發布 TRL v1.0，這是一個後訓練庫，即使 AI 領域推翻其基礎假設仍能持續運作。它支援如 RLHF 等穩健微調方法，應對快速進展。此穩定工具幫助開發者維持可靠模型對齊。

Hugging Face BlogOfficial•Mar 31#rlhf #ppo #dpo

使用者使用 DPO 在心理治療資料集上微調 Gemma 3 4B，採用 QLoRa 和 PeFT 在 RTX 3050Ti 筆電上執行。尋求本地評估基準以比較基底模型。強調僅為實驗，非醫療建議。

Reddit r/LocalLLaMACommunity•Mar 28#fine-tuning #dpo #evaluation

OpenAI 表示 Codex 活躍使用者已突破 2,000 萬，第三方追蹤數據則顯示其近期增速超越 Claude Code。Claude Code 目前規模仍較大且深受開發者採用，但隨著 Anthropic 接近早期市場飽和，其高速成長已經放緩。

中國多項臨床試驗正利用腦機介面，協助脊髓損傷患者站立與行走，並讓失明患者恢復有限的視覺感知。試驗結果差異很大，凸顯這項技術的潛力，以及目前在訊號採集、解碼與復健方面的限制。

據報 Alibaba 正合併電商業務、整合雲端與晶片業務，並將 Qwen 拆分為獨立子公司。報導亦涵蓋 Unitree 計畫登陸科創板、Anthropic 據傳的年化營收，以及 Alibaba 持續投入 AI 對利潤與現金流造成的壓力。

California 與其他 28 個州指控 Meta 設計 Facebook 和 Instagram 使其具成癮性、違反兒童隱私法，並隱瞞相關做法。檢方將其涉嫌採取的策略概括為「吸引、留住、收集、隱瞞」。

The Guardian TechnologyMedia•1h ago#privacy #child-safety #platform-design

Ox Alpha 是一款透過 OpenRouter 與 OpenCode 提供的匿名模型，具備 100 萬 token 上下文、圖片與影片輸入、工具呼叫及免費使用等能力。早期測試顯示其推理與程式設計表現強勁，但開發者、參數量、訓練資料與正式基準排名仍未獲確認。

Cloudflare 推出 Agent Tracing，支援設定 Payload 截斷限制。不同支援的 Agent 框架在 Payload 預設記錄策略上有所差異，因此開發者在設定可觀測性時需要檢查各框架的個別設定。