Search

直接匹配不多,已補上最新動態。

Tag: #reliability-metrics1 results

AI代理可靠性科學

AI代理可靠性科學

AI代理在基準測試上表現出色,但在實務中因單一成功指標忽略一致性、穩健性、可預測性和安全性而失敗。本 arXiv 論文提出 12 項具體指標,沿著這四個維度分解可靠性,基於安全關鍵工程。在兩個基準上測試 14 個代理模型,顯示儘管能力進步,可靠性僅有邊際改善。

Ox Alpha:神秘模型公開亮相

Ox Alpha:神秘模型公開亮相

Ox Alpha 是一款透過 OpenRouter 與 OpenCode 提供的匿名模型,具備 100 萬 token 上下文、圖片與影片輸入、工具呼叫及免費使用等能力。早期測試顯示其推理與程式設計表現強勁,但開發者、參數量、訓練資料與正式基準排名仍未獲確認。