Search

直接匹配不多,已補上最新動態。

Tag: #non-transformer2 results

🔬

SFM 在長序列超越 Transformer

State Flow Machine (SFM) 是一種非 Transformer 架構,使用明確記憶槽與閘控進行狀態追蹤,在 4 倍訓練長度保留 62% 準確率,而 Transformer 降至 2%。於合成程式狀態追蹤基準測試至 32 倍長度。執行於單一 Huawei Ascend 910 ProA NPU。

Reddit r/LocalLLaMACommunityMar 16#non-transformer#long-sequence#state-slots
Ox Alpha:神秘模型公開亮相

Ox Alpha:神秘模型公開亮相

Ox Alpha 是一款透過 OpenRouter 與 OpenCode 提供的匿名模型,具備 100 萬 token 上下文、圖片與影片輸入、工具呼叫及免費使用等能力。早期測試顯示其推理與程式設計表現強勁,但開發者、參數量、訓練資料與正式基準排名仍未獲確認。