🤖
Transformer 內部訊號預測生成正確性
跨 4 模型（Llama-3.1-8B、Qwen-2.5-7B 等）的 14,540 追蹤研究顯示，內部訊號如早期視窗驚奇度以 AUROC 高達 0.90 預測正確性。早期 10 權標記平均驚奇度將 HumanEval Pass@k 從 15-31% 提升至 48-56%。訊號與輸出信心正交；MoE 與密集模型差異明顯。
Search
直接匹配不多，已補上最新動態。
Tag: #moe-signals1 results
AI 資料中心如何藏起兆美元債務
本文調查 hyperscaler 如何透過公開債券、特殊目的實體與模糊披露，為 AI 資料中心擴建提供資金。文章指出，快速上升的資本支出、縮減的股票回購與不斷增加的借貸成本，可能孕育類似 AI 時代次貸危機的風險。
匿名模型血緣與 GLM 訓練爭議曝光
文章追蹤匿名牛來大模型與智譜之間的模型血緣關係，並討論其是否使用智譜 GLM 開源模型進行訓練。分析重點包括 tokenizer、影片編碼能力與 API 錯誤表現。
NVIDIA AI 伺服器或將漲價 15%
文章稱 NVIDIA AI 伺服器可能因記憶體成本飆升而漲價約 15%。對於 1GW 資料中心，這項硬體成本變化可能帶來高達 50 億美元的額外支出。
AstraTennis 機器人首次挑戰網球運動員
AstraTennis 展示了機器人與真人網球運動員對戰的能力，被稱為全球首次此類挑戰。機器人能夠完成極限救球，並在摔倒後快速恢復站立。
年輕團隊押注人形機器人的一體化大腦
一支由博士組成的年輕團隊選擇自主研發雙足人形機器人的一體化大腦，而不是單純追隨矽谷路線。其展示包括機器人駕駛卡丁車連續過彎，並以一鏡到底方式呈現全自主能力。
Harvey 推出首款自研法律 AI 模型
Harvey 推出 Tenet，這是其首款專為法律工作打造的專有模型。Tenet 以 Moonshot 的開放權重模型 Kimi K3 進行後訓練，目標是在 Harvey 產品內取代目前使用的 OpenAI 模型。
ChatGPT 推出青少年專用版本
OpenAI 推出供 13 至 17 歲使用者使用的 ChatGPT 版本，也凸顯 AI 可能影響青少年語言發展、情緒支持與身分形成的疑慮。文章認為，將表達與自我反思外包給對話式 AI，可能消除青春期中不可或缺的摸索與不確定性。
美國或全面限制 ASML 對華出口 DUV 光刻機
據報導，美國政府正考慮向荷蘭施加更大壓力，要求 ASML 停止向中國大陸出口幾乎所有晶片製造設備。此舉可能大幅收緊中國取得先進半導體製造工具的渠道。
📰
AWS 開源 Dogwood，規範 AI 智能體工具調用
Amazon Web Services 開源了 Dogwood，專注於為 AI 智能體的工具調用建立更清晰的規範。該專案旨在讓智能體與工具之間的互動更一致，也更容易管理。