
NVIDIA 平台實現最低 Token 成本
NVIDIA 的共同設計硬體、軟體和模型,提供最高的 AI 工廠產量和最低 token 成本。嚴格的 MLPerf Inference v6.0 基準測試,測量超出峰值晶片規格的真實世界 token 輸出,推動 AI 工廠營收。
直接匹配不多,已補上最新動態。
Tag: #co-design4 results

NVIDIA 的共同設計硬體、軟體和模型,提供最高的 AI 工廠產量和最低 token 成本。嚴格的 MLPerf Inference v6.0 基準測試,測量超出峰值晶片規格的真實世界 token 輸出,推動 AI 工廠營收。

NVIDIA 強調從生成式 AI(人類發送請求、模型回應)轉向代理式系統,代理可自主呼叫工具、產生子代理、管理記憶體與上下文,並自行決定完成時機。他們推出極端共同設計來因應這些系統日益增加的複雜性。此方法優化硬體與軟體整合,以支援先進 AI 代理。

理想汽車發表自動駕駛軟硬協同設計的數學框架,解決晶片高成本與適配難題。PLAS框架針對給定硬體約束預測最佳LLM架構。它將驅動全新L9車型的馬赫100晶片。

NVIDIA 的極端硬體-軟體共同設計為 Sarvam AI 的主權模型帶來大型推論提升。它解決了在生產環境中運行數百億參數 LLM 的低延遲與成本挑戰。適合需要高吞吐量與可預測效能的對話式與語音 AI 代理。

OpenAI 表示 Codex 活躍使用者已突破 2,000 萬,第三方追蹤數據則顯示其近期增速超越 Claude Code。Claude Code 目前規模仍較大且深受開發者採用,但隨著 Anthropic 接近早期市場飽和,其高速成長已經放緩。
中國多項臨床試驗正利用腦機介面,協助脊髓損傷患者站立與行走,並讓失明患者恢復有限的視覺感知。試驗結果差異很大,凸顯這項技術的潛力,以及目前在訊號採集、解碼與復健方面的限制。

據報 Alibaba 正合併電商業務、整合雲端與晶片業務,並將 Qwen 拆分為獨立子公司。報導亦涵蓋 Unitree 計畫登陸科創板、Anthropic 據傳的年化營收,以及 Alibaba 持續投入 AI 對利潤與現金流造成的壓力。

California 與其他 28 個州指控 Meta 設計 Facebook 和 Instagram 使其具成癮性、違反兒童隱私法,並隱瞞相關做法。檢方將其涉嫌採取的策略概括為「吸引、留住、收集、隱瞞」。

Ox Alpha 是一款透過 OpenRouter 與 OpenCode 提供的匿名模型,具備 100 萬 token 上下文、圖片與影片輸入、工具呼叫及免費使用等能力。早期測試顯示其推理與程式設計表現強勁,但開發者、參數量、訓練資料與正式基準排名仍未獲確認。

Cloudflare 推出 Agent Tracing,支援設定 Payload 截斷限制。不同支援的 Agent 框架在 Payload 預設記錄策略上有所差異,因此開發者在設定可觀測性時需要檢查各框架的個別設定。