🔥最新收集於 3m

算力產業轉型:從硬體租賃轉向 Token 計費模式

算力產業轉型:從硬體租賃轉向 Token 計費模式
PostLinkedIn
🔥閱讀原文: 36氪

💡了解 AI 基礎設施定價的轉變,這可能會顯著影響您的營運成本。

⚡ 30-Second TL;DR

有什麼變化

產業從「賣硬體」轉向「賣 Token」。

為什麼重要

此模式將資本支出轉為營運支出,降低了開發者的進入門檻。同時,這迫使基礎設施供應商必須優化推理效率以維持利潤率。

下一步行動

評估您的推理成本結構,確認轉向 TaaS 供應商是否能降低您每月的雲端 GPU 支出。

誰應關注:Founders & Product Leaders

關鍵要點

  • 產業從「賣硬體」轉向「賣 Token」。
  • Runjian、Hongxin 等公司正採用 TaaS 模式。
  • 定價結構新增了與 Token 產出掛鉤的固定服務費。
  • 競爭焦點從 GPU 擁有權轉向服務交付能力。

🧠 深度解析

AI-generated analysis for this event.

🔑 增強重點摘要

  • TaaS 模式的興起主要源於企業對 GPU 利用率不足的擔憂,透過 Token 計費可將閒置算力轉化為可變現的服務,降低客戶的資本支出(CapEx)門檻。
  • 此轉型推動了算力調度平台的技術升級,要求供應商具備更精細的推理引擎優化能力,以確保 Token 生成速度(TPS)與延遲符合 SLA 標準。
  • 部分企業開始引入「混合計費模型」,即基礎設施租賃費與 Token 使用費並行,以平衡硬體折舊成本與軟體服務溢價。
  • 算力供應商正從單純的硬體提供商轉型為 AI 應用層的基礎設施合作夥伴,透過 API 整合直接嵌入客戶的 AI 工作流中。
  • 市場監管機構開始關注算力計費標準化問題,以防止因 Token 計算定義不統一導致的價格欺詐或服務品質爭議。
📊 競品分析▸ Show
競爭對手計費模式核心優勢適用場景
傳統雲端廠商 (AWS/Azure)按小時/實例租賃基礎設施穩定性高,生態完善大規模模型訓練
算力租賃平台 (Runjian/Hongxin)Token 計費 (TaaS)成本效益高,無需管理硬體AI 推理與應用部署
去中心化算力網路 (DePIN)資源貢獻/使用計費價格極具競爭力,抗審查長尾 AI 推理任務

🛠️ 技術深入

  • 算力調度層:採用 Kubernetes 容器編排技術結合自研調度器,實現對 GPU 叢集的動態切分與負載平衡。
  • 推理優化技術:整合 vLLM、TensorRT-LLM 等框架,透過 PagedAttention 與連續批次處理(Continuous Batching)技術提升 Token 生成吞吐量。
  • 計費中介軟體:部署基於區塊鏈或高併發資料庫的即時計費系統,精確追蹤每個 API 請求的 Token 消耗量(Input/Output Tokens)。
  • 網路傳輸層:利用 RDMA 技術降低節點間通訊延遲,確保大規模推理任務的穩定性。

🔮 前景展望AI analysis grounded in cited sources

算力市場將出現標準化的 Token 計費協議。
隨著 TaaS 模式普及,市場需要統一的計費標準來降低客戶在不同供應商間切換的成本。
硬體租賃業務將逐漸邊緣化,僅存於超大規模模型訓練領域。
對於大多數 AI 應用開發者而言,按需付費的 Token 模式比管理複雜的硬體基礎設施更具經濟效益。

時間線

2024-03
中國算力市場開始出現針對推理任務的按量付費試點。
2025-01
主流算力供應商開始大規模部署 vLLM 等推理加速框架以支援 TaaS。
2026-02
行業內關於 Token 計費標準的初步討論與技術規範草案出現。
📰

AI 週報

閱讀本週精選 AI 大事摘要 →

👉相關動態

AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: 36氪