來源較早收集於 3m

算力產業轉型:從硬體租賃轉向 Token 計費模式

閱讀原文: 36氪
#taas#cloud-computing#inference-cost

了解 AI 基礎設施定價的轉變,這可能會顯著影響您的營運成本。

30 秒速覽

有什麼變化

產業從「賣硬體」轉向「賣 Token」。

為什麼重要

此模式將資本支出轉為營運支出,降低了開發者的進入門檻。同時,這迫使基礎設施供應商必須優化推理效率以維持利潤率。

下一步行動

評估您的推理成本結構,確認轉向 TaaS 供應商是否能降低您每月的雲端 GPU 支出。

誰應關注:Founders & Product Leaders

關鍵要點

  • 產業從「賣硬體」轉向「賣 Token」。
  • Runjian、Hongxin 等公司正採用 TaaS 模式。
  • 定價結構新增了與 Token 產出掛鉤的固定服務費。
  • 競爭焦點從 GPU 擁有權轉向服務交付能力。

深度解析

本篇為 AI 生成分析,非原文內容。

增強重點摘要

  • TaaS 模式的興起主要源於企業對 GPU 利用率不足的擔憂,透過 Token 計費可將閒置算力轉化為可變現的服務,降低客戶的資本支出(CapEx)門檻。
  • 此轉型推動了算力調度平台的技術升級,要求供應商具備更精細的推理引擎優化能力,以確保 Token 生成速度(TPS)與延遲符合 SLA 標準。
  • 部分企業開始引入「混合計費模型」,即基礎設施租賃費與 Token 使用費並行,以平衡硬體折舊成本與軟體服務溢價。
  • 算力供應商正從單純的硬體提供商轉型為 AI 應用層的基礎設施合作夥伴,透過 API 整合直接嵌入客戶的 AI 工作流中。
  • 市場監管機構開始關注算力計費標準化問題,以防止因 Token 計算定義不統一導致的價格欺詐或服務品質爭議。

競品分析

傳統雲端廠商 (AWS/Azure)
計費模式
按小時/實例租賃
核心優勢
基礎設施穩定性高,生態完善
適用場景
大規模模型訓練
算力租賃平台 (Runjian/Hongxin)
計費模式
Token 計費 (TaaS)
核心優勢
成本效益高,無需管理硬體
適用場景
AI 推理與應用部署
去中心化算力網路 (DePIN)
計費模式
資源貢獻/使用計費
核心優勢
價格極具競爭力,抗審查
適用場景
長尾 AI 推理任務

技術深入

  • 算力調度層:採用 Kubernetes 容器編排技術結合自研調度器,實現對 GPU 叢集的動態切分與負載平衡。
  • 推理優化技術:整合 vLLM、TensorRT-LLM 等框架,透過 PagedAttention 與連續批次處理(Continuous Batching)技術提升 Token 生成吞吐量。
  • 計費中介軟體:部署基於區塊鏈或高併發資料庫的即時計費系統,精確追蹤每個 API 請求的 Token 消耗量(Input/Output Tokens)。
  • 網路傳輸層:利用 RDMA 技術降低節點間通訊延遲,確保大規模推理任務的穩定性。

前景展望基於引用來源的 AI 分析

算力市場將出現標準化的 Token 計費協議。
隨著 TaaS 模式普及,市場需要統一的計費標準來降低客戶在不同供應商間切換的成本。
硬體租賃業務將逐漸邊緣化,僅存於超大規模模型訓練領域。
對於大多數 AI 應用開發者而言,按需付費的 Token 模式比管理複雜的硬體基礎設施更具經濟效益。

時間線

2024-03
中國算力市場開始出現針對推理任務的按量付費試點。
2025-01
主流算力供應商開始大規模部署 vLLM 等推理加速框架以支援 TaaS。
2026-02
行業內關於 Token 計費標準的初步討論與技術規範草案出現。

AI 週報

閱讀本週精選 AI 大事摘要 →

AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: 36氪

這是摘要,不是原文。去看原站,或訂閱每週簡報。

每週電子報

每週一封,可隨時退訂。