🇨🇳較早收集於 28m

Cloudflare:機器人網路流量已正式超越人類用戶

Cloudflare:機器人網路流量已正式超越人類用戶
PostLinkedIn
🇨🇳閱讀原文: cnBeta (Full RSS)

💡機器人流量已正式超越人類。了解如何保護您的 API 以應對 AI 代理的激增。

⚡ 30-Second TL;DR

有什麼變化

機器人流量(HTTP 請求)已正式超越人類流量。

為什麼重要

此轉變迫使開發者重新評估網站分析、安全協定與 API 速率限制,因為 AI 代理已成為網頁內容的主要消費者。

下一步行動

在 Cloudflare 控制面板中實作進階機器人偵測與 WAF 規則,以區分有益的 AI 爬蟲與惡意機器人。

誰應關注:Developers & AI Engineers

關鍵要點

  • 機器人流量(HTTP 請求)已正式超越人類流量。
  • AI 代理的採用是機器人流量加速成長的主要驅動力。
  • 此趨勢比原先 2027 年的預測提早達成。
  • 此轉變要求網頁開發者採取新的安全與流量管理策略。

🧠 深度解析

Web-grounded analysis with 19 cited sources.

🔑 增強重點摘要

  • Cloudflare 2024 年度報告指出,全球網路流量在 2024 年增長了 17.2%,其中 Googlebot 佔據了 Cloudflare 網路中最高的請求流量,主要用於搜尋索引內容的檢索。
  • 惡意機器人流量在過去兩年顯著增長,目前佔全球網路流量的 40% 至 60%,對企業造成潛在的財務和聲譽損失。
  • 生成式 AI 預計將在 2028 年前使網站的自然流量減少高達 50%,因為 AI 驅動的搜尋引擎直接提供答案,減少了用戶點擊進入網站的需求。
  • Cloudflare 在 2024 年緩解了全球 6.5% 的網路流量,其中網路應用程式防火牆 (WAF) 和機器人緩解措施佔所有緩解流量的 53.9%,顯示其在對抗惡意流量方面的關鍵作用。
  • AI 工作負載正在根本性地重塑網際網路基礎設施,需要前所未有的頻寬、專業互連和分散式運算資源,促使超大規模業者重新思考網路連接性,並將小型資料中心更靠近用戶。
📊 競品分析▸ Show
功能/供應商Cloudflare Bot ManagementAkamai Bot ManagerImperva Advanced Bot ProtectionDataDomeFastly Bot Management
偵測方法機器學習、行為分析、啟發式、JavaScript 偵測、TLS/HTTP/2 指紋識別、IP 信譽、Canvas 指紋識別機器學習、行為分析、IP 信譽、指紋識別機器學習、行為分析、設備指紋識別、威脅情報機器學習、行為分析、即時評分引擎機器學習、行為分析、SmartParse 偵測、動態客戶端挑戰
邊緣緩解是 (透過整合 WAF/CDN)
好/壞機器人分類
API/行動應用程式保護是 (含行動 SDK)
定價模式分級定價,通常作為企業方案的一部分企業級解決方案,可能較複雜未明確公開,通常為企業級未明確公開,通常為企業級未明確公開,通常為企業級
獨特賣點透過龐大網路規模實現智慧偵測,提供 Turnstile 作為 CAPTCHA 替代方案針對高流量/企業工作負載的全球規模,全面的 DDoS 和機器人緩解先進的行為分析能力,深入了解攻擊模式快速、AI 驅動的邊緣偵測,特別擅長保護關鍵用戶流程內建於高效能邊緣雲平台,低延遲緩解

🛠️ 技術深入

  • Cloudflare 採用多種偵測引擎來識別機器人流量,包括啟發式 (Heuristics)、JavaScript 偵測 (JSD) 和機器學習 (ML) 引擎。
  • 啟發式引擎處理所有請求,透過模式匹配已知特徵碼和惡意指紋資料庫來識別自動化流量。
  • JavaScript 偵測引擎透過在客戶端注入輕量級、不可見的 JavaScript 來識別無頭瀏覽器和其他惡意指紋,並根據結果阻擋、挑戰或放行請求。
  • 機器學習引擎是大多數偵測的來源,利用 Cloudflare 全球網路每天代理的數十億請求來區分人類和機器人流量。它使用監督式機器學習方法,根據請求特徵(如標頭、會話特性和瀏覽器信號)輸出一個 1 到 99 的機器人分數。
  • Cloudflare 的機器人偵測方法分為被動式和主動式。被動式技術包括後端指紋識別,例如偵測殭屍網路、IP 位址信譽、HTTP 請求標頭、TLS 指紋識別和 HTTP/2 指紋識別。
  • 主動式技術則依賴客戶端檢查,例如 JavaScript 挑戰和 CAPTCHA 挑戰,以驗證用戶是否為人類。
  • Cloudflare 使用 __cf_bm cookie 來平滑機器人分數並減少真實用戶會話的誤報。
  • Cloudflare Turnstile 是一種免費、保護隱私且用戶友好的 CAPTCHA 替代方案,旨在提供無摩擦的用戶體驗。

🔮 前景展望AI analysis grounded in cited sources

傳統網站的流量將因 AI 驅動的搜尋而大幅下降。
生成式 AI 直接提供查詢答案,減少了用戶點擊進入原始網站的需求,預計到 2028 年,自然流量可能減少高達 50%。
網路基礎設施需要進行重大重新架構以應對 AI 驅動的流量模式。
AI 工作負載,特別是生成式 AI,對頻寬、專業互連和分散式運算資源有前所未有的需求,促使網路架構從傳統的集中式資料中心轉向更分散的拓撲。
網路安全策略必須演進以對抗日益複雜的 AI 驅動機器人攻擊。
網路犯罪分子正利用 AI 自動化並增強網路釣魚攻擊和繞過安全系統的能力,使得攻擊更加複雜,需要更先進、適應性強的機器人管理解決方案。

時間線

2009-07
Cloudflare 成立。
2010-06
Cloudflare 推出私人測試版,提供安全與性能服務,包含早期機器人緩解功能。
2019
啟發式引擎整合到 Cloudflare 機器人管理平台中。
2020-05
Cloudflare 機器人管理平台正式推出,結合機器學習、啟發式和行為分析。
2024
Cloudflare 推出工具以防止機器人抓取網站,並分析 AI 機器人與爬蟲流量以建立自動偵測模型。
2025-03
Cloudflare 宣布推出「AI 迷宮」(AI Labyrinth) 功能,透過提供偽造的 AI 生成內容來對抗未經授權的 AI 資料抓取。
📰

AI 週報

閱讀本週精選 AI 大事摘要 →

👉相關動態

AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源: cnBeta (Full RSS)