AI 機器人流量 8 成為爬蟲，Meta 佔過半

🔑 增強重點摘要

• •Fastly的Q3 2025威脅洞察報告顯示，機器人流量佔所有網路流量的29%，其中約25%為不想要的流量。[1][3][5]
• •AI fetcher機器人佔AI機器人流量的20%，OpenAI的ChatGPT相關機器人產生68%至98%的fetcher請求，有些情況下每分鐘高達39,000請求。[1][2][3]
• •Google佔AI爬蟲流量的23%，OpenAI佔20%，顯示流量高度集中於少數平台。[1][2]
• •Fastly開發AI機器人緩解技術，支持Really Simple Licensing (RSL)協議，讓客戶區分有益與有害機器人並強制內容授權。[1]
• •媒體與娛樂、高科技產業封鎖率最高，僅4%的想要機器人流量被阻擋。[5]

🛠️ 技術深入

• •AI爬蟲佔AI機器人流量的80%，用於索引內容；fetcher佔20%，根據用戶查詢即時擷取特定內容，可能模擬DDoS攻擊造成伺服器負荷。[2]
• •Headless bots使用無頭瀏覽器避開偵測，Q3有89%的headless流量針對特定產業。[3]
• •Fastly透過全球網路分析數兆請求，開發邊緣AI機器人緩解技術及RSL協議支援，允許精細流量管理。[1]

🔮 前景展望AI analysis grounded in cited sources

⏳ 時間線