User-Agent 是一個 HTTP 請求標頭,讓伺服器識別發出請求的應用程式、作業系統、供應商和版本。W3C 將 User-Agent 標頭列為 被動指紋識別來源,因為它會隨著 HTTP 請求一起發送。

一個典型的 User-Agent 字串看起來像 Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36...,用於識別特定的瀏覽器版本和平台。

W3C 指出,User-Agent 和 IP 地址通常會共同唯一識別特定用戶的瀏覽器。

User-Agent 簡化與客戶端提示

  • 簡化字串: Chrome 現在凍結了其 User-Agent 的部分內容。次要版本顯示為 0.0.0,桌面平台使用固定標記,如 Windows NT 10.0; Win64; x64,而 Android 無論實際的作業系統版本和設備型號如何,均報告 Android 10; K。Android 的推出在 2023 年 5 月達到了所有 Chrome 110+ 用戶。
  • 客戶端提示: 瀏覽器可以默認發送低詳細度的標頭,如 Sec-CH-UA(主要版本和品牌)、Sec-CH-UA-Mobile 和 Sec-CH-UA-Platform。伺服器要求更詳細的提示,例如設備型號,使用 Accept-CH 回應標頭。MDN 表示,客戶端提示預期最終將取代解析 User-Agent 字串。

驗證聲稱為 User-Agent 的機器人

請求可以在其 User-Agent 標頭中聲稱是任何爬蟲。對於聲稱來自 Google 的訪客,Google 告訴網站擁有者對 IP 地址進行反向 DNS 查詢,檢查域名是否為 googlebot.com、google.com 或 googleusercontent.com,然後進行正向查詢確認。對於大規模檢查,他們可以將 IP 與 Google 發布的爬蟲 IP 範圍進行比較。

相關術語