User-Agent 旋轉是通過在請求中循環使用多種 真實的 User-Agent 字串 的做法,而不是重複發送相同的字串,以使自動化流量看起來更像多樣化的真實訪客群體。

反機器人系統仍然可以使用 User-Agent 字串不變的信號,例如 TLS 指紋(JA3 或 JA4),這可以通過客戶端如何啟動 TLS 連接來識別。

為什麼預設 User-Agent 突出

常見的 HTTP 工具會自我宣告,除非您更改標頭。curl 發送 curl/ 及其版本,例如 curl/7.54.1,而 Scrapy 的預設是 Scrapy/VERSION (+https://scrapy.org)。伺服器有時會根據這個標頭決定如何回應。

保持其他信號一致

OWASP 列出了 Client Hints 標頭 (Sec-CH-UA-*) 作為可以根據 TLS 指紋進行驗證的已聲明信號。旋轉的 User-Agent 只是網站可以比較的幾個身份信號之一。

相關術語