數據中心代理是一種代理伺服器,提供由雲端託管提供商或數據中心擁有的 IP 地址,而不是由互聯網服務提供商 (ISP) 擁有。託管提供商從公開可識別的 ASNs 中分配 IP,因此網站可以將這些 IP 視為託管流量。
數據中心代理的工作原理
- 您的客戶端連接到代理。 您將瀏覽器、腳本或工具指向代理的地址和端口,通常通過 HTTP 或 SOCKS5。
- 伺服器轉發請求。 代理在數據中心的伺服器上運行。它代表您打開與網站的連接。
- 網站看到代理的 IP。 網站回應一個註冊到託管提供商的地址,並且回應通過代理返回給您。
數據中心代理 vs. 住宅代理 vs. 移動代理
網站如何識別數據中心 IP
- 註冊數據: 在區域互聯網註冊機構(如 ARIN)進行 RDAP 查詢,返回持有 IP 區塊的組織及其來源 ASN。
- 發布的雲範圍: AWS 在 JSON 文件中發布其 IP 範圍,以便其他人可以識別來自 AWS 的流量並允許或拒絕。
- IP 智能數據庫: MaxMind 的匿名 IP 數據庫有一個
is_hosting_provider標誌,當 IP 屬於託管提供商時為真。 - 防火牆規則: Cloudflare 自定義規則可以通過客戶 IP 的 AS 編號匹配請求,通過
ip.src.asnum字段。
僅僅擁有 ASN 並不能證明請求來自代理。MaxMind 指出,發送終端用戶流量的託管 IP 可能是 VPN。
共享 vs. 專用數據中心代理
數據中心 IP 也可以是 靜態,保持一個地址,或 輪換,從池中更改地址。
對網絡爬蟲的意義
- 輪換不會改變網絡: ASN 規則適用於該網絡中的每個 IP。從同一托管提供商的 IP 之間進行輪換仍然會觸發它。
- 檢查網站將看到什麼: 對代理 IP 進行 RDAP 查詢,以查看網站可以看到的組織和 ASN。