数据中心代理是一个代理服务器,它为您提供一个由云托管提供商或数据中心拥有的IP地址,而不是由互联网服务提供商(ISP)拥有的地址。托管提供商从公开可识别的ASNs中分配IP,因此网站可以将这些IP识别为托管流量。

数据中心代理的工作原理

  1. 您的客户端连接到代理。 您将浏览器、脚本或工具指向代理的地址和端口,通常通过HTTP或SOCKS5进行连接。
  2. 服务器转发请求。 代理在数据中心的服务器上运行。它代表您打开与网站的连接。
  3. 网站看到代理的IP。 网站响应一个注册到托管提供商的地址,响应通过代理返回给您。

数据中心代理与住宅代理与移动代理的比较

数据中心代理住宅代理移动代理
注册的IP托管或云提供商消费者ISP移动运营商
流量出口地点数据中心的服务器家庭连接蜂窝网络上的设备
MaxMind数据中的用户类型托管住宅移动

网站如何识别数据中心IP

  • 注册数据: 在区域互联网注册机构(如ARIN)进行RDAP查找,返回持有IP块的组织及其来源ASN。
  • 发布的云范围: AWS在JSON文件中发布其IP范围,以便其他人可以识别来自AWS的流量并允许或拒绝它。
  • IP智能数据库: MaxMind的匿名IP数据库有一个is_hosting_provider标志,当IP属于托管提供商时,该标志为真。
  • 防火墙规则: Cloudflare自定义规则可以通过客户端IP的AS号匹配请求,通过ip.src.asnum字段。

仅凭ASN所有权并不能证明请求来自代理。MaxMind指出,发送最终用户流量的托管IP可能是VPN。

共享与专用数据中心代理

  • 共享: 多个用户同时使用相同的IP,这样可以降低价格。请参见共享代理。
  • 专用(私有): IP仅供您使用。它们通常提供更高的速度和稳定性,但费用更高。

数据中心IP也可以是静态,保持一个地址,或轮换,从池中更改地址。

对网络爬虫的意义

  • 轮换不会改变网络: ASN 规则匹配该网络中的每个 IP。从同一托管提供商的 IP 之间轮换仍然会触发它。
  • 检查网站将看到什么: 对代理 IP 进行 RDAP 查询,以查看网站可以看到的组织和 ASN。

相关术语