Ein Proxy-Pool ist eine Sammlung von Proxy-IP-Adressen, aus der für jede Anfrage oder Sitzung eine IP ausgewählt wird. Durch die Verteilung des Datenverkehrs auf viele Adressen wird die Anzahl der Anfragen, die von einer einzelnen IP stammen, verringert.
Der Pool ist die Menge der Adressen. IP-Rotation ist die Regel für die Auswahl, und ein rotierender Proxy ist ein Dienst, der diese Regel für Sie anwendet.
Wie ein Proxy-Pool funktioniert
Bei einigen Diensten senden Sie anstelle der Konfiguration jedes Proxys separat Anfragen an einen Gateway-Endpunkt. Für jede Anfrage wählt das Gateway (oder Ihre eigene Software) eine verfügbare IP aus dem Pool aus:
- Auswählen: Eine IP wird für die Anfrage oder Sitzung ausgewählt, entweder jedes Mal neu oder als sticky session gehalten.
- Senden: Die Anfrage verlässt von dieser IP, die die einzige Adresse ist, die das Ziel sieht.
- Überprüfen: Die Antwort zeigt, ob die IP noch für dieses Ziel funktioniert.
- Ruhen oder entfernen: IPs, die weiterhin fehlschlagen, werden pausiert oder entfernt, und neue werden hinzugefügt.
Proxy-Liste vs. Verwalteter Pool
| Proxy-Liste | Verwalteter Pool hinter einem Gateway | |
|---|---|---|
| Was Sie konfigurieren | Die Adresse und den Port jedes Proxys | Einen Host und Port |
| Wer die IP auswählt | Ihr Code | Das Gateway |
| Tote oder blockierte IPs | Sie erkennen und entfernen sie | Der Anbieter kümmert sich darum |
| Sitzungssteuerung | Sie verknüpfen Sitzungen mit IPs | Oft wird eine Sitzungs-ID zum Proxy-Benutzernamen hinzugefügt |
Arten von Proxy-Pools
- Datacenter: IPs, die Hosting-Anbietern zugewiesen sind.
- Residential: IPs in Verbraucheranschlüssen. Websites sehen ihren Datenverkehr als von normalen Nutzern kommend.
- ISP (statische Wohnsitz-IP): IPs, die bei Verbraucher-ISPs registriert sind.
- Mobil: Datenverkehr, der über Mobilfunknetze geleitet wird.
- Gemischt: eine Kombination aus Datacenter- und Residential-IPs.
Pool-Gesundheit aus Antworten ablesen
| Antwort | Was es normalerweise bedeutet | Was mit der IP zu tun ist |
|---|---|---|
| 407 Proxy-Authentifizierung erforderlich | Der Proxy hat Ihre Anmeldeinformationen abgelehnt, nicht die Website | Behalten und Proxy-Authentifizierung beheben |
| 429 Zu viele Anfragen | Das Rate-Limit der Website wurde erreicht | Pausieren und auf die Retry-After-Zeit warten |
| 403 oder eine Challenge-Seite | Die Website könnte diese IP oder den Bereich blockieren | Für dieses Ziel entfernen |
| Timeout oder Verbindung abgelehnt | Der Proxy könnte ausgefallen oder unerreichbar sein | Einmal erneut versuchen, dann entfernen |
Cloudflare kennzeichnet seine Challenge-Seiten mit einem cf-mitigated: challenge-Header, also überprüfen Sie die Header, nicht nur den Statuscode. Siehe IP-Sperre für weitere Anzeichen einer Blockierung.
Viele Marken können einen Pool teilen
Ein größerer Pool von einem anderen Anbieter ist nicht immer ein anderer Pool. Im Juli 2026 berichtete Googles Bedrohungsintelligenz-Team, dass viele beliebte Residential-Proxy-Marken das Netzwerk eines Betreibers unter ihren eigenen Namen weiterverkaufen. Es stellte auch fest, dass Betreiber Kapazitäten von Wettbewerbern kaufen, wenn ihre eigenen Netzwerke schrumpfen, und bezeichnete die Branche als eine von sich ständig überschneidenden Netzwerken, die ständig weiterverkauft werden.
So können zwei Dienste Sie über dieselben Ausgangsgeräte senden, und eine IP, die bei einem Dienst blockiert ist, kann bereits beim anderen blockiert sein.
Was das für Web-Scraping bedeutet
- Berechnen Sie die Last pro IP: Teilen Sie Ihre Anforderungsrate durch die verwendeten IPs. Zum Beispiel bedeutet eine Rate von 600 Anfragen pro Minute über 100 IPs, dass jede IP etwa 6 Anfragen pro Minute erhält.
- Zählen Sie Netzwerke, nicht nur IPs: Ein Pool benachbarter Adressen kann als ein Bereich blockiert werden. Siehe Subnetz.
- Planen Sie zuerst das Layout: Segmentieren Sie Pools nach Ziel und Aufgabe und bewerten Sie die IP-Gesundheit. Siehe Proxy-Pool-Architektur für einen umfassenderen Designleitfaden.