Eine IP-Adresse ist ein numerisches Etikett, das einem Gerät zugewiesen wird, das mit einem Netzwerk verbunden ist, und dient dazu, dieses Gerät zu identifizieren und zu lokalisieren, damit Daten korrekt zu und von ihm geroutet werden können. Websites verwenden die IP-Adresse einer eingehenden Anfrage, um den ungefähren Standort eines Besuchers zu bestimmen und Zugriffsregeln wie Rate Limits oder Geo-Einschränkungen anzuwenden.

Ein Forward Proxy ändert, welche IP-Adresse eine Anfrage trägt: Die Anfrage scheint von der IP-Adresse des Proxys zu kommen.

Wie IP-Adressen zugewiesen werden

  • Registries: IANA weist Adressblöcke an fünf regionale Internet-Registries zu: AFRINIC, APNIC, ARIN, LACNIC und RIPE NCC. Jede Registry weist Blöcke an ihre Mitglieder zu, in der Regel ISPs, die die Adressen an ihre Kunden weitergeben.
  • Lokale Netzwerke: DHCP vergibt Adressen an Geräte in einem Netzwerk. Bei dynamischer Zuweisung mietet ein Gerät eine Adresse für eine begrenzte Zeit, und die Adresse kann wiederverwendet werden, sobald das Gerät sie nicht mehr benötigt.

Öffentliche vs. private IP-Adressen

Öffentliche IP-AdressePrivate IP-Adresse
Woher sie kommtBlöcke, die über die Registries zugewiesen werden, normalerweise über Ihren ISPIhr Router oder Netzwerkadministrator
Von Internet erreichbarJaNein. RFC 1918 besagt, dass Routen zu privaten Netzwerken nicht außerhalb geteilt werden sollten
IPv4-BereicheGlobal eindeutige Bereiche10.0.0.0/8, 172.16.0.0/12 und 192.168.0.0/16
Von Websites gesehenJaNein

Geräte mit privaten Adressen erreichen normalerweise das Internet über NAT, sodass Websites die öffentliche Adresse des Routers sehen.

Statische vs. dynamische IP-Adressen

  • Dynamisch: für eine begrenzte Zeit zugewiesen, sodass sie sich ändern kann. DHCP nennt diese Zeit einen Lease.
  • Statisch: bleibt gleich. DHCP kann einem Client eine permanente Adresse zuweisen oder eine, die ein Administrator manuell festgelegt hat, weitergeben.

Proxys folgen derselben Unterteilung: Ein statischer Proxy behält eine IP, während IP-Rotation sie ändert.

IPv4 vs. IPv6

  • IPv4 (z. B. 192.168.1.1), das etwa 4,3 Milliarden eindeutige Adressen bietet
  • IPv6, ein neueres Format, das für die viel größere Anzahl von internetverbundenen Geräten ausgelegt ist

Siehe IPv4 vs. IPv6 für die Unterschiede zwischen den beiden für Proxy-Nutzer.

IP-Geolokalisierung

Websites schätzen den Standort eines Besuchers anhand der IP-Adresse, und die Schätzung ist nicht genau. MaxMind, ein Anbieter von Geolokalisierungsdaten, sagt, dass seine Daten niemals präzise genug sind, um einen bestimmten Haushalt, eine Person oder eine Straßenadresse zu lokalisieren. Ergebnisse auf Stadtebene kommen mit einem Genauigkeitsradius, wie z. B. 100 km.

Geteilte IP-Adressen

Viele Benutzer können eine öffentliche IPv4-Adresse teilen, zum Beispiel hinter Carrier-Grade NAT. RFC 6269 warnt, dass, wenn ein Server eine Adresse nach zu vielen fehlgeschlagenen Anmeldungen blockiert, er alle anderen Benutzer, die sie teilen, ebenfalls ausschließen kann.

Was es für Web-Scraping bedeutet

  • Limits folgen der IP: Websites zählen Anfragen pro Adresse. Das Verbreiten von Anfragen über viele IPs hält jede unter dem Limit.
  • Geteilte IPs teilen Sperren: Wenn ein anderer Benutzer eines geteilten Proxys seine IP blockiert bekommt, sind auch Ihre Anfragen von dieser IP blockiert.

Verwandte Begriffe