IPアドレスは、ネットワークに接続されたデバイスに割り当てられる数値ラベルであり、そのデバイスを特定し、位置を特定するために使用されます。これにより、データが正しくルーティングされます。ウェブサイトは、訪問者の約位置を特定し、レート制限や地理的制限を適用するために、受信リクエストのIPアドレスを使用します。

フォワードプロキシは、リクエストが持つIPアドレスを変更します:リクエストはプロキシのIPアドレスから来ているように見えます。

IPアドレスの割り当て方法

  • レジストリ: IANAは、AFRINIC、APNIC、ARIN、LACNIC、RIPE NCCの5つの地域インターネットレジストリにアドレスブロックを割り当てます。各レジストリは、通常ISPであるメンバーにブロックを割り当て、そのメンバーが顧客にアドレスを渡します。
  • ローカルネットワーク: DHCPは、ネットワーク上のデバイスにアドレスを配布します。動的割り当てでは、デバイスは限られた時間アドレスをリースし、デバイスがもはや必要としないときにそのアドレスは再利用可能です。

公開IPアドレスとプライベートIPアドレス

公開IPアドレスプライベートIPアドレス
どこから来るかレジストリを通じて割り当てられたブロック、通常はISP経由ルーターまたはネットワーク管理者
インターネットからの到達性はいいいえ。RFC 1918では、プライベートネットワークへのルートは外部で共有されるべきではないとされています。
IPv4範囲グローバルに一意な範囲10.0.0.0/8、172.16.0.0/12、192.168.0.0/16
ウェブサイトに見えるかはいいいえ

プライベートアドレスを持つデバイスは通常、NATを介してインターネットにアクセスするため、ウェブサイトはルーターの公開アドレスを見ることになります。

静的IPアドレスと動的IPアドレス

  • 動的: 限られた時間のために割り当てられ、変更される可能性があります。DHCPはこの時間をリースと呼びます。
  • 静的: 同じままです。DHCPはクライアントに永久的なアドレスを与えることができるか、管理者が手動で設定したアドレスを渡すことができます。

プロキシも同じ分割に従います:静的プロキシは1つのIPを保持し、IPローテーションはそれを変更します。

IPv4とIPv6

  • IPv4(例:192.168.1.1)は、約43億のユニークなアドレスを提供します。
  • IPv6は、インターネットに接続されたデバイスのはるかに大きな数を収容するために設計された新しいフォーマットです。

IPv4とIPv6を参照して、プロキシユーザーにとっての2つの違いを確認してください。

IPジオロケーション

サイトはIPアドレスから訪問者の位置を推定し、その推定は正確ではありません。ジオロケーションデータプロバイダーのMaxMindは、そのデータは特定の家庭、人物、または住所を特定するには十分に正確ではないと述べています。都市レベルの結果には、100 kmなどの精度半径が付随します。

共有IPアドレス

多くのユーザーが1つの公開IPv4アドレスを共有することができます。たとえば、キャリアグレードNATの背後で。RFC 6269は、サーバーがあまりにも多くの失敗したログインの後にアドレスをブロックすると、そのアドレスを共有している他のすべてのユーザーをロックアウトする可能性があると警告しています。

ウェブスクレイピングにとっての意味

  • 制限はIPに従う: サイトはアドレスごとにリクエストをカウントします。多くのIPにリクエストを分散させることで、各IPを制限内に保つことができます。
  • 共有IPはブロックを共有する: 共有プロキシの他のユーザーがそのIPをブロックされると、そのIPからのリクエストもブロックされます。

関連用語