আইপি রোটেশন হল একটি অনুশীলন যেখানে একটি আইপি ঠিকানার পুলের মাধ্যমে আউটগোয়িং অনুরোধগুলি পাঠানো হয় এবং একটি নির্দিষ্ট নিয়ম অনুযায়ী সূত্র আইপি পরিবর্তন করা হয়, যেমন প্রতিটি অনুরোধ, প্রতিটি সেশনের জন্য বা নির্দিষ্ট সময় অন্তর। এইভাবে ট্রাফিক ছড়িয়ে দেওয়া প্রতিটি আইপির অনুরোধের পরিমাণ কম রাখে, তাই প্রতি আইপির হার সীমা এবং নিষেধাজ্ঞা কাজের উপর কম প্রভাব ফেলে।

আইপি রোটেশন হল প্রযুক্তি। একটি রোটেটিং প্রক্সি হল একটি পরিষেবা যা আপনার জন্য একটি গেটওয়ে ঠিকানার পিছনে এটি করে, তবে আপনি আপনার নিজস্ব কোডে আইপি পরিবর্তনও করতে পারেন। ডায়নামিক আইপির সাথে বাড়ির সংযোগগুলি ঠিকানা পরিবর্তন করতে পারে, তবে নেটওয়ার্কের সময়সূচী অনুযায়ী, আপনার নয়।

আইপি রোটেশন কিভাবে কাজ করে

  1. একটি পুল পান: প্রক্সি আইপির একটি তালিকা, অথবা একটি প্রদানকারীর প্রক্সি পুল এর সামনে একটি গেটওয়ে।
  2. নিয়ম দ্বারা একটি আইপি নির্বাচন করুন: পরবর্তী অনুরোধ বা সেশনের জন্য একটি ঠিকানা চয়ন করুন।
  3. এটির মাধ্যমে অনুরোধ পাঠান: লক্ষ্য সাইটটি শুধুমাত্র নির্বাচিত আইপি দেখবে।
  4. বিশ্রাম নিন বা ব্যর্থ আইপিগুলি বাদ দিন: যখন একটি আইপি ব্লক প্রতিক্রিয়া পেতে শুরু করে, যেমন 403 বা 429, তখন এটি ব্যবহার থেকে বাদ দিন।

রোটেশন নিয়ম

  • প্রতি অনুরোধ: প্রতিটি অনুরোধের জন্য একটি নতুন আইপি। পুনরায় ব্যবহৃত সংযোগগুলি একই আইপি রাখতে পারে, যেমন রোটেটিং প্রক্সির অধীনে ব্যাখ্যা করা হয়েছে।
  • সময় নির্ধারিত: আইপি একটি নির্দিষ্ট সময় অন্তর পরিবর্তিত হয়, যেমন প্রতি কয়েক মিনিটে।
  • প্রতি সেশন (স্টিকি): একটি সেশনের জন্য একটি আইপি ধরে রাখা হয় এবং তারপর প্রতিস্থাপন করা হয়। স্টিকি সেশন দেখুন।
  • ব্যর্থতার উপর: ব্লক বা হার সীমা প্রতিক্রিয়া পাওয়ার পর আইপি পরিবর্তিত হয়।
  • ক্রম: রাউন্ড-রবিন প্রতিটি আইপি পালাক্রমে ব্যবহার করে; এলোমেলো নির্বাচন যেকোনো উপলব্ধ আইপি বেছে নেয়।

আইপি পরিবর্তনের উপায়

রোটেটিং প্রক্সি গেটওয়েআপনার নিজের কোডে রোটেশনভিপিএন সার্ভার পরিবর্তন
আইপি কে নির্বাচন করেপ্রদানকারীর গেটওয়েআপনার স্ক্রিপ্ট, প্রক্সির একটি তালিকা থেকেআপনি বা ভিপিএন অ্যাপ
আপনি কিভাবে সংযুক্ত হনএকটি হোস্ট এবং পোর্টপ্রতিটি অনুরোধ বা সেশনের জন্য একটি ভিন্ন প্রক্সিপুরো ডিভাইসের জন্য একটি টানেল
একসাথে বিভিন্ন আইপিহ্যাঁ, সংযোগ বা সেশন প্রতিহ্যাঁ, প্রতি অনুরোধনা, প্রতি সংযোগে একটি সার্ভার

কোডে, রোটেশন মানে প্রতিটি অনুরোধে প্রক্সি সেট করা। উদাহরণস্বরূপ, স্ক্র্যাপি এটি request.meta['proxy'] থেকে পড়ে। ভিপিএন কিভাবে প্রক্সির থেকে আলাদা, তা জানার জন্য ভিপিএন বনাম প্রক্সি দেখুন।

একটি সাবনেটের মধ্যে রোটেটিং আসল রোটেশন নয়

সাইটগুলি কেবল একক ঠিকানা গণনা করে না, তাই প্রতিবেশী আইপির একটি পুল একটি আইপির মতো আচরণ করতে পারে:

  • রেঞ্জ: nginx এর deny নির্দেশিকা একটি CIDR রেঞ্জ গ্রহণ করে, তাই একটি নিয়ম একটি সম্পূর্ণ সাবনেট ব্লক করতে পারে, যেমন একটি /24 তে 256 ঠিকানা।
  • নেটওয়ার্ক: ক্লাউডফ্লেয়ারের হার সীমাবদ্ধতা নিয়মগুলি AS নম্বর দ্বারা অনুরোধ গণনা করতে পারে, তাই একই নেটওয়ার্কের প্রতিটি আইপি একটি কাউন্টারে যোগ করে। ASN দেখুন।
  • IPv6 প্রিফিক্স: RFC 6177 বলে শেষ সাইটগুলিকে কমপক্ষে একটি /64 পাওয়া উচিত, এবং বেশিরভাগ ক্ষেত্রে অনেক বেশি। একটি সাইট একটি সম্পূর্ণ প্রিফিক্সকে একটি ব্যবহারকারী হিসাবে বিবেচনা করতে পারে, তাই এর মধ্যে ঠিকানা পরিবর্তন করা খুব কম পরিবর্তন করে।

গুরুত্বপূর্ণ হল একটি পুল কতগুলি ভিন্ন রেঞ্জ এবং নেটওয়ার্ক জুড়ে ছড়িয়ে আছে, কেবল এটি কতগুলি আইপি ধারণ করে তা নয়।

ওয়েব স্ক্র্যাপিংয়ের জন্য এর অর্থ কী

  • রোটেশন গতি প্রতিস্থাপন করে না: যখন একটি সাইট 429 উত্তর দেয়, তখন একটি নতুন আইপি থেকে একবারে পুনরায় চেষ্টা করার পরিবর্তে এর Retry-After header এ সময়ের জন্য অপেক্ষা করুন।
  • কুকি আইপির চেয়ে দীর্ঘস্থায়ী হতে পারে: ক্লাউডফ্লেয়ারের "NAT সমর্থন সহ আইপি" বিকল্পটি একটি সেশন কুকি (_cfuvid) দ্বারা দর্শকদের চিহ্নিত করতে পারে, তাই একই কুকি জারের সাথে একটি নতুন আইপি এখনও একই দর্শক হিসাবে গণনা হতে পারে।
  • কাজের জন্য নিয়মটি মেলান: স্বাধীন পৃষ্ঠাগুলির জন্য প্রতি অনুরোধে রোটেট করুন এবং লগইন এবং চেকআউটের জন্য একটি আইপি ধরে রাখুন।

কেন রোটেশন একা যথেষ্ট নয়

একটি নতুন IP সবকিছু পরিবর্তন করে না যা একটি সাইট দেখতে পারে। সাইটগুলি ব্রাউজার ফিঙ্গারপ্রিন্ট এর মাধ্যমে অনুরোধগুলি সংযুক্ত করতে পারে যা সিগন্যাল যেমন ইউজার-এজেন্ট হেডার, উইন্ডো সাইজ, ইনস্টল করা ফন্ট এবং গ্রাফিক্স কিভাবে রেন্ডার হয় তার উপর ভিত্তি করে তৈরি হয়। একটি ফিঙ্গারপ্রিন্ট একটি ক্লায়েন্টকে চিহ্নিত করতে পারে এমনকি যখন তার IP লুকানো থাকে বা কুকিজ ব্লক করা থাকে।

সম্পর্কিত শর্তাবলী