একটি প্রক্সি পুল হল প্রক্সি আইপি ঠিকানার একটি সংগ্রহ, যার মধ্যে থেকে প্রতিটি অনুরোধ বা সেশনের জন্য একটি আইপি বাছাই করা হয়। এইভাবে অনেক ঠিকানার মধ্যে ট্রাফিক ছড়িয়ে দেওয়া হলে, যে কোনও একটি আইপির থেকে আসা অনুরোধের সংখ্যা কমে যায়।
পুল হল ঠিকানার সেট। আইপি রোটেশন হল এর থেকে বাছাই করার নিয়ম, এবং একটি রোটেটিং প্রক্সি হল একটি পরিষেবা যা আপনার জন্য সেই নিয়মটি প্রয়োগ করে।
একটি প্রক্সি পুল কিভাবে কাজ করে
কিছু পরিষেবায়, প্রতিটি প্রক্সিকে আলাদাভাবে কনফিগার করার পরিবর্তে, আপনি একটি গেটওয়ে এন্ডপয়েন্টে অনুরোধ পাঠান। প্রতিটি অনুরোধের জন্য, গেটওয়ে (অথবা আপনার নিজস্ব সফটওয়্যার) একটি উপলব্ধ আইপি বাছাই করে পুল থেকে:
- নির্বাচন করুন: একটি আইপি অনুরোধ বা সেশনের জন্য বাছাই করা হয়, প্রতিবার নতুন বা একটি স্টিকি সেশন হিসাবে রাখা হয়।
- পাঠান: অনুরোধটি সেই আইপি থেকে বের হয়, যা লক্ষ্য কেবলমাত্র একটি ঠিকানা দেখে।
- চেক করুন: প্রতিক্রিয়া দেখায় যে আইপি এখনও সেই লক্ষ্যটির জন্য কাজ করে কিনা।
- বিশ্রাম বা অপসারণ করুন: যে আইপিগুলি বারবার ব্যর্থ হয় সেগুলি বিরতি দেওয়া হয় বা বাদ দেওয়া হয়, এবং নতুনগুলি যোগ করা হয়।
প্রক্সি তালিকা বনাম পরিচালিত পুল
| প্রক্সি তালিকা | গেটওয়ের পিছনে পরিচালিত পুল | |
|---|---|---|
| আপনি কি কনফিগার করেন | প্রতিটি প্রক্সির ঠিকানা এবং পোর্ট | একটি হোস্ট এবং পোর্ট |
| আইপি কে বাছাই করে | আপনার কোড | গেটওয়ে |
| মৃত বা ব্লক করা আইপিগুলি | আপনি সেগুলি সনাক্ত করেন এবং অপসারণ করেন | প্রদানকারী সেগুলি পরিচালনা করে |
| সেশন নিয়ন্ত্রণ | আপনি সেশনগুলিকে আইপির সাথে ম্যাপ করেন | প্রায়ই প্রক্সি ব্যবহারকারীর নামের সাথে একটি সেশন আইডি যোগ করা হয় |
প্রক্সি পুলের প্রকার
- ডেটাসেন্টার: হোস্টিং প্রদানকারীদের জন্য বরাদ্দকৃত আইপি।
- রেসিডেনশিয়াল: ভোক্তা সংযোগে আইপি। ওয়েবসাইটগুলি তাদের ট্রাফিককে সাধারণ ব্যবহারকারীদের কাছ থেকে আসা হিসাবে দেখে।
- আইএসপি (স্ট্যাটিক রেসিডেনশিয়াল): ভোক্তা আইএসপির জন্য নিবন্ধিত আইপি।
- মোবাইল: ক্যারিয়ার নেটওয়ার্কের মাধ্যমে রুট করা ট্রাফিক।
- মিশ্র: ডেটাসেন্টার এবং রেসিডেনশিয়াল আইপির একটি সংমিশ্রণ।
প্রতিক্রিয়া থেকে পুলের স্বাস্থ্য পড়া
| প্রতিক্রিয়া | এটি সাধারণত কি বোঝায় | আইপির সাথে কি করতে হবে |
|---|---|---|
| 407 প্রক্সি প্রমাণীকরণ প্রয়োজন | প্রক্সিটি আপনার শংসাপত্র প্রত্যাখ্যান করেছে, সাইটটি নয় | এটি রাখুন এবং প্রক্সি প্রমাণীকরণ ঠিক করুন |
| 429 অনেক বেশি অনুরোধ | সাইটের হার সীমা পৌঁছানো হয়েছে | এটি বিরতি দিন, এবং কোনও পুনরায় চেষ্টা করার সময়ের জন্য অপেক্ষা করুন |
| 403, অথবা একটি চ্যালেঞ্জ পৃষ্ঠা | সাইটটি সেই আইপি বা পরিসীমা ব্লক করতে পারে | সেই লক্ষ্যটির জন্য এটি অপসারণ করুন |
| টাইমআউট বা সংযোগ প্রত্যাখ্যাত | প্রক্সিটি ডাউন বা অপ্রাপ্য হতে পারে | একবার পুনরায় চেষ্টা করুন, তারপর এটি অপসারণ করুন |
ক্লাউডফ্লেয়ার তার চ্যালেঞ্জ পৃষ্ঠাগুলিকে একটি cf-mitigated: challenge হেডার দিয়ে চিহ্নিত করে, তাই কেবল স্ট্যাটাস কোড নয়, হেডারগুলি পরীক্ষা করুন। আইপি নিষেধাজ্ঞা এর জন্য ব্লকের আরও চিহ্নের জন্য দেখুন।
অনেক ব্র্যান্ড একটি পুল শেয়ার করতে পারে
একটি ভিন্ন প্রদানকারীর থেকে একটি বড় পুল সবসময় একটি ভিন্ন পুল নয়। জুলাই 2026 সালে, গুগলের হুমকি গোয়েন্দা দল রিপোর্ট করেছে যে অনেক জনপ্রিয় রেসিডেনশিয়াল প্রক্সি ব্র্যান্ড তাদের নিজস্ব নামের অধীনে একটি অপারেটরের নেটওয়ার্ক পুনর্বিক্রি করে। এটি আরও খুঁজে পেয়েছে যে অপারেটররা যখন তাদের নিজস্ব নেটওয়ার্ক সংকুচিত হয় তখন প্রতিযোগীদের থেকে ক্ষমতা কিনে এবং শিল্পটিকে একাধিক নেটওয়ার্কের একটি হিসাবে বর্ণনা করেছে যা ক্রমাগত পুনর্বিক্রি হয়।
তাহলে দুটি পরিষেবা আপনাকে একই এক্সিট ডিভাইসের মাধ্যমে পাঠাতে পারে, এবং একটি আইপি যদি একটিতে ব্লক হয় তবে এটি অন্যটিতেও ইতিমধ্যে ব্লক করা হতে পারে।
ওয়েব স্ক্র্যাপিংয়ের জন্য এর মানে কি
- প্রতি-IP লোড বের করুন: আপনার অনুরোধের হারকে ব্যবহৃত IP দ্বারা ভাগ করুন। উদাহরণস্বরূপ, 100টি IP-এর মধ্যে প্রতি মিনিটে 600টি অনুরোধের ক্ষেত্রে, প্রতিটি IP-তে প্রতি মিনিটে প্রায় 6টি অনুরোধ পড়ে।
- শুধু IP নয়, নেটওয়ার্ক গণনা করুন: প্রতিবেশী ঠিকানার একটি পুলকে একটি পরিসরে ব্লক করা যেতে পারে। সাবনেট দেখুন।
- প্রথমে লেআউট পরিকল্পনা করুন: লক্ষ্য এবং কাজ অনুযায়ী পুলগুলি বিভাগ করুন এবং IP স্বাস্থ্য স্কোর করুন। একটি পূর্ণ ডিজাইন গাইডের জন্য প্রক্সি পুল আর্কিটেকচার দেখুন।