রেট লিমিটিং একটি নিয়ন্ত্রণ যা একটি ক্লায়েন্ট, যা আইপি ঠিকানা বা ব্যবহারকারী অ্যাকাউন্ট দ্বারা চিহ্নিত হয়, সেট সময়ের মধ্যে কতগুলি অনুরোধ করতে পারে তা সীমাবদ্ধ করে, তারপর সীমার উপরে অনুরোধগুলি ব্লক বা বিলম্বিত করে। সার্ভার এটি HTTP 429 অনেক বেশি অনুরোধের মাধ্যমে সংকেত দেয়, যা একটি Retry-After header অন্তর্ভুক্ত করতে পারে যা বলে কতক্ষণ অপেক্ষা করতে হবে পুনরায় চেষ্টা করার আগে।
স্তর রেট লিমিটগুলি কোথায় প্রয়োগ করা হয়
- প্রতি আইপি
- প্রতি সাবনেট
- প্রতি API কী
- প্রতি অ্যাকাউন্ট
যখন একটি ক্লায়েন্ট এগুলি অতিক্রম করে, সার্ভার অস্থায়ীভাবে তার অনুরোধগুলি পূরণ করা বন্ধ করতে পারে এবং HTTP 429 "অনেক বেশি অনুরোধ" দিয়ে প্রতিক্রিয়া জানাতে পারে। একটি বড়, ঘূর্ণায়মান প্রক্সি পুলের মধ্যে অনুরোধগুলি বিতরণ করা অনেকগুলি প্রতি-আইপি কাউন্টারের মধ্যে তাদের ছড়িয়ে দেয়, যা প্রতিটি আইপিকে স্কেলে প্রতি-আইপি রেট লিমিটের নিচে রাখতে সাহায্য করে।
সাধারণ রেট-লিমিটিং অ্যালগরিদম
- স্থির উইন্ডো: অনুরোধগুলি গণনা করে এবং প্রতিটি সময়ের শুরুতে কাউন্টারটি পুনরায় সেট করে, তাই ট্রাফিকের শিখরগুলি প্রতিটি পুনরায় সেটের চারপাশে সরে যেতে পারে।
- স্লাইডিং উইন্ডো: পূর্ববর্তী সময়ের গণনাকে বর্তমান উইন্ডোর কতটা ওভারল্যাপ করে তার দ্বারা ওজন দেয়, যা সেই শিখরগুলিকে মসৃণ করে।
- টোকেন বালতি: টোকেনগুলি একটি সর্বাধিক পর্যন্ত একটি নির্দিষ্ট হারে পুনরায় পূর্ণ হয়। প্রতিটি অনুরোধ একটি ব্যয় করে, তাই বালতির আকার পর্যন্ত বিস্ফোরণগুলি অনুমোদিত।
- লিকি বালতি: অনুরোধগুলি একটি স্থির হারে নিষ্কাশিত হয়। যখন বালতি পূর্ণ হয়, নতুন অনুরোধগুলি প্রত্যাখ্যাত হয়।
সাইটগুলি কেন রেট লিমিটিং ব্যবহার করে
স্ক্র্যাপিং কেবল একটি লক্ষ্য। রেট লিমিটগুলি সাহায্য করে:
- ধীর ব্রুট-ফোর্স লগইন প্রচেষ্টা, যা ক্লাউডফ্লেয়ার সুপারিশ করে উভয় আইপি ঠিকানা এবং ব্যবহারকারীর নাম দ্বারা ট্র্যাক করতে।
- ব্লান্ট DoS এবং DDoS ট্রাফিক বন্যা।
- API ব্যবহারের প্রতি-ব্যবহারকারী কোটা বজায় রাখতে, যেমন প্রতি ঘণ্টা বা দিনে একটি নির্দিষ্ট সংখ্যক কল, এমনকি যখন অতিরিক্ত ব্যবহার ম্যালিশিয়াস নয়।