ویب انلاک کرنے والا ایک منظم اسکرپنگ سروس ہے جو آپ کے لیے اینٹی بوٹ اقدامات جیسے کہ کیپچاس، براؤزر کے فنگر پرنٹس، دوبارہ کوششیں اور پراکسی کا انتخاب سنبھالتا ہے، اور ہدف کے صفحے کو ایک ہی اینڈ پوائنٹ کے ذریعے واپس کرتا ہے۔ خود ہی ہیڈرز کو ایڈجسٹ کرنے اور آئی پی کو گھمانے کے بجائے، آپ ایک درخواست بھیجتے ہیں اور سروس یہ طے کرتی ہے کہ کامیاب جواب کیسے حاصل کیا جائے۔
کچھ فراہم کنندگان اسی زمرے کو "ویب ان بلاکر" کہتے ہیں۔ اس زمرے کی خدمات کو پراکسی اینڈ پوائنٹ کے طور پر استعمال کیا جا سکتا ہے، جہاں آپ اپنی مرضی کے مطابق درخواست ہیڈرز میں آپشنز پاس کرتے ہیں، یا ایک REST API کے ذریعے۔
ویب انلاک کرنے والا کیا سنبھالتا ہے
- کیپچاس اور چیلنجز: سروس خودکار طور پر کیپچاس اور اینٹی بوٹ چیلنجز کو حل کرتی ہے۔
- ہیڈرز اور فنگر پرنٹس: یہ درخواست کے ہیڈرز اور براؤزر کے فنگر پرنٹس کو حقیقی صارف کی ٹریفک کے مطابق ترتیب دیتا ہے۔
- دوبارہ کوششیں: ناکام کوششوں کو مختلف کنفیگریشنز کے ساتھ دوبارہ آزمایا جاتا ہے جب تک کہ درخواست کامیاب نہ ہو جائے یا سروس ہار نہ مان لے۔
- پراکسی کا انتخاب اور گھماؤ: یہ ہر ہدف کے لیے استعمال ہونے والی پراکسیوں کا انتخاب اور گھماؤ کرتا ہے۔
- جاوا اسکرپٹ کی رینڈرنگ: کچھ خدمات درخواست پر جاوا اسکرپٹ کو رینڈر کر سکتی ہیں، مثال کے طور پر درخواست کے ہیڈر کے ذریعے۔
ویب انلاک کرنے والا بمقابلہ ایک معیاری پراکسی
ایک معیاری پراکسی آپ کی درخواست کو آگے بڑھاتی ہے اور پتہ لگانے کے ہینڈلنگ کو آپ پر چھوڑ دیتی ہے۔ ایک ویب انلاک کرنے والا پراکسی نیٹ ورک کے اوپر اینٹی بوٹ منطق کو شامل کرتا ہے۔ کچھ خدمات صرف ان درخواستوں کے لیے چارج کرتی ہیں جو کامیاب جواب واپس کرتی ہیں۔
آؤٹ پٹ اور حدود
- آؤٹ پٹ: سروس ہدف کے صفحے کو واپس کرتی ہے، عام طور پر خام HTML کے طور پر۔ کچھ خدمات جب آپ ایک فارمیٹ آپشن مرتب کرتے ہیں تو JSON واپس کر سکتی ہیں۔
- کوئی براؤزر خودکار کاری نہیں: ویب انلاک کرنے والے کلک کرنے، فارم بھرنے یا اینڈ پوائنٹ کے ذریعے ہیڈلیس براؤزرز جیسے کہ Playwright، Selenium یا Puppeteer کو چلانے کے لیے نہیں بنائے گئے ہیں۔
- سرٹیفکیٹ کی جانچ: جب پراکسی اینڈ پوائنٹ کے طور پر استعمال کیا جائے تو کچھ خدمات کلائنٹ سے TLS سرٹیفکیٹ کی تصدیق کو اس اینڈ پوائنٹ کے لیے چھوڑنے کی ضرورت ہوتی ہے۔