การตรวจจับบอทคือกระบวนการในการระบุว่าการเข้าชมเว็บไซต์ แอป หรือ API มาจากซอฟต์แวร์อัตโนมัติหรือมนุษย์ นอกจากนี้ยังแยกบอทที่เป็นอันตรายออกจากบอทที่ถูกต้องตามกฎหมาย เช่น โปรแกรมค้นหาข้อมูล การตรวจจับจะให้คะแนนสัญญาณจากเครือข่าย ลูกค้า และพฤติกรรมของผู้ใช้ ผลลัพธ์จะตัดสินว่าคำขอได้รับอนุญาต ท้าทาย หรือถูกบล็อก
เลเยอร์ของการตรวจจับบอท
- สัญญาณระดับเครือข่าย: ชื่อเสียง IP, การกรอง ASN
- สัญญาณระดับลูกค้า: รอยนิ้วมือ TLS และเบราว์เซอร์, ความสอดคล้องของหัวข้อ
- สัญญาณพฤติกรรม: เทเลเมตริกพฤติกรรม, ขีดจำกัดอัตราที่รับรู้เซสชัน
คำขอที่ผ่านเลเยอร์หนึ่งอาจยังถูกตั้งค่าสถานะโดยอีกเลเยอร์หนึ่ง
บางสัญญาณสามารถตรวจสอบซึ่งกันและกันได้ OWASP ระบุว่าหัวข้อ Client Hints ถูกประกาศโดยลูกค้า แต่สามารถตรวจสอบกับรอยนิ้วมือ TLS ของมันได้
การตรวจสอบบอทที่ดี
ไม่ใช่การเข้าชมอัตโนมัติทั้งหมดที่ไม่ต้องการ โปรแกรมค้นหาข้อมูล เช่น ดึงหน้าเว็บเพื่อให้ปรากฏในผลการค้นหา เนื่องจากบอทใด ๆ สามารถอ้างว่าเป็นโปรแกรมค้นหาข้อมูลใน User-Agent เว็บไซต์จึงตรวจสอบที่อยู่ IP แทน Google เอกสารสองวิธีในการตรวจสอบ Googlebot:
- การตรวจสอบ DNS: ทำการค้นหา DNS แบบย้อนกลับบน IP ยืนยันว่าโฮสต์เนมลงท้ายด้วย googlebot.com, google.com หรือ googleusercontent.com จากนั้นทำการค้นหาข้างหน้าและยืนยันว่ามันคืนค่า IP เดิม
- ช่วง IP: เปรียบเทียบ IP กับรายการช่วง IP ของโปรแกรมค้นหาที่ Google เผยแพร่ใน JSON
ภัยคุกคามที่การตรวจจับบอทมุ่งเป้าไปที่
โครงการ OWASP Automated Threats to Web Applications ระบุภัยคุกคามอัตโนมัติ 21 รายการ ตัวอย่างเช่น:
- การโจมตีด้วยข้อมูลประจำตัว (OAT-008): การพยายามเข้าสู่ระบบจำนวนมากที่ทดสอบคู่ชื่อผู้ใช้และรหัสผ่านที่ถูกขโมย
- การเก็บข้อมูล (OAT-011): การรวบรวมเนื้อหาของแอปพลิเคชันหรือข้อมูลอื่น ๆ เพื่อนำไปใช้ที่อื่น
- การซื้อขาย (OAT-005): การได้รับสินค้าหรือบริการที่มีจำนวนจำกัดหรือที่ต้องการโดยวิธีที่ไม่เป็นธรรม
- การสร้างบัญชี (OAT-019): การสร้างบัญชีจำนวนมากเพื่อใช้ในภายหลัง