Ang bot detection ay ang proseso ng pagtukoy kung ang trapiko sa isang website, app, o API ay nagmumula sa automated software o tao. Ito rin ay naghihiwalay ng mga mapanganib na bot mula sa mga lehitimong bot, tulad ng mga search engine crawlers. Ang mga detection system ay nag-i-score ng mga signal mula sa network, client, at user behavior. Ang resulta ay nagdedesisyon kung ang isang request ay pinapayagan, hinaharap o hinaharang.

Ang Mga Antas ng Bot Detection

  • Network-level signals: IP reputation, ASN filtering
  • Client-level signals: TLS at browser fingerprints, header consistency
  • Behavioral signals: behavioral telemetry, session-aware rate limits

Ang isang request na pumasa sa isang antas ay maaari pa ring ma-flag ng isa pang antas.

Ang ilang mga signal ay maaaring suriin laban sa isa't isa. Binanggit ng OWASP na ang Client Hints headers ay idineklara ng client ngunit maaaring beripikahin laban sa kanyang TLS fingerprint.

Pag-verify ng Magandang Bots

Hindi lahat ng automated traffic ay hindi kanais-nais. Halimbawa, ang mga search engine crawlers ay kumukuha ng mga pahina upang makapag-appear sa mga search results. Dahil anumang bot ay maaaring magpanggap na crawler sa kanyang User-Agent, ang mga site ay nag-verify ng IP address sa halip. Nagtala ang Google ng dalawang paraan upang beripikahin ang Googlebot:

  • DNS check: Magpatakbo ng reverse DNS lookup sa IP. Kumpirmahin na ang hostname ay nagtatapos sa googlebot.com, google.com, o googleusercontent.com. Pagkatapos ay magpatakbo ng forward lookup at kumpirmahin na ito ay nagbabalik sa orihinal na IP.
  • IP ranges: I-match ang IP laban sa mga listahan ng crawler IP ranges na inilathala ng Google sa JSON.

Mga Banta na Target ng Bot Detection

Ang OWASP Automated Threats to Web Applications project ay nagngangalang 21 automated threats. Kasama sa mga halimbawa:

  • Credential stuffing (OAT-008): Mass login attempts na sumusubok ng mga ninakaw na username at password pairs.
  • Scraping (OAT-011): Pagkolekta ng nilalaman ng application o iba pang data para sa paggamit sa ibang lugar.
  • Scalping (OAT-005): Pagkuha ng mga limitadong availability o preferred goods at services sa hindi patas na paraan.
  • Account creation (OAT-019): Paglikha ng maraming account para sa susunod na maling paggamit.

Mga Kaugnay na Termino