Ang mga concurrent connections, na kadalasang tinatawag na threads, ay ang bilang ng mga request na maaari mong buksan sa isang proxy sa parehong oras. Ang limitasyon na 50 ay nangangahulugang hanggang 50 na request ang maaaring tumakbo nang sabay-sabay. Kapag natapos ang isa, maaari nang magsimula ang isa pa. Mas maraming concurrency ang nagpapabilis sa malalaking trabaho, ngunit ang bawat bukas na koneksyon ay gumagamit din ng resources sa proxy at sa target server.

Ang 429 Too Many Requests status ay nangangahulugang nagpadala ka ng masyadong maraming request sa isang tiyak na oras.

Threads, Connections, at Requests

  • Thread: Isang yunit ng trabaho sa iyong sariling programa. Sa isang simpleng scraper, bawat thread ay nagpapadala ng isang request at naghihintay para sa tugon nito.
  • HTTP/1.x: Isang koneksyon ang humahawak ng mga request na kadalasang isa-isa, kaya ang mga HTTP/1.0 at HTTP/1.1 clients ay nagbubukas ng ilang koneksyon upang makagawa ng concurrent requests.
  • HTTP/2: Maraming request, na tinatawag na streams, ang maaaring interleaved sa isang solong koneksyon. Ang server ay nagtatakda ng limit nito gamit ang SETTINGS_MAX_CONCURRENT_STREAMS.
  • Bakit ito mahalaga: Ang bilang ng iyong threads, bukas na koneksyon, at mga in-flight requests ay hindi palaging pareho, kaya suriin kung aling limit ang tinutukoy.

Pumili ng Ligtas na Antas ng Concurrency

  • Maging maingat: Ang HTTP/1.1 specification (RFC 9112) ay nagsasaad na ang isang client ay dapat limitahan ang bilang ng sabay-sabay na bukas na koneksyon sa isang tiyak na server. Wala itong itinakdang maximum.
  • Bakit: Ang bawat koneksyon ay kumakain ng resources ng server, at ang maraming parallel connections ay maaaring magdulot ng congestion na maiiwasan ng mas kaunting koneksyon.
  • Igagalang ang Retry-After: Ang 429 Too Many Requests na tugon ay maaaring maglaman ng Retry-After header na nagsasaad kung gaano katagal dapat maghintay bago subukang muli.

Kaugnay na Mga Termino