Gelyktydige verbindings, dikwels threads genoem, is die aantal versoeke wat jy op 'n slag deur 'n proxy kan hê. 'n Limiet van 50 beteken dat tot 50 versoeke gelyktydig kan loop. Wanneer een klaar is, kan 'n ander begin. Meer gelyktydigheid maak groot werke vinniger klaar, maar elke oop verbinding gebruik ook hulpbronne op die proxy en die teikenbediener.

'n 429 Too Many Requests status beteken jy het te veel versoeke in 'n gegewe tydperk gestuur.

Threads, Verbindings, en Versoeke

  • Thread: 'n Eenheid van werk in jou eie program. In 'n eenvoudige scraper, stuur elke thread een versoek en wag vir sy antwoord.
  • HTTP/1.x: Een verbinding hanteer versoeke grootliks een op 'n slag, so HTTP/1.0 en HTTP/1.1 kliënte open verskeie verbindings om gelyktydige versoeke te maak.
  • HTTP/2: Baie versoeke, genoem strome, kan op 'n enkele verbinding tussenin geplaas word. 'n Bediener stel sy limiet met SETTINGS_MAX_CONCURRENT_STREAMS.
  • Waarom dit belangrik is: Jou thread telling, oop verbindings, en in-vlug versoeke is nie altyd dieselfde getal nie, so kyk na watter een 'n limiet verwys.

Keuse van 'n Veilige Gelyktydige Vlak

  • Wees konserwatief: Die HTTP/1.1 spesifikasie (RFC 9112) sê 'n kliënt behoort die aantal gelyktydige oop verbindings na 'n gegewe bediener te beperk. Dit stel geen vaste maksimum nie.
  • Waarom: Elke verbinding verbruik bedienerhulpbronne, en baie parallelle verbindings kan oorlaai veroorsaak wat minder verbindings sou vermy.
  • Respekteer Retry-After: 'n 429 Too Many Requests antwoord kan 'n Retry-After kop wat sê hoe lank om te wag voordat jy weer probeer, insluit.

Verwante Terme