‘n HTTP-proxy is ‘n bediener wat ‘n kliënt se HTTP-versoeke ontvang, dit na die bestemmingsbediener stuur en die antwoorde teruggee. Vir HTTPS-webwerwe gebruik die kliënt die CONNECT-metode om ‘n tonnel deur die proxy te open, wat dan die versleutelde verkeer oorgedra sonder om dit te kan lees.
‘n HTTP-proxy kan ongeënkripteerde HTTP-verkeer wat deur dit beweeg, lees en selfs wysig, so sensitiewe data moet oor HTTPS reis, waar die proxy slegs die versleutelde verkeer tonnel.
Hoe ‘n HTTP-proxy ‘n Versoek Hanteer
- Die kliënt stuur sy versoek na die proxy in plaas van die webwerf. Vir gewone HTTP gebruik dit die volle teiken-URL; vir HTTPS stuur dit ‘n
CONNECT host:443versoek. - As die proxy ‘n aanmelding vereis, voeg die kliënt ‘n
Proxy-Authorizationkopstuk by. - Vir HTTP stuur die proxy die versoek na die bestemming. Vir CONNECT antwoord dit met ‘n 2xx-status en skakel na tonnelmodus.
- Die antwoord reis terug deur die proxy na die kliënt.
Voorwaartse, Agterwaartse en Deursigtige HTTP-proxies
- Voorwaartse proxy: tree op namens kliënte en kan hul identiteit van webwerwe wegsteek. Gebruikers kan een opstel om hul IP-adres te verberg terwyl hulle blaai.
- Agterwaartse proxy: tree op namens webbedieners, wat take soos lasbalansering en kastering van statiese inhoud hanteer.
- Deursigtige (onderbrekende) proxy: geplaas in die netwerkpad, sodat kliënte dit nie konfigureer nie en dalk nie weet dat dit daar is.
HTTP Proxy vs. SOCKS5 Proxy
| HTTP-proxy | SOCKS5-proxy | |
|---|---|---|
| Wat dit verstaan | HTTP-versoeke en -antwoorde | Niks bo die vervoervlak nie; dit stuur data deur sonder om dit as HTTP te lees |
| Verkeer wat dit dra | Webverkeer, met HTTPS wat deur ‘n CONNECT-tonnel gestuur word | TCP en UDP vir enige toepassing wat SOCKS ondersteun |
Kan kopstukke soos Via byvoeg | Ja | Nee |
| In curl | Standaard tipe wanneer die proxy geen skema het | Stel met ‘n socks5:// of socks5h:// proxy-URL |
Kastering
Sommige HTTP-proxies stoor antwoorde om verkeer wat ‘n netwerk verlaat te verminder. MDN noem hierdie proxy-kaste, ‘n soort gedeelde kas. Webwerwe merk gepersonaliseerde antwoorde met Cache-Control: private sodat gedeelde kaste dit nie stoor nie. HTTPS-antwoorde beweeg gewoonlik deur ‘n proxy in ‘n tonnel, so in baie gevalle kan die proxy dit nie kas nie.
Wat Dit Beteken vir Web-skraping
- HTTP is dikwels die standaard: curl behandel ‘n proxy wat sonder ‘n skema gegee word, soos
proxy.example.com:8080, as ‘n HTTP-proxy. Sien proxy-instellings vir waar kliënte dit stoor. - Kopstukke kan die proxy onthul: proxies kan ‘n
Viakopstuk byvoeg, en sommige voeg X-Forwarded-For by met die oorspronklike kliënt-IP. Kontroleer wat ‘n proxy stuur voordat jy daarop staatmaak om jou adres te verberg.