User-Agent는 서버가 요청을 하는 클라이언트의 애플리케이션, 운영 체제, 공급업체 및 버전을 식별할 수 있도록 해주는 HTTP 요청 헤더입니다. W3C는 User-Agent 헤더를 수동 지문 인식 소스로 나열하고 있으며, 이는 HTTP 요청과 함께 전송됩니다.
일반적인 User-Agent 문자열은 Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36...과 같이 보이며, 특정 브라우저 버전과 플랫폼을 식별합니다.
W3C는 User-Agent와 IP 주소가 함께 사용될 경우 특정 사용자의 브라우저를 고유하게 식별할 수 있다고 언급합니다.
User-Agent 축소 및 클라이언트 힌트
- 축소된 문자열: Chrome은 이제 User-Agent의 일부를 동결합니다. 마이너 버전은
0.0.0로 표시되며, 데스크톱 플랫폼은Windows NT 10.0; Win64; x64과 같은 고정 토큰을 사용하고, Android는 실제 OS 버전 및 장치 모델과 관계없이Android 10; K를 보고합니다. Android 롤아웃은 2023년 5월에 모든 Chrome 110+ 사용자에게 도달했습니다. - 클라이언트 힌트: 브라우저는 기본적으로
Sec-CH-UA(주 버전 및 브랜드),Sec-CH-UA-Mobile및Sec-CH-UA-Platform와 같은 저세부 헤더를 보낼 수 있습니다. 서버는Accept-CH응답 헤더를 통해 장치 모델과 같은 더 자세한 힌트를 요청합니다. MDN은 클라이언트 힌트가 궁극적으로 User-Agent 문자열을 파싱하는 것을 대체할 것으로 예상하고 있습니다.
User-Agent를 주장하는 봇 검증
요청은 User-Agent 헤더에서 어떤 크롤러라도 주장할 수 있습니다. Google에서 온 것이라고 주장하는 방문자의 경우, Google은 사이트 소유자에게 IP 주소에 대해 역 DNS 조회를 실행하고, 도메인이 googlebot.com, google.com 또는 googleusercontent.com인지 확인한 다음, 정방향 조회로 확인할 것을 권장합니다. 대규모 검사를 위해, 그들은 IP를 Google이 발표한 크롤러 IP 범위와 비교할 수 있습니다.