User-Agent คือ HTTP request header ที่ช่วยให้เซิร์ฟเวอร์สามารถระบุแอปพลิเคชัน ระบบปฏิบัติการ ผู้ผลิต และเวอร์ชันของไคลเอนต์ที่ทำการร้องขอ W3C ระบุว่า User-Agent header เป็น แหล่งการระบุแบบพาสซีฟ เนื่องจากมันถูกส่งพร้อมกับ HTTP requests
สตริง User-Agent ทั่วไปมีลักษณะเช่น Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36... ซึ่งระบุเวอร์ชันของเบราว์เซอร์และแพลตฟอร์มเฉพาะ
W3C ระบุว่า User-Agent และที่อยู่ IP ร่วมกันมักจะสามารถระบุเบราว์เซอร์ของผู้ใช้เฉพาะได้อย่างไม่ซ้ำใคร
การลด User-Agent และ Client Hints
- สตริงที่ลดลง: Chrome ตอนนี้ทำให้บางส่วนของ User-Agent เป็นแบบค้างอยู่ เวอร์ชันย่อยจะแสดงเป็น
0.0.0แพลตฟอร์มเดสก์ท็อปใช้โทเค็นที่คงที่เช่นWindows NT 10.0; Win64; x64และ Android รายงานAndroid 10; Kไม่ว่าจะเป็นเวอร์ชัน OS จริงและรุ่นอุปกรณ์ใดก็ตาม การเปิดตัว Android ได้ถึงผู้ใช้ Chrome 110+ ทุกคนในเดือนพฤษภาคม 2023 - Client Hints: เบราว์เซอร์สามารถส่ง header ที่มีรายละเอียดต่ำเช่น
Sec-CH-UA(เวอร์ชันหลักและแบรนด์)Sec-CH-UA-MobileและSec-CH-UA-Platformโดยค่าเริ่มต้น เซิร์ฟเวอร์สามารถขอ hints ที่มีรายละเอียดมากขึ้น เช่น รุ่นอุปกรณ์ โดยใช้ header การตอบกลับAccept-CHMDN กล่าวว่าคาดว่า client hints จะมาแทนที่การวิเคราะห์สตริง User-Agent ในที่สุด
การตรวจสอบบอทที่อ้างว่าเป็น User-Agent
การร้องขอสามารถอ้างว่าเป็น crawler ใด ๆ ใน header User-Agent ของมัน สำหรับผู้เยี่ยมชมที่อ้างว่าเป็นจาก Google Google บอกเจ้าของเว็บไซต์ให้ทำการค้นหา DNS แบบย้อนกลับบนที่อยู่ IP ตรวจสอบให้แน่ใจว่าโดเมนคือ googlebot.com google.com หรือ googleusercontent.com จากนั้นยืนยันด้วยการค้นหาข้างหน้า สำหรับการตรวจสอบขนาดใหญ่ พวกเขาสามารถเปรียบเทียบ IP กับช่วง IP ของ crawler ที่เผยแพร่โดย Google