Throughput คืออัตราที่ข้อมูลถูกส่งมอบจริง ๆ ผ่านการเชื่อมต่อ ซึ่งวัดตามเวลาและมักจะแสดงเป็นบิตต่อวินาที เช่น Mbps แตกต่างจากแบนด์วิธ ซึ่งเป็นความจุของลิงก์ Throughput คือสิ่งที่ผ่านเข้ามาหลังจากที่มีการหน่วงเวลา การสูญหายของแพ็กเก็ต และค่าใช้จ่ายของโปรโตคอลที่ต้องใช้
มาตรฐานของ IETF สำหรับการทดสอบ TCP throughput, RFC 6349, เรียกอัตราของข้อมูลที่ส่งผ่านเหนือ TCP/IP headers ว่า "goodput" ซึ่งต่ำกว่าระดับดิบบนสาย
Throughput vs. Bandwidth vs. Latency
| Throughput | Bandwidth | Latency | |
|---|---|---|---|
| คำถามที่ตอบ | ข้อมูลมาถึงเร็วแค่ไหน? | ลิงก์สามารถรองรับได้มากแค่ไหน? | การแลกเปลี่ยนแต่ละครั้งใช้เวลานานแค่ไหน? |
| สิ่งที่วัด | ข้อมูลที่ส่งมอบจริงต่อวินาที | ข้อมูลส่วนใหญ่ที่ลิงก์สามารถรองรับได้ต่อวินาที | เวลาที่ข้อมูลใช้ในการเดินทางไปและกลับ |
| หน่วยทั่วไป | Mbps | Mbps หรือ Gbps | มิลลิวินาที |
ในราคาของพร็อกซี่ "แบนด์วิธ" มักหมายถึงข้อมูลทั้งหมดที่ถูกถ่ายโอนใน GB ไม่ใช่ความเร็ว ดู bandwidth สำหรับความแตกต่าง
ทำไม Throughput จึงต่ำกว่า Bandwidth
- ค่าใช้จ่ายของโปรโตคอล: หลังจากที่มีการใช้ IP header ขนาด 20 ไบต์และ TCP header ขนาด 20 ไบต์ รวมถึงการจัดเฟรม Ethernet ลิงก์ Ethernet ขนาด 100 Mbps จะส่งข้อมูล TCP goodput ได้ประมาณ 94.9 Mbps เท่านั้น
- หน้าต่างรับและเวลาการเดินทางไปกลับ: throughput ของการเชื่อมต่อหนึ่งจะถูกจำกัดที่หน้าต่างรับ (เป็นบิต) หารด้วยเวลาการเดินทางไปกลับ ลิงก์ขนาด 100 Mbps ที่มีเวลาการเดินทางไปกลับ 5 มิลลิวินาทีและหน้าต่างขนาด 16 KB จะสูงสุดที่ 25.6 Mbps
- ผลิตภัณฑ์แบนด์วิธ-หน่วงเวลา: เพื่อเติมเต็มลิงก์ หน้าต่างรับต้องมีขนาดอย่างน้อยเท่ากับความจุของลิงก์คูณด้วยการหน่วงเวลาของมัน
- การสูญหายของแพ็กเก็ต: หน้าต่างการจราจรของ TCP จะถูกคำนวณจากอัตราการสูญหายของเส้นทาง และแพ็กเก็ตที่สูญหายต้องถูกส่งใหม่
วิธีการวัด Throughput
การทดสอบ TCP throughput จะย้ายข้อมูลจริงและจับเวลา:
- ถ่ายโอนบล็อกข้อมูล: Actual TCP Transfer Time คือเวลาที่ใช้ในการส่งบล็อกนั้นข้ามการเชื่อมต่อหรือการเชื่อมต่อ
- เปรียบเทียบกับค่าเฉลี่ย: Transfer Time Ratio แบ่งเวลาการถ่ายโอนจริงด้วยเวลาการถ่ายโอนที่เหมาะสมสำหรับเส้นทางนั้น
- นับการส่งใหม่: TCP Efficiency คือเปอร์เซ็นต์ของไบต์ที่ไม่ได้ถูกส่งใหม่
ตรวจสอบหน่วยเมื่อคุณเปรียบเทียบผลลัพธ์ ความเร็วของเครือข่ายจะถูกแสดงเป็นบิตต่อวินาที ในขณะที่บางเครื่องมือรายงานเป็นไบต์ต่อวินาที ไบต์หนึ่งคือ 8 บิต ดังนั้น 12.5 MB ต่อวินาทีเท่ากับ 100 Mbps ตัวอย่างเช่น curl รายงานค่า speed_download ของมันเป็นความเร็วเฉลี่ยของการดาวน์โหลดทั้งหมดในไบต์ต่อวินาที
การเพิ่มพร็อกซี่ทำให้ Throughput ต่อการเชื่อมต่อลดลง
การเชื่อมต่อ TCP เดียวสามารถย้ายข้อมูลได้มากที่สุดเพียงหนึ่งหน้าต่างรับต่อการเดินทางไปกลับ พร็อกซี่เพิ่มอีกขาไปยังเส้นทาง ดังนั้นเวลาการเดินทางไปกลับจึงเพิ่มขึ้นและหน้าต่างเดียวกันจะส่งข้อมูลได้น้อยลงต่อวินาที
- ตัวอย่างที่ทำงาน: ด้วยหน้าต่างขนาด 16 KB เวลาการเดินทางไปกลับ 5 มิลลิวินาทีจะจำกัดการเชื่อมต่อหนึ่งที่ 25.6 Mbps ที่ 50 มิลลิวินาที หน้าต่างเดียวกันจะให้ 2.56 Mbps
- การเชื่อมต่อมากขึ้นเติมเต็มท่อ: หน้าต่างที่เล็กกว่าต้องการการเชื่อมต่อขนานมากขึ้นเพื่อเติมเต็มลิงก์ ลิงก์ขนาด 500 Mbps ที่มีเวลาการเดินทางไปกลับ 5 มิลลิวินาทีต้องการการเชื่อมต่อ 20 รายการที่มีหน้าต่างขนาด 16 KB หรือ 5 รายการที่มีหน้าต่างขนาด 64 KB
ดังนั้นการดาวน์โหลดที่ช้าเพียงครั้งเดียวผ่านพร็อกซี่ที่อยู่ห่างไกลไม่ได้หมายความว่าลิงก์ของพร็อกซี่นั้นช้า เวลาการเดินทางไปกลับอาจเป็นข้อจำกัด
ความหมายสำหรับการขูดเว็บ
- เปรียบเทียบพร็อกซี่ในการทดสอบเดียวกัน: ใช้เวลาในการดาวน์โหลดที่กำหนดไปยังเป้าหมายเดียวกันผ่านพร็อกซี่แต่ละตัว เนื่องจากอัตราการส่งข้อมูลเปลี่ยนแปลงตามระยะทางและเส้นทาง ใน curl,
time_connectแสดงให้เห็นว่าเมื่อใดที่การเชื่อมต่อ TCP ไปยังพร็อกซี่เสร็จสมบูรณ์ แยกจากtime_total. - ขยายด้วยการเชื่อมต่อขนาน ภายในขีดจำกัด: การเชื่อมต่อพร้อมกัน เพิ่มอัตราการส่งข้อมูลรวม แต่ HTTP/1.1 ระบุว่าลูกค้าควรจำกัดการเชื่อมต่อพร้อมกันไปยังเซิร์ฟเวอร์หนึ่งตัว Scrapy's AutoThrottle มีเป้าหมายเพื่อรักษาจำนวนคำขอที่กำลังดำเนินการอยู่ และเอกสารของมันระบุว่าการเพิ่มเป้าหมายนี้จะเพิ่มอัตราการส่งข้อมูลและภาระงานบนเซิร์ฟเวอร์.
- ใช้ซ้ำการเชื่อมต่อสำหรับหน้าเล็ก: การเชื่อมต่อใหม่แต่ละครั้งใช้เวลาหมุนรอบในการตั้งค่า DNS, TCP และ TLS ก่อนที่ข้อมูลใด ๆ จะไหล ดังนั้นการใช้ซ้ำจะช่วยให้มีเวลามากขึ้นสำหรับการถ่ายโอน.