У мене є Linux-ящик, який я використовую як iperf3клієнт, тестуючи 2 однаково обладнані серверні коробки Windows 2012 R2 з адаптерами Broadcom BCM5721, 1 Гбіт (2 порти, але для тестування використовується лише 1). Всі машини підключені за допомогою одного комутатора 1 Гбіт.
Тестування UDP на, наприклад, 300 Мбіт
iperf3 -uZVc 192.168.30.161 -b300m -t5 --get-server-output -l8192
призводить до втрати 14% усіх відправлених пакетів (для іншого серверного ящика з точно таким же обладнанням, але для старих драйверів NIC втрата становить близько 2%), але втрата виникає навіть на 50 Мбіт, хоча і менш серйозно. Продуктивність TCP з використанням еквівалентних налаштувань:
iperf3 -ZVc 192.168.30.161 -t5 --get-server-output -l8192
дає швидкість передачі на північ від 800 Мбіт, не повідомляється про повторні передачі.
Сервер завжди запускається, використовуючи такі параметри:
iperf3 -sB192.168.30.161
Хто винен?
Коробка клієнта linux (апаратне? Драйвери? Налаштування?)?Редагувати: Я щойно провів тест з одного серверного вікна Windows на інший, і втрата пакету UDP на 300 Мбіт була ще більшою, 22%- Коробки для сервера Windows (апаратне? Драйвер? Налаштування?)?
- Перемикач, що з'єднує всі тестові машини?
- Кабелі?
Редагувати:
Тепер я спробував інший напрямок: Windows -> Linux. Результат: втрата пакету завжди дорівнює 0 , а пропускна здатність досягає приблизно
- 840 Мбіт для
-l8192, тобто фрагментованих IP-пакетів - 250 Мбіт для
-l1472нефрагментованих IP-пакетів
Я думаю, що контроль потоку обмежує пропускну здатність і запобігає втраті пакетів. Особливо остання, нефрагментована цифра ніде не знаходиться поблизу пропускної здатності TCP (нефрагментований TCP дає аналогічні показники, як фрагментований TCP), але це нескінченно величезне поліпшення порівняно з Linux -> Windows з точки зору втрати пакетів.
І як це дізнатися?
Я дотримувався звичайних порад щодо налаштувань драйверів на сервері, щоб досягти максимальної продуктивності, і намагався включити / відключити / максимізувати / мінімізувати / змінити
- Помірна модерація
- Управління потоком
- Отримуйте буфери
- RSS
- Wake-on-LAN
Усі функції вивантаження включені.
Редагувати Я також намагався включити / відключити
- Ethernet @ Wirespeed
- Різні функції розвантаження
- Пріоритет & VLAN
З аналогічними показниками втрат.
Повний вихід запуску UDP:
$ iperf3 -uZVc 192.168.30.161 -b300m -t5 --get-server-output -l8192
iperf 3.0.7
Linux mybox 3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt4-3 (2015-02-03) x86_64 GNU/Linux
Time: Wed, 13 May 2015 13:10:39 GMT
Connecting to host 192.168.30.161, port 5201
Cookie: mybox.1431522639.098587.3451f174
[ 4] local 192.168.30.202 port 50851 connected to 192.168.30.161 port 5201
Starting Test: protocol: UDP, 1 streams, 8192 byte blocks, omitting 0 seconds, 5 second test
[ ID] Interval Transfer Bandwidth Total Datagrams
[ 4] 0.00-1.00 sec 33.3 MBytes 279 Mbits/sec 4262
[ 4] 1.00-2.00 sec 35.8 MBytes 300 Mbits/sec 4577
[ 4] 2.00-3.00 sec 35.8 MBytes 300 Mbits/sec 4578
[ 4] 3.00-4.00 sec 35.8 MBytes 300 Mbits/sec 4578
[ 4] 4.00-5.00 sec 35.8 MBytes 300 Mbits/sec 4577
- - - - - - - - - - - - - - - - - - - - - - - - -
Test Complete. Summary Results:
[ ID] Interval Transfer Bandwidth Jitter Lost/Total Datagrams
[ 4] 0.00-5.00 sec 176 MBytes 296 Mbits/sec 0.053 ms 3216/22571 (14%)
[ 4] Sent 22571 datagrams
CPU Utilization: local/sender 4.7% (0.4%u/4.3%s), remote/receiver 1.7% (0.8%u/0.9%s)
Server output:
-----------------------------------------------------------
Accepted connection from 192.168.30.202, port 44770
[ 5] local 192.168.30.161 port 5201 connected to 192.168.30.202 port 50851
[ ID] Interval Transfer Bandwidth Jitter Lost/Total Datagrams
[ 5] 0.00-1.01 sec 27.2 MBytes 226 Mbits/sec 0.043 ms 781/4261 (18%)
[ 5] 1.01-2.01 sec 30.0 MBytes 252 Mbits/sec 0.058 ms 734/4577 (16%)
[ 5] 2.01-3.01 sec 29.0 MBytes 243 Mbits/sec 0.045 ms 870/4578 (19%)
[ 5] 3.01-4.01 sec 32.1 MBytes 269 Mbits/sec 0.037 ms 469/4579 (10%)
[ 5] 4.01-5.01 sec 32.9 MBytes 276 Mbits/sec 0.053 ms 362/4576 (7.9%)
Запуск TCP:
$ iperf3 -ZVc 192.168.30.161 -t5 --get-server-output -l8192
iperf 3.0.7
Linux mybox 3.16.0-4-amd64 #1 SMP Debian 3.16.7-ckt4-3 (2015-02-03) x86_64 GNU/Linux
Time: Wed, 13 May 2015 13:13:53 GMT
Connecting to host 192.168.30.161, port 5201
Cookie: mybox.1431522833.505583.4078fcc1
TCP MSS: 1448 (default)
[ 4] local 192.168.30.202 port 44782 connected to 192.168.30.161 port 5201
Starting Test: protocol: TCP, 1 streams, 8192 byte blocks, omitting 0 seconds, 5 second test
[ ID] Interval Transfer Bandwidth Retr Cwnd
[ 4] 0.00-1.00 sec 109 MBytes 910 Mbits/sec 0 91.9 KBytes
[ 4] 1.00-2.00 sec 97.3 MBytes 816 Mbits/sec 0 91.9 KBytes
[ 4] 2.00-3.00 sec 97.5 MBytes 818 Mbits/sec 0 91.9 KBytes
[ 4] 3.00-4.00 sec 98.0 MBytes 822 Mbits/sec 0 91.9 KBytes
[ 4] 4.00-5.00 sec 97.6 MBytes 819 Mbits/sec 0 91.9 KBytes
- - - - - - - - - - - - - - - - - - - - - - - - -
Test Complete. Summary Results:
[ ID] Interval Transfer Bandwidth Retr
[ 4] 0.00-5.00 sec 499 MBytes 837 Mbits/sec 0 sender
[ 4] 0.00-5.00 sec 498 MBytes 836 Mbits/sec receiver
CPU Utilization: local/sender 3.5% (0.5%u/3.0%s), remote/receiver 4.5% (2.0%u/2.5%s)
Server output:
-----------------------------------------------------------
Accepted connection from 192.168.30.202, port 44781
[ 5] local 192.168.30.161 port 5201 connected to 192.168.30.202 port 44782
[ ID] Interval Transfer Bandwidth
[ 5] 0.00-1.00 sec 105 MBytes 878 Mbits/sec
[ 5] 1.00-2.00 sec 97.5 MBytes 818 Mbits/sec
[ 5] 2.00-3.00 sec 97.6 MBytes 819 Mbits/sec
[ 5] 3.00-4.00 sec 97.8 MBytes 820 Mbits/sec
[ 5] 4.00-5.00 sec 97.7 MBytes 820 Mbits/sec