Як я можу обмежити пропускну здатність, яку використовує процес?

У мене є сервер CentOS 5.7, який буде створювати резервні копії своїх файлів щоночі. Я стурбований тим, що відвідувачі різних сайтів, на яких розміщується сервер, матимуть погіршену ефективність, коли резервна копія передається по всій мережі.

Чи можна обмежити максимально дозволену пропускну здатність процесу мережевим інтерфейсом? Я хотів би обмежити передачу файлів на основі SSH лише половиною моєї доступної пропускної здатності. Це може бути на стороні сервера або клієнта; тобто я би радий це зробити або на клієнті, який ініціює з'єднання, або на сервері, який отримує з'єднання.

_{(На жаль, я не можу додати інтерфейс, призначений для резервного копіювання. Я міг би збільшити свою доступну пропускну спроможність, але це означатиме лише, що передача мережі буде завершена швидше, але все ж максимум загальна потужність з'єднання, роблячи це.)}

Деякі передумови

Можливо, якийсь фон в порядку. Відступивши, у мене виникла проблема з недостатнім місцевим простором для створення резервної копії. Введіть SSHFS! Резервна копія зберігається на нібито локальному диску, щоб ніколи не було жодних бітів резервного копіювання на самому веб-сервері.

Чому це важливо? Тому що це, здавалося б, скасує використання поважних rsync --bwlimit. rsyncнасправді не робить передачу, а також не може, тому що я навіть не можу зекономити місце для збереження резервного файлу.

Я чую, як ви запитуєте: "Тож чекайте, навіщо вам навіть робити резервну копію? Чому б не лише rsyncвихідні файли та папки?" Тому що дратівлива річ під назвою "Плеск" є в суміші! Це мій хостинговий веб-хостинг, який використовує Plesk для зручності. Як такий, я використовую Plesk для ініціювання створення резервних копій, оскільки Plesk додає всілякі додаткові чари в резервну копію, що робить його споживання під час процедури відновлення дуже безпечним.

сумне обличчя

Ви можете використовувати iptablesдля позначення пакету (--pid-owner ...), а потім використовувати tcдля формування трафіку. Також "--sid-owner" може використовуватися для включення ниток і дітей цього процесу.

http://www.frozentux.net/iptables-tutorial/iptables-tutorial.html#OWNERMATCH

Збіг - Kerpid-власник
ядра 2.3, 2.4, 2.5 та 2.6
Приклад iptables -A OUTPUT -m owner --pid-owner 78
Пояснення Цей збіг використовується для узгодження пакетів на основі ідентифікатора процесу (PID), який відповідав за них. Цей збіг трохи складніше використовувати, але одним із прикладів може бути лише дозвіл PID 94 надсилати пакети з HTTP-порту (якщо, звичайно, процес HTTP не є потоковим). Крім того, ми могли б написати невеликий сценарій, який захоплює PID з виводу ps для певного демона, а потім додає для нього правило. Наприклад, у вас може бути правило, як показано в прикладі Pid-owner.txt

Один із варіантів, який я щойно виявив, - це використовувати ціп'як .

trickle - це портативний легкий формувач пропускної спроможності користувачів. Він може працювати в режимі спільної роботи (разом із стружкою) або в автономному режимі.

ручка працює, скориставшись передзавантаженням навантажувача Unix. По суті, він надає додатку нову версію функціоналу, необхідного для надсилання та отримання даних через сокети. Потім він обмежує трафік на основі затримки надсилання та отримання даних через сокет. трикол працює повністю в просторі користувачів і не вимагає привілеїв root.

Якщо ви можете записати на трубку (або stdout), ви можете встановити команду pv(pipe viewer). Спочатку було написано, щоб відобразити хід переданих даних по трубі.

tar cvf - /files/to/backup | pv -L 512k > /your/file/on/sshfs

   -L RATE, --rate-limit RATE
          Limit the transfer to a maximum of RATE  bytes  per  second.   A
          suffix of "k", "m", "g", or "t" can be added to denote kilobytes
          (*1024), megabytes, and so on.

Я використовую rsync з опцією --bwlimit = KBPS з тієї ж причини.

Наша 1 Гбіт Ethernet легко зможе перенести наш старий SCSI320 DAS RAID, а по суті DOS - це деякі наші старі виробничі коробки, які покладаються на нього для своїх магазинів NFS.

Як ви передаєте дані? (rsync за ssh? scp? sftp? щось інше?)

rsync дозволить обмежити пропускну здатність (див. опцію --bwlimit = KBPS). rsync -e ssh --bwlimit ..

Крім того, ви можете встановити qdisc або еквівалент, щоб зробити обмеження швидкості фантазії, але я підозрюю, що у вашому випадку це буде серйозною надмірністю. Документацію щодо цього можна отримати в розділі Linux Advanced Advanced Routing and Control HOWTO